JP2016071857A - Information processing device, server, and information processing system; and processing method thereof and program - Google Patents
Information processing device, server, and information processing system; and processing method thereof and program Download PDFInfo
- Publication number
- JP2016071857A JP2016071857A JP2015152523A JP2015152523A JP2016071857A JP 2016071857 A JP2016071857 A JP 2016071857A JP 2015152523 A JP2015152523 A JP 2015152523A JP 2015152523 A JP2015152523 A JP 2015152523A JP 2016071857 A JP2016071857 A JP 2016071857A
- Authority
- JP
- Japan
- Prior art keywords
- annotation
- image
- information
- input
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Transfer Between Computers (AREA)
- Document Processing Apparatus (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
本発明は、画像を用いた指示内容を記録する情報処理装置とサーバと情報処理システムと、その処理方法及びプログラムに関する。 The present invention relates to an information processing apparatus, a server, an information processing system, and a processing method and program for recording instruction contents using an image.
従来より、サーバに格納されている画像データを、クライアント側で編集し、編集した画像をサーバで保存する技術(クライアント/サーバ型のシステム)が実現されている。 2. Description of the Related Art Conventionally, a technique (client / server type system) has been realized in which image data stored in a server is edited on the client side and the edited image is saved on the server.
具体的には、クライアント側がWindows(登録商標)アプリケーションのような場合、サーバとクライアント間は画像の送受信にバイナリデータを授受できるプロトコル例:TCPソケット通信)で、バイナリデータである画像データをクライアント側で受信し、クライアント側の画像操作インタフェース(例:GDI)を用い、受信した画像データに対してアプリケーション上で図形やフリーハンドなどの描画操作を行うことが一般的に行われている。
これらの技術を利用して、例えば、特許文献1のように、電子会議システムでは、画面上で画像を操作した内容を複数人で共有することが行われている。
Specifically, when the client side is a Windows (registered trademark) application, a protocol example that can exchange binary data between the server and the client for sending and receiving images: TCP socket communication), and image data that is binary data is sent to the client side. In general, drawing operations such as graphics and freehand are performed on the received image data using an image operation interface (eg, GDI) on the client side.
Utilizing these techniques, for example, as disclosed in
しかしながら、クライアント/サーバ型のシステムではクライアント側で入力した内容をサーバで管理する仕組みを構築することは容易であるが、ブラウザを用いたWeb環境では、画像の編集、編集した内容の管理は難しかった。 However, in a client / server type system, it is easy to construct a mechanism for managing the contents input on the client side by the server. However, in a Web environment using a browser, it is difficult to edit images and manage the edited contents. It was.
特に、ブラウザ上で表示した画像に対して編集を行うことができても、その編集に係る内容(例えば、編集順やその編集に係るコメント)を適切に管理することは容易ではなかった。また、他のユーザに対して、画像を用いた指示を出すには、画像を単に編集できる技術では指示内容が伝わらず、従来の技術では解決が困難な課題もあった。 In particular, even if an image displayed on a browser can be edited, it is not easy to appropriately manage the contents related to the editing (for example, editing order and comments related to the editing). In addition, in order to give an instruction using an image to another user, the instruction content cannot be transmitted by a technique that can simply edit the image, and there is a problem that is difficult to solve by the conventional technique.
そこで、本発明の目的は、画像を用いた入力内容を容易に記録することができる仕組みを提供することである。 Accordingly, an object of the present invention is to provide a mechanism capable of easily recording input contents using an image.
本発明の目的を達成するための、画像を記憶する記憶装置と通信可能な情報処理装置であって、ユーザの操作に対応して、アノテーションと当該アノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、前記アノテーション追加手段による追加がされる場合に、ユーザが任意入力できる入力欄に前記識別情報を含む入力情報を追加する入力情報追加手段とを備えることを特徴とする。
また、画像を記憶する記憶装置と通信可能な情報処理装置であって、ユーザの操作に対応して、アノテーションとアノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、前記アノテーション追加手段による追加がされる場合に、前記追加されるアノテーションに対応するユーザが任意入力できる入力欄を追加する入力欄追加手段とを備えることを特徴とする。
An information processing apparatus capable of communicating with a storage device for storing an image for achieving the object of the present invention, wherein an annotation and identification information for identifying the annotation are displayed on the image in response to a user operation. An annotation adding means to be added, and an input information adding means for adding input information including the identification information to an input field where the user can arbitrarily input when the annotation adding means adds.
Also, an information processing apparatus capable of communicating with a storage device that stores an image, an annotation adding unit that adds an annotation and identification information for identifying the annotation on the image in response to a user operation, and the annotation And an input field adding means for adding an input field that can be arbitrarily input by the user corresponding to the added annotation when added by the adding means.
本発明によれば、画像を用いた入力内容を容易に記録することができる。 According to the present invention, it is possible to easily record input contents using an image.
以下、図面を参照して、本発明の実施形態を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
〔第1の実施形態〕
図1は本発明のクライアント端末100(情報処理装置)と、Webサーバ200(画像管理サーバ)と、DBサーバ300と、ファイルサーバ400とクライアント端末401と含むWebシステム(情報処理システム)の構成の一例を示すシステム構成図である。
[First Embodiment]
FIG. 1 shows a configuration of a Web system (information processing system) including a client terminal 100 (information processing apparatus), a Web server 200 (image management server), a DB server 300, a
なお、クライアント端末100は、画像を登録、編集する側の拠点であり、修理工場などに設置されている情報処理装置である。また、クライアント端末401は、登録された画像をチェックする側の拠点であり、例えば、画像をチェックして保険を適用するかを判断する企業に設置されている情報処理装置である。Webサーバ200(画像管理サーバ)と、DBサーバ300と、ファイルサーバ400はクラウド環境などのネットワーク上に設置されているサーバである。
The client terminal 100 is an information processing apparatus that is a base for registering and editing images and is installed in a repair shop or the like. The
なお、より好適な例を用いて説明するため、本実施形態では、画像を管理するWebシステムとしたが、画像を編集した内容を管理するシステムであれば、一般的なWebシステム以外にも適用してもよい。 In this embodiment, a Web system that manages images is used to explain using a more preferable example. However, any system other than a general Web system may be used as long as the system manages contents edited with images. May be.
クライアント端末100はブラウザを記憶し、ブラウザからネットワーク500を介して、Webサーバ200にアクセスする。Webサーバ200にログインして、Webサーバ200からブラウザで表示するWeb画面を受信し、Webサーバで管理している画像を受信してブラウザ上で表示する。なお、Web画面はWebサーバ200に記憶されている。Web画面には、各種スクリプトが記述されており、Web画面上の表示制御を実現可能な構成となっている。
すなわち、クライアント端末100は、画像を管理する記憶装置(例えば、Webサーバ)と通信可能な情報処理装置である。
DBサーバ300は、画像を管理するうえでのデータを管理するサーバであり、各種データをデータベースで管理するサーバである。
Webサーバ200からの要求(検索要求、登録要求、削除要求)に応じて、管理しているデータへアクセス可能となっている。
The client terminal 100 stores a browser and accesses the Web server 200 from the browser via the network 500. The user logs in to the Web server 200, receives a Web screen displayed by the browser from the Web server 200, receives an image managed by the Web server, and displays it on the browser. The web screen is stored in the web server 200. Various scripts are described on the Web screen, and the display control on the Web screen can be realized.
That is, the client terminal 100 is an information processing apparatus that can communicate with a storage device (for example, a Web server) that manages images.
The DB server 300 is a server that manages data for managing images, and is a server that manages various data in a database.
In response to requests (search request, registration request, deletion request) from the Web server 200, the managed data can be accessed.
図15のデータ送信ボタン1504が押下されると、後述するフローチャートで登録された画像、編集画像やメモ(案件データ)がファイルサーバ400にWebサーバ200から送信される。ファイルサーバ400は、送信された案件データを登録して、クライアント端末401に通知する。クライアント端末401で案件データを表示する。この表示の際には、アノテーションが合成された編集画像がブラウザ上に表示される。
When the
Webサーバでは画像を管理し、この画像に対するアノテーション情報やメモ情報は図11のオリジナル情報テーブルと編集画像情報テーブルで管理している。オリジナル情報テーブルは、オリジナル画像ID、オリジナル画像ファイルパス、メモの値を保持している。編集画像情報テーブルは、編集画像ID、オリジナル画像ID、編集画像ファイルパス、シリアライズアノテーションの値を保持している。 The Web server manages images, and annotation information and memo information for the images are managed in the original information table and the edited image information table in FIG. The original information table holds an original image ID, an original image file path, and a memo value. The edited image information table holds an edited image ID, original image ID, edited image file path, and serialized annotation value.
なお、本実施形態では、DBサーバ300をWebサーバ200と別筐体として説明したが、WebサーバとDBサーバ300は同一筐体であってもよい。
すなわち、Webサーバ200のハードディスク(記憶装置)上でデータを管理する(データベース)構成であってもよい。Webサーバ200とファイルサーバ400が同一筐体であってもよい。
In the present embodiment, the DB server 300 is described as a separate housing from the Web server 200, but the Web server and the DB server 300 may be the same housing.
That is, a (database) configuration in which data is managed on the hard disk (storage device) of the Web server 200 may be used. The Web server 200 and the
また、本実施形態では、ネットワーク500は、外部のネットワーク(クラウドシステムなどのWeb環境)を想定しているが、社内のクローズしたネットワークであってもよい。 In the present embodiment, the network 500 is assumed to be an external network (a web environment such as a cloud system), but may be a closed network in the company.
次に、図2を用いて、図1に示したクライアント端末100(情報処理装置)と、Webサーバ200と、DBサーバ300に適用可能な情報処理装置のハードウエア構成について説明する。
なお、図2は、クライアント端末100として説明する。
Next, a hardware configuration of the information processing apparatus applicable to the client terminal 100 (information processing apparatus), the Web server 200, and the DB server 300 illustrated in FIG. 1 will be described with reference to FIG.
2 will be described as the client terminal 100. FIG.
図2において、201はCPUで、システムバス204に接続される各デバイスやコントローラを統括的に制御する。また、ROM202あるいは外部メモリ211には、CPU201の制御プログラムであるBIOS(Basic Input / Output System)やオペレーティングシステムプログラム(以下、OS)や、各サーバ或いは各PCの実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。
In FIG. 2,
本実施形態では、例えば、ブラウザを管理している。なお、図2がWEBサーバ200の構成図とする場合、Webアプリケーション、画像を記憶管理している。なお、Webアプリケーションではクライアント端末100からのログインを制御するため、セッションの管理をしている。同時接続数の管理、すなわちセッション管理については、Apacheなどで周知技術であるため実現可能であるため説明を省略する。また、セッションだけでなく、Webサプリケーションでログインユーザ数を管理する構成であってもよい。 In this embodiment, for example, a browser is managed. When FIG. 2 is a configuration diagram of the WEB server 200, Web applications and images are stored and managed. Note that the Web application manages a session in order to control login from the client terminal 100. The management of the number of simultaneous connections, that is, session management is possible because it is a well-known technique such as Apache, and the description thereof will be omitted. Further, the configuration may be such that the number of login users is managed not only by a session but also by a Web application.
203はRAMで、CPU201の主メモリ、ワークエリア等として機能する。CPU201は、処理の実行に際して必要なプログラム等をROM202あるいは外部メモリ211からRAM203にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。
A
また、205は入力コントローラで、キーボード(KB)209や不図示のマウス等のポインティングデバイス等からの入力を制御する。206はビデオコントローラで、CRTディスプレイ(CRT)210等の表示器への表示を制御する。なお、図2では、CRT210と記載しているが、表示器はCRTだけでなく、液晶ディスプレイ等の他の表示器であってもよい。これらは必要に応じて管理者が使用するものである。
An
207はメモリコントローラで、ブートプログラム,各種のアプリケーション,フォントデータ,ユーザファイル,編集ファイル,各種データ等を記憶するハードディスク(HD)や、フレキシブルディスク(FD)、或いはPCMCIAカードスロットにアダプタを介して接続されるコンパクトフラッシュ(登録商標)メモリ等の外部メモリ211へのアクセスを制御する。
A
208は通信I/Fコントローラで、ネットワーク(例えば、図1に示した500)を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いた通信等が可能である。
A communication I /
なお、CPU201は、例えばRAM203内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、CRT210上での表示を可能としている。また、CPU201は、CRT210上の不図示のマウスカーソル等でのユーザ指示を可能とする。
Note that the
本発明を実現するための後述する各種プログラムは、外部メモリ211に記録されており、必要に応じてRAM203にロードされることによりCPU201によって実行されるものである。さらに、上記プログラムの実行時に用いられる定義ファイル及び各種情報テーブル等も、外部メモリ211に格納されており、これらについての詳細な説明も後述する。
Various programs to be described later for realizing the present invention are recorded in the
次に、図3の機能ブロック図を参照して、本システムにおける各装置の各機能ブロックについて説明する。なお、各機能は、CPUにより実行され、各機能で実行される詳細な処理については、図4〜図10のフローチャートで説明する。
まず、クライアント端末100の機能部について説明する。
画像取得部301は、サーバなどの画像を管理する記憶装置から画像を取得する機能部である。
画像表示制御部302は、画像取得部301で取得した画像を表示する機能部である。
Next, each functional block of each device in this system will be described with reference to the functional block diagram of FIG. Each function is executed by the CPU, and detailed processing executed by each function will be described with reference to the flowcharts of FIGS.
First, functional units of the client terminal 100 will be described.
The
The image
アノテーション表示制御(追加)部303は、画像表示制御部302で表示した画像上のユーザの操作に対応する位置に、アノテーションを操作した識別情報を付したアノテーションを表示(追加)する機能部である。
An annotation display control (addition)
入力情報表示制御(追加)部304は、アノテーション表示制御(追加)部303によるアノテーションを表示(追加)する場合に、前記識別情報に対応する入力情報を表示(追加)する機能部である。
次に、Webサーバ200の機能部について説明する。
画像管理部305は、画像とクライアント端末100で付与されたアノテーション情報と入力情報とを管理する機能部である。
The input information display control (addition)
Next, functional units of the Web server 200 will be described.
The
画像送信部306は、クライアント端末100にユーザに指定された画像を送信する機能部である。なお、画像に対応するアノテーション情報と入力情報を送信する機能部でもある。
The
以下、図4〜図10のフローチャートを参照して、本実施形態のシステムにおける処理についてより詳細に説明する。
なお、各ステップについては、各装置のCPUが処理を実行する。
Hereinafter, the processing in the system of the present embodiment will be described in more detail with reference to the flowcharts of FIGS.
In addition, about each step, CPU of each apparatus performs a process.
まず、図4を用いて、本発明の実施形態における、全体処理について説明する。図4は、全体処理を示すフローチャートである。 First, the overall processing in the embodiment of the present invention will be described with reference to FIG. FIG. 4 is a flowchart showing the overall processing.
ステップS400では、Webサーバ200にログインして、Webサーバ200から画像一覧を表示する。本実施形態では、図15に示す通り、各案件からユーザが所望の案件を指定すると、その案件情報が表示される。案件情報として登録されている画像(図15ではサムネイル画像)の一覧をWebサーバから取得して表示される。具体的には、図12の1201のデータに従って、Webサーバ200で案件情報に紐づく画像を取得して表示する。なお、オリジナル画像に対応するサムネイル画像がWebサーバ200で管理されているものとする。各画像にはオリジナル画像IDを含んでいる。画像IDはファイル名に含んでいる構成、ファイルのプロパティに含んでいる構成などがある。
In step S400, the user logs in to the Web server 200 and displays an image list from the Web server 200. In the present embodiment, as shown in FIG. 15, when the user designates a desired case from each case, the case information is displayed. A list of images (thumbnail images in FIG. 15) registered as item information is acquired from the Web server and displayed. Specifically, according to the
ここで図15について説明する。図15はクライアント端末100の画像一覧表示画面の一例を示す図である。画像一覧表示画面は、ブラウザを用いて表示され、1500に登録されているオリジナル画像のサムネイル画像が表示される。また、クライアント端末100で画像をドラッグ&ドロップすることで、所望の画像を登録できる構成となっている。 Here, FIG. 15 will be described. FIG. 15 is a diagram illustrating an example of an image list display screen of the client terminal 100. The image list display screen is displayed using a browser, and thumbnail images of original images registered in 1500 are displayed. In addition, a desired image can be registered by dragging and dropping an image on the client terminal 100.
1501は、編集する画像が指定されている場合の枠である。1502は、画像が編集されている(アノテーションが付加されている)ことを示すマークである。Webサーバ200はサムネイル画像を送信する際に、図12の1202のシリアライズアノテーションにアノテーション情報が記憶されていることをチェックして、マークを付与してクライアント端末100へ送信する。1503は、編集ボタンであり、1501で画像を選択され、編集ボタンが押下されることで、画像が表示される。編集例は、図16である。図16については後述する。
ステップS401では、1501で画像の指定を受け付ける。
ステップS402では、指定された画像の編集ボタン1503の押下を受け付ける。
In step S401, designation of an image is accepted in 1501.
In step S402, the pressing of the
ステップS403では、1501で指定された画像のオリジナル画像IDをWebサーバ200に送信する。HTTPリクエストにオリジナル画像IDを含めて送信するものとする。
In
ステップS404では、クライアント端末100からオリジナル画像IDを受信する。受信したオリジナル画像IDに対応するオリジナル画像を取得するため、オリジナル画像IDを含む取得要求をDBサーバ300に送信する。例えば、SQL文を発行するものとする。 In step S404, the original image ID is received from the client terminal 100. In order to acquire the original image corresponding to the received original image ID, an acquisition request including the original image ID is transmitted to the DB server 300. For example, it is assumed that an SQL sentence is issued.
ステップS405では、Webサーバ200から受信した取得要求に含まれるオリジナル画像IDに従って、オリジナル画像情報テーブル1208からオリジナル画像ファイルパス(例えば、1203)を取得する。
ステップS406では、取得したオリジナル画像ファイルパスをWebサーバ200に送信する。
In step S405, an original image file path (for example, 1203) is acquired from the original image information table 1208 in accordance with the original image ID included in the acquisition request received from the Web server 200.
In step S406, the acquired original image file path is transmitted to the Web server 200.
ステップS407では、オリジナル画像IDに従って、オリジナル画像情報テーブル1208からメモ1204を取得する。また、オリジナル画像IDに従って、編集画像情報テーブル1209からシリアライズアノテーション1202を取得する。なお、アノテーション情報と絵も情報はJSON型式の文字列型である。
ステップS408では、取得したシリアライズアノテーション(以下、アノテーション情報)とメモ(以下、メモ情報)をWebサーバ200へ送信する。
In step S407, a
In step S408, the acquired serialized annotation (hereinafter, annotation information) and memo (hereinafter, memo information) are transmitted to the Web server 200.
なお、ステップS406と、ステップS408でそれぞれ情報を送信したが、まとめて送信する構成であってもよい。アノテーション情報やメモ情報が取得できない場合には、NULL値を返す。 In addition, although the information is transmitted in step S406 and step S408, respectively, a configuration in which the information is transmitted collectively may be employed. If annotation information or memo information cannot be acquired, a NULL value is returned.
ステップS409では、オリジナル画像ファイルパス、アノテーション情報、メモ情報を受信する。 In step S409, the original image file path, annotation information, and memo information are received.
ステップS410では、アノテーション情報とメモ情報がNULL値であるかを判定する。アノテーション情報とメモ情報の少なくとも一方がNULLでない場合には、ステップS414へ処理を移す。ともにNULLの場合には、ステップS411へ処理を移す。ともにNULLの場合とは、画像に編集がされていない状態である。
ステップS411では、オリジナル画像ファイルパスに従って、外部メモリ(HDD等)に記憶されているオリジナル画像を取得する。
In step S410, it is determined whether annotation information and memo information are NULL values. If at least one of annotation information and memo information is not NULL, the process proceeds to step S414. If both are NULL, the process proceeds to step S411. In both cases, the image is not edited.
In step S411, the original image stored in the external memory (HDD or the like) is acquired according to the original image file path.
ステップS412では、取得したオリジナル画像(オリジナル画像IDを含む)をクライアント端末100へ送信する。すなわち、画像を送信する画像送信処理の一例を示すステップである。 In step S412, the acquired original image (including the original image ID) is transmitted to the client terminal 100. That is, this is a step showing an example of image transmission processing for transmitting an image.
ステップS413では、Webサーバ200からオリジナル画像を受信する。受信したオリジナル画像はRAMに記憶され、表示する際に取得される。すなわち、記憶装置から画像を取得する画像取得処理の一例を示すステップである。
そして、受信した画像をブラウザを用いて表示する。すなわち、取得した画像を表示する画像表示制御処理の一例を示すステップである。
In step S413, the original image is received from the Web server 200. The received original image is stored in the RAM and acquired when displayed. That is, it is a step showing an example of image acquisition processing for acquiring an image from the storage device.
The received image is displayed using a browser. That is, this is a step showing an example of an image display control process for displaying the acquired image.
オリジナル画像は、例えば、HTML5 Canvas上に表示される。このCanvas上に表示された画像の上位レイヤーにアノテーションを描画させることが可能となる。 The original image is displayed on, for example, HTML5 Canvas. An annotation can be drawn on the upper layer of the image displayed on the canvas.
ステップS414では、オリジナル画像ファイルパスに従って、外部メモリ(HDD等)に記憶されているオリジナル画像(オリジナル画像IDを含む)を取得する。また、受信したアノテーション情報とメモ情報を取得する。 In step S414, the original image (including the original image ID) stored in the external memory (HDD or the like) is acquired according to the original image file path. Also, the received annotation information and memo information are acquired.
ステップS415では、取得したオリジナル画像とアノテーション情報とメモ情報をクライアント端末100に送信する。すなわち、画像を送信する画像送信処理の一例を示すステップである。 In step S415, the acquired original image, annotation information, and memo information are transmitted to the client terminal 100. That is, this is a step showing an example of image transmission processing for transmitting an image.
なお、アノテーション情報とメモ情報は、JSON型式である。なお、JavaScript(登録商標)のオブジェクト形式への変換は、クライアント端末100で実行するものとする。例えば、JSON.parse関数を用いることで実現可能である。 Note that the annotation information and the memo information are JSON models. It should be noted that the conversion to the JavaScript (registered trademark) object format is executed by the client terminal 100. For example, JSON. This can be realized by using a parse function.
ステップS416では、オリジナル画像とアノテーション情報とメモ情報をWebサーバ200から受信する。アノテーション情報をRAM上に記憶する。この、アノテーション情報には、描画関数と描画パラメータが記憶されるため、アノテーション情報をデシリアライズして描画関数と描画パラメータを用いてオリジナル画像上にアノテーションを順次表示する。このアノテーションの表示は、ステップS418のアノテーション・メモ読み戻し処理で説明する。 In step S416, the original image, annotation information, and memo information are received from the Web server 200. Annotation information is stored on the RAM. Since the annotation function stores the drawing function and the drawing parameter, the annotation information is deserialized and the annotation is sequentially displayed on the original image using the drawing function and the drawing parameter. The display of the annotation will be described in the annotation / memo read-back process in step S418.
ステップS417では、受信したオリジナル画像を、ブラウザを用いて表示する。オリジナル画像は、例えば、HTML5 Canvas上に表示される。このCanvas上に表示された画像の上位レイヤーにアノテーションを描画させることが可能となる。すなわち、取得した画像を表示する画像表示制御処理の一例を示すステップである。 In step S417, the received original image is displayed using a browser. The original image is displayed on, for example, HTML5 Canvas. An annotation can be drawn on the upper layer of the image displayed on the canvas. That is, this is a step showing an example of an image display control process for displaying the acquired image.
ステップS418では、デシリアライズされたアノテーション情報を用いて上位レイヤーに表示する。また、デシリアライズされたメモ情報をコメント欄(1603)に表示する。詳細は図5で後述する。すなわち、表示した画像上のユーザの操作に対応する位置に、アノテーションを操作した識別情報を付したアノテーションを表示するアノテーション表示制御(追加)処理の一例を示すステップである。 In step S418, the deserialized annotation information is displayed on the upper layer. Also, the deserialized memo information is displayed in the comment field (1603). Details will be described later with reference to FIG. That is, this is a step showing an example of annotation display control (addition) processing for displaying an annotation with identification information obtained by operating an annotation at a position corresponding to a user operation on the displayed image.
なお、その後のステップS419〜ステップS423の処理は、ブラウザ上の編集ボタン1503が押下され、図16の画面での、表示画面上でのドラッグ操作や各種ボタンの押下の操作によって処理が切り替わるものとする。図16の画面は、画像上のユーザの操作に対応する位置に、アノテーションの識別情報を付したアノテーションを表示するためのアノテーション表示制御コードと、前記アノテーションを表示する場合に、前記識別情報に対応する入力情報を表示するための入力情報表示制御コードを含む画面情報である。この画面情報はWebサーバに記憶されている。
この画面情報(オリジナル画像含む)をクライアント端末100に送信して、クライアント端末100でアノテーションやメモを入力する。
Note that the subsequent processing of step S419 to step S423 is performed by pressing the
This screen information (including the original image) is transmitted to the client terminal 100, and an annotation or memo is input at the client terminal 100.
ステップS419では、アノテーションを追加する。詳細は図6で後述する。
ステップS420では、アノテーションを削除する。詳細は図7で後述する
ステップS421では、アノテーションを全削除する。詳細は図8で後述する。
ステップS422では、画像を回転する。詳細は図9で後述する。
ステップS423では、アノテーションやメモを入力した画像を保存する。詳細は図10で後述する。
In step S419, an annotation is added. Details will be described later with reference to FIG.
In step S420, the annotation is deleted. Details will be described later with reference to FIG. 7. In step S421, all annotations are deleted. Details will be described later with reference to FIG.
In step S422, the image is rotated. Details will be described later with reference to FIG.
In step S423, the image into which the annotation or memo is input is stored. Details will be described later with reference to FIG.
ステップS424では、画像の編集が終了したか否かを判定する。例えば、データ送信ボタン1504が押下されたか否かを判定する。終了した場合には、Webサーバにデータ送信要求を送信し、案件情報をファイルサーバ400に送信する。ファイルサーバ400は案件情報を登録する。案件情報には、案件の登録情報(書誌情報)や、編集した編集画像(アノテーションが合成された画像)であり、この案件情報を一式Webサーバ200からファイルサーバ400に送信して、登録する。この案件情報をクライアント端末401からブラウザを介して参照する。
In step S424, it is determined whether image editing has been completed. For example, it is determined whether or not the
次に、図5を用いて、本発明の実施形態における、アノテーション・メモ読み戻し処理について説明する。図5は、アノテーション・メモ読み戻し処理のフローチャートである。
ステップS501では、RAMに記憶されているアノテーション情報を取得する。
Next, the annotation / memo read-back process in the embodiment of the present invention will be described with reference to FIG. FIG. 5 is a flowchart of the annotation / memo read-back process.
In step S501, annotation information stored in the RAM is acquired.
ステップS502では、取得したアノテーション情報をデシリアライズする。このデシリアライズは、ブラウザで表示されているHTMLに記述されているJavaScriptのAPI(JSON.parse)を用いて行う。これにより、デシリアライズされたJavaScriptオブジェクトの配列に変換する。JavaScriptオブジェクトは、配列構造となっている。また、各要素は描画命令が配列になっており、2重配列になっている。
なお、JavaScriptオブジェクトの配列を、アノテーション配列と呼ぶものとする。アノテーション配列のデータ構造の例が、図13である。
In step S502, the acquired annotation information is deserialized. This deserialization is performed using the JavaScript API (JSON.parse) described in the HTML displayed in the browser. Thereby, it is converted into an array of deserialized JavaScript objects. The JavaScript object has an array structure. In addition, each element has an array of drawing commands, and has a double array.
Note that an array of JavaScript objects is referred to as an annotation array. An example of the data structure of the annotation sequence is shown in FIG.
描画命令の配列を描画配列と呼ぶものとする。描画配列はアノテーション配列の各要素の各レコードである。また、描画配列の各要素には、描画命令1301、描画パラメータ1302が記憶されている。
ステップS503では、アノテーション配列の数分繰り返す。
An array of drawing commands is called a drawing array. The drawing array is each record of each element of the annotation array. In addition, a drawing command 1301 and a drawing parameter 1302 are stored in each element of the drawing array.
In step S503, the number of annotation sequences is repeated.
ステップS504では、次の配列の要素(アノテーション情報に相当)があるかを判定する。配列要素がある場合には、ステップS505へ処理を移し、配列要素が取得できない場合には、処理を終了する。処理を終了する場合には、すべてのアノテーション情報を描画した場合である。
ステップS505では、N番目(N=0,1,2・・・)のアノテーション配列の要素を取得する。例えば、図13のN番目のアノテーションの配列要素。
ステップS506では、描画配列の数分繰り返す。
In step S504, it is determined whether there is an element of the next array (corresponding to annotation information). If there is an array element, the process proceeds to step S505. If the array element cannot be acquired, the process ends. The process is terminated when all annotation information is drawn.
In step S505, elements of the Nth (N = 0, 1, 2,...) Annotation array are acquired. For example, the array element of the Nth annotation in FIG.
In step S506, the process is repeated for the number of drawing arrays.
ステップS507では、次の描画配列の要素(描画命令に相当)あるかを判定する。配列要素がある場合には、ステップS508へ処理を移し、配列要素が取得できない場合には、ステップS514へ処理を移す。ステップS514へ処理を移す場合には、アノテーション配列の1つの要素のうちすべての描画命令を実行した場合である。
ステップS508では、M番目(N=0,1,2・・・)の描画配列の要素を取得する。
In step S507, it is determined whether there is an element of the next drawing array (corresponding to a drawing command). If there is an array element, the process proceeds to step S508, and if the array element cannot be acquired, the process proceeds to step S514. In the case of moving the processing to step S514, it is a case where all the drawing commands are executed in one element of the annotation array.
In step S508, elements of the Mth (N = 0, 1, 2,...) Drawing array are acquired.
ステップS509では、描画配列の要素から、描画関数(opeName)と、描画配列パラメータ(opeParam)を取得する。例えば、図13の1301の描画関数と、1302の描画関数パラメータ。 In step S509, a drawing function (opeName) and a drawing array parameter (opeParam) are acquired from the elements of the drawing array. For example, a drawing function 1301 and a drawing function parameter 1302 in FIG.
ステップS510では、描画関数(opeName)が「Comment」か否かを判定する。「Comment」はメモ情報を描画するものである。すなわち、メモ情報があるか否かを判定する。「Comment」である場合にステップS512へ処理を移し、「Comment」でない場合には、アノテーションを描画するために、ステップS511へ処理を移す。 In step S510, it is determined whether or not the drawing function (opeName) is “Comment”. “Comment” draws memo information. That is, it is determined whether there is memo information. If it is “Comment”, the process proceeds to step S512. If it is not “Comment”, the process proceeds to step S511 to draw an annotation.
ステップS511では、取得した描画関数(opeName)と、描画配列パラメータ(opeParam)を用いて、JavaScriptの描画関数を実行し、レイヤーにアノテーションを再描画する。アノテーションの例は1601である。また、配列の要素番号(作成順の番号)を取得して、描画の始点(描画開始位置)に要素番号を挿入したオブジェクト(1602)を描画する。要素番号を挿入したオブジェクトは、アノテーション番号であり、メモの番号に対応するものである。
ステップS512では、描画配列パラメータ(opeParam)のメモ(例えば、1303)を取得する。
ステップS513では、取得したメモを、コメント欄1603に表示する。
ステップS514では、ステップS506へ処理を戻す。
ステップS515では、ステップ503へ処理を戻す。
In step S511, using the acquired drawing function (opeName) and the drawing array parameter (opeParam), the JavaScript drawing function is executed to redraw the annotation on the layer. An example of the annotation is 1601. Also, the element number (number in the order of creation) of the array is acquired, and the object (1602) in which the element number is inserted at the drawing start point (drawing start position) is drawn. An object in which an element number is inserted is an annotation number and corresponds to a memo number.
In step S512, a memo (for example, 1303) of the drawing array parameter (opeParam) is acquired.
In step S513, the acquired memo is displayed in the
In step S514, the process returns to step S506.
In step S515, the process returns to step 503.
次に、図6を用いて、本発明の実施形態における、アノテーション追加処理について説明する。図6は、アノテーション追加処理のフローチャートである。 Next, the annotation addition process in the embodiment of the present invention will be described with reference to FIG. FIG. 6 is a flowchart of the annotation addition process.
ステップS601では、ブラウザ上で表示しているオリジナル画像上のマウスのドラッグ操作を検知する。この時、1608で選択されたアノテーションの形状を示す種別(矢印、丸印、フリーハンド)、線の太さ(細い、標準、太い)、線の色が設定されている。
すなわち、1607は、ユーザの操作によりアノテーションの属性を選択する選択処理の一例を示すものである。
In step S601, a mouse drag operation on the original image displayed on the browser is detected. At this time, the type (arrow, circle, freehand) indicating the shape of the annotation selected in 1608, the line thickness (thin, standard, thick), and the line color are set.
In other words, 1607 shows an example of a selection process for selecting an annotation attribute by a user operation.
ステップS602では、設定されているアノテーションの種別(矢印、丸印、フリーハンド)、線の太さ(細い、標準、太い)、線の色に従って、レイヤー上にアノテーションを描画する。なお、描画に際しては、例えば、JavaScriptの描画ライブラリが提供する描画関数を用いて実行する。例えば、1604の矢印。すなわち、表示した画像上のユーザの操作に対応する位置を取得(位置情報取得)し、この位置にアノテーションを操作した識別情報を付したアノテーションを表示するアノテーション表示制御(追加)処理の一例を示すステップである。また、選択された属性に対応するアノテーションを画像上に表示する処理である。
ステップS603では、アノテーション配列に空要素を追加する。
In step S602, the annotation is drawn on the layer according to the set annotation type (arrow, circle, freehand), line thickness (thin, standard, thick), and line color. Note that the drawing is performed using, for example, a drawing function provided by a drawing library of JavaScript. For example, 1604 arrow. That is, an example of annotation display control (addition) processing for acquiring a position corresponding to a user operation on the displayed image (acquisition of position information) and displaying an annotation with identification information obtained by operating the annotation at this position is shown. It is a step. In addition, the annotation corresponding to the selected attribute is displayed on the image.
In step S603, an empty element is added to the annotation array.
ステップS604では、追加した空要素に描画したアノテーションの描画命令(描画関数、描画関数パラメータ)を追加する。例えば、図14の1401のようにアノテーション情報が追加される。図14は説明上、配列は2つとなっているが、図16の1604のアノテーションを追加した場合には、配列は4つとなる。
In step S604, an annotation drawing command (drawing function, drawing function parameter) drawn on the added empty element is added. For example, annotation information is added as indicated by 1401 in FIG. In FIG. 14, the number of arrays is two for the sake of explanation, but when the
ステップS605では、追加されたアノテーションのアノテーション番号を取得する。アノテーション番号は、配列要素の要素数(作成順の番号)をもとに決定する。 In step S605, the annotation number of the added annotation is acquired. The annotation number is determined based on the number of array elements (number in the order of creation).
ステップS606では、取得した要素数(アノテーション番号)を図形化したオブジェクト(番号を挿入したオブジェクト1609)を描画したアノテーションの始点(マウスでのドラッグ操作開始位置)に表示する。この表示もレイヤーに表示される。要素数とアノテーションが対応付いている。すなわち、表示した画像上のユーザの操作に対応する位置に、アノテーションを操作した識別情報を付したアノテーション(アノテーションと識別番号)を追加表示するアノテーション表示制御(追加)処理の一例を示すステップである。また、番号を挿入したオブジェクトを表示したアノテーションに付して表示する処理である。なお、本実施形態では、マウスでのドラッグ操作開始位置が矢印方向とは逆の末端となるようにアノテーションの始点としたが、マウスでのドラッグ操作開始位置が矢印方向の先端となるようにアノテーションを描画するようにした場合には、要素数(アノテーション番号)を図形化したオブジェクト(番号を挿入したオブジェクト1609)を、マウスでのドラッグ操作終了位置(終点)に描画するようにする。すなわち、アノテーションに対応する所定の位置に番号を挿入したオブジェクトを描画する。
In step S606, an object in which the number of acquired elements (annotation number) is converted into a graphic (
ステップS607では、取得した要素数(アノテーション番号)をコメント欄1603に追加する(入力情報追加処理に相当)。追加された例が図16の1605である。すなわち、アノテーションを表示する場合に、識別情報(番号)に対応する入力情報(テキスト)を表示する入力情報表示制御(追加)処理の一例を示すステップである。また、アノテーションに対するコメントを入力させるべく、アノテーションの追加に応じて、テキスト入力可能な領域に、自動的にアノテーションに対応する識別情報を表示する処理である。
また、ユーザの操作に応じて、キーボードにより入力された文字列を追加されたコメント欄に表示する。
In step S607, the acquired number of elements (annotation number) is added to the comment field 1603 (corresponding to input information addition processing). An added example is 1605 in FIG. That is, this is a step showing an example of input information display control (addition) processing for displaying input information (text) corresponding to identification information (number) when an annotation is displayed. Further, it is a process of automatically displaying identification information corresponding to an annotation in an area where text can be input in accordance with the addition of the annotation in order to input a comment on the annotation.
Further, the character string input by the keyboard is displayed in the added comment field in accordance with the user operation.
なお、本実施形態では、1つのコメント欄(テキストボックス)にアノテーション番号を表示する構成したが、アノテーションが追加するごとに、アノテーションに対応するテキストボックス(入力欄)を追加表示する構成であってもよい。
また、本実施形態では、アノテーションを画像に表示し、アノテーションに対応するアノテーション番号のオブジェクトを画像に表示し、アノテーション番号のテキストを表示する手順としたが、アノテーションを表示後、テキストにアノテーション番号を表示した後に、アノテーション番号のオブジェクトを画像に表示する手順であってもよい。すなわち、結果的に、アノテーションとアノテーション番号とテキスト入力できる状態になれば、処理手順に限定されるものではない。
In this embodiment, the annotation number is displayed in one comment field (text box). However, each time an annotation is added, a text box (input field) corresponding to the annotation is additionally displayed. Also good.
In this embodiment, the annotation is displayed on the image, the annotation number object corresponding to the annotation is displayed on the image, and the annotation number text is displayed. However, after displaying the annotation, the annotation number is displayed on the text. After the display, a procedure for displaying the object of the annotation number on the image may be used. That is, as a result, if the annotation, the annotation number, and the text can be input, the processing procedure is not limited.
次に、図7を用いて、本発明の実施形態における、アノテーション削除処理について説明する。図7は、アノテーション削除処理のフローチャートである。
ステップS701では、取り消しボタンの押下を検知する(1607のボタン)。
ステップS702では、アノテーション配列(例えば、図13)より、末尾の要素と要素数(アノテーション番号)を取得する。
ステップS703では、アノテーション配列から末尾の要素を削除する。
Next, the annotation deletion process in the embodiment of the present invention will be described with reference to FIG. FIG. 7 is a flowchart of the annotation deletion process.
In step S701, pressing of the cancel button is detected (button 1607).
In step S702, the last element and the number of elements (annotation number) are acquired from the annotation array (for example, FIG. 13).
In step S703, the last element is deleted from the annotation array.
ステップS704では、アノテーション番号を指定して、レイヤーから対応するアノテーションを非表示(削除)する。なお、アノテーション番号とアノテーション(矢印などの図形オブジェクト)は対応付いて管理されているため、アノテーション配列の要素数を用いて、非表示の描画制御をすることで、レイヤーからアノテーションが削除される。
すなわち、アノテーションの削除要求に従って、最後に表示したアノテーション又は全アノテーションを削除する削除処理の一例を示すステップである。
In step S704, an annotation number is designated and the corresponding annotation is hidden (deleted) from the layer. Note that since annotation numbers and annotations (graphic objects such as arrows) are managed in association with each other, annotations are deleted from the layer by performing non-display drawing control using the number of elements in the annotation array.
That is, this is a step showing an example of a deletion process for deleting the last displayed annotation or all annotations in accordance with the annotation deletion request.
この時、アノテーション番号のオブジェクトも合わせて削除する。また、取得した要素数に対応するコメント欄のテキスト(行)を削除する。このテキストを削除する処理は、アノテーションを削除する場合に、入力情報を削除する入力情報削除処理の一例を示すステップである。 At this time, the annotation number object is also deleted. Further, the text (line) in the comment column corresponding to the acquired number of elements is deleted. The process of deleting the text is a step showing an example of the input information deletion process of deleting the input information when deleting the annotation.
次に、図8を用いて、本発明の実施形態における、アノテーション全削除処理について説明する。図8は、アノテーション全削除処理のフローチャートである。
ステップS801では、全てクリアボタンの押下を検知する(1607のボタン)。
ステップS802では、アノテーション配列の全要素を削除する。
Next, the annotation all deletion process in the embodiment of the present invention will be described with reference to FIG. FIG. 8 is a flowchart of the all annotation deletion process.
In step S801, pressing of the clear button is all detected (button 1607).
In step S802, all elements of the annotation array are deleted.
ステップS803では、レイヤーからすべてのアノテーションを非表示(削除)する。すなわち、アノテーションの削除要求に従って、最後に表示したアノテーション又は全アノテーションを削除する削除処理の一例を示すステップである。
ステップS804では、コメント欄のテキストボックスを空文字列で更新する。すなわち、入力情報を削除する入力情報削除処理の一例を示すステップである。
In step S803, all annotations are hidden (deleted) from the layer. That is, this is a step showing an example of a deletion process for deleting the last displayed annotation or all annotations in accordance with the annotation deletion request.
In step S804, the text box in the comment column is updated with an empty character string. That is, it is a step showing an example of input information deletion processing for deleting input information.
テキストボックスのデータを削除してもよい。また、コメント欄のデータがすべて削除されることを通知して、ユーザからOKボタン(不図示)が押下された場合に、アノテーション、データの削除を実行するようにしてもよい。
次に、図9を用いて、本発明の実施形態における、画像回転処理について説明する。図9は、画像回転処理のフローチャートである。
ステップS901では、左回転ボタン/右回転ボタンの押下を検知する(1607のボタン)。
Data in the text box may be deleted. Further, it is possible to notify that all the data in the comment column is deleted, and to delete the annotation and data when the user presses an OK button (not shown).
Next, image rotation processing in the embodiment of the present invention will be described with reference to FIG. FIG. 9 is a flowchart of the image rotation process.
In step S901, pressing of the left rotation button / right rotation button is detected (button 1607).
ステップS902では、アノテーションが削除されることを通知して、ユーザからOKボタン(不図示)が押下された場合に、ステップS903へ処理を移す。キャンセルボタン(不図示)が押下された場合に。処理を終了する(画像の回転をしない)。
ステップS903では、図8のアノテーション全削除処理を実行する。
In step S902, when the annotation is deleted and the user presses an OK button (not shown), the process proceeds to step S903. When a cancel button (not shown) is pressed. End the process (do not rotate the image).
In step S903, the annotation all deletion process of FIG. 8 is executed.
ステップS904では、ボタンに対応する方向に画像を90度回転する。具体的には、例えば、HTML5のCanvasのAPIが提供する画像回転用関数「rotate()」を、オリジナル画像に対して呼び出す。左回転時は反時計回り90度、右回転時は時計回り90度回転させる。
なお、図7〜図9の削除処理は、オリジナル画像にアノテーションが表示されている場合に実行されるものとする。
In step S904, the image is rotated 90 degrees in the direction corresponding to the button. Specifically, for example, an image rotation function “rotate ()” provided by the HTML5 Canvas API is called for the original image. The counterclockwise rotation is 90 degrees when rotating left, and the rotation is 90 degrees clockwise when rotating right.
7 to 9 are executed when an annotation is displayed on the original image.
次に、図10を用いて、本発明の実施形態における、画像保存処理について説明する。図10は、画像保存処理のフローチャートである。なお、画像保存処理は、アノテーションの追加されている場合に実行するものとする。
ステップS1001では、保存ボタンの押下を検知する(1606のボタン)。
Next, image storage processing in the embodiment of the present invention will be described with reference to FIG. FIG. 10 is a flowchart of the image storage process. Note that the image storage process is executed when an annotation is added.
In step S1001, pressing of the save button is detected (button 1606).
ステップS1002では、アノテーション配列(例えば、図13)の全要素をJSON形式のアノテーション情報に変換する(シリアライズする)。具体的には、例えばJavaScriptのAPI「JSON.Stringify()」を用いることで実行する。
ステップS1003では、コメント欄であるテキストボックスのテキスト(メモ)を取得して、JSON形式に変換する(シリアライズする)。
In step S1002, all elements of the annotation array (for example, FIG. 13) are converted (serialized) into JSON-formatted annotation information. Specifically, for example, it is executed by using API “JSON.Stringify ()” of JavaScript.
In step S1003, the text (memo) in the text box that is a comment field is acquired and converted into the JSON format (serialized).
ステップS1004では、ブラウザのCanvas上に表示されているオリジナル画像とレイヤーに描画されているアノテーションを合成して、新たな画像(編集画像)を作成する。表示したアノテーションと表示した画像を合成した編集画像を生成する画像生成処理の一例を示すステップである。 In step S1004, the original image displayed on the canvas of the browser and the annotation drawn on the layer are combined to create a new image (edited image). It is a step which shows an example of the image generation process which produces | generates the edit image which synthesize | combined the displayed annotation and the displayed image.
具体的には、HTML5のcanvasのAPI「toDataURL()」を実行することで合成された編集画像が作成される。この関数を実行することで編集画像のbase64エンコード文字列が取得できる。 Specifically, an edited image is created by executing the HTML5 canvas API “toDataURL ()”. By executing this function, a base64 encoded character string of the edited image can be acquired.
ステップS1005では、ステップS1002とステップS1003でシリアライズされたデータと、base64エンコード文字列を登録するために、シリアライズされたデータとbase64エンコード文字列をオリジナル画像IDと共にWebサーバ200に送信する。すなわち、生成した編集画像を、前記記憶装置に記憶制御する記憶制御処理の一例を示すステップである。 In step S1005, in order to register the data serialized in steps S1002 and S1003 and the base64 encoded character string, the serialized data and the base64 encoded character string are transmitted to the Web server 200 together with the original image ID. That is, this is a step showing an example of a storage control process for storing the generated edited image in the storage device.
ステップS1006では、クライアント端末100からデータ(シリアライズされたデータ、base64エンコード文字列、オリジナル画像ID)を受信する。すなわち、アノテーション情報と画面で入力された入力情報を情報処理装置から受信するアノテーション情報受信処理の一例を示すステップである。 In step S1006, data (serialized data, base64 encoded character string, original image ID) is received from the client terminal 100. That is, this is a step showing an example of annotation information reception processing for receiving annotation information and input information input on the screen from the information processing apparatus.
ステップS1007では、シリアライズされたアノテーション情報とオリジナル画像IDを含む保存要求をDBサーバ300に送信する。なお、アノテーション情報は、テーブルに保存するための適切な形式に変換されるものとする。
ステップS1008では、保存要求を受信して、編集画像情報テーブル1210に、アノテーション情報をオリジナル画像IDと対応付けて保存する。
In step S1007, a storage request including serialized annotation information and the original image ID is transmitted to the DB server 300. It is assumed that the annotation information is converted into an appropriate format for saving in the table.
In step S1008, the storage request is received, and the annotation information is stored in the edited image information table 1210 in association with the original image ID.
ステップS1009では、シリアライズされたテキスト(メモ情報)とオリジナル画像IDを含む保存要求をDBサーバ300に送信する。なお、メモ情報は、テーブルに保存するための適切な形式に変換されるものとする。
ステップS1010では、オリジナル画像情報テーブル1211に、メモ情報をオリジナル画像IDと対応付けて保存する。
ステップS1011では、base64エンコード文字列をデーコードしてバイナリデータを取得して、編集画像ファイルとして外部メモリ上に保存する。
ステップS1012では、保存された編集画像ファイルのファイルパスと、オリジナル画像IDを含む保存要求をDBサーバ300に送信する。
In step S1009, a save request including the serialized text (memo information) and the original image ID is transmitted to the DB server 300. Note that the memo information is converted into an appropriate format for storing in the table.
In step S1010, the memo information is stored in the original image information table 1211 in association with the original image ID.
In step S1011, the base64-encoded character string is decoded to obtain binary data, and is stored on the external memory as an edited image file.
In step S1012, a save request including the file path of the saved edited image file and the original image ID is transmitted to the DB server 300.
ステップS1013では、保存要求を受信して、オリジナル画像IDに対応する編集画像情報テーブル1209の編集画像ファイルパス1207に、受信したファイルパスを保存する。また、オリジナル画像と関連付けるため、オリジナル画像ID1206にオリジナル画像IDを保存する。ここで編集画像ID1205に自動採番して登録する。
In step S1013, the storage request is received, and the received file path is stored in the edited
上述したように、保存後、データ送信ボタン1504が押下されると、編集画像ファイルやDBサーバのメモ情報がファイルサーバ400に送信され、クライアント端末401から画像に対する指示やコメントを参照することが可能となる。すなわち、編集画像を他の情報処理装置で参照する参照画像として登録制御する登録制御処理の一例を示す処理である。
As described above, when the
以上、本実施形態によれば、画像を用いた画像に係る指示内容(入力内容)を容易に記録することができる。具体的には、画像上で指示内容を容易に付与して、指示内容を容易に記録することができる。 As described above, according to the present embodiment, it is possible to easily record instruction content (input content) related to an image using an image. Specifically, it is possible to easily assign the instruction content on the image and easily record the instruction content.
また、アノテーションとコメントを一括して入力可能になり、画像に係る指示を容易に入力することができる。特に、アノテーション番号とコメント番号を自動で付与するため、入力効率が良くなる。 In addition, annotations and comments can be input at once, and instructions relating to images can be easily input. In particular, since the annotation number and the comment number are automatically assigned, the input efficiency is improved.
更に、ActiveX等のプラグインを別途用いることなく、ブラウザ上に表示した画像に対してアノテーションを付与し画像を直接編集することが可能となる。そして、編集された画像を新たな1枚の画像としてサーバに保存することで編集後の画像の参照も容易となる。アノテーションと連動して画像に対するメモを記入、保存することも可能となり、画像を用いた指示を容易に行うことが可能となる。 Furthermore, it is possible to add an annotation to an image displayed on the browser and edit the image directly without using a plug-in such as ActiveX. Then, by saving the edited image as a new image on the server, the edited image can be easily referred to. It is also possible to enter and save a memo for the image in conjunction with the annotation, and it is possible to easily give an instruction using the image.
〔第2の実施形態〕
次に、第2の実施形態について説明する。なお、第1の実施形態と同様の構成については説明を省略して説明をする。
第2の実施形態は、第1の実施形態に加え、画像を用いた入力内容をより容易に記録することができる仕組みである。以下、図17〜図22のフローチャートを参照して、本実施形態のシステムにおける処理についてより詳細に説明する。
なお、各ステップについては、各装置のCPUが処理を実行する。
[Second Embodiment]
Next, a second embodiment will be described. Note that the description of the same configuration as that of the first embodiment will be omitted.
In addition to the first embodiment, the second embodiment is a mechanism that can more easily record input contents using images. Hereinafter, the processing in the system of the present embodiment will be described in more detail with reference to the flowcharts of FIGS.
In addition, about each step, CPU of each apparatus performs a process.
まず、図17を用いて、第2の実施形態における全体処理全体処理について説明する。図17は、第2の実施形態における全体処理を示すフローチャートである。
ステップS1701では、アノテーションをグループ化する。詳細は図22で後述する。
First, the overall processing overall processing in the second embodiment will be described with reference to FIG. FIG. 17 is a flowchart showing the overall processing in the second embodiment.
In step S1701, annotations are grouped. Details will be described later with reference to FIG.
次に、図18を用いて、ステップS419に対応する第2の実施形態におけるアノテーション追加処理について説明する。図18は、第2の実施形態におけるアノテーション追加処理のフローチャートである。
ステップS601〜S606については、第1の実施形態と同様の処理のため説明を省略する。なお、本実施形態では、マウスでのドラッグ操作開始位置が、アノテーション(矢印のアノテーションの場合)の矢印方向の先端となり、ドラッグ操作終了位置が、アノテーションの矢印方向とは逆の方向の端(矢印の末端)となるアノテーション描画の場合で説明をする。すなわち、要素数(アノテーション番号)を図形化したオブジェクト(番号を挿入したオブジェクト1609)が、マウスでのドラッグ操作終了位置(終点)に描画する。
Next, the annotation addition process in the second embodiment corresponding to step S419 will be described with reference to FIG. FIG. 18 is a flowchart of the annotation addition process in the second embodiment.
Since steps S601 to S606 are the same as those in the first embodiment, description thereof is omitted. In this embodiment, the drag operation start position with the mouse is the tip of the annotation (in the case of an arrow annotation) in the arrow direction, and the drag operation end position is the end in the direction opposite to the arrow direction of the annotation (arrow In the case of annotation drawing which is the end of That is, an object in which the number of elements (annotation number) is made into a graphic (an
ステップS1801では、付箋モードであるかテキストエリアモードであるかを判定する。付箋モードかテキストエリアモードかの判定は、図25の2500のモード設定によって判定する。2500のモード設定は、ユーザが任意に設定できるものであり、付箋モードにチェックが入った場合には、付箋モードとなり、ステップS1802へ処理を移す。また、テキストエリアモードにチェックが入った場合には、テキストエリアモードとなり、ステップS607へ処理を移す。上述したように、ステップS607では、コメント欄1603に識別情報(番号)が自動で入力され、コメント欄でアノテーションに対応するコメントの入力を受け付ける。
In step S1801, it is determined whether the tag mode or the text area mode is selected. Whether the tag mode or the text area mode is selected is determined by the mode setting 2500 in FIG. The mode setting of 2500 can be arbitrarily set by the user. If the tag mode is checked, the tag mode is set, and the process proceeds to step S1802. If the text area mode is checked, the text area mode is entered, and the process proceeds to step S607. As described above, in step S607, identification information (number) is automatically input in the
ステップS1802では、追加したアノテーションの終点(マウスでのドラッグ操作終了位置)のX座標・Y座標を取得する。 In step S1802, the X coordinate / Y coordinate of the end point of the added annotation (drag operation end position with the mouse) is acquired.
ステップS1803では、ステップS1802で取得したX座標・Y座標を基準位置とし、付箋(ラベル)を描画する。付箋は、ユーザがテキストなどを任意入力できる入力欄を有するラベルである。なお、付箋は、ステップS602で表示したアノテーションやステップS606で描画したアノテーション番号には重ならないように、取得したX座標・Y座標から所定座標分ずらして表示する。また、このとき、付箋が画像上からはみ出ないようにする。画像からはみ出す場合には、X座標・Y座標を基準に上又は下に表示させるようにする。そのほか、他の付箋と重なる場合には、X座標・Y座標を基準として、空いている領域を特定して付箋を表示する。
付箋の描画処理は、アノテーションが追加される場合に、追加されるアノテーションに対応するユーザが任意入力できる入力欄を追加する入力欄追加処理の一例を示すものである。
In step S1803, a tag (label) is drawn using the X coordinate / Y coordinate acquired in step S1802 as a reference position. The sticky note is a label having an input field in which the user can arbitrarily enter text or the like. The sticky note is displayed with a predetermined coordinate shift from the acquired X coordinate / Y coordinate so as not to overlap the annotation displayed in step S602 or the annotation number drawn in step S606. At this time, the sticky note is prevented from protruding from the image. When protruding from the image, it is displayed above or below with reference to the X and Y coordinates. In addition, when it overlaps with another tag, the vacant area is specified based on the X coordinate / Y coordinate and the tag is displayed.
The sticky note drawing process shows an example of an input field adding process for adding an input field that can be arbitrarily input by the user corresponding to the added annotation when the annotation is added.
ステップS1804では、テンプレートからコメントが選択済みであるか否かを判定する。図25の2501はコメントが選択されていない状態を示し、図25の2504はコメントが選択されている状態であり、このプルダウンリストから、コメントが選択されているか否かで、コメントが選択済みかを判定する。
In step S1804, it is determined whether a comment has been selected from the template.
ステップS1804でコメントが選択済みであった場合には、ステップS1805で、付箋モードの場合には、選択済みのコメント(コメント情報)を付箋に入力する。また、テキストエリアモードの場合には、テキストエリア(コメント欄)の識別情報(番号)に対応する箇所に選択済みのコメント(コメント情報)を入力する。図25の2502は選択済みでない状態でアノテーションを追加した例を示し、図25の2503は選択済みの状態でアノテーションを追加した例を示す。 If the comment has been selected in step S1804, the selected comment (comment information) is input to the tag in step S1805 in the tag mode. In the case of the text area mode, the selected comment (comment information) is input at a location corresponding to the identification information (number) in the text area (comment field). 252 in FIG. 25 shows an example in which annotations are added in a state where they are not selected, and 2503 in FIG. 25 shows an example in which annotations are added in a state where they have been selected.
次に、図19を用いて、ステップS420に対応する第2の実施形態におけるアノテーション削除処理について説明する。図19は、第2の実施形態におけるアノテーション削除処理のフローチャートである。
ステップS701〜S704については、第1の実施形態と同様の処理のため説明を省略する。
Next, the annotation deletion process in the second embodiment corresponding to step S420 will be described with reference to FIG. FIG. 19 is a flowchart of annotation deletion processing in the second embodiment.
Steps S701 to S704 are the same as those in the first embodiment, and a description thereof will be omitted.
ステップS1901では、1607の「取り消し」ボタンが押下された場合に、描画されたアノテーションが選択されている否かを判定する。
In step S1901, it is determined whether or not the drawn annotation is selected when the “cancel”
ステップS1901でアノテーションが選択されている場合には、ステップS1902で、アノテーション配列より、選択されたアノテーションの要素と要素数(アノテーション番号)を取得する。 If an annotation is selected in step S1901, the selected annotation element and the number of elements (annotation number) are acquired from the annotation array in step S1902.
ステップS1903では、アノテーション配列から選択された要素を削除する。これにより、アノテーションが削除される。 In step S1903, the element selected from the annotation array is deleted. As a result, the annotation is deleted.
ステップS1904では、削除された要素に対応するアノテーションに付箋がついている場合には、付箋を削除する。また、付箋ではなく、テキストエリア(コメント欄)でテキストが入力されている場合には、要素番号に対応して入力されているコメント部分を削除する。なお、本実施形態では削除する処理としたが、アノテーションや付箋を非表示にする処理としてもよい。 In step S1904, when a tag is attached to the annotation corresponding to the deleted element, the tag is deleted. If text is input in a text area (comment field) instead of a sticky note, the comment portion input corresponding to the element number is deleted. In the present embodiment, the deletion process is performed, but an annotation or a tag may be hidden.
ステップS1905では、アノテーションが選択済みであるか否かを判定する。
ステップS1905でアノテーションが選択済みであった場合、すなわち、アノテーション配列の途中のアノテーションが選択され、削除された場合には、ステップS1906で、アノテーション配列のインデックスを詰める。例えば、インデックスを再付与する。
なお、選択済みのアノテーションが後述のグループ化がされていた場合は、グループ化されているアノテーションはまとめて削除(非表示)するものとする。
また、削除処理は、付箋やコメント欄のテキストを先に削除して、アノテーションを削除する順序であってもよいため、処理手順に限定されるものではない。
In step S1905, it is determined whether an annotation has been selected.
If an annotation has been selected in step S1905, that is, if an annotation in the middle of the annotation sequence is selected and deleted, the index of the annotation sequence is packed in step S1906. For example, the index is reassigned.
When the selected annotations are grouped as described later, the grouped annotations are deleted (hidden) together.
Further, the deletion process may be performed in the order of deleting the annotations in advance by deleting the text in the tag and the comment field, and is not limited to the processing procedure.
次に、図20を用いて、ステップS421に対応する第2の実施形態におけるアノテーション全削除処理について説明する。図20は、第2の実施形態におけるアノテーション全削除処理のフローチャートである。
ステップS801〜S803については、第1の実施形態と同様の処理のため説明を省略する。
Next, the annotation all deletion process in the second embodiment corresponding to step S421 will be described with reference to FIG. FIG. 20 is a flowchart of the annotation all deletion process according to the second embodiment.
Steps S801 to S803 are the same as those in the first embodiment, and a description thereof will be omitted.
ステップS2001では、アノテーションを全削除したため、アノテーション付与時につけたすべての付箋またはテキストエリア(コメント欄)のすべてのコメントを削除(非表示)する。 In step S2001, since all annotations have been deleted, all the tags attached at the time of annotation assignment or all comments in the text area (comment field) are deleted (hidden).
次に、図21を用いて、ステップS422に対応する第2の実施形態における画像回転処理について説明する。図21は、第2の実施形態における画像回転処理のフローチャートである。
ステップS901〜S903については、第1の実施形態と同様の処理のため説明を省略する。
Next, image rotation processing in the second embodiment corresponding to step S422 will be described with reference to FIG. FIG. 21 is a flowchart of image rotation processing in the second embodiment.
Steps S901 to S903 are the same as those in the first embodiment, and a description thereof will be omitted.
ステップS2101では、画像の回転指示がされた場合に、描画されている各々のアノテーションの始点・終点のX座標・Y座標を取得する。 In step S2101, when an image rotation instruction is issued, the X and Y coordinates of the start point and end point of each drawn annotation are acquired.
ステップS2102では、左回転であるか右回転であるかを判定する。左回転である場合には、ステップS2103へ処理を移し、右回転である場合には、ステップS2104へ処理を移す。 In step S2102, it is determined whether the rotation is left or right. If it is a left rotation, the process proceeds to step S2103. If it is a right rotation, the process proceeds to step S2104.
ステップS2103では、ステップS2101で取得した始点・終点のX座標・Y座標を90度左回転する。 In step S2103, the X and Y coordinates of the start point and end point acquired in step S2101 are rotated 90 degrees counterclockwise.
ステップS2104では、ステップS2101で取得した始点・終点のX座標・Y座標を90度右回転する。 In step S2104, the X and Y coordinates of the start point and end point acquired in step S2101 are rotated 90 degrees to the right.
ステップS2105では、回転した始点座標を始点、回転した終点座標を終点とし、各々のアノテーションを再表示する。 In step S2105, each annotation is redisplayed with the rotated start point coordinates as the start point and the rotated end point coordinates as the end point.
ステップS2106では、アノテーション配列の座標の値を、ステップS2105で再表示した座標の値で更新する。 In step S2106, the coordinate value of the annotation array is updated with the coordinate value redisplayed in step S2105.
ステップS2107では、アノテーション番号(要素番号を挿入したオブジェクト)を各々のアノテーションの終点の位置に再表示する。この時、アノテーション番号(要素番号を挿入したオブジェクト)は回転することなく(非回転)表示する。すなわち、画像が回転された場合に、識別情報を回転することなく、アノテーションを画像の回転に応じて回転するアノテーション回転処理の一例を示すものである。 In step S2107, the annotation number (the object with the element number inserted) is displayed again at the position of the end point of each annotation. At this time, the annotation number (the object in which the element number is inserted) is displayed without rotating (non-rotating). That is, an example of annotation rotation processing that rotates an annotation in accordance with the rotation of the image without rotating the identification information when the image is rotated is shown.
ステップS2108では、付箋を各々のアノテーションの終点に非回転で再表示する。上述したように、付箋はアノテーション番号に重ならないように、他の付箋と重ならないように描画するものとする。
アノテーションは画像の回転に応じて、回転させるが、アノテーション番号や付箋は回転させないようにすることで、閲覧性が高まる。具体的には、アノテーション番号や付箋を回転してしまうと、テキストまで回転されてしまうため、可読性が低下してしまう。そのため、本実施形態のように、画像に描画したオブジェクトの種別(アノテーション、アノテーション番号のオブジェクト、付箋)によって、回転するか否かを決定して描画することで、閲覧性や可読性を高めた表示を行うことが可能となる。
In step S2108, the sticky note is re-displayed at the end point of each annotation without rotation. As described above, it is assumed that the sticky note is drawn so as not to overlap with the annotation number so as not to overlap other sticky notes.
The annotation is rotated according to the rotation of the image, but the visibility is improved by not rotating the annotation number and the tag. Specifically, if an annotation number or a tag is rotated, the text is also rotated, resulting in a decrease in readability. Therefore, as in this embodiment, a display with improved readability and readability by determining whether to rotate or not depending on the type of object (annotation, annotation number object, tag) drawn on the image Can be performed.
次に、図22を用いて、ステップS1701に対応する第2の実施形態におけるアノテーショングループ化処理について説明する。図21は、第2の実施形態におけるアノテーショングループ化処理のフローチャートである。 Next, the annotation grouping process in the second embodiment corresponding to step S1701 will be described with reference to FIG. FIG. 21 is a flowchart of the annotation grouping process in the second embodiment.
ステップS2201では、アノテーションのクリック操作(選択)を検知する。すなわち、アノテーション選択処理の一例を示すものである。
ステップS2202では、ステップS2201で検知したアノテーションの始点・終点のX座標・Y座標をアノテーション配列から取得する。取得した座標はメモリに記憶する。記憶された座標は、選択されたアノテーションを識別する識別情報(要素番号など)と対応付けて記憶する。複数のアノテーションを選択すると複数分のアノテーションの座標がアノテーションの情報として記憶される。
In step S2201, an annotation click operation (selection) is detected. That is, an example of annotation selection processing is shown.
In step S2202, the X and Y coordinates of the start point and end point of the annotation detected in step S2201 are acquired from the annotation array. The acquired coordinates are stored in the memory. The stored coordinates are stored in association with identification information (such as an element number) for identifying the selected annotation. When a plurality of annotations are selected, a plurality of annotation coordinates are stored as annotation information.
ステップS2203では、グループ化ボタンの押下を検知したか否かを判定する(2603のボタン)。検知した場合には、ステップS2204へ処理を移し、検知していない場合には、ステップS2201へ処理を移す。 In step S2203, it is determined whether or not the pressing of the grouping button is detected (2603 button). If detected, the process proceeds to step S2204. If not detected, the process proceeds to step S2201.
ステップS2204では、メモリに記憶されたアノテーションの情報を、グループ化されたアノテーションの情報として、グループ化情報テーブル(図24)に保存する。グループ化情報は編集画像IDと対応付けて保存するものとする。 In step S2204, the annotation information stored in the memory is stored in the grouping information table (FIG. 24) as grouped annotation information. The grouping information is stored in association with the edited image ID.
ステップS2205では、ステップS2202で取得した各々の終点座標の中間座標を基準位置とし、付箋(ラベル)を描画する。この時、アノテーション番号と重ならないように基準位置から所定の距離ずらして表示するものとする。また、他の付箋と重ならないように描画する。なお、付箋に入力されているテキストがある場合には、それぞれの付箋のテキストを取得して、新たに生成した付箋にまとめて入力する。すなわち、それぞれの付箋を1つの付箋にまとめた、グループ化処理の一例である。 In step S2205, a sticky note (label) is drawn using the intermediate coordinates of the end point coordinates acquired in step S2202 as the reference position. At this time, display is performed by shifting a predetermined distance from the reference position so as not to overlap the annotation number. Moreover, it draws so that it may not overlap with another tag. If there is text entered on a sticky note, the text of each sticky note is acquired and entered in a newly generated sticky note. In other words, this is an example of a grouping process in which each tag is combined into one tag.
ステップS2206では、ステップS2202で取得した各々の始点座標を始点、ステップS2205で取得した中間座標を終点とし、各々のアノテーションを再表示する。また、終点には表示されていたアノテーション番号を重ならないように表示する。本実施形態では現在表示されているアノテーションの終点を変更して再表示する構成としたが、現在表示されているアノテーションを削除して、新たなアノテーションを描画してもよい。
ステップS2207では、アノテーション配列の座標の値を、ステップS2206で再表示した座標の値で更新する。図26の2604は、図26の2601と図26の2602が選択済みの状態でグループ化した例を示す。
In step S2206, each start point coordinate acquired in step S2202 is set as the start point, and the intermediate coordinate acquired in step S2205 is set as the end point, and each annotation is displayed again. Also, the displayed annotation number is displayed at the end point so as not to overlap. In the present embodiment, the end point of the currently displayed annotation is changed and displayed again. However, the currently displayed annotation may be deleted and a new annotation may be drawn.
In step S2207, the coordinate value of the annotation array is updated with the coordinate value redisplayed in step S2206. 26 shows an example in which 2601 in FIG. 26 and 2602 in FIG. 26 are grouped in a selected state.
次に、図23〜図26について説明する。
図23は、コメントテーブルの一例を示すデータ図である。このコメントテーブルはWebサーバ200に記憶され、コメントIDとコメントが対応づいて記憶されている。コメントテーブルからコメンを読み出し、2501のプルダウンリストに反映され、クライアント端末100に送信されている。
Next, FIGS. 23 to 26 will be described.
FIG. 23 is a data diagram illustrating an example of a comment table. This comment table is stored in the Web server 200, and a comment ID and a comment are stored in association with each other. Comments are read from the comment table, reflected in the pull-
図24は、グループ化情報テーブルの一例を示すデータ図である。このグループ化情報テーブルは、グループ化ボタンが押下された場合に、クライアント端末でグループ化したアノテーションの情報として管理される。また、保存ボタンが押下されると、編集画像とともに、Webサーバに記憶される。グループ化ID、編集画像ID、グループ化されたアノテーションの情報(シリアライズアノテーション)が記憶されている。 FIG. 24 is a data diagram illustrating an example of the grouping information table. This grouping information table is managed as annotation information grouped at the client terminal when the grouping button is pressed. When the save button is pressed, the edited image is stored in the Web server together with the edited image. A grouping ID, an edited image ID, and grouped annotation information (serialized annotation) are stored.
図25は、画像にアノテーションを追加した際の付箋を表示した画面イメージ図である。2500で付箋モードが選択し、2501でコメントを選択した状態で、画像上でマウスをドラッグすると、アノテーションが表示されるとともに、選択したコメントが挿入された付箋(2503)が表示される。付箋内のコメントは編集可能とする。コメントが選択されていない場合には、2502のようにコメントが挿入されていない付箋が表示される。 FIG. 25 is a screen image diagram showing a tag when an annotation is added to the image. When the tag mode is selected in 2500 and a comment is selected in 2501, when the mouse is dragged on the image, an annotation is displayed and a tag (2503) in which the selected comment is inserted is displayed. Comments in sticky notes can be edited. If no comment is selected, a sticky note with no comment inserted, such as 2502, is displayed.
図26は、アノテーションをグループ化した際の画面イメージ図である。2602と2603のアノテーションが選択され、グループ化ボタン2601が押下されると、2604のように、1つの付箋が表示され、アノテーションがグループ化される。なお、付箋内にコメントがあった場合には、付箋それぞれに入力されていたコメントをまとめて2601へ挿入してもよい。付箋内にコメントがあった場合には、通知ダイアログを表示し、ユーザにコメントをまとめるか否か、コメントを入力しない付箋を表示させるかを決定させるようにする。ユーザによりコメントをまとめる選択がされた場合に、2601へそれぞれのコメントをまとめて入力する。
グループ化したアノテーションは、図24でアノテーション情報を保持しているため、グループ化を解除した場合には、もとの状態にアノテーションを表示するものとする。
FIG. 26 is a screen image diagram when annotations are grouped. When
Since the grouped annotation holds the annotation information in FIG. 24, when the grouping is canceled, the annotation is displayed in the original state.
以上、本実施形態によれば、画像を用いた画像に係る指示内容(入力内容)を容易に記録することができる。具体的には、画像上で指示内容を容易に付与して、指示内容を容易に記録することができる。 As described above, according to the present embodiment, it is possible to easily record instruction content (input content) related to an image using an image. Specifically, it is possible to easily assign the instruction content on the image and easily record the instruction content.
また、アノテーションとコメントを一括して入力可能になり、画像に係る指示を容易に入力することができる。特に、アノテーション番号とコメント番号を自動で付与するため、入力効率が良くなる。
また、テンプレートとなるコメントを用いる、付箋を用いたコメント入力を可能とすることで、画像を用いた指示入力が容易となる。画像の回転においては、画像は回転しつつも、付箋やアノテーション番号のオブジェクトは回転しないことにより、コメントやアノテーション番号の可読性を維持することができる。
In addition, annotations and comments can be input at once, and instructions relating to images can be easily input. In particular, since the annotation number and the comment number are automatically assigned, the input efficiency is improved.
In addition, by making it possible to input a comment using a sticky note using a comment as a template, it is easy to input an instruction using an image. In the rotation of an image, the readability of a comment or an annotation number can be maintained by rotating an image but not rotating an object with a tag or an annotation number.
更に、ActiveX等のプラグインを別途用いることなく、ブラウザ上に表示した画像に対してアノテーションを付与し画像を直接編集することが可能となる。そして、編集された画像を新たな1枚の画像としてサーバに保存することで編集後の画像の参照も容易となる。アノテーションと連動して画像に対するメモを記入、保存することも可能となり、画像を用いた指示を容易に行うことが可能となる。 Furthermore, it is possible to add an annotation to an image displayed on the browser and edit the image directly without using a plug-in such as ActiveX. Then, by saving the edited image as a new image on the server, the edited image can be easily referred to. It is also possible to enter and save a memo for the image in conjunction with the annotation, and it is possible to easily give an instruction using the image.
なお、上述した各種データの構成及びその内容はこれに限定されるものではなく、用途や目的に応じて、様々な構成や内容で構成されることは言うまでもない。 It should be noted that the configuration and contents of the various data described above are not limited to this, and it goes without saying that the various data and configurations are configured according to the application and purpose.
以上、一実施形態について示したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能であり、具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。 Although one embodiment has been described above, the present invention can take an embodiment as, for example, a system, apparatus, method, program, or recording medium, and specifically includes a plurality of devices. The present invention may be applied to a system including a single device.
また、本発明におけるプログラムは、図4〜図10に示すフローチャートの処理方法をコンピュータが実行可能なプログラムであり、本発明の記憶媒体は図4〜図10の処理方法をコンピュータが実行可能なプログラムが記憶されている。なお、本発明におけるプログラムは図4〜図10の各装置の処理方法ごとのプログラムであってもよい。 Further, the program according to the present invention is a program that allows a computer to execute the processing methods of the flowcharts shown in FIGS. 4 to 10, and the storage medium according to the present invention is a program that allows the computer to execute the processing methods of FIGS. Is remembered. The program according to the present invention may be a program for each processing method of each apparatus shown in FIGS.
以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムを読出し実行することによっても、本発明の目的が達成されることは言うまでもない。 As described above, a recording medium that records a program that implements the functions of the above-described embodiments is supplied to a system or apparatus, and a computer (or CPU or MPU) of the system or apparatus stores the program stored in the recording medium. It goes without saying that the object of the present invention can also be achieved by executing the reading.
この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記憶した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium storing the program constitutes the present invention.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、DVD−ROM、磁気テープ、不揮発性のメモリカード、ROM、EEPROM、シリコンディスク、ソリッドステートドライブ等を用いることができる。 As a recording medium for supplying the program, for example, a flexible disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, DVD-ROM, magnetic tape, nonvolatile memory card, ROM, EEPROM, silicon A disk, solid state drive, or the like can be used.
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, by executing the program read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on an instruction of the program is actually It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the processing and the processing is included.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Furthermore, after the program read from the recording medium is written to the memory provided in the function expansion board inserted into the computer or the function expansion unit connected to the computer, the function expansion board is based on the instructions of the program code. It goes without saying that the case where the CPU or the like provided in the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
また、本発明は、複数の機器から構成されるシステムに適用しても、1つの機器からなる装置に適用してもよい。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 Further, the present invention may be applied to a system composed of a plurality of devices or an apparatus composed of a single device. Needless to say, the present invention can be applied to a case where the present invention is achieved by supplying a program to a system or apparatus. In this case, by reading a recording medium storing a program for achieving the present invention into the system or apparatus, the system or apparatus can enjoy the effects of the present invention.
さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。
なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。
Furthermore, by downloading and reading a program for achieving the present invention from a server, database, etc. on a network using a communication program, the system or apparatus can enjoy the effects of the present invention.
In addition, all the structures which combined each embodiment mentioned above and its modification are also included in this invention.
100 クライアント端末
200 Webサーバ
300 DBサーバ
400 ファイルサーバ
401 クライアント端末(参照端末)
DESCRIPTION OF SYMBOLS 100 Client terminal 200 Web server 300
Claims (19)
ユーザの操作に対応して、アノテーションと当該アノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、
前記アノテーション追加手段による追加がされる場合に、ユーザが任意入力できる入力欄に前記識別情報を含む入力情報を追加する入力情報追加手段と
を備えることを特徴とする情報処理装置。 An information processing apparatus capable of communicating with a storage device that stores images,
An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
An information processing apparatus comprising: input information adding means for adding input information including the identification information to an input field that can be arbitrarily input by a user when the annotation is added by the annotation adding means.
前記位置取得手段により取得した位置に応じて、前記アノテーションと前記アノテーションを識別する識別情報を追加することを特徴とする請求項1に記載の情報処理装置。 An annotation adding means includes a position acquisition means for acquiring a position corresponding to a user operation on the image,
The information processing apparatus according to claim 1, wherein identification information for identifying the annotation and the annotation is added according to the position acquired by the position acquisition unit.
前記アノテーション追加手段は、前記番号を挿入したオブジェクトを前記追加したアノテーションに対応付くように追加することを特徴とする請求項1又は2に記載の情報処理装置。 The identification information is a number indicating the creation order of annotations,
The information processing apparatus according to claim 1, wherein the annotation adding unit adds the object into which the number is inserted so as to correspond to the added annotation.
前記アノテーション追加手段は、前記選択された属性に対応する形状のアノテーションを画像上に追加することを特徴とする請求項1乃至3のいずれか1項に記載の情報処理装置。 A selection means for selecting an attribute indicating the shape of the annotation;
The information processing apparatus according to claim 1, wherein the annotation adding unit adds an annotation having a shape corresponding to the selected attribute on an image.
前記アノテーション削除手段よりアノテーションを削除する場合に、前記入力情報追加手段で追加した入力情報を削除する入力情報削除手段と
を更に備えることを特徴とする請求項1乃至4のいずれか1項に記載の情報処理装置。 In accordance with the annotation deletion request, a deletion means for deleting the last displayed annotation or all annotations,
The input information deleting means for deleting the input information added by the input information adding means when the annotation is deleted by the annotation deleting means. Information processing device.
前記画像生成手段により生成した編集画像を、前記記憶装置に記憶させる記憶制御手段と
を更に備えることを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 Image generation means for generating an edited image obtained by combining the annotation, the identification information for identifying the annotation, and the image;
6. The information processing apparatus according to claim 1, further comprising a storage control unit that stores the edited image generated by the image generation unit in the storage device.
前記入力情報追加手段は、前記選択手段により選択されたコメント情報を、前記入力欄に追加することを特徴とする請求項1乃至6のいずれか1項に記載の情報処理装置。 A selection means for selecting pre-stored comment information;
The information processing apparatus according to claim 1, wherein the input information adding unit adds the comment information selected by the selection unit to the input field.
前記回転手段により画像が回転された場合に、前記識別情報を回転することなく、前記アノテーションを前記画像の回転に応じて回転するアノテーション回転手段と
を更に備えることを特徴とする請求項1乃至7のいずれか1項に記載の情報処理装置。 A rotating means for rotating the image;
8. An annotation rotation unit that rotates the annotation in accordance with the rotation of the image without rotating the identification information when the image is rotated by the rotation unit. The information processing apparatus according to any one of the above.
ユーザの操作に対応して、アノテーションとアノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、
前記アノテーション追加手段による追加がされる場合に、前記追加されるアノテーションに対応するユーザが任意入力できる入力欄を追加する入力欄追加手段と
を備えることを特徴とする情報処理装置。 An information processing apparatus capable of communicating with a storage device that stores images,
An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
An information processing apparatus comprising: an input field adding unit that adds an input field that can be arbitrarily input by a user corresponding to the added annotation when the annotation adding unit adds.
前記アノテーションをグループ化する指示があった場合に、前記アノテーション選択手段により選択された複数のアノテーションに対応する入力欄を1つの入力欄にするグループ化手段と
を更に備えることを特徴とする請求項9に記載の情報処理装置。 Annotation selecting means for selecting the annotation;
The apparatus further comprises grouping means for making input fields corresponding to a plurality of annotations selected by the annotation selection means into one input field when there is an instruction to group the annotations. 9. The information processing apparatus according to 9.
前記サーバは、
画像と前記情報処理装置で追加されたアノテーションのアノテーション情報と入力情報とを管理する管理手段と、
前記情報処理装置からの要求に従って、前記画像を送信する画像送信手段と
を備え、
前記情報処理装置は、
前記サーバから画像を取得する画像取得手段と、
前記画像取得手段で取得した画像を表示する画像表示制御手段と、
ユーザの操作に対応して、アノテーションと当該アノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、
前記アノテーション追加手段による追加がされる場合に、ユーザが任意入力できる入力欄に前記識別情報を含む入力情報を追加する入力情報追加手段と
を備えることを特徴とする情報処理システム。 An information processing system including an image management server and an information processing apparatus,
The server
Management means for managing the annotation information and input information of the image and the annotation added by the information processing apparatus;
Image transmission means for transmitting the image according to a request from the information processing apparatus,
The information processing apparatus includes:
Image acquisition means for acquiring an image from the server;
Image display control means for displaying the image acquired by the image acquisition means;
An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
An information processing system comprising: input information adding means for adding input information including the identification information to an input field that can be arbitrarily input by a user when the annotation is added by the annotation adding means.
前記情報処理装置からの要求に従って、前記画像を送信する画像送信手段と、
前記画像上で追加されたアノテーションのアノテーション情報と入力情報とを管理する管理手段と
を備えることを特徴とするサーバ。 An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to the user's operation, and an input field in which the user can arbitrarily input when the annotation adding means adds A server capable of communicating with an information processing apparatus comprising input information adding means for adding input information including identification information,
Image transmitting means for transmitting the image in accordance with a request from the information processing apparatus;
A server comprising management means for managing annotation information and input information of an annotation added on the image.
ユーザの操作に対応して、アノテーションと当該アノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加ステップと、
前記アノテーション追加ステップで追加する場合に、ユーザが任意入力できる入力欄に前記識別情報を含む入力情報を追加する入力情報追加ステップと
を含むことを特徴とする処理方法。 An information processing apparatus processing method capable of communicating with a storage device for storing an image,
An annotation addition step of adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
A processing method comprising: an input information adding step of adding input information including the identification information to an input field where a user can arbitrarily input when adding in the annotation adding step.
ユーザの操作に対応して、アノテーションとアノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加ステップと、
前記アノテーション追加ステップによる追加がされる場合に、前記追加されるアノテーションに対応するユーザが任意入力できる入力欄を追加する入力欄追加ステップと
を含むことを特徴とする処理方法。 An information processing apparatus processing method capable of communicating with a storage device for storing an image,
An annotation adding step of adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
A processing method comprising: an input field adding step of adding an input field that can be arbitrarily input by a user corresponding to the added annotation when the annotation is added in the annotation adding step.
前記サーバは、
画像と前記情報処理装置で追加されたアノテーションのアノテーション情報と入力情報とを管理する管理ステップと、
前記情報処理装置からの要求に従って、前記画像を送信する画像送信ステップと
を含み、
前記情報処理装置は、
前記サーバから画像を取得する画像取得ステップと、
前記画像取得ステップで取得した画像を表示する画像表示制御ステップと、
ユーザの操作に対応して、アノテーションと当該アノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加ステップと、
前記アノテーション追加ステップによる追加がされる場合に、ユーザが任意入力できる入力欄に前記識別情報を含む入力情報を追加する入力情報追加ステップと
を含むことを特徴とする処理方法。 An information processing system processing method including an image management server and an information processing apparatus,
The server
A management step for managing annotation information and input information of an image and annotation added by the information processing apparatus;
An image transmission step of transmitting the image according to a request from the information processing apparatus,
The information processing apparatus includes:
An image acquisition step of acquiring an image from the server;
An image display control step for displaying the image acquired in the image acquisition step;
An annotation addition step of adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
A processing method comprising: an input information adding step of adding input information including the identification information to an input field that can be arbitrarily input by a user when the annotation is added by the annotation adding step.
前記情報処理装置からの要求に従って、前記画像を送信する画像送信ステップと、
前記画像上で追加されたアノテーションのアノテーション情報と入力情報とを管理する管理ステップと
を含むことを特徴とする処理方法。 An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to the user's operation, and an input field in which the user can arbitrarily input when the annotation adding means adds A processing method of a server capable of communicating with an information processing apparatus comprising input information adding means for adding input information including identification information,
An image transmission step of transmitting the image in accordance with a request from the information processing apparatus;
And a management step of managing annotation information and input information of the annotation added on the image.
前記情報処理装置を、
ユーザの操作に対応して、アノテーションと当該アノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、
前記アノテーション追加手段による追加がされる場合に、ユーザが任意入力できる入力欄に前記識別情報を含む入力情報を追加する入力情報追加手段
として機能させることを特徴とするプログラム。 An information processing apparatus program capable of communicating with a storage device for storing an image,
The information processing apparatus;
An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
A program that functions as an input information adding unit that adds input information including the identification information to an input field that can be arbitrarily input by a user when the annotation is added by the annotation adding unit.
前記情報処理装置を、
ユーザの操作に対応して、アノテーションとアノテーションを識別する識別情報とを前記画像上に追加するアノテーション追加手段と、
前記アノテーション追加手段による追加がされる場合に、前記追加されるアノテーションに対応するユーザが任意入力できる入力欄を追加する入力欄追加手段
として機能させることを特徴とするプログラム。 An information processing apparatus program capable of communicating with a storage device for storing an image,
The information processing apparatus;
An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to a user operation;
A program that functions as an input field adding unit that adds an input field that can be arbitrarily input by a user corresponding to the added annotation when the annotation is added by the annotation adding unit.
前記サーバを、
前記情報処理装置からの要求に従って、前記画像を送信する画像送信手段と、
前記画像上で追加されたアノテーションのアノテーション情報と入力情報とを管理する管理手段
として機能させることを特徴とするプログラム。 An annotation adding means for adding an annotation and identification information for identifying the annotation on the image in response to the user's operation, and an input field in which the user can arbitrarily input when the annotation adding means adds A server program capable of communicating with an information processing apparatus comprising input information adding means for adding input information including identification information,
The server,
Image transmitting means for transmitting the image in accordance with a request from the information processing apparatus;
A program that functions as a management unit that manages annotation information and input information of an annotation added on the image.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014200529 | 2014-09-30 | ||
JP2014200529 | 2014-09-30 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016071857A true JP2016071857A (en) | 2016-05-09 |
JP6160664B2 JP6160664B2 (en) | 2017-07-12 |
Family
ID=55867050
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015152523A Active JP6160664B2 (en) | 2014-09-30 | 2015-07-31 | Information processing apparatus, server, information processing system, processing method thereof, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6160664B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019169107A (en) * | 2018-03-26 | 2019-10-03 | Sky株式会社 | Display system and display program |
US11256399B2 (en) | 2018-12-05 | 2022-02-22 | Fujifilm Business Innovation Corp. | Information processing apparatus and non-transitory computer readable medium |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0429299A (en) * | 1990-05-25 | 1992-01-31 | Toshiba Corp | Picture display device |
JPH05307545A (en) * | 1992-04-30 | 1993-11-19 | Ricoh Co Ltd | Document preparing device |
CN101645111A (en) * | 2008-08-06 | 2010-02-10 | 株式会社东芝 | Report generation support apparatus, report generation support system, and medical image referring apparatus |
JP2014149689A (en) * | 2013-02-01 | 2014-08-21 | Toshiba Corp | Report preparation support system and report preparation support program |
-
2015
- 2015-07-31 JP JP2015152523A patent/JP6160664B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0429299A (en) * | 1990-05-25 | 1992-01-31 | Toshiba Corp | Picture display device |
JPH05307545A (en) * | 1992-04-30 | 1993-11-19 | Ricoh Co Ltd | Document preparing device |
CN101645111A (en) * | 2008-08-06 | 2010-02-10 | 株式会社东芝 | Report generation support apparatus, report generation support system, and medical image referring apparatus |
US20100034442A1 (en) * | 2008-08-06 | 2010-02-11 | Kabushiki Kaisha Toshiba | Report generation support apparatus, report generation support system, and medical image referring apparatus |
JP2010057902A (en) * | 2008-08-06 | 2010-03-18 | Toshiba Corp | Report generation support apparatus, report generation support system, and medical image referring apparatus |
JP2014149689A (en) * | 2013-02-01 | 2014-08-21 | Toshiba Corp | Report preparation support system and report preparation support program |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019169107A (en) * | 2018-03-26 | 2019-10-03 | Sky株式会社 | Display system and display program |
US11256399B2 (en) | 2018-12-05 | 2022-02-22 | Fujifilm Business Innovation Corp. | Information processing apparatus and non-transitory computer readable medium |
Also Published As
Publication number | Publication date |
---|---|
JP6160664B2 (en) | 2017-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5190452B2 (en) | Chart correction | |
Snydman et al. | The International Image Interoperability Framework (IIIF): A community & technology approach for web-based images | |
Miller et al. | Scribl: an HTML5 Canvas-based graphics library for visualizing genomic data over the web | |
KR102409553B1 (en) | Systems and methods for creating and managing interactive application networks | |
CN114154000A (en) | Multimedia resource publishing method and device | |
JP6160664B2 (en) | Information processing apparatus, server, information processing system, processing method thereof, and program | |
US11537643B2 (en) | Systems and methods for coordinate-based search | |
JP2022022451A (en) | Server, information processing apparatus, processing method, and program | |
JP6607030B2 (en) | Information processing apparatus, information processing system, processing method thereof, and program | |
JP5991365B2 (en) | Form system, information processing apparatus, processing method thereof, and program | |
US20230068093A1 (en) | Augmentecture software application including team viewing | |
JP2013131107A (en) | Information process system, information processing unit, information processing method, and computer program | |
JP6423933B2 (en) | Information processing apparatus, form management system, form management server, information processing method, and program thereof | |
JP6056944B2 (en) | Information processing apparatus, information processing apparatus control method, and program | |
US20150095458A1 (en) | Methods and systems for providing a seamless transition of documents between client types | |
JP2006155230A (en) | Exhibition system and program | |
JP5390253B2 (en) | Medical information processing system | |
JP5954309B2 (en) | Program generation support apparatus, program generation support method, and program | |
JP2014026473A (en) | Information processing device, control method for information processing device, program, and recording medium | |
JP2018142231A (en) | Business form system, and processing method, and program thereof | |
JP6206463B2 (en) | Information processing apparatus, control method and program thereof, and information processing system, control method and program thereof | |
JP6056689B2 (en) | Information processing apparatus, processing method thereof, and program | |
JP6203613B2 (en) | Information processing apparatus, form management system, form management apparatus, information processing method, and program thereof | |
JP6119243B2 (en) | Remote conference system, remote conference system control method, host computer, host computer control method, program, and recording medium | |
JP2023075577A (en) | Information processing apparatus, information processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160826 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161004 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20161101 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20161101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161205 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170516 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170529 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6160664 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |