JP6225724B2 - Information sharing system, information sharing method, information processing apparatus, and information processing method - Google Patents

Information sharing system, information sharing method, information processing apparatus, and information processing method Download PDF

Info

Publication number
JP6225724B2
JP6225724B2 JP2014012870A JP2014012870A JP6225724B2 JP 6225724 B2 JP6225724 B2 JP 6225724B2 JP 2014012870 A JP2014012870 A JP 2014012870A JP 2014012870 A JP2014012870 A JP 2014012870A JP 6225724 B2 JP6225724 B2 JP 6225724B2
Authority
JP
Japan
Prior art keywords
information
display
unit
identification information
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2014012870A
Other languages
Japanese (ja)
Other versions
JP2015141479A (en
Inventor
健 竹原
健 竹原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2014012870A priority Critical patent/JP6225724B2/en
Publication of JP2015141479A publication Critical patent/JP2015141479A/en
Application granted granted Critical
Publication of JP6225724B2 publication Critical patent/JP6225724B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Document Processing Apparatus (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、情報を表示する際に用いて好適な情報共有システムおよび情報共有方法、ならびに、情報処理装置および情報処理方法に関する。   The present invention relates to an information sharing system, an information sharing method, an information processing apparatus, and an information processing method suitable for use when displaying information.

従来から、板書した情報を画像データとして表示する電子黒板装置(以下、インタラクティブホワイトボード:IWBと呼ぶ)が開発されている(特許文献1参照)。IWBは、前面の板書面が、表示デバイスとポインティングデバイスとが一体的に構成され、接触した位置に応じた信号を出力するようにされた、所謂タッチパネルとして構成される。IWBは、例えば、ユーザにより板書面に専用ペンなどを用いて板書された情報を、タッチパネルの機能により画像データとして取得し、板書面を構成する表示デバイスに表示させる。   Conventionally, an electronic blackboard device (hereinafter referred to as an interactive whiteboard: IWB) that displays written information as image data has been developed (see Patent Document 1). The IWB is configured as a so-called touch panel in which a display board and a pointing device are integrally configured and a signal corresponding to a touched position is output. The IWB acquires, for example, information written on a board document by using a dedicated pen or the like as image data by a function of the touch panel, and displays it on a display device constituting the board document.

電子化されていない従来のホワイトボードは、板書可能な領域が多くてもホワイトボードの表面および裏面の2面であり、板書できる情報の量が限られていた。これに対して、IWBは、板書可能領域を、システムの座標系における許容範囲を限度として設けることができ、従来のホワイトボードと比較して膨大な量の板書を行うことが可能である。また、IWBでは、板書された情報を記憶媒体に保存することができ、さらに、保存された板書情報を記憶媒体から読み出して板書面に再び表示させることが可能である。   Conventional whiteboards that are not digitized have two areas, the front and back surfaces of the whiteboard, even if there are many areas that can be written on, and the amount of information that can be written on the board is limited. On the other hand, the IWB can provide a board writing possible area with an allowable range in the coordinate system of the system as a limit, and can perform a huge amount of board writing as compared with a conventional white board. Further, in IWB, the information written on the board can be stored in a storage medium, and the stored board writing information can be read from the storage medium and displayed again on the board document.

このように、IWBは、電子化されていない従来のホワイトボードに対して高い利便性を得ることができる。   In this way, IWB can obtain a high degree of convenience over a conventional whiteboard that is not digitized.

ところで、例えば多人数が参加する会議などにホワイトボードを使用する場合において、各参加者がメモを記した付箋を板書面にそれぞれ貼付していきながら会議を進行するようなケースが多いと考えられる。付箋は、各参加者が手元でメモを記すことができ、また、板書面に対する貼付位置を任意に移動させることや、貼付した付箋を剥がすことも容易である。   By the way, for example, when using a whiteboard for a meeting where a large number of people participate, it is considered that there are many cases where each participant proceeds with the meeting while sticking a sticky note with a note on the board document. . The sticky note can be written by each participant at hand, and the sticking position with respect to the board document can be arbitrarily moved and the attached sticky note can be easily peeled off.

しかしながら、従来のIWBでは、このような付箋に相当する機能が実現されてはおらず、ホワイトボードとしての利便性に欠けるという問題点があった。   However, in the conventional IWB, the function corresponding to such a sticky note is not realized, and there is a problem that the convenience as a whiteboard is lacking.

本発明は、上記に鑑みてなされたものであって、より利便性の高いIWBを提供することを目的とする。   The present invention has been made in view of the above, and an object thereof is to provide a more convenient IWB.

上述した課題を解決し、目的を達成するために、本発明は、1以上の情報処理装置から構成される情報処理システムと、端末装置と、画像を表示する表示部を有する表示装置とを含む情報共有システムであって、表示装置は、ネットワーク上で自身を識別する識別情報を取得する第1の識別情報取得部と、表示部に対する画像の表示を制御する表示制御部とを備え、端末装置は、ユーザ操作により付箋情報を入力する入力部と、表示装置から識別情報を取得する第2の識別情報取得部と、付箋情報に第2の識別情報取得部により取得した識別情報を付加して情報処理システムに送信する送信部とを備え、情報処理システムは、端末装置から送信された識別情報に基づき表示装置とネットワークを介して通信を行い、識別情報に付加された付箋情報を識別情報で識別される表示装置に送信する通信制御部とを備え、表示制御部は、情報処理システムから送信された付箋情報を示すシンボルを表示部の第1の表示領域に表示させ、シンボルを指定するユーザ操作に応じてシンボルに対応する付箋情報を表示部の第2の表示領域に表示させることを特徴とする。   In order to solve the above-described problems and achieve the object, the present invention includes an information processing system including one or more information processing devices, a terminal device, and a display device having a display unit for displaying an image. A display device, which is an information sharing system, includes a first identification information acquisition unit that acquires identification information for identifying itself on a network, and a display control unit that controls display of an image on the display unit. Includes an input unit for inputting sticky note information by a user operation, a second identification information obtaining unit for obtaining identification information from the display device, and identification information obtained by the second identification information obtaining unit to the sticky note information. A transmission unit that transmits to the information processing system, and the information processing system communicates with the display device based on the identification information transmitted from the terminal device via the network, and is attached to the identification information. A communication control unit that transmits information to a display device identified by the identification information, and the display control unit displays a symbol indicating sticky note information transmitted from the information processing system in the first display area of the display unit, The sticky note information corresponding to the symbol is displayed in the second display area of the display unit in accordance with a user operation for designating the symbol.

本発明によればより利便性の高いIWBを提供することが可能となるという効果を奏する。   According to the present invention, it is possible to provide a more convenient IWB.

図1は、第1の実施形態に係るIWBの表示部に表示される初期表示画面の例を示す図である。FIG. 1 is a diagram illustrating an example of an initial display screen displayed on the display unit of the IWB according to the first embodiment. 図2は、アイコン画像を選択して表示領域に対して文字列によるオブジェクトを描画した例を示す図である。FIG. 2 is a diagram illustrating an example in which an icon image is selected and an object using a character string is drawn in the display area. 図3は、第1の実施形態に適用可能な表示領域の座標系の例を示す図である。FIG. 3 is a diagram illustrating an example of a coordinate system of a display area applicable to the first embodiment. 図4は、第1の実施形態に係る、定義領域に対して多数のオブジェクトが描画されている例を示す図である。FIG. 4 is a diagram illustrating an example in which a large number of objects are drawn in the definition area according to the first embodiment. 図5は、第1の実施形態に適用可能なIWBの一例の機能を示す機能ブロック図である。FIG. 5 is a functional block diagram showing functions of an example of IWB applicable to the first embodiment. 図6は、第1の実施形態に係るIWB1の一例の構成を示すブロック図である。FIG. 6 is a block diagram illustrating a configuration example of the IWB 1 according to the first embodiment. 図7は、第1の実施形態に係る、スタンプを選択して描画領域の所望の位置に表示させる処理の例を示すフローチャートである。FIG. 7 is a flowchart showing an example of processing for selecting a stamp and displaying it at a desired position in the drawing area according to the first embodiment. 図8は、第1の実施形態に係る、スタンプの選択、位置指定および表示について説明するための図である。FIG. 8 is a diagram for explaining stamp selection, position designation, and display according to the first embodiment. 図9は、第1の実施形態に係るスタンプリストの例を示す図である。FIG. 9 is a diagram illustrating an example of a stamp list according to the first embodiment. 図10は、ツールバー上のスタンプをドラッグ&ドロップ操作で所望の位置まで移動させて表示位置を設定する例を説明するための図である。FIG. 10 is a diagram for explaining an example in which the display position is set by moving the stamp on the toolbar to a desired position by a drag and drop operation. 図11は、定義領域に対して複数のオブジェクトがそれぞれ任意の位置に描画されている例を示す図である。FIG. 11 is a diagram illustrating an example in which a plurality of objects are respectively drawn at arbitrary positions with respect to the definition area. 図12は、第1の実施形態に係るスタンプマップ表示処理示す一例のフローチャートである。FIG. 12 is a flowchart illustrating an example of stamp map display processing according to the first embodiment. 図13は、第1の実施形態に係る、スタンプ座標に基づき表示領域を決定する処理を説明するための図である。FIG. 13 is a diagram for explaining processing for determining a display area based on stamp coordinates according to the first embodiment. 図14は、第1の実施形態に係る、スタンプ座標に対するピン画像の表示について説明するための図である。FIG. 14 is a diagram for explaining display of a pin image with respect to stamp coordinates according to the first embodiment. 図15は、第1の実施形態に係る、ピン画像が指定された際の表示について説明するための図である。FIG. 15 is a diagram for explaining a display when a pin image is designated according to the first embodiment. 図16は、第2の実施形態に係る情報共有システムの一例の構成を示すブロック図である。FIG. 16 is a block diagram illustrating an exemplary configuration of an information sharing system according to the second embodiment. 図17は、第2の実施形態に係るIWBの機能を説明するための機能ブロック図である。FIG. 17 is a functional block diagram for explaining the functions of the IWB according to the second embodiment. 図18は、第2の実施形態に適用可能な端末装置の機能を説明するための機能ブロック図である。FIG. 18 is a functional block diagram for explaining functions of a terminal device applicable to the second embodiment. 図19は、第2の実施形態に係る端末装置の一例の構成を示すブロック図である。FIG. 19 is a block diagram illustrating a configuration of an example of a terminal device according to the second embodiment. 図20は、第2の実施形態に係るサーバの機能を説明するための機能ブロック図である。FIG. 20 is a functional block diagram for explaining functions of the server according to the second embodiment. 図21は、第2の実施形態に係るサーバの一例の構成を示すブロック図である。FIG. 21 is a block diagram illustrating a configuration of an example of a server according to the second embodiment. 図22は、第2の実施形態に係る情報共有システムの動作の例を示すシーケンスチャートである。FIG. 22 is a sequence chart illustrating an example of the operation of the information sharing system according to the second embodiment. 図23は、第2の実施形態に係るIWBおよび端末装置における画面の例を示す図である。FIG. 23 is a diagram illustrating an example of a screen in the IWB and the terminal device according to the second embodiment. 図24は、第2の実施形態に係るIWBおよび端末装置における画面の例を示す図である。FIG. 24 is a diagram illustrating an example of a screen in the IWB and the terminal device according to the second embodiment. 図25は、第2の実施形態に係るIWBおよび端末装置における画面の例を示す図である。FIG. 25 is a diagram illustrating an example of a screen in the IWB and the terminal device according to the second embodiment. 図26は、ツールバー上のアイコン画像をドラッグ&ドロップ操作で所望の位置まで移動させて表示位置を設定する例を説明するための図である。FIG. 26 is a diagram for explaining an example of setting a display position by moving an icon image on a toolbar to a desired position by a drag and drop operation.

以下に添付図面を参照して、情報共有システムおよび情報共有方法、ならびに、情報処理装置および情報処理方法の実施形態を詳細に説明する。   Exemplary embodiments of an information sharing system, an information sharing method, an information processing apparatus, and an information processing method will be described below in detail with reference to the accompanying drawings.

(第1の実施形態)
第1の実施形態について説明する。第1の実施形態は、電子黒板装置(以下、インタラクティブホワイトボード:IWBと呼ぶ)の表示において、IWBに描画された内容に対応して表示させるためのアイコン画像の表示制御方法に係る。
(First embodiment)
A first embodiment will be described. The first embodiment relates to a display control method of icon images for display corresponding to the contents drawn on the IWB in the display of the electronic blackboard device (hereinafter referred to as interactive whiteboard: IWB).

なお、IWBは、表示部を構成する表示デバイスとして例えばLCD(Liquid Crystal Display)を用い、接触された位置に応じた信号を出力する入力デバイスが表示部と一体的に構成されたタッチパネル構造を有する。すなわち、ユーザは、例えば表示部の表示に従いIWBの表示面を接触(タップ)することで、タップした位置に応じた処理をIWBに実行させることが可能となっている。   The IWB has a touch panel structure in which, for example, an LCD (Liquid Crystal Display) is used as a display device constituting the display unit, and an input device that outputs a signal corresponding to the touched position is integrally formed with the display unit. . That is, for example, the user can cause the IWB to execute processing corresponding to the tapped position by touching (tapping) the display surface of the IWB according to the display on the display unit.

(第1の実施形態に係るスタンプ表示について)
図1は、第1の実施形態に係るIWBの表示部に表示される初期表示画面の例を示す。図1において、IWBの表示部における表示領域10の上部が描画領域11とされ、下部が各種アイコンが表示されるツールバー12とされている。ツールバー12は、描画領域11に対する処理を選択するためのシンボルとしてのアイコン画像20、21、22a〜22dおよび23が表示されている。
(About the stamp display according to the first embodiment)
FIG. 1 shows an example of an initial display screen displayed on the display unit of the IWB according to the first embodiment. In FIG. 1, the upper part of the display area 10 in the display part of the IWB is a drawing area 11 and the lower part is a toolbar 12 on which various icons are displayed. The toolbar 12 displays icon images 20, 21, 22 a to 22 d and 23 as symbols for selecting processing for the drawing area 11.

ツールバー12に表示される各アイコン画像のうち、アイコン画像20は、描画領域11に対して描画を行う際に選択する。例えば、ユーザは、アイコン画像20をタップして選択した後に描画領域11内を手指などでなぞることで、なぞった軌跡に従った画像を描画することができる。図2は、このようにして、アイコン画像20を選択して、描画領域11に対して画像を描画し、文字列によるオブジェクト30を形成した例を示す。   Of the icon images displayed on the toolbar 12, the icon image 20 is selected when drawing on the drawing area 11. For example, the user can draw an image according to the traced trajectory by tapping and selecting the icon image 20 and tracing the inside of the drawing area 11 with a finger or the like. FIG. 2 shows an example in which the icon image 20 is selected and an image is drawn in the drawing area 11 to form an object 30 using a character string.

アイコン画像21は、描画領域11に描画された画像の一部を消去する際に選択する。例えば、アイコン画像21をタップして選択した後に、上述のオブジェクト30上を手指などでなぞることで、なぞった軌跡に沿ってオブジェクト30の部分が消去される。   The icon image 21 is selected when a part of the image drawn in the drawing area 11 is deleted. For example, after tapping and selecting the icon image 21, the object 30 is erased along the traced path by tracing the object 30 with a finger or the like.

画像は、例えば、描画領域11に定義される座標系を用いたSVG(Scalable Vector Graphics)形式で記述される。これに限らず、ビットマップを用いて画像を表現してもよい。   The image is described in, for example, an SVG (Scalable Vector Graphics) format using a coordinate system defined in the drawing area 11. However, the present invention is not limited to this, and an image may be expressed using a bitmap.

アイコン画像22a〜22dは、描画領域11に対して描画された内容に対してマーカを設定する。マーカには、所定の意味を持つ画像を用いることができる。ユーザは、例えばアイコン画像22a〜22dのうち所望のアイコン画像(例えばアイコン画像22aとする)をタップし、さらに、描画領域11内の所望の位置をタップすることで、描画領域11内のタップした位置にアイコン画像22aを表示させることができる。IWBは、この、アイコン画像22aを表示させるためにタップした位置を示す位置情報と、当該アイコン画像22aの種類を示す情報とを関連付けてメモリに記憶する。   The icon images 22 a to 22 d set markers for the contents drawn in the drawing area 11. An image having a predetermined meaning can be used as the marker. For example, the user taps a desired icon image (for example, the icon image 22a) among the icon images 22a to 22d, and taps a desired position in the drawing area 11, thereby tapping in the drawing area 11. The icon image 22a can be displayed at the position. The IWB stores the position information indicating the position tapped for displaying the icon image 22a and the information indicating the type of the icon image 22a in the memory in association with each other.

図1の例では、アイコン画像22aは、「決定」を示す文字「決」が表示され、アイコン画像22bは、「未決」を示す文字「未」が表示されている。また、アイコン画像22cは、チェック項目を示し、チェックボックスが表示される。例えば、ツールバー12から選択され描画領域11に表示された、描画領域11上の当該アイコン画像22cをタップすることで、当該アイコン画像22cにおけるチェックマークの表示および非表示が切り替えられる。また、アイコン画像22dは、例えば注目すべき項目であることを示すために用いることができる。以下、特に記載の無い限り、これらアイコン画像22a〜22dを、スタンプ22a〜22dと呼ぶ。   In the example of FIG. 1, the icon image 22a displays the character “decision” indicating “determined”, and the icon image 22b displays the character “undecided” indicating “undecided”. The icon image 22c indicates a check item, and a check box is displayed. For example, by tapping the icon image 22c on the drawing area 11 selected from the toolbar 12 and displayed in the drawing area 11, display and non-display of the check mark in the icon image 22c are switched. Further, the icon image 22d can be used, for example, to indicate that the item is a notable item. Hereinafter, unless otherwise specified, these icon images 22a to 22d are referred to as stamps 22a to 22d.

アイコン画像23は、描画領域11の表示をスタンプマップ表示に切り替える。スタンプマップ表示については、後述する。   The icon image 23 switches the display of the drawing area 11 to the stamp map display. The stamp map display will be described later.

図3は、第1の実施形態に適用可能な描画領域11の座標系の例を示す。IWBは、描画可能な第1の領域として、例えばIWBの機能を実現するシステムが定義可能な最大サイズの領域を定義することができる。図3において、この最大サイズの領域に従った第1の領域である定義領域13が、座標(0,0)−座標(xmax,ymax)を対角とする矩形領域として示されている。 FIG. 3 shows an example of the coordinate system of the drawing area 11 applicable to the first embodiment. The IWB can define, for example, a maximum size area that can be defined by a system that realizes the function of the IWB, as the first area that can be drawn. In FIG. 3, the definition area 13, which is the first area according to the area of the maximum size, is shown as a rectangular area whose coordinates are (0,0) −coordinates (x max , y max ). .

図3において、第2の領域としての窓領域14は、定義領域13に含まれ、且つ、定義領域13よりもサイズが小さい領域として定義される領域である。図3の例では、座標(x0,y0)を基点とする位置に、窓領域14が定義されている様子を示す。すなわち、窓領域14は、定義領域13内の窓として定義され、定義領域13の全体の画像から、所定の座標(x0,y0)を基点として、窓領域14に指定されたサイズの矩形画像が切り出される。 In FIG. 3, the window area 14 as the second area is an area that is included in the definition area 13 and is defined as an area that is smaller in size than the definition area 13. In the example of FIG. 3, the window region 14 is defined at a position with the coordinates (x 0 , y 0 ) as a base point. That is, the window area 14 is defined as a window in the definition area 13, and is a rectangle having a size specified in the window area 14 from the entire image of the definition area 13 with a predetermined coordinate (x 0 , y 0 ) as a base point. The image is cut out.

描画領域11は、この窓領域14内の矩形画像を、描画領域11のサイズに合わせて変更した画像が表示される。例えば、描画領域11が800画素×600画素の固定サイズであり、窓領域14が1200画素×900画素である場合、窓領域14の画像を水平および垂直方向それぞれについて2/3倍の表示倍率で縮小することでサイズ変更した画像が描画領域11に表示される。なお、表示倍率は、元の画像を拡大する場合には1より大きく、縮小する場合には1未満となる値である。   In the drawing area 11, an image obtained by changing the rectangular image in the window area 14 according to the size of the drawing area 11 is displayed. For example, when the drawing area 11 has a fixed size of 800 pixels × 600 pixels and the window area 14 has 1200 pixels × 900 pixels, the image of the window area 14 is displayed at a display magnification of 2/3 times in the horizontal and vertical directions. An image whose size has been changed by reduction is displayed in the drawing area 11. The display magnification is a value that is greater than 1 when the original image is enlarged and less than 1 when the original image is reduced.

また、窓領域14は、定義領域13の範囲内で移動させることができる。例えば、IWBにおいて、描画領域11内の任意の位置を手指などで接触したまま当該手指を移動させるドラッグ操作を行うことで、窓領域14の定義領域13内での位置が、ドラッグ操作による手指の移動方向とは逆方向に移動される。   The window area 14 can be moved within the range of the definition area 13. For example, in IWB, by performing a drag operation that moves a finger while touching an arbitrary position in the drawing area 11 with a finger or the like, the position in the definition area 13 of the window area 14 is changed to the position of the finger by the drag operation. It is moved in the direction opposite to the moving direction.

図4は、定義領域13に対して多数のオブジェクト30、301、302、303、…、30m、…、30nが描画されている例を示す。図4の例では、描画領域11にはオブジェクト30のみが表示され、定義領域13内の描画領域11に対応する領域外に、さらにオブジェクト301、302、303、…、30m、…、30nが描画されており、描画領域11に対して上述のドラッグ操作を行うことで、描画領域11内の表示がスクロールされ、これらオブジェクト301、302、303、…、30m、…、30nが描画領域11内に表示されるようになる。 4, a number of objects 30, 30 1, 30 2, 30 3 for the definition region 13, ..., shown 30 m, ..., an example in which 30 n are drawn. In the example of FIG. 4, only the object 30 is displayed in the drawing area 11, and objects 30 1 , 30 2 , 30 3 ,..., 30 m , ... are outside the area corresponding to the drawing area 11 in the definition area 13. , 30 n are drawn, and the display in the drawing area 11 is scrolled by performing the above-described drag operation on the drawing area 11, and these objects 30 1 , 30 2 , 30 3 ,. .., 30 n are displayed in the drawing area 11.

図5は、第1の実施形態に適用可能なIWBの一例の機能を示す機能ブロック図である。図5において、IWB100aは、入力処理部110と、表示制御部111と、制御部112と、画像処理部113と、アイコン記憶部114と、表示情報記憶部115とを有する。   FIG. 5 is a functional block diagram showing functions of an example of IWB applicable to the first embodiment. In FIG. 5, the IWB 100 a includes an input processing unit 110, a display control unit 111, a control unit 112, an image processing unit 113, an icon storage unit 114, and a display information storage unit 115.

これら入力処理部110、表示制御部111、制御部112、画像処理部113、アイコン記憶部114および表示情報記憶部115は、CPU(Central Processing Unit)上で動作するプログラムにより実現される。これに限らず、これら入力処理部110、表示制御部111、制御部112、画像処理部113、アイコン記憶部114および表示情報記憶部115のうち一部または全部を、互いに協働して動作するハードウェアにより構成してもよい。   These input processing unit 110, display control unit 111, control unit 112, image processing unit 113, icon storage unit 114, and display information storage unit 115 are realized by a program operating on a CPU (Central Processing Unit). Not limited to this, some or all of these input processing unit 110, display control unit 111, control unit 112, image processing unit 113, icon storage unit 114, and display information storage unit 115 operate in cooperation with each other. You may comprise by hardware.

入力処理部110は、IWB100aのタッチパネルによる入力部に対してなされるユーザ操作に対する処理を行う。例えば、入力処理部110は、入力部に対して接触された位置の検知や、同時に複数位置に対する接触がなされたか否かの検知、また、接触位置の時系列的な変化(接触位置の移動)の有無および移動方向の判定などを行う。また、入力処理部110は、各アイコン画像20、21および23、ならびに、スタンプ22a〜22dに対するユーザ操作が行われたか否かの判定も行う。   The input processing unit 110 performs a process for a user operation performed on the input unit using the touch panel of the IWB 100a. For example, the input processing unit 110 detects the position touched to the input unit, detects whether or not a plurality of positions are touched at the same time, and changes the contact position in time series (movement of the contact position). The presence / absence and direction of movement are determined. The input processing unit 110 also determines whether or not a user operation has been performed on the icon images 20, 21, and 23 and the stamps 22a to 22d.

表示制御部111は、IWB100aの表示部に対する表示を制御する。例えば、表示制御部111は、表示領域10に対する描画領域11およびツールバー12の領域設定や、各アイコン画像20、21および23、ならびに、スタンプ22a〜22dのツールバー12および描画領域11に対する表示を制御する。また、表示制御部111は、後述する画像処理部113で生成されたSVGデータに基づきビットマップ画像を生成し、描画領域11に表示させる。さらに、表示制御部111は、上述した、窓領域14内の画像のサイズを、描画領域11のサイズに合わせて変更する処理を行う。   The display control unit 111 controls display on the display unit of the IWB 100a. For example, the display control unit 111 controls the setting of the drawing area 11 and the toolbar 12 for the display area 10, and the display of the icon images 20, 21, and 23 and the stamps 22a to 22d on the toolbar 12 and the drawing area 11. . Further, the display control unit 111 generates a bitmap image based on the SVG data generated by the image processing unit 113 described later, and displays the bitmap image in the drawing area 11. Further, the display control unit 111 performs the above-described process of changing the size of the image in the window region 14 according to the size of the drawing region 11.

制御部112は、このIWB100aの全体の動作を制御する。画像処理部113は、入力処理部110の判定結果に基づき描画領域11になされた描画を検出し、検出された描画に従いSVGデータを生成する。このとき、画像処理部113は、描画によるSVGデータを、定義領域13の座標系に従い生成する。   The control unit 112 controls the overall operation of the IWB 100a. The image processing unit 113 detects a drawing made in the drawing area 11 based on the determination result of the input processing unit 110, and generates SVG data according to the detected drawing. At this time, the image processing unit 113 generates SVG data by drawing according to the coordinate system of the definition area 13.

アイコン記憶部114は、各アイコン画像20、21および23、ならびに、スタンプ22a〜22dを予め記憶する。なお、これら各アイコン画像20、21および23、ならびに、スタンプ22a〜22dは、例えば、SVGデータとしてアイコン記憶部114により記憶される。   The icon storage unit 114 stores the icon images 20, 21, and 23 and the stamps 22a to 22d in advance. Note that the icon images 20, 21, and 23 and the stamps 22a to 22d are stored by the icon storage unit 114 as SVG data, for example.

表示情報記憶部115は、表示情報として画像処理部113で生成されたSVGデータを記憶する。また、表示情報記憶部115は、表示情報として描画領域11に表示された各スタンプ22a〜22dのSVGデータを記憶する。この各スタンプ22a〜22dのSVGデータは、上述した描画によるSVGデータと同様に、定義領域13における座標系に従い記憶される。   The display information storage unit 115 stores the SVG data generated by the image processing unit 113 as display information. The display information storage unit 115 stores SVG data of the stamps 22a to 22d displayed in the drawing area 11 as display information. The SVG data of each of the stamps 22a to 22d is stored in accordance with the coordinate system in the definition area 13, similarly to the SVG data by drawing described above.

図6は、第1の実施形態に係るIWB100aの一例の構成を示す。図6において、IWB100aは、CPU121と、ROM(Read Only Memory)122と、RAM(Random Access Memory)123と、表示部124と、入力部125と、ストレージ127と、データI/F128と、通信I/F129とを有し、これら各部がバス120により互いに通信可能に接続されている。このように、IWB100aは、一般的なコンピュータと同等の構成を有する。   FIG. 6 shows an exemplary configuration of the IWB 100a according to the first embodiment. In FIG. 6, an IWB 100a includes a CPU 121, a ROM (Read Only Memory) 122, a RAM (Random Access Memory) 123, a display unit 124, an input unit 125, a storage 127, a data I / F 128, and a communication I. / F129, and these components are connected to each other via a bus 120 so as to communicate with each other. Thus, the IWB 100a has a configuration equivalent to that of a general computer.

なお、第1の実施形態においては、データI/F128および通信I/F129は、省略することができる。また、IWB100aで動作するプログラムなどをROM122に予め記憶させておくことで、ストレージ127も省略可能である。   In the first embodiment, the data I / F 128 and the communication I / F 129 can be omitted. In addition, the storage 127 can be omitted by storing a program or the like operating in the IWB 100a in the ROM 122 in advance.

図6において、ストレージ127は、不揮発性の半導体メモリ(フラッシュメモリ)やハードディスクドライブであり、第1の実施形態に適用可能な情報処理プログラムが予め記憶される。この情報処理プログラムは、ROM122に予め記憶させておいてもよい。CPU121は、ROM127またはストレージ127に予め記憶されるプログラムに従い、RAM123をワークメモリとして用いて、このIWB100aの第1の実施形態に係る動作を制御する。   In FIG. 6, a storage 127 is a nonvolatile semiconductor memory (flash memory) or a hard disk drive, and stores an information processing program applicable to the first embodiment in advance. This information processing program may be stored in the ROM 122 in advance. The CPU 121 controls the operation according to the first embodiment of the IWB 100a using the RAM 123 as a work memory in accordance with a program stored in advance in the ROM 127 or the storage 127.

上述した表示情報記憶部115は、表示情報をRAM123に記憶させることができる。また、表示情報記憶部115は、表示情報をストレージ127に記憶させてもよい。この場合、表示情報は、ストレージ127に不揮発に記憶され、再びストレージ127から読み出して利用することが可能になる。   The display information storage unit 115 described above can store display information in the RAM 123. Further, the display information storage unit 115 may store the display information in the storage 127. In this case, the display information is stored in the storage 127 in a nonvolatile manner, and can be read out from the storage 127 and used again.

表示部124は、例えば表示デバイスとしてのLCDと、表示デバイスを駆動する駆動回路とを含み、CPU121によりプログラムに基づき生成された表示制御信号に従った画像を表示デバイスに表示させる。入力部125は、表示部124の表示面と対応するセンサを備え、接触を検出した位置に応じた制御信号を出力する。これら表示部124と入力部125とが一体的に構成されて、タッチパネル126が形成される。   The display unit 124 includes, for example, an LCD as a display device and a drive circuit that drives the display device, and causes the display device to display an image according to a display control signal generated by the CPU 121 based on a program. The input unit 125 includes a sensor corresponding to the display surface of the display unit 124, and outputs a control signal corresponding to the position where contact is detected. The display unit 124 and the input unit 125 are integrally configured to form the touch panel 126.

データI/F128は、外部機器との間のデータ通信を制御する。データI/F128は、例えばUSB(Universal Serial Bus)インターフェイスを適用することができる。通信I/F129は、ネットワークを介した通信を制御する。   The data I / F 128 controls data communication with an external device. For example, a USB (Universal Serial Bus) interface can be applied to the data I / F 128. The communication I / F 129 controls communication via the network.

上述した入力処理部110、表示制御部111、制御部112、画像処理部113、アイコン記憶部114および表示情報記憶部115は、CPU121上で動作する情報処理プログラムによって実現される。情報処理プログラムは、ROM122やストレージ127に予め記憶させて提供される。これに限らず、情報処理プログラムを、ネットワークに接続されたコンピュータ上に格納し、通信I/F129によりネットワーク経由でダウンロードさせることにより提供するように構成することができる。また、情報処理プログラムを、ネットワーク経由で提供または配布するように構成してもよい。   The input processing unit 110, the display control unit 111, the control unit 112, the image processing unit 113, the icon storage unit 114, and the display information storage unit 115 described above are realized by an information processing program that operates on the CPU 121. The information processing program is provided by being stored in advance in the ROM 122 or the storage 127. However, the present invention is not limited thereto, and the information processing program can be provided by being stored on a computer connected to a network and downloaded via the network by the communication I / F 129. Further, the information processing program may be configured to be provided or distributed via a network.

これに限らず、情報処理プログラムは、インストール可能な形式または実行可能な形式のファイルでCD(Compact Disk)、DVD(Digital Versatile Disk)などのコンピュータで読み取り可能な記録媒体に記録して提供してもよい。この場合、記録媒体に記録された情報処理プログラムは、例えばデータI/F128に接続された外部のドライブ装置を介してIWB100aに供給される。これに限らず、記録媒体に記録された情報処理プログラムを、パーソナルコンピュータなど他の情報処理装置上に一旦記憶させ、この他の情報処理装置から通信I/F129やデータI/F128を介した通信により、IWB100aに供給してもよい。   The information processing program is not limited to this, and is provided by recording it in a computer-readable recording medium such as a CD (Compact Disk) or a DVD (Digital Versatile Disk) in a file that can be installed or executed. Also good. In this case, the information processing program recorded on the recording medium is supplied to the IWB 100a via an external drive device connected to the data I / F 128, for example. Not limited to this, the information processing program recorded in the recording medium is temporarily stored on another information processing apparatus such as a personal computer, and communication is performed from the other information processing apparatus via the communication I / F 129 or the data I / F 128. May be supplied to the IWB 100a.

情報処理プログラムは、例えば、上述した各部(入力処理部110、表示制御部111、制御部112、画像処理部113、アイコン記憶部114および表示情報記憶部115)を含むモジュール構成となっており、実際のハードウェアとしてはCPU121が例えばストレージ127やROM122から情報処理プログラムを読み出して実行することにより上記各部が主記憶装置(例えばRAM123)上にロードされ、各部が主記憶装置上に生成されるようになっている。   The information processing program has a module configuration including, for example, the above-described units (input processing unit 110, display control unit 111, control unit 112, image processing unit 113, icon storage unit 114, and display information storage unit 115). As actual hardware, the CPU 121 reads out and executes an information processing program from, for example, the storage 127 or the ROM 122, so that the above-described units are loaded on the main storage device (for example, the RAM 123), and the respective units are generated on the main storage device. It has become.

次に、第1の実施形態に係るIWB100aの動作について、図7〜図10を用いてより詳細に説明する。図7は、スタンプ22a〜22dから1のスタンプを選択して描画領域11の所望の位置に表示させる処理の例を示すフローチャートである。   Next, the operation of the IWB 100a according to the first embodiment will be described in more detail with reference to FIGS. FIG. 7 is a flowchart showing an example of processing for selecting one stamp from the stamps 22 a to 22 d and displaying it at a desired position in the drawing area 11.

図7において、IWB100aは、ステップS10で、ツールバー12に表示されるスタンプ22a〜22dのうち何れかが選択されたか否かを判定する。IWB100aは、入力処理部110の検知結果に基づき、スタンプ22a〜22dの何れの位置にも接触が検知されず、スタンプ22a〜22dが何れも選択されていないと判定した場合、処理をステップS10に戻す。   In FIG. 7, the IWB 100a determines whether or not any of the stamps 22a to 22d displayed on the toolbar 12 has been selected in step S10. If the IWB 100a determines that no contact is detected at any position of the stamps 22a to 22d and none of the stamps 22a to 22d is selected based on the detection result of the input processing unit 110, the process proceeds to step S10. return.

IWB100aは、スタンプ22a〜22dの何れかがユーザによりタップされ、スタンプが選択されたと判定した場合、処理をステップS11に移行する。ここでは、スタンプ22a〜22dのうちスタンプ22aが選択されたものとする。IWB100aは、ステップS11で、ステップS10で選択されたスタンプ22aを表示させる位置が指定されたか否かを判定する。   If the IWB 100a determines that any of the stamps 22a to 22d has been tapped by the user and the stamp has been selected, the process proceeds to step S11. Here, it is assumed that the stamp 22a is selected from the stamps 22a to 22d. In step S11, the IWB 100a determines whether or not the position for displaying the stamp 22a selected in step S10 is designated.

図8(a)を用いて、スタンプ22aの選択および位置指定について説明する。図8(a)において、ユーザがスタンプ22aをタップしてスタンプ22aを選択する(ステップS10)。次に、ユーザは、選択したスタンプ22aを表示させる位置として、描画領域11内の任意の位置をタップする。図8(a)の例では、複数行の文字列からなるオブジェクト30の上から2行目の先頭の位置40がタップされている。   The selection and position designation of the stamp 22a will be described with reference to FIG. In FIG. 8A, the user taps the stamp 22a to select the stamp 22a (step S10). Next, the user taps an arbitrary position in the drawing area 11 as a position for displaying the selected stamp 22a. In the example of FIG. 8A, the top position 40 in the second line from the top of the object 30 composed of a plurality of lines of character strings is tapped.

IWB100aは、次のステップS12で、入力処理部110の検知結果に基づき、ステップS11で指定されたスタンプ22aの表示位置の座標を取得する。例えば、IWB100aは、入力処理部110の検知結果に従い描画領域11上(表示領域10上)での座標を取得し、この座標を定義領域13の座標に変換する。次のステップS13で、IWB100aは、表示制御部111の制御により、ステップS12で取得された描画領域11の座標に従い、スタンプ22aを表示させる。   In the next step S12, the IWB 100a acquires the coordinates of the display position of the stamp 22a designated in step S11 based on the detection result of the input processing unit 110. For example, the IWB 100 a acquires the coordinates on the drawing area 11 (on the display area 10) according to the detection result of the input processing unit 110, and converts the coordinates into the coordinates of the definition area 13. In the next step S13, the IWB 100a displays the stamp 22a according to the coordinates of the drawing area 11 acquired in step S12 under the control of the display control unit 111.

図8(b)は、図8(a)で指定された位置40に対してスタンプ22a’が表示された例を示す。図8(b)の例では、「決定」を示すスタンプ22a’がオブジェクト30の上から2行目に表示される。これにより、例えば、当該行の項目が決定済みの事項であることを示すことができる。   FIG. 8B shows an example in which the stamp 22a ′ is displayed at the position 40 designated in FIG. In the example of FIG. 8B, a stamp 22 a ′ indicating “determine” is displayed on the second line from the top of the object 30. Thereby, for example, it can be shown that the item in the row is a decided matter.

次のステップS14で、IWB100aは、ステップS13で描画領域11に表示されたスタンプ22a’の情報を、スタンプ情報としてスタンプリストに追加して保存する。スタンプリストは、例えば表示情報記憶部115により記憶されて保存される。   In the next step S14, the IWB 100a adds the information of the stamp 22a 'displayed in the drawing area 11 in step S13 to the stamp list and stores it as stamp information. The stamp list is stored and saved by the display information storage unit 115, for example.

図9は、第1の実施形態に係るスタンプリストの例を示す。スタンプリストは、図9に例示されるように、スタンプ22a〜22dの種類を示す情報と、各スタンプ22a〜22dが表示される位置を示す定義領域13における座標とが関連付けられたスタンプ情報を含んで構成される。   FIG. 9 shows an example of a stamp list according to the first embodiment. As illustrated in FIG. 9, the stamp list includes stamp information in which information indicating the type of the stamps 22 a to 22 d and the coordinates in the definition area 13 indicating the positions where the stamps 22 a to 22 d are displayed are associated with each other. Consists of.

なお、上述では、所望のスタンプ22aをタップし、次に当該スタンプ22aを表示させたい位置40をタップすることで、位置40に対してスタンプ22aを表示させているが、これはこの例に限定されない。例えば、図10に経路41で例示されるように、ツールバー12上のスタンプ22aをドラッグ&ドロップ操作で所望の位置まで移動させることで、スタンプ22aの表示位置を設定してもよい。なお、この場合、ツールバー12上のスタンプ22aは、ドラッグ&ドロップ操作後は、ツールバー12上の元の位置に残る。   In the above description, the stamp 22a is displayed at the position 40 by tapping the desired stamp 22a and then tapping the position 40 where the stamp 22a is to be displayed. However, this is limited to this example. Not. For example, as illustrated by a path 41 in FIG. 10, the display position of the stamp 22a may be set by moving the stamp 22a on the toolbar 12 to a desired position by a drag and drop operation. In this case, the stamp 22a on the toolbar 12 remains at the original position on the toolbar 12 after the drag and drop operation.

(第1の実施形態に係るスタンプマップについて)
第1の実施形態では、定義領域13内に指定された全てのスタンプ位置を1の表示領域内に表示させた画像である、スタンプマップを生成することができる。このスタンプマップを用いることで、定義領域13内に多数のオブジェクト300〜30nが表示され、さらに、各オブジェクト300〜30nに対して適宜、スタンプが表示されている場合でも、所望の情報を素早く見つけ出すことが可能になる。
(About the stamp map according to the first embodiment)
In the first embodiment, it is possible to generate a stamp map that is an image in which all the stamp positions designated in the definition area 13 are displayed in one display area. By using this stamp map, a large number of objects 30 0 to 30 n are displayed in the definition area 13, and a desired stamp is displayed even when a stamp is appropriately displayed for each object 30 0 to 30 n . It becomes possible to find information quickly.

図11〜図14を用いて、第1の実施形態に係るスタンプマップの表示方法について説明する。ここでは、図11に例示されるように、定義領域13に対して複数のオブジェクト30、ならびに、オブジェクト301、302、303、…、30m、…、30nがそれぞれ任意の位置に描画されているものとする。その上で、オブジェクト30の近傍にスタンプ22a’の位置が、オブジェクト301の近傍にスタンプ22c’の位置が、オブジェクト302の近傍にスタンプ22d’の位置が、オブジェクト303の近傍にスタンプ22a’の位置が、オブジェクト30mの近傍にスタンプ22b’の位置が、それぞれ指定されているものとする。 A stamp map display method according to the first embodiment will be described with reference to FIGS. Here, as illustrated in FIG. 11, a plurality of objects 30 to the defining area 13, as well as object 30 1, 30 2, 30 3 , ..., 30 m, ..., 30 n is the arbitrary position, respectively Assume that it is drawn. On top of that, the stamp 22a in the vicinity of the object 30 'position of the stamp 22c in the vicinity of the object 30 1' position of, the position of the stamp 22 d 'in the vicinity of the object 30 2, the stamp in the vicinity of the object 30 3 22a 'position of the stamp 22b in the vicinity of the object 30 m' position of, assumed to be designated, respectively.

図11において、図8(b)と同様に、点線で囲まれた領域が描画領域11内に表示されているものとする。このような場合、定義領域13の画像を、各スタンプ22a’〜22d’が全て描画領域11内に含まれるサイズに縮小して描画領域11内に表示させることで、ユーザは、どのオブジェクトに注目すべきかを容易に判断できることが期待される。   In FIG. 11, similarly to FIG. 8B, it is assumed that an area surrounded by a dotted line is displayed in the drawing area 11. In such a case, the image of the definition area 13 is displayed in the drawing area 11 by reducing the size of each of the stamps 22 a ′ to 22 d ′ to the size included in the drawing area 11. It is expected to be able to easily determine what should be done.

ここで、各スタンプ22a’〜22d’が定義領域13内に広範に配置されている場合について考える。この場合、定義領域13内の画像を縮小する際の表示倍率が非常に小さくなり、それに伴い、各スタンプ22a’〜22d’が、種類を目視で判別することが困難になるサイズに縮小されてしまうおそれがある。   Here, consider a case where the stamps 22 a ′ to 22 d ′ are widely arranged in the definition area 13. In this case, the display magnification when the image in the definition area 13 is reduced becomes very small, and accordingly, each of the stamps 22a ′ to 22d ′ is reduced to a size that makes it difficult to visually determine the type. There is a risk that.

そのため、第1の実施形態では、定義領域13内の画像が小さな表示倍率で縮小された場合に、各スタンプ22a’〜22d’を別の画像と置き換えたスタンプマップを形成する。これにより、各スタンプ22a’〜22d’が示す情報の目視による判別を容易としている。   Therefore, in the first embodiment, when the image in the definition area 13 is reduced at a small display magnification, a stamp map is formed by replacing each stamp 22a 'to 22d' with another image. This facilitates visual discrimination of information indicated by the stamps 22a 'to 22d'.

図12は、第1の実施形態に係るスタンプマップ表示処理示す一例のフローチャートである。IWB100aは、ステップS20で、スタンプマップ表示が指示されたか否かを判定する。図8(b)を参照し、IWB100aは、入力処理部110の検知結果に基づき、ツールバー12に表示される、スタンプマップ表示を指示するアイコン画像23が指定されたか否かを判定する。IWB100aは、スタンプマップ表示が指定されていないと判定した場合、処理をステップS20に戻す。また、IWB100aは、ステップS20でアイコン画像23が指定されたと判定した場合、処理をステップS21に移行させる。   FIG. 12 is a flowchart illustrating an example of stamp map display processing according to the first embodiment. In step S20, the IWB 100a determines whether or not a stamp map display is instructed. With reference to FIG. 8B, the IWB 100 a determines whether or not the icon image 23 indicating the stamp map display displayed on the toolbar 12 is designated based on the detection result of the input processing unit 110. If the IWB 100a determines that the stamp map display is not designated, the process returns to step S20. If the IWB 100a determines that the icon image 23 has been designated in step S20, the process proceeds to step S21.

IWB100aは、ステップS21で、スタンプリストからスタンプ情報を取得し、スタンプの種類および座標を取得する。IWB100aは、次のステップS22で、ステップS21で取得されたスタンプ情報に含まれる各スタンプの座標に基づき、定義領域13内で描画領域11に表示させるための表示領域を設定する。   In step S21, the IWB 100a acquires stamp information from the stamp list, and acquires the stamp type and coordinates. In the next step S22, the IWB 100a sets a display area to be displayed in the drawing area 11 in the definition area 13 based on the coordinates of each stamp included in the stamp information acquired in step S21.

図13を用いて、ステップS22の処理について説明する。例えば、IWB100aにおいて表示制御部111は、表示情報記憶部115に記憶されるスタンプリストに含まれる各座標に基づき、x座標およびy座標の最大値および最小値を求める。表示制御部111は、求めたx座標およびy座標の最大値および最小値に従い、定義領域13内に窓領域14を設定する。   The process of step S22 will be described using FIG. For example, in the IWB 100a, the display control unit 111 obtains the maximum value and the minimum value of the x coordinate and the y coordinate based on each coordinate included in the stamp list stored in the display information storage unit 115. The display control unit 111 sets the window area 14 in the definition area 13 according to the obtained maximum and minimum values of the x and y coordinates.

図13の例では、窓領域14は、x座標の最大値x2および最小値x1と、y座標の最大値y2および最小値y1とに従い、左下隅の座標(x1,y1)と右上隅の座標(x2,y2)とで定義される領域とされる。より具体的には、図13の例では、x座標の最小値x1がオブジェクト303の近傍に指定されたスタンプ22a’の位置によって決まり、x座標の最大値x2がオブジェクト302の近傍に指定されたスタンプ22d’の位置によって決まる。また、y座標の最小値y1がオブジェクト30mの近傍に指定されたスタンプ22b’の位置によって決まり、y座標の最大値y2がオブジェクト301の近傍に指定されたスタンプ22c’の位置によって決まる。 In the example of FIG. 13, the window area 14 has coordinates (x 1 , y 1) in the lower left corner according to the maximum value x 2 and minimum value x 1 of the x coordinate and the maximum value y 2 and minimum value y 1 of the y coordinate. ) And upper right corner coordinates (x 2 , y 2 ). More specifically, in the example of FIG. 13, the minimum value x 1 of the x coordinate is determined by the position of the stamp 22a ′ designated in the vicinity of the object 30 3 , and the maximum value x 2 of the x coordinate is the vicinity of the object 30 2 . It is determined by the position of the stamp 22d 'specified in the above. Further, the minimum value y 1 of the y coordinate is determined by the position of the stamp 22b ′ designated near the object 30 m , and the maximum value y 2 of the y coordinate is determined by the position of the stamp 22c ′ designated near the object 30 1 . Determined.

なお、実際には、窓領域14は、x座標の最大値x2および最小値x1と、y座標の最大値y2および最小値y1とに対して、後述するピン画像のサイズに応じたマージンが見込まれた領域とされる。 Actually, the window area 14 corresponds to the size of the pin image described later with respect to the maximum value x 2 and minimum value x 1 of the x coordinate and the maximum value y 2 and minimum value y 1 of the y coordinate. The area where the margin is expected.

表示制御部111は、窓領域14を設定すると、次のステップS23で、窓領域14の画像を描画領域11に対してサイズを合わせて表示させる際の、窓領域14の画像に対する縮小の度合いを示す表示倍率を求める。そして、表示制御部111は、求めた表示倍率が閾値以下であるか否かを判定する。   After setting the window area 14, the display control unit 111 sets the degree of reduction with respect to the image in the window area 14 when displaying the image in the window area 14 in the same size as the drawing area 11 in the next step S 23. The display magnification shown is obtained. Then, the display control unit 111 determines whether the obtained display magnification is equal to or less than a threshold value.

表示制御部111は、ステップS23により窓領域14の表示倍率が閾値以下であると判定した場合、処理をステップS24に移行させる。表示制御部111は、ステップS24で、窓領域14の画像をステップS23で求めた表示倍率で縮小し、各スタンプの座標に対して、当該座標に表示されるスタンプの種類に応じたピン画像を表示する。   If the display control unit 111 determines in step S23 that the display magnification of the window area 14 is equal to or less than the threshold value, the display control unit 111 shifts the process to step S24. In step S24, the display control unit 111 reduces the image of the window area 14 at the display magnification obtained in step S23, and for each stamp coordinate, displays a pin image corresponding to the type of stamp displayed at the coordinate. indicate.

図14を用いて、スタンプ座標に対するピン画像の表示について説明する。表示制御部111は、上述したように、定義領域13の画像から窓領域14の画像を切り出して、切り出した画像に対して、ステップS23で求められた表示倍率で縮小処理を施す。さらに、表示制御部111は、縮小処理された窓領域14の画像における各スタンプの座標に対して、各スタンプ22a’〜22d’が、各スタンプ22a’〜22d’の種類に応じたピン画像25a〜25dに置き換えられる。   The display of the pin image with respect to the stamp coordinates will be described with reference to FIG. As described above, the display control unit 111 cuts out the image of the window area 14 from the image of the definition area 13 and performs reduction processing on the cut-out image at the display magnification obtained in step S23. Further, the display control unit 111 determines that the stamps 22a ′ to 22d ′ correspond to the types of the stamps 22a ′ to 22d ′ with respect to the coordinates of the stamps in the image of the reduced window area 14. Replaced with ~ 25d.

ピン画像25a〜25cは、指定された座標を指し示すための画像である。図14の例では、ピン画像25a〜25dは、円盤状のラベル部分と、鋭角三角形のピン部分とからなり、所謂マップピンを図案化した形状とされている。勿論、ピン画像25a〜25cの形状は、この形状に限定されるものではなく、指し示す座標と、対応するスタンプの種類とがそれぞれ容易に認識可能な形状であれば、他の形状でもよい。   The pin images 25a to 25c are images for indicating designated coordinates. In the example of FIG. 14, the pin images 25 a to 25 d are formed of a disk-shaped label portion and an acute triangle pin portion, and have a shape that is a so-called map pin. Of course, the shape of the pin images 25a to 25c is not limited to this shape, and may be any other shape as long as the indicated coordinates and the corresponding stamp type can be easily recognized.

ピン画像25a〜25dは、ラベル部分に対応するスタンプの種類が記される。例えば「決定」を示すスタンプ22aに対応するピン画像25aは、ラベル部分に「決」の文字が表示される。また例えば、「チェック項目」を示すスタンプ22cに対応するピン画像25cは、ラベル部分にチェックボックスが表示される。また、ピン画像25a〜25dにおいて、鋭角三角形の部分は、先端が対応するスタンプ座標に一致するように、窓領域14の画像に表示される。   In the pin images 25a to 25d, the type of stamp corresponding to the label portion is described. For example, in the pin image 25a corresponding to the stamp 22a indicating “OK”, the word “OK” is displayed in the label portion. For example, a check box is displayed in the label portion of the pin image 25c corresponding to the stamp 22c indicating “check item”. In the pin images 25a to 25d, the acute-angled triangle portion is displayed on the image of the window region 14 so that the tip matches the corresponding stamp coordinate.

このように、ピン画像25a〜25dは、対応するスタンプの種類を示す部分と、当該スタンプの座標を指し示す部分とが明確に分けられている。そのため、このピン画像25a〜25dを用いることで、閾値以下の表示倍率で縮小された窓領域14の画像内に多数のスタンプ座標が密集して表示された場合において、スタンプ22a〜22dを直に表示するよりも容易に、各スタンプ座標および各スタンプ座標に指定された意味を認識可能となる。   As described above, in the pin images 25a to 25d, the portion indicating the type of the corresponding stamp and the portion indicating the coordinates of the stamp are clearly separated. Therefore, by using the pin images 25a to 25d, the stamps 22a to 22d can be directly displayed when a large number of stamp coordinates are displayed densely in the image of the window area 14 reduced at a display magnification equal to or smaller than the threshold value. Each stamp coordinate and the meaning designated for each stamp coordinate can be recognized more easily than displaying.

一方、表示制御部111は、ステップS23により窓領域14の表示倍率が閾値を超えると判定した場合、処理をステップS25に移行させる。表示制御部111は、ステップS25で、窓領域14の画像をステップS23で求めた表示倍率で縮小する。この場合、各スタンプの座標には、当該表示倍率で縮小されたスタンプ22a〜22dが表示される。これに限らず、各スタンプの座標に対して、スタンプ22a〜22dを元のサイズのまま表示してもよい。   On the other hand, if the display control unit 111 determines in step S23 that the display magnification of the window area 14 exceeds the threshold value, the display control unit 111 shifts the process to step S25. In step S25, the display control unit 111 reduces the image of the window area 14 with the display magnification obtained in step S23. In this case, stamps 22a to 22d reduced at the display magnification are displayed at the coordinates of the stamps. However, the present invention is not limited to this, and the stamps 22a to 22d may be displayed in their original sizes with respect to the coordinates of each stamp.

このように、窓領域14の画像に対する表示倍率が閾値を超える場合に、各スタンプ座標にスタンプ22a〜22dを当該表示倍率で縮小して表示する。そのため、閾値は、対応する表示倍率で各スタンプ22a〜22dを縮小した場合に、各スタンプ22a〜22dの意味を判別可能な最小の値を設定すると好ましい。   As described above, when the display magnification for the image of the window region 14 exceeds the threshold, the stamps 22a to 22d are reduced and displayed at the respective stamp coordinates at the display magnification. Therefore, it is preferable to set the threshold value to a minimum value that can determine the meaning of each of the stamps 22a to 22d when the stamps 22a to 22d are reduced at the corresponding display magnification.

表示制御部111は、ステップS24またはステップS25の処理が終了すると、処理をステップS26に移行する。表示制御部111は、IWB100aに対してユーザ操作がなされたか否かを判定する。表示制御部111は、入力処理部110の検知結果に基づき、IWB100aに対してユーザ操作がなされていないと判定した場合、処理をステップS26に戻す。また、表示制御部111は、入力処理部119の検知結果に基づき、IWB100aに対して何らかのユーザ操作がなされたと判定した場合、処理をステップS27に移行する。   When the process of step S24 or step S25 ends, the display control unit 111 moves the process to step S26. The display control unit 111 determines whether a user operation has been performed on the IWB 100a. When the display control unit 111 determines that no user operation is performed on the IWB 100a based on the detection result of the input processing unit 110, the display control unit 111 returns the process to step S26. If the display control unit 111 determines that some user operation has been performed on the IWB 100a based on the detection result of the input processing unit 119, the display control unit 111 proceeds to step S27.

表示制御部111は、ステップS27で、ステップS26で検知されたユーザ操作が、描画領域11に表示されたピン画像25a〜25dの何れかを指定する操作か否かを判定する。表示制御部111は、ピン25a〜25dの何れかを指定するユーザ操作がなされたと判定した場合、処理をステップS28に移行する。例えば、表示制御部111は、入力処理部110の検知結果に基づき、ユーザ操作によりピン画像25a〜25dの何れかがタップされたと判定した場合に、処理をステップS28に移行させる。   In step S27, the display control unit 111 determines whether the user operation detected in step S26 is an operation for designating any one of the pin images 25a to 25d displayed in the drawing area 11. If the display control unit 111 determines that a user operation for designating any of the pins 25a to 25d has been performed, the display control unit 111 proceeds to step S28. For example, if the display control unit 111 determines that any of the pin images 25a to 25d has been tapped by a user operation based on the detection result of the input processing unit 110, the display control unit 111 shifts the processing to step S28.

表示制御部111は、ステップS28で、ユーザ操作により指定されたピン画像25a〜25d(ここでは、オブジェクト30に対応するピン画像25aとする)が指し示す座標に基づき、例えばデフォルトとして指定されたサイズで描画領域11の表示を更新する。   Based on the coordinates indicated by the pin images 25a to 25d (here, the pin images 25a corresponding to the object 30) designated by the user operation in step S28, the display control unit 111 has a size designated as a default, for example. The display of the drawing area 11 is updated.

図15を用いて、ピン画像が指定された際の表示について説明する。ピン画像25aが指定されると、窓領域14を、指定されたピン画像25aの座標を中心とし、サイズをデフォルトのサイズとして設定する。ここでは、窓領域14のデフォルトのサイズを描画領域11のサイズと一致させるものとする。この場合、窓領域14の画像を描画領域11に表示させる際の表示倍率は、1となる。   A display when a pin image is designated will be described with reference to FIG. When the pin image 25a is designated, the window area 14 is set with the size as a default size with the coordinates of the designated pin image 25a as the center. Here, it is assumed that the default size of the window area 14 matches the size of the drawing area 11. In this case, the display magnification when displaying the image of the window area 14 in the drawing area 11 is 1.

さらに、窓領域14におけるピン画像25aの座標に対して、当該ピン画像25aに対応するスタンプ22a’を表示する。これにより、図15に例示されるように、描画領域11の表示は、中央にスタンプ22a’が表示され、スタンプ22a’の位置に対応してオブジェクト30が表示された状態に更新される。これにより、ユーザは、指定したピン画像25aに対応するスタンプ22a’の種類と、当該スタンプ22a’が対応するオブジェクト30の内容とを容易に確認することができる。   Further, a stamp 22a 'corresponding to the pin image 25a is displayed with respect to the coordinates of the pin image 25a in the window region 14. Thereby, as illustrated in FIG. 15, the display of the drawing area 11 is updated to a state in which the stamp 22 a ′ is displayed in the center and the object 30 is displayed corresponding to the position of the stamp 22 a ′. Thus, the user can easily confirm the type of the stamp 22a 'corresponding to the designated pin image 25a and the content of the object 30 corresponding to the stamp 22a'.

ステップS28で描画領域11の表示が更新されると、図12のフローチャートによる一連の処理が終了する。   When the display of the drawing area 11 is updated in step S28, a series of processes according to the flowchart of FIG.

一方、表示制御部111は、上述のステップS27で、ステップS26で検知されたユーザ操作が描画領域11に表示されたピン画像25a〜25dの何れかを指定する操作ではないと判定した場合、処理をステップS29に移行させる。表示制御部111は、ステップS29で、ステップS26で検知されたユーザ操作がピンチイン/アウト操作であるか否かを判定する。   On the other hand, if the display control unit 111 determines in step S27 described above that the user operation detected in step S26 is not an operation for designating any of the pin images 25a to 25d displayed in the drawing area 11, the process is performed. To step S29. In step S29, the display control unit 111 determines whether the user operation detected in step S26 is a pinch-in / out operation.

ピンチイン/アウト操作は、例えばタッチパネル126を手指などで同時に2箇所接触し、手指のタッチパネル126への接触を保ったまま、接触する2箇所の間隔を広げる(ピンチアウト)、または、狭める(ピンチイン)操作である。入力処理部110は、手指などをタッチパネル126から離し、タッチパネル126への接触を終了することで、ピンチイン/アウト操作が終了したことを検知する。ピンチイン/アウト操作は、タッチパネル126上で範囲を設定する場合などに用いて好適である。   In the pinch-in / out operation, for example, the touch panel 126 is simultaneously touched with two fingers or the like, and the distance between the two touching positions is widened (pinch out) or narrowed (pinched in) while keeping the finger touching the touch panel 126. It is an operation. The input processing unit 110 detects that the pinch-in / out operation has ended by releasing a finger or the like from the touch panel 126 and ending contact with the touch panel 126. The pinch-in / out operation is suitable for setting a range on the touch panel 126.

表示制御部111は、入力処理部110の検知結果に基づき、IWB100aに対するユーザ操作がピンチイン/アウト操作であると判定した場合、処理をステップS30に移行させる。表示制御部111は、ステップS30で、ピンチイン/アウト操作による接触が終了した時点での上述の2箇所の座標を取得し、この2箇所の座標により定義される範囲を設定する。   If the display control unit 111 determines that the user operation on the IWB 100a is a pinch-in / out operation based on the detection result of the input processing unit 110, the display control unit 111 shifts the processing to step S30. In step S30, the display control unit 111 acquires the above-described two coordinates when contact by the pinch-in / out operation ends, and sets a range defined by the two coordinates.

表示制御部111は、次のステップS31で、ステップS30で設定された範囲を描画領域11の全体に適用する。すなわち、表示制御部111は、ステップS30で設定された範囲を窓領域14に適用し、この窓領域14の画像を、サイズを合わせて描画領域11に表示させるための表示倍率を求める。この場合、表示倍率としては、1以上すなわち拡大も有り得る。表示制御部111は、求めた表示倍率に従い窓領域14の画像を拡大または縮小して描画領域11に表示させる。   In the next step S31, the display control unit 111 applies the range set in step S30 to the entire drawing area 11. That is, the display control unit 111 applies the range set in step S30 to the window area 14 and obtains a display magnification for displaying the image of the window area 14 in the drawing area 11 with the same size. In this case, the display magnification may be 1 or more, that is, enlargement. The display control unit 111 enlarges or reduces the image of the window area 14 according to the obtained display magnification and displays it in the drawing area 11.

ステップS31で描画領域11に対する窓領域14の画像の表示が行われると、図12のフローチャートによる一連の処理が終了する。   When the image of the window area 14 is displayed on the drawing area 11 in step S31, a series of processes according to the flowchart of FIG.

一方、表示制御部111は、上述のステップS29で、ステップS26で検知されたユーザ操作がピンチイン/アウト操作ではないと判定した場合、処理をステップS32に移行させる。表示制御部111は、ステップS32で、ステップS26で検知されたユーザ操作に対応する処理を実行し、図12のフローチャートによる一連の処理が終了する。   On the other hand, if the display control unit 111 determines in step S29 described above that the user operation detected in step S26 is not a pinch-in / out operation, the display control unit 111 shifts the process to step S32. In step S32, the display control unit 111 executes processing corresponding to the user operation detected in step S26, and the series of processing according to the flowchart of FIG. 12 ends.

このように、第1の実施形態によれば、描画領域11に描画されたオブジェクト30に対して所定の意味を示すスタンプ22a’〜22d’を表示することができる。さらに、第1の実施形態によれば、定義領域13内の画像を描画領域11にサイズを合わせて表示させる際に、各スタンプ22a’〜22d’をピン画像25a〜25dに置き換えることができる。そのため、定義領域13内に描画された各オブジェクトから、目的のオブジェクトを容易に発見することが可能となり、IWB100aの利便性を向上できる。   As described above, according to the first embodiment, the stamps 22 a ′ to 22 d ′ having a predetermined meaning can be displayed on the object 30 drawn in the drawing area 11. Furthermore, according to the first embodiment, when the image in the definition area 13 is displayed in the drawing area 11 with the same size, the stamps 22a 'to 22d' can be replaced with the pin images 25a to 25d. Therefore, it is possible to easily find a target object from each object drawn in the definition area 13, and the convenience of the IWB 100a can be improved.

(第2の実施形態)
次に、第2の実施形態について説明する。電子化されていないホワイトボードを用いた会議などでは、会議の各参加者が手元で記入した付箋をホワイトボード上に貼付して議事を進行させる場合がある。第2の実施形態は、IWBとユーザの端末装置とを用いて、この付箋の機能を実現するものである。
(Second Embodiment)
Next, a second embodiment will be described. In a meeting using a whiteboard that has not been digitized, there is a case where a sticky note that is handwritten by each participant of the meeting is pasted on the whiteboard to advance the proceedings. In the second embodiment, the function of the sticky note is realized using an IWB and a user terminal device.

図16は、第2の実施形態に係る情報共有システムの一例の構成を示す。図16において、情報共有システムは、IWB100bと、端末装置200と、これらIWB100bおよび端末装置200とインターネットなどのネットワークを介して接続されるサーバ300とを含む。   FIG. 16 shows an exemplary configuration of an information sharing system according to the second embodiment. In FIG. 16, the information sharing system includes an IWB 100b, a terminal device 200, and a server 300 connected to the IWB 100b and the terminal device 200 via a network such as the Internet.

詳細は後述するが、IWB100bは、上述したIWB100aに対してネットワークに対する通信機能が追加されている。また、IWB100bは、ネットワーク上の情報を閲覧可能なブラウザアプリケーション(以下、ブラウザと略称する)が搭載される。ブラウザは、ネットワークから取得したプログラムに従って動作することができる。IWB100bの電子黒板としての機能を、このブラウザが取得したプログラムにより実現することが可能である。   Although details will be described later, the IWB 100b has a network communication function added to the IWB 100a described above. The IWB 100b is equipped with a browser application (hereinafter abbreviated as a browser) that can browse information on the network. The browser can operate according to a program acquired from the network. The function of the IWB 100b as an electronic blackboard can be realized by a program acquired by the browser.

端末装置200は、ネットワークへの接続機能を有する、携帯可能な情報処理装置であって、例えばスマートフォン(多機能携帯電話端末)を用いることができる。端末装置20は、例えば有効表示領域が対角サイズで数インチ〜十数インチといった比較的小型のタッチパネルを有する。また、端末装置200は、撮像機能を有し、被写体を撮像して画像として取り込むことができる。さらに、端末装置200は、ブラウザが搭載される。   The terminal device 200 is a portable information processing device having a function of connecting to a network, and for example, a smartphone (multifunctional mobile phone terminal) can be used. The terminal device 20 has a relatively small touch panel whose effective display area is, for example, a diagonal size of several inches to tens of inches. Further, the terminal device 200 has an imaging function, and can capture a subject and capture it as an image. Furthermore, the terminal device 200 is equipped with a browser.

サーバ300は、ネットワーククラウド上に構成される情報処理システムである。ネットワーククラウドは、互いにネットワークで接続される複数のコンピュータを含み、外部からは、その内部が隠蔽されたブラックボックスとして入出力のみが示されるネットワーク・グループである。ネットワーククラウドにおいて、1以上のコンピュータにより、情報処理システムとしてサーバ300が構成される。勿論、サーバ300は、ネットワーククラウド上の構成に限られず、例えば1台のコンピュータで構成してもよい。   The server 300 is an information processing system configured on a network cloud. The network cloud is a network group that includes a plurality of computers connected to each other via a network, and from the outside, only an input / output is shown as a black box in which the inside is hidden. In the network cloud, the server 300 is configured as an information processing system by one or more computers. Of course, the server 300 is not limited to the configuration on the network cloud, and may be configured by a single computer, for example.

このような情報共有システムにおいて、IWB100bでブラウザが起動されると、ブラウザは、サーバ300とネットワークを介して通信を行い、IWB100bが第2の実施形態に係る動作を行うためのプログラム(以降、IWBプログラムと呼ぶ)をサーバ300に対して要求する。ブラウザは、サーバ300からIWBプログラムを受信すると、受信した情報処理プログラムをブラウザ上で起動させる。IWBプログラムは、HTML(HyperText Markup Language)やJAVA(登録商標)などの、ブラウザ上で動作可能なプログラム言語を用いて記述される。   In such an information sharing system, when the browser is activated by the IWB 100b, the browser communicates with the server 300 via the network, and the program for the IWB 100b to perform the operation according to the second embodiment (hereinafter referred to as IWB). Request to the server 300. When the browser receives the IWB program from the server 300, the browser activates the received information processing program on the browser. The IWB program is described using a program language that can operate on a browser, such as HTML (HyperText Markup Language) or JAVA (registered trademark).

ブラウザは、IWBプログラムに従いサーバ300と通信を行い、サーバ300から、IWB100bを識別するためのIWB識別情報と、当該IWB識別情報およびサーバ300のネットワーク上の位置(URL:Uniform Resource Locator)を含む識別画像とを取得する。ブラウザは、IWB100bに対して識別画像を表示させる。図16の例では、識別画像として2次元コードの一つであるQRコード(登録商標)が用いられている。   The browser communicates with the server 300 in accordance with the IWB program, and includes identification information including IWB identification information for identifying the IWB 100b from the server 300, the IWB identification information, and the location of the server 300 on the network (URL: Uniform Resource Locator). Get images and. The browser displays an identification image on the IWB 100b. In the example of FIG. 16, a QR code (registered trademark) which is one of two-dimensional codes is used as an identification image.

ユーザは、端末装置200により、IWB100bに表示される識別画像を撮像し、撮像画像を復号してIWB識別情報およびサーバ300のURLを取得する。端末装置200は、取得したサーバ300のURLに従いサーバ300と通信を行い、端末装置200が第2の実施形態に係る動作を行うためのプログラム(以降、付箋プログラムと呼ぶ)をサーバ300から取得する。この付箋プログラムは、端末装置200に搭載されるブラウザ上で動作するもので、例えばHTMLやJAVA(登録商標)などの、ブラウザ上で動作可能なプログラム言語を用いて記述される。ユーザは、端末装置200を操作して、付箋プログラムが動作するブラウザにより付箋情報を入力し、入力した付箋情報をIWB識別情報を付加してサーバ300に送信する。   The user captures an identification image displayed on the IWB 100b by the terminal device 200, decodes the captured image, and acquires the IWB identification information and the URL of the server 300. The terminal device 200 communicates with the server 300 according to the acquired URL of the server 300, and acquires from the server 300 a program (hereinafter referred to as a tag program) for the terminal device 200 to perform an operation according to the second embodiment. . This sticky note program runs on a browser installed in the terminal device 200, and is described using a program language that can run on the browser, such as HTML or JAVA (registered trademark). The user operates the terminal device 200 to input sticky information using a browser in which a sticky note program operates, and transmits the input sticky information to the server 300 with IWB identification information added.

サーバ300は、端末装置200から送信された付箋情報を、IWB識別情報に従いIWB100bに送信する。IWB100bは、サーバ300から送信された付箋情報に基づく付箋画像を表示させる。このように、第2の実施形態によれば、各ユーザが保持する各端末装置200上で入力された付箋情報に基づく付箋画像をIWB100bに表示させることができ、IWB100bの利便性が向上する。   Server 300 transmits the tag information transmitted from terminal device 200 to IWB 100b according to the IWB identification information. The IWB 100b displays a sticky note image based on the sticky note information transmitted from the server 300. As described above, according to the second embodiment, a sticky note image based on sticky note information input on each terminal device 200 held by each user can be displayed on the IWB 100b, and the convenience of the IWB 100b is improved.

図17は、第2の実施形態に係るIWB100bの機能を説明するための機能ブロック図である。なお、図17において、上述の図5と共通する部分には同一の符号を付して、詳細な説明を省略する。図17において、第2の実施形態に係るIWB100bは、図5を用いて説明した第1の実施形態に係るIWB100aに対して、サーバ300と通信を行うための通信部116が追加されている。   FIG. 17 is a functional block diagram for explaining functions of the IWB 100b according to the second embodiment. Note that, in FIG. 17, the same reference numerals are given to portions common to those in FIG. 5 described above, and detailed description thereof is omitted. In FIG. 17, the IWB 100b according to the second embodiment has a communication unit 116 for communicating with the server 300 added to the IWB 100a according to the first embodiment described with reference to FIG.

IWB100bの構成は、図6を用いて説明した第1の実施形態に係るIWB100aと何ら変わるところが無いため、説明を省略する。   The configuration of the IWB 100b is the same as that of the IWB 100a according to the first embodiment described with reference to FIG.

図17に示す入力処理部110、表示制御部111、制御部112、画像処理部113、アイコン記憶部114、表示情報記憶部115および通信部116は、その一部または全部がCPU121上で動作するIWBプログラムによって実現される。例えば、少なくとも表示制御部111および通信部116は、IWBプログラムにより実現される。第2の実施形態の場合、IWB100bは、このIWBプログラムを、第2の実施形態による動作を実行する毎にサーバ300から取得する。取得されたIWBプログラムは、例えばストレージ127やRAM123に記憶され、第2の実施形態による動作が終了した際に、ストレージ127やRAM123から消去される。   The input processing unit 110, the display control unit 111, the control unit 112, the image processing unit 113, the icon storage unit 114, the display information storage unit 115, and the communication unit 116 illustrated in FIG. It is realized by an IWB program. For example, at least the display control unit 111 and the communication unit 116 are realized by an IWB program. In the case of the second embodiment, the IWB 100b acquires this IWB program from the server 300 every time the operation according to the second embodiment is executed. The acquired IWB program is stored in, for example, the storage 127 or the RAM 123, and is deleted from the storage 127 or the RAM 123 when the operation according to the second embodiment is completed.

これに限らず、このIWBプログラムをCD、DVDなどのコンピュータに読み取り可能な記録媒体に記録して提供したり、ネットワークを介して提供してIWB100bにインストールしてもよい。   The present invention is not limited to this, and the IWB program may be provided by being recorded on a computer-readable recording medium such as a CD or DVD, or may be provided via a network and installed in the IWB 100b.

図18は、第2の実施形態に適用可能な端末装置200の機能を説明するための機能ブロック図である。端末装置200は、入力処理部210と、表示制御部211と、制御部212と、画像処理部213と、撮像制御部214と、通信部215とを有する。   FIG. 18 is a functional block diagram for explaining functions of the terminal device 200 applicable to the second embodiment. The terminal device 200 includes an input processing unit 210, a display control unit 211, a control unit 212, an image processing unit 213, an imaging control unit 214, and a communication unit 215.

これら入力処理部210、表示制御部211、制御部212、画像処理部213、撮像制御部214および通信部215は、CPU上で動作するプログラムにより実現される。これに限らず、入力処理部210、表示制御部211、制御部212、画像処理部213、撮像制御部214および通信部215のうち一部または全部を、互いに協働して動作するハードウェアにより構成してもよい。   These input processing unit 210, display control unit 211, control unit 212, image processing unit 213, imaging control unit 214, and communication unit 215 are realized by a program operating on the CPU. Not limited to this, some or all of the input processing unit 210, the display control unit 211, the control unit 212, the image processing unit 213, the imaging control unit 214, and the communication unit 215 are configured by hardware that operates in cooperation with each other. It may be configured.

入力処理部210は、端末装置200のタッチパネルによる入力部に対してなされるユーザ操作に対する処理を行う。表示制御部211は、端末装置200の表示部に対する表示を制御する。制御部212は、この端末装置200の全体の動作を制御する。画像処理部213は、入力処理部210の判定結果に基づき描画を検出し、検出された描画に従いSVGデータを生成する。   The input processing unit 210 performs a process for a user operation performed on the input unit using the touch panel of the terminal device 200. The display control unit 211 controls display on the display unit of the terminal device 200. The control unit 212 controls the overall operation of the terminal device 200. The image processing unit 213 detects drawing based on the determination result of the input processing unit 210 and generates SVG data according to the detected drawing.

撮像制御部214は、CCD(Charge Coupled Device)などによる撮像素子の駆動制御を行い、撮像素子から撮像画像を取得し、撮像画像に対してホワイトバランス調整やガンマ補正などの所定の処理を施して、画像データとして出力する。通信部215は、ネットワークを介した通信を制御する。制御部212は、この端末装置200の全体の動作を制御する。   The imaging control unit 214 performs drive control of the imaging device using a CCD (Charge Coupled Device), acquires a captured image from the imaging device, and performs predetermined processing such as white balance adjustment and gamma correction on the captured image. And output as image data. The communication unit 215 controls communication via the network. The control unit 212 controls the overall operation of the terminal device 200.

図19は、第2の実施形態に係る端末装置200の一例の構成を示す。図19において、端末装置200は、CPU221と、ROM222と、RAM223と、表示部224と、入力部225と、ストレージ227と、データI/F228と、通信I/F229とを有し、これらがバス220を介して互いに通信可能に接続されている。このように、端末装置200は、一般的なコンピュータと同等の構成を有する。   FIG. 19 shows an exemplary configuration of the terminal device 200 according to the second embodiment. 19, the terminal device 200 includes a CPU 221, a ROM 222, a RAM 223, a display unit 224, an input unit 225, a storage 227, a data I / F 228, and a communication I / F 229, which are buses. 220 are communicably connected to each other. Thus, the terminal device 200 has a configuration equivalent to that of a general computer.

図19において、ストレージ227は、不揮発性の半導体メモリ(フラッシュメモリ)やハードディスクドライブである。CPU221は、ROM222またはストレージ227に記憶されるプログラムに従い、RAM223をワークメモリとして用いて、この端末装置200の全体の動作を制御する。   In FIG. 19, a storage 227 is a nonvolatile semiconductor memory (flash memory) or a hard disk drive. The CPU 221 controls the overall operation of the terminal device 200 using the RAM 223 as a work memory according to a program stored in the ROM 222 or the storage 227.

表示部224は、例えば表示デバイスとしてのLCDと、表示デバイスを駆動する駆動回路とを含み、CPU221がプログラムに基づき生成した表示制御信号に従った画像を表示デバイスに表示させる。入力部225は、表示部224の表示面と対応するセンサを備え、接触を検出した位置に応じた制御信号を出力する。これら表示部224と入力部225とが一体的に構成されて、タッチパネル226が形成される。   The display unit 224 includes, for example, an LCD as a display device and a drive circuit that drives the display device, and causes the display device to display an image according to a display control signal generated by the CPU 221 based on the program. The input unit 225 includes a sensor corresponding to the display surface of the display unit 224, and outputs a control signal corresponding to the position where contact is detected. The display unit 224 and the input unit 225 are integrally configured to form the touch panel 226.

データI/F228は、外部機器との間のデータ通信を制御する。データI/F228は、例えばUSBインターフェイスを適用することができる。データI/Fとして、Bluetooth(登録商標)を適用してもよい。通信I/F229は、ネットワークを介した無線による通信を制御する。   The data I / F 228 controls data communication with an external device. For example, a USB interface can be applied to the data I / F 228. Bluetooth (registered trademark) may be applied as the data I / F. The communication I / F 229 controls wireless communication via the network.

図18に示す入力処理部210、表示制御部211、制御部212、画像処理部213、撮像制御部214および通信部215の一部または全部は、CPU221上で動作する付箋プログラムによって実現される。例えば、少なくとも入力処理部210および通信部215は、付箋プログラムにより実現される。第2の実施形態の場合、端末装置200は、この付箋プログラムを、第2の実施形態による動作を実行する毎にサーバ300から取得する。取得された付箋プログラムは、例えばストレージ227やRAM223に記憶され、第2の実施形態による動作が終了した際に、ストレージ227やRAM223から消去される。   A part or all of the input processing unit 210, the display control unit 211, the control unit 212, the image processing unit 213, the imaging control unit 214, and the communication unit 215 illustrated in FIG. 18 is realized by a sticky note program that operates on the CPU 221. For example, at least the input processing unit 210 and the communication unit 215 are realized by a sticky note program. In the case of the second embodiment, the terminal device 200 acquires the sticky note program from the server 300 every time the operation according to the second embodiment is executed. The acquired sticky note program is stored in, for example, the storage 227 or the RAM 223, and is deleted from the storage 227 or the RAM 223 when the operation according to the second embodiment is completed.

これに限らず、この付箋プログラムをCD、DVDなどのコンピュータに読み取り可能な記録媒体に記録して提供したり、ネットワークを介して提供して端末装置200にインストールしてもよい。   However, the sticky note program may be provided by being recorded on a computer-readable recording medium such as a CD or DVD, or may be provided via the network and installed in the terminal device 200.

付箋プログラムは、例えば、上述した各部(入力処理部210、表示制御部211、画像処理部213および通信部215)を含むモジュール構成となっており、実際のハードウェアとしてはCPU221が例えばストレージ227やRAM223から付箋プログラムを読み出して実行することにより上記各部が主記憶装置(例えばRAM223)上にロードされ、各部が主記憶装置上に生成されるようになっている。   The sticky note program has a module configuration including, for example, the above-described units (input processing unit 210, display control unit 211, image processing unit 213, and communication unit 215). As actual hardware, the CPU 221 includes, for example, the storage 227, By reading out the tag program from the RAM 223 and executing it, the above-described units are loaded onto the main storage device (for example, the RAM 223), and the respective units are generated on the main storage device.

図20は、第2の実施形態に係るサーバ300の機能を説明するための機能ブロック図である。図20において、サーバ300は、通信部310と、制御部311と、識別画像生成部312と、ユニークID生成部313と、プログラム記憶部314とを有する。これら通信部310、制御部311、識別画像生成部312、ユニークID生成部313およびプログラム記憶部314は、CPU上で動作するプログラムにより実現される。これに限らず、通信部310、制御部311、識別画像生成部312、ユニークID生成部313およびプログラム記憶部314の一部または全部を、互いに協働して動作するハードウェアにより構成してもよい。   FIG. 20 is a functional block diagram for explaining functions of the server 300 according to the second embodiment. In FIG. 20, the server 300 includes a communication unit 310, a control unit 311, an identification image generation unit 312, a unique ID generation unit 313, and a program storage unit 314. The communication unit 310, the control unit 311, the identification image generation unit 312, the unique ID generation unit 313, and the program storage unit 314 are realized by a program that operates on the CPU. Not limited to this, some or all of the communication unit 310, the control unit 311, the identification image generation unit 312, the unique ID generation unit 313, and the program storage unit 314 may be configured by hardware that operates in cooperation with each other. Good.

通信部310は、ネットワークを介した通信を制御する。制御部311は、このサーバ300の全体の動作を制御する。識別画像生成部312は、このサーバ300のURLと、入力された識別情報とを符号化した識別画像を生成する。ユニークID生成部313は、要求に応じてユニークな識別情報を生成する。プログラム記憶部314は、IWB100bに送信するためのIWBプログラムと、端末装置200に送信するための付箋プログラムとを記憶する。   The communication unit 310 controls communication via the network. The control unit 311 controls the overall operation of the server 300. The identification image generation unit 312 generates an identification image obtained by encoding the URL of the server 300 and the input identification information. The unique ID generation unit 313 generates unique identification information in response to the request. The program storage unit 314 stores an IWB program for transmission to the IWB 100b and a sticky note program for transmission to the terminal device 200.

図21は、第2の実施形態に係るサーバ300の一例の構成を示す。図21において、サーバ300は、CPU321と、ROM322と、RAM323と、ストレージ324と、データI/F325と、通信I/F326とを有し、これら各部がバス320により互いに通信可能に接続される。このように、サーバ300は、一般的なコンピュータと同等の構成を有する。   FIG. 21 shows an exemplary configuration of the server 300 according to the second embodiment. In FIG. 21, the server 300 includes a CPU 321, a ROM 322, a RAM 323, a storage 324, a data I / F 325, and a communication I / F 326, and these units are connected to each other via a bus 320 so as to communicate with each other. Thus, the server 300 has a configuration equivalent to that of a general computer.

図21において、ストレージ324は、例えばハードディスクドライブであり、第2の実施形態に係る情報処理プログラムが予め記憶される。また、ストレージ324は、第2の実施形態に係る、IWB100bに送信するための表示制御プログラムと、端末装置200に送信するための付箋プログラムとを予め記憶する。   In FIG. 21, a storage 324 is, for example, a hard disk drive, and stores an information processing program according to the second embodiment in advance. In addition, the storage 324 stores in advance a display control program for transmitting to the IWB 100b and a tag program for transmitting to the terminal device 200 according to the second embodiment.

CPU321は、ROM322またはストレージ324に予め記憶される情報処理プログラムに従い、RAM323をワークメモリとして用いて、このサーバ300の第2の実施形態に係る動作を制御する。データI/F325は、外部機器との間のデータ通信を制御する。データI/F325は、例えばUSBインターフェイスを適用することができる。データI/F325は、第2の実施形態に係るサーバ300の構成としては省略することができる。通信I/F326は、ネットワークを介した通信を制御する。   The CPU 321 controls the operation of the server 300 according to the second embodiment using the RAM 323 as a work memory according to an information processing program stored in advance in the ROM 322 or the storage 324. The data I / F 325 controls data communication with an external device. For example, a USB interface can be applied to the data I / F 325. The data I / F 325 can be omitted as the configuration of the server 300 according to the second embodiment. The communication I / F 326 controls communication via the network.

図22は、第2の実施形態に係る情報共有システムの動作の例を示すシーケンスチャートである。この図22と、図23〜図26に示すIWB100bおよび端末装置200における画面例を用いて、第2の実施形態に係る情報共有システムの動作について説明する。なお、図23、図25および図26において、上述した図1および図2と共通する部分には同一の符号を付して、詳細な説明を省略する。   FIG. 22 is a sequence chart illustrating an example of the operation of the information sharing system according to the second embodiment. The operation of the information sharing system according to the second embodiment will be described using FIG. 22 and screen examples in the IWB 100b and the terminal device 200 shown in FIGS. 23, FIG. 25 and FIG. 26, the same reference numerals are given to the same parts as those in FIG. 1 and FIG.

IWB100bにおいて、ブラウザが起動されると、ブラウザは、当該ブラウザに第2の実施形態に係る処理を実行させるためのIWBプログラムを、ネットワークを介してサーバ300に要求する(ステップS100)。サーバ300は、この要求に応じて、プログラム記憶部314からIWBプログラムを読み出して通信部310によりネットワークを介してIWB100bに送信する(ステップS101)。   When the browser is activated in the IWB 100b, the browser requests the server 300 via the network for an IWB program for causing the browser to execute the processing according to the second embodiment (step S100). In response to this request, the server 300 reads the IWB program from the program storage unit 314 and transmits it to the IWB 100b via the network by the communication unit 310 (step S101).

IWB100bは、プラウザによりサーバ300からのIWBプログラムを受信すると、ブラウザ上でIWBプログラムを実行させる。IWBプログラムが実行されると、図23(a)に例示されるように、IWB100bの表示部124における表示領域10に対して、ユーザ操作によりオブジェクト30の描画が可能な描画領域11と、各種機能を実行させるための各種アイコンが表示されるツールバー12とが表示される。第2の実施形態においては、ツールバー12に対して、付箋の利用の開始を指示するためのシンボルとしてのアイコン画像50がさらに表示される。   When the browser receives the IWB program from the server 300, the IWB 100b executes the IWB program on the browser. When the IWB program is executed, as illustrated in FIG. 23A, the drawing area 11 in which the object 30 can be drawn by a user operation on the display area 10 in the display unit 124 of the IWB 100b, and various functions And a tool bar 12 on which various icons for executing are displayed. In the second embodiment, an icon image 50 is further displayed on the toolbar 12 as a symbol for instructing the start of use of a sticky note.

IWB100bは、IWBプログラムに従い、サーバ300に対して当該IWB100bにユニークは識別情報(ユニークID)を要求する(ステップS102)。サーバ300は、この要求に応じて、ユニークID生成部313により識別情報(ID=123とする)を生成し、生成した識別情報をIWB100bに送信する(ステップS103)。   In accordance with the IWB program, the IWB 100b requests the server 300 for identification information (unique ID) unique to the IWB 100b (step S102). In response to this request, the server 300 generates identification information (ID = 123) by the unique ID generation unit 313, and transmits the generated identification information to the IWB 100b (step S103).

IWB100bは、サーバ300から識別情報を取得すると、サーバ300に対して、識別情報に基づく識別画像を要求する(ステップS104)。サーバ300は、この要求に応じて、識別画像生成部312により、IWB100bからの識別情報を画像により符号化した識別画像を生成する。このとき、サーバ300は、識別情報にサーバ300のURLを付加した情報を符号化して、識別画像を生成する。ここでは、識別画像をQRコード(登録商標)とする。識別画像は、QRコード(登録商標)に限定されず、他のフォーマットでもよいし、識別情報およびURLをそのまま文字列で表した画像でもよい。サーバ300は、生成した識別画像をIWB100bに送信する(ステップS105)。   When acquiring the identification information from the server 300, the IWB 100b requests the server 300 for an identification image based on the identification information (step S104). In response to this request, the server 300 uses the identification image generation unit 312 to generate an identification image obtained by encoding the identification information from the IWB 100b with an image. At this time, the server 300 encodes information obtained by adding the URL of the server 300 to the identification information, and generates an identification image. Here, the identification image is a QR code (registered trademark). The identification image is not limited to the QR code (registered trademark), and may be in another format, or may be an image in which the identification information and the URL are directly represented by a character string. The server 300 transmits the generated identification image to the IWB 100b (Step S105).

なお、IWB100bは、ステップS105でサーバ300からの識別画像を受信した時点で、サーバ300に対してポーリングを行い(ステップS106)、自分宛(ID=123宛)のメッセージの有無を確認する。   When the identification image is received from the server 300 in step S105, the IWB 100b polls the server 300 (step S106) and confirms whether there is a message addressed to itself (ID = 123).

次に、ユーザ操作によりアイコン画像50がタップされることで、IWB100bに対して第2の実施形態に係る付箋の利用の開始が指示される(ステップS107)。この指示に応じて、IWB100bは、図23(b)に例示されるように、表示制御部111により識別画像51を表示領域10に表示させる(ステップS108)。   Next, when the icon image 50 is tapped by the user operation, the IWB 100b is instructed to start using the tag according to the second embodiment (step S107). In response to this instruction, the IWB 100b causes the display control unit 111 to display the identification image 51 on the display area 10 as illustrated in FIG. 23B (step S108).

端末装置200を保持するユーザは、端末装置200を操作して、IWB100bの描画領域11に表示された識別画像51を撮像(スキャン)する(ステップS109)。例えば、端末装置200において、ユーザ操作に応じて、撮像制御部214の制御に従い撮像部230で識別画像51を含む被写体が撮像され、撮像画像として取得される。例えば制御部212は、この撮像画像を解析して識別画像部分を抽出し、抽出した識別画像を復号して識別情報(ID=123)とサーバ300のURLとを取得する(ステップS110)。   The user holding the terminal device 200 operates the terminal device 200 to capture (scan) the identification image 51 displayed in the drawing area 11 of the IWB 100b (step S109). For example, in the terminal device 200, a subject including the identification image 51 is captured by the imaging unit 230 according to the control of the imaging control unit 214 in accordance with a user operation, and acquired as a captured image. For example, the control unit 212 analyzes the captured image to extract an identification image portion, decodes the extracted identification image, and acquires identification information (ID = 123) and the URL of the server 300 (step S110).

このような、識別画像の撮像、解析および復号処理は、例えば、端末装置200に予め搭載されるアプリケーションにより実行させることができる。   Such identification image capturing, analysis, and decoding processes can be executed by, for example, an application installed in the terminal device 200 in advance.

端末装置200は、ブラウザにより識別画像に基づき取得したURLに従いサーバ300と通信を行い、付箋情報を入力するための付箋画面を要求する(ステップS111)。サーバ300は、この要求に応じて、プログラム記憶部314から付箋プログラムを読み出して通信部310によりネットワークを介して端末装置200に送信する(ステップS112)。   The terminal device 200 communicates with the server 300 in accordance with the URL acquired based on the identification image by the browser, and requests a tag screen for inputting tag information (step S111). In response to this request, the server 300 reads the tag program from the program storage unit 314 and transmits it to the terminal device 200 via the network by the communication unit 310 (step S112).

端末装置200は、ブラウザによりサーバ300からの付箋プログラムを受信すると、ブラウザ上で付箋プログラムを実行させる。付箋プログラムが実行されると、端末装置200の表示部224に対して付箋画面が表示される(ステップS113)。   When the terminal device 200 receives the tag program from the server 300 by the browser, the terminal device 200 executes the tag program on the browser. When the sticky note program is executed, a sticky note screen is displayed on the display unit 224 of the terminal device 200 (step S113).

図24は、端末装置200の表示部224に表示される付箋画面の例を示す。図24(a)において、端末装置200の表示部224における表示領域60に対して、ユーザ操作により付箋情報の入力(描画)が可能な付箋情報入力領域61と、各種機能を実行させるための各種アイコンや入力窓、ボタンなどが表示されるツールバー62とが形成される。   FIG. 24 shows an example of a tag screen displayed on the display unit 224 of the terminal device 200. In FIG. 24A, a sticky note information input area 61 in which sticky information can be input (drawn) by a user operation on the display area 60 in the display unit 224 of the terminal device 200, and various functions for executing various functions. A tool bar 62 on which icons, input windows, buttons, and the like are displayed is formed.

ツールバー62において、アイコン画像70は、付箋情報入力領域61に対して付箋情報を入力する際に選択する。例えば、ユーザは、アイコン画像70をタップして選択した後に付箋情報入力領域61内を手指などでなぞることで、なぞった軌跡に従った画像を描画することができる。図24(b)は、このようにして、アイコン画像70を選択して、付箋情報入力領域61に対して、オブジェクト80として示される画像を描画した例を示す。このオブジェクト80が付箋情報に含まれる付箋画像として端末装置200に入力される。   In the tool bar 62, the icon image 70 is selected when the tag information is input to the tag information input area 61. For example, the user can draw an image in accordance with the traced path by tapping and selecting the icon image 70 and tracing the inside of the tag information input area 61 with a finger or the like. FIG. 24B shows an example in which the icon image 70 is selected in this way and an image shown as the object 80 is drawn in the tag information input area 61. The object 80 is input to the terminal device 200 as a tag image included in the tag information.

アイコン画像71は、付箋情報入力領域61にに描画された画像の一部を消去する際に選択する。例えば、アイコン画像71をタップして選択した後に、上述のオブジェクト80上を手指などでなぞることで、なぞった軌跡に沿ってオブジェクト80の部分が消去される。   The icon image 71 is selected when a part of the image drawn in the tag information input area 61 is deleted. For example, after the icon image 71 is selected by tapping, the portion of the object 80 is erased along the traced path by tracing the object 80 with a finger or the like.

画像は、第1の実施形態において上述したオブジェクト30などと同様に、SVG形式で記述される。これに限らず、画像をビットマップを用いて表現してもよい。また、付箋情報は、上述のように画像として入力するものに限定されない。例えば、付箋情報をテキスト情報(文字コード)として入力してもよい。   The image is described in the SVG format, similar to the object 30 described above in the first embodiment. However, the present invention is not limited to this, and the image may be expressed using a bitmap. Further, the sticky note information is not limited to information input as an image as described above. For example, sticky note information may be input as text information (character code).

ツールバー62において、名前入力部72は、例えば付箋情報を入力したユーザを識別するためのユーザ識別情報を入力することができる。ユーザ識別情報としては、当該ユーザの名前やニックネームを用いることができる。以下、このユーザ識別情報として名前を用いるものとする。例えば、名前入力部72をタップすることで、端末装置200に予め搭載される文字入力機能が起動され、キーパッドなどのような文字入力手段が表示部224上に出現する。ユーザは、この文字入力機能を利用してテキスト情報として名前を入力することができる。入力された名前を示す情報が付箋情報に追加して含められる。   In the toolbar 62, the name input unit 72 can input user identification information for identifying the user who has input the tag information, for example. As the user identification information, the name or nickname of the user can be used. Hereinafter, a name is used as the user identification information. For example, by tapping the name input unit 72, a character input function that is previously installed in the terminal device 200 is activated, and a character input unit such as a keypad appears on the display unit 224. The user can input a name as text information using this character input function. Information indicating the input name is included in addition to the tag information.

ツールバー62において、ボタン73は、付箋情報入力領域61および名前入力部72により入力された付箋情報をサーバ300に送信する際に用いるボタンである。   In the toolbar 62, a button 73 is a button used when transmitting the tag information input by the tag information input area 61 and the name input unit 72 to the server 300.

ユーザは、端末装置200を操作して、上述のようにして付箋情報を端末装置200に対して入力する(ステップS114)。端末装置200は、ボタン73の操作に応じて(ステップS115)、入力された付箋情報を、ステップS109およびステップS110で識別画像51から取得したIWB100bの識別情報を付加してサーバ300に対して送信する(ステップS116)。この付箋情報がサーバ300に受信される。   The user operates the terminal device 200 to input sticky note information to the terminal device 200 as described above (step S114). In response to the operation of the button 73 (step S115), the terminal device 200 adds the identification information of the IWB 100b acquired from the identification image 51 in steps S109 and S110 to the input sticky note information and transmits it to the server 300. (Step S116). This sticky note information is received by the server 300.

一方、IWB100bは、ステップS106で上述したように、サーバ300に対してポーリングを行い、自分宛てのメッセージの有無を確認している。IWB100bは、このポーリングによりステップS116でサーバ300に送信された自分宛(ID=123)のメッセージを発見すると(ステップS117)、このメッセージをサーバ300に対して要求する(ステップS118)。サーバ300は、この要求に応じて、端末装置200から送信された付箋情報を、これら付箋情報に付加された送信された識別情報(ID=123)に示されるIWB100bに送信する(ステップS119)。   On the other hand, as described above in step S106, the IWB 100b polls the server 300 to check whether there is a message addressed to itself. When the IWB 100b finds a message addressed to itself (ID = 123) transmitted to the server 300 in step S116 by this polling (step S117), the IWB 100b requests the server 300 for this message (step S118). In response to this request, the server 300 transmits the tag information transmitted from the terminal device 200 to the IWB 100b indicated by the transmitted identification information (ID = 123) added to the tag information (step S119).

IWB100bは、サーバ300から送信された付箋情報を受信すると、ツールバー12に対して付箋情報を受信した旨を示すアイコン画像を追加して表示する(ステップS120)。例えば、IWB100bは、受信した付箋情報を表示情報記憶部115に記憶させる。また、IWB100bにおいて、表示制御部111は、例えば受信した付箋情報を示すアイコン画像を生成してツールバー12に表示すると共に、アイコン記憶部114に追加して記憶させる。   Upon receiving the tag information transmitted from the server 300, the IWB 100b adds and displays an icon image indicating that the tag information has been received on the toolbar 12 (step S120). For example, the IWB 100b stores the received tag information in the display information storage unit 115. Further, in the IWB 100b, the display control unit 111 generates, for example, an icon image indicating the received tag information and displays it on the toolbar 12, and additionally stores it in the icon storage unit 114.

ユーザは、ツールバー12に表示された付箋情報を示すアイコン画像を操作することで、付箋情報を描画領域11内の所望の位置に表示させることができる。図25を用いて、付箋情報を示すアイコン画像に対する操作について説明する。   The user can display the tag information at a desired position in the drawing area 11 by operating the icon image indicating the tag information displayed on the toolbar 12. With reference to FIG. 25, an operation on an icon image indicating sticky note information will be described.

図25(a)は、ツールバー12上に付箋情報を示すアイコン画像が表示された例を示す。図25(a)の例では、3の付箋情報にそれぞれ対応する3のアイコン画像52a、52bおよび52cがツールバー12に表示されている。この例では、表示制御部111は、各アイコン画像52a、52bおよび52cを、それぞれ対応する付箋画像を縮小して形成したサムネイル画像を用いて生成している。また、ツールバー12において、各アイコン画像52a、52bおよび52cに対して、それぞれ対応する名前を示す名前情報53a。53bおよび53cが表示されている。   FIG. 25A shows an example in which an icon image indicating sticky note information is displayed on the toolbar 12. In the example of FIG. 25A, three icon images 52a, 52b and 52c corresponding to the three pieces of tag information are displayed on the tool bar 12, respectively. In this example, the display control unit 111 generates the icon images 52a, 52b, and 52c using thumbnail images formed by reducing the corresponding tag image. Further, in the tool bar 12, name information 53a indicating names corresponding to the icon images 52a, 52b and 52c, respectively. 53b and 53c are displayed.

ツールバー12上の各アイコン画像52a、52bおよび52cを指定し、続けて描画領域11内の所望の位置を指定することで、当該所望の位置に対して指定したアイコン画像に対応する付箋情報を表示させることができる。例えば、図15(b)に例示されるように、ユーザが例えばアイコン画像52cをタップし、続けて描画領域11内の位置54をタップしたものとする。   By designating each icon image 52a, 52b and 52c on the toolbar 12, and subsequently designating a desired position in the drawing area 11, sticky note information corresponding to the designated icon image is displayed for the desired position. Can be made. For example, as illustrated in FIG. 15B, it is assumed that the user has tapped the icon image 52 c and subsequently tapped the position 54 in the drawing area 11.

この場合、図25(c)に例示されるように、アイコン画像52cに対応する付箋情報に含まれる付箋画像52c’が位置54に表示され、付箋画像52c’に対応する名前情報53c’が付箋画像52c’の近傍に表示される。付箋画像52c’のサイズは、予め定められたサイズに設定してもよいし、付箋画像52c’内のオブジェクト80に応じて動的に設定してもよい。アイコン画像52cに対応する付箋画像52c’が描画領域11内に表示されると、ツールバー12上の当該アイコン画像52cは、消去される。   In this case, as illustrated in FIG. 25C, the sticky note image 52c ′ included in the sticky note information corresponding to the icon image 52c is displayed at the position 54, and the name information 53c ′ corresponding to the sticky note image 52c ′ is attached to the sticky note. It is displayed in the vicinity of the image 52c ′. The size of the sticky note image 52c ′ may be set to a predetermined size, or may be dynamically set according to the object 80 in the sticky note image 52c ′. When a sticky note image 52c ′ corresponding to the icon image 52c is displayed in the drawing area 11, the icon image 52c on the toolbar 12 is deleted.

ここで、描画領域11内に表示される付箋画像52c’を例えば手指などで接触して指定したまま接触位置を移動させるドラッグ操作を行うことで、付箋画像52c’の描画領域11内での位置を移動させることができる。名前情報53c’は、対応する付箋画像52c’の移動に従い移動される。   Here, the position of the tag image 52c ′ in the drawing area 11 is performed by performing a drag operation to move the contact position while the tag image 52c ′ displayed in the drawing area 11 is touched and specified by, for example, a finger. Can be moved. The name information 53c 'is moved according to the movement of the corresponding tag image 52c'.

なお、上述では、所望のアイコン画像52cをタップし、次に当該アイコン画像52cに対応する付箋画像52c’を表示させたい位置54をタップすることで、位置54に対して付箋画像52c’を表示させているが、これはこの例に限定されず。ドラッグ&ドロップ操作を用いてもよい。例えば、図26に経路55で例示されるように、ツールバー12上のアイコン画像52cをドラッグ&ドロップ操作で所望の位置54まで移動させ、ユーザがアイコン画像52cから手指を離したときに、位置54に対して付箋画像52c’を表示させる。なお、この場合、ツールバー12上のアイコン画像52cは、ドラッグ&ドロップ操作後は、ツールバー12から消去される。   Note that, in the above description, the desired icon image 52c is tapped, and then the position 54 where the tag image 52c ′ corresponding to the icon image 52c is to be displayed is tapped to display the tag image 52c ′ for the position 54. This is not limited to this example. A drag and drop operation may be used. For example, as illustrated by a path 55 in FIG. 26, when the icon image 52c on the toolbar 12 is moved to a desired position 54 by a drag and drop operation, and the user releases the finger from the icon image 52c, the position 54 The sticky note image 52c ′ is displayed. In this case, the icon image 52c on the toolbar 12 is deleted from the toolbar 12 after the drag and drop operation.

また、紙による付箋が何時でも剥がせるように、描画領域11内に表示される付箋画像52c’も、ユーザ操作に応じて描画領域11から消去させることができる。一例として、描画領域11内に表示される付箋画像52c’を2回連続してタップすることで、当該付箋画像52c’を描画領域11から消去することが考えられる。このとき、描画領域11から消去された付箋画像52c’に対応するアイコン画像52cがツールバー12に追加して表示される。   In addition, the sticky note image 52c ′ displayed in the drawing area 11 can also be erased from the drawing area 11 in response to a user operation so that the paper sticky note can be peeled off at any time. As an example, it can be considered that the sticky note image 52 c ′ displayed in the drawing area 11 is tapped twice in succession to delete the sticky note image 52 c ′ from the drawing area 11. At this time, an icon image 52 c corresponding to the tag image 52 c ′ deleted from the drawing area 11 is additionally displayed on the toolbar 12.

これに限らず、付箋画像52’をドラッグ&ドロップ操作により描画領域11の外部に移動させることで、当該付箋画像52c’を描画領域11から消去させるようにもできる。この場合でも、消去させた付箋画像52c’に対応するアイコン画像52cは、ツールバー12内に再び表示させるようにする。また、図26の手順と逆の手順を辿り、描画領域11内に表示される付箋画像52c’をドラッグ&ドロップ操作によりツールバー12上に移動させることで、当該付箋画像52c’を描画領域11から消去させ、対応するアイコン画像52cをツールバー12内に表示させるようにもできる。   However, the sticky note image 52 ′ can be deleted from the drawing area 11 by moving the sticky note image 52 ′ to the outside of the drawing area 11 by a drag and drop operation. Even in this case, the icon image 52c corresponding to the erased tag image 52c 'is displayed in the toolbar 12 again. 26, the sticky note image 52c ′ displayed in the drawing area 11 is moved onto the toolbar 12 by a drag-and-drop operation so that the sticky note image 52c ′ is moved from the drawing area 11. It is possible to delete the icon image 52c and display the corresponding icon image 52c in the toolbar 12.

このように、第2の実施形態では、端末装置200に対して入力した付箋情報をIWB100bに表示させることができる。また、付箋情報を示すアイコン画像52a〜52cがツールバー12に表示され、このアイコン画像52a〜52cを描画領域11内に移動させることで、対応する付箋情報を描画領域11に表示させることができる。そのため、IWB100b上で付箋の機能を実現でき、IWBの利便性が向上する。   As described above, in the second embodiment, the tag information input to the terminal device 200 can be displayed on the IWB 100b. Further, icon images 52 a to 52 c indicating sticky note information are displayed on the toolbar 12, and the corresponding sticky note information can be displayed in the drawing area 11 by moving the icon images 52 a to 52 c into the drawing area 11. Therefore, the function of a tag can be realized on the IWB 100b, and the convenience of the IWB is improved.

なお、この第2の実施形態は、上述した第1の実施形態と組み合わせて実施することが可能である。   This second embodiment can be implemented in combination with the first embodiment described above.

なお、上述の実施形態は、本発明の好適な実施の例ではあるがこれに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変形による実施が可能である。   The above-described embodiment is a preferred embodiment of the present invention, but is not limited thereto, and various modifications can be made without departing from the scope of the present invention.

10,60 表示領域
11 描画領域
12,62 ツールバー
13 定義領域
14 窓領域
20,21,23,50,52a,52b,52c,70,71 アイコン画像
22a,22a’,22b,22b’,22c,22c’,22d,22d’ スタンプ
25a,25b,25c,25d ピン画像
30,301,302,303,30m,30n,80 オブジェクト
51 識別画像
52c’ 付箋画像
53a,53b,53c 名前情報
53c’ 名前
61 付箋情報入力領域
72 名前入力部
100a,100b IWB
110,210 入力処理部
111,211 表示制御部
114 アイコン記憶部
115 表示情報記憶部
116,310 通信部
124,224 表示部
125,225 入力部
126,226 タッチパネル
200 端末装置
300 サーバ
312 識別画像生成部
313 ユニークID生成部
314 プログラム記憶部
10, 60 Display area 11 Drawing area 12, 62 Toolbar 13 Definition area 14 Window area 20, 21, 23, 50, 52a, 52b, 52c, 70, 71 Icon images 22a, 22a ', 22b, 22b', 22c, 22c ', 22d, 22d' Stamps 25a, 25b, 25c, 25d Pin images 30, 30 1 , 30 2 , 30 3 , 30 m , 30 n , 80 Object 51 Identification image 52c 'Sticky image 53a, 53b, 53c Name information 53c 'Name 61 Sticky note information input area 72 Name input part 100a, 100b IWB
110, 210 Input processing unit 111, 211 Display control unit 114 Icon storage unit 115 Display information storage unit 116, 310 Communication unit 124, 224 Display unit 125, 225 Input unit 126, 226 Touch panel 200 Terminal device 300 Server 312 Identification image generation unit 313 Unique ID generation unit 314 Program storage unit

特開2013−39701号公報JP 2013-39701 A

Claims (10)

1以上の情報処理装置から構成される情報処理システムと、端末装置と、画像を表示する表示部を有する表示装置とを含む情報共有システムであって、
前記表示装置は、
ネットワーク上で自身を識別する識別情報を取得する第1の識別情報取得部と、
前記表示部に対する画像の表示を制御する表示制御部と
を備え、
前記端末装置は、
ユーザ操作により付箋情報を入力する入力部と、
前記表示装置から前記識別情報を取得する第2の識別情報取得部と、
前記付箋情報に前記第2の識別情報取得部により取得した前記識別情報を付加して前記情報処理システムに送信する送信部と
を備え、
前記情報処理システムは、
前記端末装置から送信された前記識別情報に基づき前記表示装置と前記ネットワークを介して通信を行い、該識別情報に付加された前記付箋情報を該識別情報で識別される前記表示装置に送信する通信制御部と
を備え、
前記表示制御部は、
前記情報処理システムから送信された前記付箋情報を示すシンボルを前記表示部の第1の表示領域に表示させ、該シンボルを指定するユーザ操作に応じて該シンボルに対応する該付箋情報を前記表示部の第2の表示領域に表示させる
ことを特徴とする情報共有システム。
An information sharing system including an information processing system including one or more information processing devices, a terminal device, and a display device having a display unit for displaying an image,
The display device
A first identification information acquisition unit for acquiring identification information for identifying itself on the network;
A display control unit that controls display of an image on the display unit,
The terminal device
An input unit for inputting sticky note information by a user operation;
A second identification information acquisition unit for acquiring the identification information from the display device;
A transmission unit that adds the identification information acquired by the second identification information acquisition unit to the tag information and transmits the information to the information processing system;
The information processing system includes:
Communication for communicating with the display device via the network based on the identification information transmitted from the terminal device, and transmitting the tag information added to the identification information to the display device identified by the identification information A control unit,
The display control unit
A symbol indicating the sticky note information transmitted from the information processing system is displayed in a first display area of the display unit, and the sticky note information corresponding to the symbol is displayed on the display unit in response to a user operation for designating the symbol. An information sharing system for displaying in the second display area.
前記表示制御部は、
前記シンボルに対応する前記付箋情報を、ユーザ操作により前記第2の表示領域内に指定された位置に表示させる
ことを特徴とする請求項1に記載の情報共有システム。
The display control unit
2. The information sharing system according to claim 1, wherein the sticky note information corresponding to the symbol is displayed at a position designated in the second display area by a user operation.
前記表示制御部は、
前記付箋情報を前記第2の表示領域に表示させた場合に、該付箋情報に対応する前記シンボルを前記第1の表示領域から消去する
ことを特徴とする請求項1または請求項2に記載の情報共有システム。
The display control unit
3. The symbol according to claim 1, wherein when the sticky note information is displayed in the second display area, the symbol corresponding to the sticky note information is deleted from the first display area. Information sharing system.
前記付箋情報は、
それぞれ前記入力部に入力された、文字情報と該文字情報を入力したユーザを識別するためのユーザ識別情報とを含む
ことを特徴とする請求項1乃至請求項3の何れか1項に記載の情報共有システム。
The tag information is
4. The method according to claim 1, comprising character information input to the input unit and user identification information for identifying a user who has input the character information. 5. Information sharing system.
前記入力部は、
前記文字情報を画像として入力する
ことを特徴とする請求項4に記載の情報共有システム。
The input unit is
The information sharing system according to claim 4, wherein the character information is input as an image.
前記入力部は、
前記文字情報を文字コードを用いて入力する
ことを特徴とする請求項4に記載の情報共有システム。
The input unit is
5. The information sharing system according to claim 4, wherein the character information is input using a character code.
前記情報処理システムは、
前記表示装置から送信された前記識別情報を符号化した符号化画像を生成する符号化画像生成部をさらに有し、
前記第1の識別情報取得部は、
前記識別情報を前記情報処理システムに送信して該識別情報を符号化した前記符号化画像を前記情報処理システムに要求し、要求に応じて前記情報処理システムから送信された前記符号化画像を前記表示部に表示させ、
前記第2の識別情報取得部は、
被写体を撮像する撮像部と、
前記撮像部により撮像された前記符号化画像を復号して前記識別情報を抽出する復号部と
を備える
ことを特徴とする請求項1乃至請求項6の何れか1項に記載の情報共有システム。
The information processing system includes:
An encoded image generation unit that generates an encoded image obtained by encoding the identification information transmitted from the display device;
The first identification information acquisition unit
The identification information is transmitted to the information processing system, the encoded image obtained by encoding the identification information is requested to the information processing system, and the encoded image transmitted from the information processing system in response to the request is transmitted to the information processing system. Display on the display,
The second identification information acquisition unit
An imaging unit for imaging a subject;
The information sharing system according to claim 1, further comprising: a decoding unit that decodes the encoded image captured by the imaging unit and extracts the identification information.
1以上の情報処理装置から構成される情報処理システムと、端末装置と、画像を表示する表示部を有する表示装置とを含む情報共有システムの情報共有方法であって、
前記表示装置が、ネットワーク上で自身を識別する識別情報を取得する第1の識別情報取得ステップと、
前記端末装置が、前記表示装置から前記識別情報を取得する第2の識別情報取得ステップと、
前記端末装置が、ユーザ操作により入力された付箋情報に、前記第2の識別情報取得ステップにより取得した前記識別情報を付加して前記情報処理システムに送信する送信ステップと、
前記情報処理システムが、前記端末装置から送信された前記識別情報に基づき前記表示装置と前記ネットワークを介して通信を行い、該識別情報に付加された前記付箋情報を該識別情報で識別される前記表示装置に送信する通信制御ステップと
を備え、
前記表示装置は、
前記情報処理システムから送信された前記付箋情報を示すシンボルを前記表示部の第1の表示領域に表示させ、該シンボルを指定するユーザ操作に応じて該シンボルに対応する該付箋情報を前記表示部の第2の表示領域に表示させる
ことを特徴とする情報共有方法。
An information sharing method of an information sharing system including an information processing system including one or more information processing devices, a terminal device, and a display device having a display unit for displaying an image,
A first identification information acquisition step in which the display device acquires identification information for identifying itself on a network;
A second identification information acquisition step in which the terminal device acquires the identification information from the display device;
A transmission step in which the terminal device adds the identification information acquired in the second identification information acquisition step to the tag information input by a user operation and transmits the information to the information processing system;
The information processing system communicates with the display device based on the identification information transmitted from the terminal device via the network, and the tag information added to the identification information is identified by the identification information. A communication control step for transmitting to the display device,
The display device
A symbol indicating the sticky note information transmitted from the information processing system is displayed in a first display area of the display unit, and the sticky note information corresponding to the symbol is displayed on the display unit in response to a user operation for designating the symbol. An information sharing method, comprising: displaying in the second display area.
画像を表示する表示部を有する表示装置として使用される第1のコンピュータ、および、端末装置として使用される第2のコンピュータと、ネットワークを介して接続される情報処理装置であって、
前記第1のコンピュータを、該第1のコンピュータが前記ネットワーク上で自身を識別する識別情報を取得する識別情報取得部と、前記表示部に対する画像の表示を制御し、前記情報処理装置から送信された付箋情報を示すシンボルを該表示部の第1の表示領域に表示させ、該シンボルを指定するユーザ操作に応じて該シンボルに対応する該付箋情報を該表示部の第2の表示領域に表示させる表示制御部として機能させるための第1のプログラムを前記第1のコンピュータに送信し、
前記第2のコンピュータを、ユーザ操作により入力された前記付箋情報に、前記第2のコンピュータから取得した前記識別情報を付加して前記情報処理システムに送信する送信部として機能させるための第2のプログラムを前記第2のコンピュータに送信するプログラム送信部と、
前記第2のコンピュータから送信された前記識別情報に基づき前記第1のコンピュータと前記ネットワークを介して通信を行い、該識別情報に付加された前記付箋情報を該識別情報で識別される前記第1のコンピュータに送信する通信制御部と
を備えることを特徴とする情報処理装置。
An information processing apparatus connected via a network to a first computer used as a display device having a display unit for displaying an image and a second computer used as a terminal device,
The first computer controls the display of an image on the display unit, an identification information acquisition unit for acquiring identification information for identifying the first computer on the network, and is transmitted from the information processing apparatus. A symbol indicating the tag information is displayed in the first display area of the display unit, and the tag information corresponding to the symbol is displayed in the second display area of the display unit in response to a user operation for designating the symbol Transmitting a first program for causing the display control unit to function as the first computer,
A second computer configured to cause the second computer to function as a transmission unit that adds the identification information acquired from the second computer to the tag information input by a user operation and transmits the information to the information processing system. A program transmission unit for transmitting a program to the second computer;
Based on the identification information transmitted from the second computer, the first computer communicates with the first computer via the network, and the sticky information added to the identification information is identified by the identification information. An information processing apparatus comprising: a communication control unit that transmits to the computer.
画像を表示する表示部を有する表示装置として使用される第1のコンピュータ、および、端末装置として使用される第2のコンピュータと、ネットワークを介して接続される情報処理装置の情報処理方法であって、
前記第1のコンピュータを、該第1のコンピュータが前記ネットワーク上で自身を識別する識別情報を取得する識別情報取得部と、前記表示部に対する画像の表示を制御し、前記情報処理装置から送信された付箋情報を示すシンボルを該表示部の第1の表示領域に表示させ、該シンボルを指定するユーザ操作に応じて該シンボルに対応する該付箋情報を該表示部の第2の表示領域に表示させる表示制御部として機能させるための第1のプログラムを前記第1のコンピュータに送信する第1のプログラム送信ステップと、
前記第2のコンピュータを、ユーザ操作により入力された前記付箋情報に、前記第2のコンピュータから取得した前記識別情報を付加して前記情報処理システムに送信する送信部として機能させるための第2のプログラムを前記第2のコンピュータに送信する第2のプログラム送信ステップと、
前記第2のコンピュータから送信された前記識別情報に基づき前記第1のコンピュータと前記ネットワークを介して通信を行い、該識別情報に付加された前記付箋情報を該識別情報で識別される前記第1のコンピュータに送信する通信制御ステップと
を備えることを特徴とする情報処理方法。
An information processing method for an information processing device connected via a network to a first computer used as a display device having a display unit for displaying an image and a second computer used as a terminal device. ,
The first computer controls the display of an image on the display unit, an identification information acquisition unit for acquiring identification information for identifying the first computer on the network, and is transmitted from the information processing apparatus. A symbol indicating the tag information is displayed in the first display area of the display unit, and the tag information corresponding to the symbol is displayed in the second display area of the display unit in response to a user operation for designating the symbol A first program transmission step of transmitting a first program for causing the display control unit to function to the first computer;
A second computer configured to cause the second computer to function as a transmission unit that adds the identification information acquired from the second computer to the tag information input by a user operation and transmits the information to the information processing system. A second program transmission step of transmitting a program to the second computer;
Based on the identification information transmitted from the second computer, the first computer communicates with the first computer via the network, and the sticky information added to the identification information is identified by the identification information. And a communication control step of transmitting to the computer.
JP2014012870A 2014-01-27 2014-01-27 Information sharing system, information sharing method, information processing apparatus, and information processing method Expired - Fee Related JP6225724B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014012870A JP6225724B2 (en) 2014-01-27 2014-01-27 Information sharing system, information sharing method, information processing apparatus, and information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014012870A JP6225724B2 (en) 2014-01-27 2014-01-27 Information sharing system, information sharing method, information processing apparatus, and information processing method

Publications (2)

Publication Number Publication Date
JP2015141479A JP2015141479A (en) 2015-08-03
JP6225724B2 true JP6225724B2 (en) 2017-11-08

Family

ID=53771808

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014012870A Expired - Fee Related JP6225724B2 (en) 2014-01-27 2014-01-27 Information sharing system, information sharing method, information processing apparatus, and information processing method

Country Status (1)

Country Link
JP (1) JP6225724B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6932370B2 (en) * 2017-02-20 2021-09-08 国立大学法人 名古屋工業大学 Facilitator support system for large-scale discussions on the web

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005228107A (en) * 2004-02-13 2005-08-25 Konan Gakuen Online communication system and online communication method
JP4559988B2 (en) * 2006-03-22 2010-10-13 株式会社東芝 Service providing system, server device and portable communication device used in the service providing system, and program for these devices
JP5233759B2 (en) * 2009-03-11 2013-07-10 富士ゼロックス株式会社 Information processing apparatus and program

Also Published As

Publication number Publication date
JP2015141479A (en) 2015-08-03

Similar Documents

Publication Publication Date Title
JP2015158900A (en) Information processing device, information processing method and information processing program
US9335860B2 (en) Information processing apparatus and information processing system
US20170249294A1 (en) Image processing device, image processing method, and computer-readable storage medium
WO2016117321A1 (en) Electronic information board apparatus and method
CN105493023A (en) Manipulation of content on a surface
JP7042622B2 (en) Image processing device, image processing system, image processing method, and program
JP6493546B2 (en) Electronic blackboard, storage medium, and information display method
JP6988060B2 (en) Image processing equipment, image processing system, image processing method and program
US10855481B2 (en) Live ink presence for real-time collaboration
US20150169134A1 (en) Methods circuits apparatuses systems and associated computer executable code for providing projection based human machine interfaces
CN108205415B (en) Text selection method and device
JP2015069365A (en) Information processing equipment and control program
CN110663017B (en) Multi-stroke intelligent ink gesture language
CN105912315A (en) Information Processing Apparatus, Information Processing System, Information Processing Method, And A Computer Program Product
US20160357395A1 (en) Information processing device, non-transitory computer-readable recording medium storing an information processing program, and information processing method
JP2015095066A (en) Information processing apparatus and information processing program
US20160117140A1 (en) Electronic apparatus, processing method, and storage medium
JP6225724B2 (en) Information sharing system, information sharing method, information processing apparatus, and information processing method
US20150062038A1 (en) Electronic device, control method, and computer program product
JP2015114955A (en) Information processing apparatus, information processing method, and program
JP2012226439A (en) Information processor and display device
JP2022087633A (en) Display device, erasing method switching method, and program
JP2014160416A (en) Browsing system and program
JP7383959B2 (en) Display device, usage providing method, program, image processing system
JP2018194801A (en) Display, display method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170110

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170906

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170912

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170925

R151 Written notification of patent or utility model registration

Ref document number: 6225724

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees