JP6722505B2 - 画像制御方法、装置、及びプログラム - Google Patents

画像制御方法、装置、及びプログラム Download PDF

Info

Publication number
JP6722505B2
JP6722505B2 JP2016095505A JP2016095505A JP6722505B2 JP 6722505 B2 JP6722505 B2 JP 6722505B2 JP 2016095505 A JP2016095505 A JP 2016095505A JP 2016095505 A JP2016095505 A JP 2016095505A JP 6722505 B2 JP6722505 B2 JP 6722505B2
Authority
JP
Japan
Prior art keywords
information
option
card
display device
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016095505A
Other languages
English (en)
Other versions
JP2017204146A (ja
Inventor
聡一 西山
聡一 西山
浩晃 杉村
浩晃 杉村
健 藤木
健 藤木
元 広住
元 広住
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Fujitsu Social Science Labs Ltd
Original Assignee
Fujitsu Ltd
Fujitsu Social Science Labs Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd, Fujitsu Social Science Labs Ltd filed Critical Fujitsu Ltd
Priority to JP2016095505A priority Critical patent/JP6722505B2/ja
Priority to US15/585,325 priority patent/US10372297B2/en
Priority to EP17170382.0A priority patent/EP3244293B1/en
Publication of JP2017204146A publication Critical patent/JP2017204146A/ja
Application granted granted Critical
Publication of JP6722505B2 publication Critical patent/JP6722505B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/101—Collaborative creation, e.g. joint development of products or services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G06Q30/0203—Market surveys; Market polls
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/206—Drawing of charts or graphs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Human Resources & Organizations (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

開示の技術は、画像制御方法、画像制御装置、及び画像制御プログラムに関する。
一般に、製品やサービスの企画及び開発においては、ユーザの生の声からユーザが何を要望しているかを如何にして早く正確に抽出するかが重要となる。このような背景から、現在、製品又はサービスに対するユーザの要望を抽出し、ユーザが満足する製品又はサービスを速やかに市場に提供するために、アンケートやインタビュー等により、ユーザの要望に対する様々な調査が積極的に行なわれている。そこで、ユーザの要望の抽出を支援する技術が提案されている。
例えば、入力された要望情報を解析し、解析された要望情報に基づいて、記憶装置に予め記憶された、要望情報に内包されるユーザの対象製品に対する潜在的利益の達成度を定量的に測定する尺度である評価指標に対して重み付けする技術が提案されている。この技術では、重み付けされた複数の評価指標から最も重み付けされた１つまたは複数の評価指標を選択し、選択された評価指標を最大化または最小化する１つまたは複数の製品の設計コンセプトを決定する。
また、文書および文書に付与する商品またはサービスに関連する付加情報である場面情報を入力し、入力された文書を形態素解析に基づいて解析する技術が提案されている。この技術では、文書を、場面情報に基づき所定の変換ルールに従って、ユーザが商品またはサービスに対して求める商品またはサービスの状態を示す要求表現に変換し、文書および要求表現を対応付けて表示する。
特開２００２−１０８９４６号公報 特開２００１−０６０１９４号公報
ユーザの要望を抽出し、要望に応じた製品やサービスを提供する際に、断片的なユーザの要望しか抽出できていない場合には、ユーザの要望を部分的に満たす製品やサービスの提供しか行うことができない。従って、提供される製品やサービスにとらわれることなく、ユーザが自由な発想で描いた将来のビジョンやコンセプトなど、要望の全体像を抽出することが重要である。ただし、このようなビジョンやコンセプトを厳密に抽出する作業は、時間やコストをかけたコンサルティングが必要となる。
そこで、ユーザの要望の抽出に役立つ様々な選択肢を、キーワードやイラストなどで表してユーザに提示し、ユーザ自身に自分の要望にあう内容の選択肢を選ばせる。そして、製品やサービスの提供者は、ユーザにより選ばれた選択肢を検討材料として、ユーザの要望を推測し、ユーザの要望に沿った製品やサービスを提供する手法が考えられる。
開示の技術は、一つの側面として、ユーザが様々な選択肢の存在に気付くことができるように、複数の選択肢を表示する技術を提供することを目的とする。
開示の技術は、一つの側面として、複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部を参照する。また、前記表示装置が配置された場所及び該場所に存在し、前記表示装置を共通して利用する複数のユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部を参照する。そして、前記場所及び前記複数のユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定する。そして、特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する。
一つの側面としてユーザが様々な選択肢の存在に気付くことができるように、複数の選択肢を表示することができる、という効果を有する。
本実施形態に係る画像制御システムの概略構成を示すブロック図である。 選択肢カードの一例を示す図である。 選択肢カード及びビジョンを説明するための図である。 背景の軸の他の例を示す図である。 背景の軸の他の例を示す図である。 ライブマップの一例を示す図である。 ライブマップの他の例を示す図である。 管理サーバの概略構成を示す機能ブロック図である。 カードデータベース（ＤＢ）の一例を示す図である。 変更カードＤＢの一例を示す図である。 背景ＤＢの一例を示す図である。 ビジョンＤＢの一例を示す図である。 検出情報ＤＢの一例を示す図である。 選択情報ＤＢの一例を示す図である。 第１制御装置の概略構成を示す機能ブロック図である。 第２制御装置の概略構成を示す機能ブロック図である。 第３制御装置の概略構成を示す機能ブロック図である。 管理サーバとして機能するコンピュータの概略構成を示すブロック図である。 第１制御装置として機能するコンピュータの概略構成を示すブロック図である。 第２制御装置として機能するコンピュータの概略構成を示すブロック図である。 第３制御装置として機能するコンピュータの概略構成を示すブロック図である。 第１管理処理の一例を示すフローチャートである。 第２管理処理の一例を示すフローチャートである。 第３管理処理の一例を示すフローチャートである。 第１制御処理の一例を示すフローチャートである。 選択肢カードの選択を説明するための図である。 変更カードの表示態様の変更を説明するための図である。 第２制御処理の一例を示すフローチャートである。 第３制御処理の一例を示すフローチャートである。 各装置間での情報のやり取りを示すシーケンス図である。 変更カードの表示態様の変更を説明するための図である。 選択肢カードの移動を説明するための図である。 カードＤＢの他の例を示す図である。 変更カードＤＢの他の例を示す図である。
以下、図面を参照して開示の技術に係る実施形態の一例を詳細に説明する。以下の実施形態では、例えば、ＩＣＴ（Information and Communication Technology）を活用し、社内外の問題解決を目指す例えばワークショップのような打合せを行うユーザグループの要望を抽出する場合を例に説明する。
図１に示すように、本実施形態に係る画像制御システム１００は、管理サーバ１１０と、第１制御装置１２０と、第１表示装置１３０と、第２制御装置１４０と、第２表示装置１５０と、第３制御装置１６０と、第３表示装置１７０とを含む。図１に示すように、少なくとも、第１表示装置１３０、第２表示装置１５０、及び第３表示装置１７０の各々は、画像制御システム１００により提供されるサービスを使用したワークショップが行われる室内１０１に配置される。また、室内１０１にセンシングデバイス１８０が設置され、ワークショップに参加するユーザ１０５の各々にも、センシングデバイス１８０が装着される。
管理サーバ１１０、第１制御装置１２０、第２制御装置１４０、及び第３制御装置１６０の各々は、ハブ１９０に接続されている。各装置とハブとの接続は、有線であっても無線であってもよい。また、第１制御装置１２０と第１表示装置１３０、第２制御装置１４０と第２表示装置１５０、及び第３制御装置１６０と第３表示装置１７０とはそれぞれ有線又は無線で接続されている。
管理サーバ１１０は、一般的なサーバ装置、パーソナルコンピュータ等の情報処理装置である。管理サーバ１１０は、画像制御システム１００で用いられる各種情報を管理すると共に、第１制御装置１２０、第２制御装置１４０、及び第３制御装置１６０の各々に対し、各種処理の実行を指示する。
第１表示装置１３０は、複数の選択肢カード（詳細は後述）が表示される表示部と、表示された選択肢カードに対するユーザ１０５の操作を受け付ける操作部とを含む。第１表示装置１３０は、例えば、タッチパネルディスプレイで実現することができる。
第１制御装置１２０は、第１表示装置１３０の表示制御、第１表示装置１３０を介して受け付けた情報の処理、及び管理サーバ１１０との通信制御を行う。
第２表示装置１５０は、選択肢カードを用いてユーザ１０５の要望を表したビジョン（詳細は後述）が表示される表示部と、表示された選択肢カードに対するユーザ１０５の操作を受け付ける操作部とを含む。第２表示装置１５０は、例えば、タッチパネルディスプレイで実現することができる。
第２制御装置１４０は、第２表示装置１５０の表示制御、第２表示装置１５０を介して受け付けた情報の処理、及び管理サーバ１１０との通信制御を行う。
第３表示装置１７０は、センシングデバイス１８０で検出された検出情報を画像化したライブマップ（詳細は後述）が表示される表示部を含む。第３表示装置１７０は、例えば、液晶ディスプレイで実現することができる。
第３制御装置１６０は、第３表示装置１７０の表示制御、及び管理サーバ１１０との通信制御を行う。
センシングデバイス１８０は、ワークショップが行われる室内１０１及びワークショップに参加するユーザ１０５の少なくとも一方の状態を示す検出情報を検出するセンサ群である。室内１０１及びユーザ１０５の少なくとも一方の状態は、例えば、室内１０１の音圧、気圧、温度、湿度、ユーザ１０５の脈拍、体温、動作、位置、姿勢、発話内容などである。センシングデバイス１８０は、これらの状態を示す値を検出できるものであればよく、例えば、マイク、気圧センサ、温湿度センサ、バイタルセンサ、加速度センサ、位置センサなどで実現することができる。
本実施形態では、一例として、室内１０１の音圧を検出するマイク１８０Ａ、ユーザ１０５の位置を検出する位置センサ１８０Ｂ、及びユーザ１０５の脈拍を検出するバイタルセンサ１８０Ｃをセンシングデバイス１８０として用いる例について説明する。位置センサ１８０Ｂは、例えば、バッジタイプなどでユーザ１０５に装着可能なタグと、室内１０１の固定位置に設置されたビーコンとの間の通信の電波強度等を用いて、タグを装着したユーザ１０５の位置を測位する。なお、位置センサ１８０Ｂは、Global Positioning System（ＧＰＳ）やNear Field Communication（ＮＦＣ）を使用してユーザ１０５の位置を測位するものでもよい。また、室内１０１を撮影した画像を解析して、ユーザ１０５の位置を測位してもよい。また、バイタルセンサ１８０Ｃとしては、例えば、パルスセンサをユーザ１０５の手首に密着させるように装着するリストバンドタイプのものを用いることができる。
なお、センシングデバイス１８０としては、上記のように、１種類の検出情報を検出する個々のセンサを用いてもよいし、各種センサが複合的に搭載されたウェアラブルデバイスなどを用いてもよい。例えば、上記の位置センサ１８０Ｂに加速度センサも搭載し、ユーザ１０５の位置と共に、ユーザ１０５の姿勢も検出可能なセンシングデバイス１８０を用いてもよい。また、上記のバイタルセンサ１８０Ｃに気圧センサ及び温湿度センサも搭載し、ユーザ１０５の脈拍と共に、室内１０１の気圧、温度、及び湿度も検出するようにしてもよい。
なお、センシングデバイス１８０は、開示の技術の検出装置の一例である。
ここで、選択肢カード、ビジョン、及びライブマップについて説明する。
選択肢カードは、ユーザ１０５の要望を抽出するための様々な選択肢の各々を、キーワードと、写真やイラストなどの画像とを用いて、電子的な１枚のカードで表したものである。図２に、選択肢カード１０の一例を示す。図２の例では、選択肢カード１０には、その選択肢カード１０が表す選択肢を示すキーワード１０Ｐと、イラスト１０Ｑとが含まれる。選択肢カード１０として表す選択肢には、様々な内容を採用することができ、例えば、施設に関するもの、働き方に関するもの、ＩＣＴを利用できそうなもの、ＩＣＴとは関係ないもの等を含むことができる。選択肢カード１０は、キーワード１０Ｐのみ、またはイラスト１０Ｑのみを含むものであってもよい。
選択肢カード１０は、選択肢の数だけ用意され、図３の上図に示すように、複数の選択肢カード１０が、ユーザ１０５による選択操作を含む操作を受付可能な状態で、第１表示装置１３０に表示される。表示対象とする選択肢カード１０は、全ての選択肢カードでもよいし、選択肢カードのうちの一部でもよい。ユーザ１０５は、第１表示装置１３０に表示された複数の選択肢カード１０を見て、自身の要望に関連する選択肢カード１０を選択する。
なお、選択肢カード１０は、開示の技術の選択肢情報の一例である。
ビジョンは、選択肢カード１０を用いてユーザ１０５の要望を模擬的に表す一種の図であり、ユーザ１０５の要望に応じて選択された背景１２を含む。背景１２は、タイトルが入力される領域１２Ａ、及び時間経過等を表す軸１２Ｂを含む。図３の下図の例では、軸１２Ｂの一例として、現在から将来へ向かう時間軸が用いられている。軸１２Ｂは、図３の下図の例に示すように、長期の時間軸を示すものに限定されず、「朝」、「昼」、「夜」のような１日の時間軸を示すものであってもよい。また、軸１２Ｂは、時間経過を表すものに限定されず、例えば、図４に示すように、「自社」、「関係会社」、「社会」のような役割の異なりを表すものであってもよい。また、図５に示すように、軸１２Ｂは、「研究」、「開発」、「製造」、「販売」のような業務の異なりを表すものであってもよい。その他にも、「オフィス内」、「別オフィス」、「社外」のように、場所の異なりを表す軸１２Ｂを用いてもよい。
このように、第２表示装置１５０に表示された背景１２上に、図３の下図に示すように、第１表示装置１３０上で選択された選択肢カード１０が表示される。ユーザ１０５は、軸１２Ｂを考慮して、表示された選択肢カード１０を、適切な位置に配置する。このように、軸１２Ｂを含む背景１２上に選択肢カード１０が配置されることにより、ユーザ１０５の要望を表すビジョンが描かれる。また、ビジョンへは、手書きツールを使用して描画を行うことも可能である。
ライブマップは、センシングデバイス１８０で検出された検出情報を画像化したものである。図６に、ライブマップの一例を示す。図６の例では、センシングデバイス１８０で検出された検出情報の時間経過に応じた変化が、時間を横軸とするグラフで表されている。より具体的には、図６の例では、ユーザ１０５毎の脈拍が折れ線グラフ１４Ａで表示され、室内１０１の音圧が棒グラフ１４Ｂで表示されている。なお、脈拍を示す折れ線グラフは、平滑化処理を加えて曲線で表している。音圧を示す棒グラフは、所定時間単位の音圧の平均や累積値などとすることができる。また、ライブマップには、図６に示すように、第１表示装置１３０上で選択された選択肢カード１０を、その選択肢カード１０が選択された時間に対応する上記グラフ上の位置に表示してもよい。
図７に、ライブマップの他の例を示す。図７の例では、第３表示装置１７０には、室内１０１のレイアウト図１４Ｃが表示されると共に、ユーザ１０５毎に異なるマーク１４Ｄ（図７の例では、○、×、△、□）で、ユーザ１０５毎の現在位置がレイアウト図１４Ｃ上に表示されている。また、図７に示すように、ユーザ１０５の移動軌跡１４Ｅ（図７の例では、点線矢印）を表示してもよい。
以下、画像制御システム１００の各装置について詳述する。
まず、管理サーバ１１０について説明する。図８に示すように、管理サーバ１１０は、機能部として、管理部１１１と、転送部１１２と、特定部１１３とを含む。また、管理サーバ１１０の所定の記憶領域には、カードデータベース（ＤＢ）１１４と、変更カードＤＢ１１５と、背景ＤＢ１１６と、ビジョンＤＢ１１７と、検出情報ＤＢ１１８と、選択情報ＤＢ１１９とが記憶される。
ここで、管理サーバ１１０の所定の記憶領域に記憶される各種データベースについて説明する。
カードＤＢ１１４には、選択肢カード１０毎のカード情報が記憶される。図９に、カードＤＢ１１４の一例を示す。図９の例では、各行が１枚の選択肢カード１０についてのカード情報に相当する。各カード情報は、選択肢カード１０の識別情報である「カードＩＤ」、選択肢カード１０に表示される「キーワード」、選択肢カード１０に表示される写真やイラストなどの「画像データ」等の情報を含む。また、各カード情報は、選択肢カード１０を第１表示装置１３０に表示する際の「表示位置」の情報を含む。例えば、第１表示装置１３０の表示領域の左上角を原点とし、右方向がｘ軸プラスの方向、下方向がｙ軸プラスの方向となるｘｙ座標系を設定する。表示領域内の点のいずれを原点とするかはシステム設計者が決定してよく、例えば表示領域の中央を原点としても構わない。そして、選択肢カード１０の所定箇所（例えば、左上角）の表示位置を、第１表示装置１３０の表示領域に設定したｘｙ座標系の座標値を用いて表すことができる。選択肢カード１０内の点のいずれを原点とするかはシステム設計者が決定してよく、例えば選択肢カード１０の中央を原点としても構わない。
変更カードＤＢ１１５には、第１表示装置１３０に表示する際に、他の選択肢カード１０と異なる表示態様で表示する選択肢カード１０（以下、「変更カード」という）を特定する変更カード情報が記憶される。図１０に、変更カードＤＢ１１５の一例を示す。図１０の例では、各行が１つの変更カードについての変更カード情報に相当する。各変更カード情報は、変更カードの「カードＩＤ」、変更カードを他の選択肢カード１０と異なる表示態様に変更する「変更タイミング」等の情報を含む。なお、図１０の例では、「変更タイミング」を、第１表示装置１３０への選択肢カード１０の表示開始からの経過時間としている。
背景ＤＢ１１６には、第２表示装置１５０に表示する背景１２の各々の情報が記憶される。図１１に、背景ＤＢ１１６の一例を示す。図１１の例では、各行が１つの背景１２についての背景情報に相当する。各背景情報は、背景１２の識別情報である「背景ＩＤ」、軸１２Ｂを含む背景１２の「画像データ」等の情報を含む。
ビジョンＤＢ１１７には、第２表示装置１５０において、ユーザ１０５により作成されたビジョンの情報が記憶される。図１２に、ビジョンＤＢ１１７の一例を示す。図１２の例では、各行が１つのビジョンを示すビジョン情報に相当する。各ビジョン情報は、ビジョンの識別情報である「ビジョンＩＤ」、ビジョンを作成したユーザグループの識別情報である「ユーザグループＩＤ」、及び第２表示装置１５０に表示されている背景１２の「背景ＩＤ」の情報を含む。また、ビジョン情報は、選択された選択肢カード１０の「カードＩＤ」、選択肢カード１０が背景１２上のどの位置に表示されたかを示す「表示位置」等の情報を含む。「表示位置」は、上述した第１表示装置１３０上に表示される選択肢カード１０の表示位置と同様に、第２表示装置１５０に表示された背景１２領域に設定されたｘｙ座標系の座標値を用いて表すことができる。ビジョン情報は、さらに、テキストデータとして入力された「タイトル」、手書きツールを使用して描画された画像を示す「手書きデータ」等の情報を含む。なお、タイトルについても、手書きデータとして入力することも可能である。
１つのユーザグループが、複数種類のビジョンを作成した場合には、そのユーザグループのユーザグループＩＤと対応づけて、異なる複数のビジョンＩＤの各々に対応付けられた複数のビジョン情報が記憶されることになる。なお、異なるビジョンとは、背景１２、選択された選択肢カード１０、背景１２に対する選択肢カード１０の配置、手書き描画等のいずれかが異なる場合である。
ビジョンＤＢ１１７には、図１２に例示した以外のデータ項目をビジョンＩＤと対応づけて記憶してもよい。例えば、ビジョンが記憶された日時を示す情報を記憶してもよい。
検出情報ＤＢ１１８には、各センシングデバイス１８０で、サンプリング時間毎に検出された検出情報が、時系列に記憶される。検出情報ＤＢは、第２記憶部の一例である。図１３に、検出情報ＤＢ１１８の一例を示す。図１３の例では、検出情報ＤＢ１１８には、音圧テーブル１１８Ａと、位置情報テーブル１１８Ｂと、脈拍テーブル１１８Ｃとが含まれる。音圧テーブル１１８Ａは、マイク１８０Ａで検出された音圧が記憶されるテーブルである。位置情報テーブル１１８Ｂは、各ユーザ１０５に装着された位置センサ１８０Ｂの各々で検出されたユーザ１０５毎の位置情報が記憶されるテーブルである。脈拍テーブル１１８Ｃは、各ユーザ１０５に装着されたバイタルセンサ１８０Ｃの各々で検出されたユーザ１０５毎の脈拍が記憶されるテーブルである。
選択情報ＤＢ１１９には、第１表示装置１３０上で選択された選択肢カード１０に関する選択情報が記憶される。選択情報ＤＢは、第１記憶部の一例である。図１４に、選択情報ＤＢ１１９の一例を示す。図１４の例では、各行が選択された１つの選択肢カード１０についての選択情報に相当する。各選択情報は、選択された選択肢カード１０の「カードＩＤ」、その選択肢カード１０が第１表示装置１３０上で選択された時間を示す「時間情報」等の情報を含む。
次に、管理サーバ１１０の各機能部について説明する。
管理部１１１は、画像制御システム１００により提供されるサービスの開始が指示されると、カードＤＢ１１４から各選択肢カード１０のカード情報を取得し、変更カードＤＢ１１５から変更カード情報を取得する。管理部１１１は、取得したカード情報及び変更カード情報を第１制御装置１２０へ送信する。
また、管理部１１１は、背景ＤＢ１１６からいずれかの背景情報を取得し、第２制御装置１４０へ送信する。第２制御装置１４０へ送信する背景情報は、予め定めた背景情報であってもよいし、ランダムに選択した背景情報であってもよいし、ユーザ１０５により選択された背景情報であってもよい。
また、管理部１１１は、第２制御装置１４０から送信されたビジョン情報を受信すると、受信したビジョン情報にビジョンＩＤを付与して、ビジョンＤＢ１１７に記憶する。
転送部１１２は、第１制御装置１２０から、第１表示装置１３０に表示された選択肢カード１０から選択された選択肢カード１０に関する選択情報を受信すると、受信した選択情報を選択情報ＤＢ１１９に記憶する。また、転送部１１２は、受信した選択情報が示す選択肢カード１０のカード情報を第２制御装置１４０へ転送する。また、転送部１１２は、受信した選択情報と、受信した選択情報が示す選択肢カード１０のカード情報とを第３制御装置１６０へ転送する。
特定部１１３は、各センシングデバイス１８０で検出された検出情報を取得し、検出情報ＤＢ１１８に記憶すると共に、第３制御装置１６０へ送信する。
また、特定部１１３は、検出情報ＤＢ１１８に記憶された検出情報から、所定の状態を示す検出情報の時間情報を抽出する。所定の状態は、例えば、発言が活発に交わされているなど、ワークショップが盛り上がっていることを示す状態とすることができる。特定部１１３は、所定の状態を示す検出情報の時間情報を抽出すると、選択情報ＤＢ１１９を参照し、抽出した時間情報に対応するタイミングで選択されている選択肢カード１０を特定する。
例えば、特定部１１３は、音圧テーブル１１８Ａから、予め定めた閾値以上の音圧が検出されている期間の時間情報を抽出する。また、例えば、特定部１１３は、位置情報テーブル１１８Ｂから、所定の条件を満たす各ユーザ１０５の位置情報に対応する時間情報を抽出する。所定の条件としては、例えば、各ユーザ１０５の所定期間の移動量や移動速度が所定値以上の場合、ユーザ１０５の密集度合い又は分散度合いが所定値以上の場合等とすることができる。
また、例えば、特定部１１３は、脈拍テーブル１１８Ｃから、予め定めた閾値以上の脈拍が検出されている期間の時間情報を抽出する。閾値と比較する脈拍は、いずれかのユーザ１０５の脈拍、全てのユーザ１０５の脈拍、又は各ユーザ１０５の脈拍の平均若しくは合計を用いればよい。
特定部１１３は、抽出した時間情報に対応する所定期間に含まれる時間情報（選択されたタイミング）に対応付けられたカードＩＤを、選択情報ＤＢ１１９から特定する。抽出した時間情報に対応する所定期間としては、例えば、抽出した時間情報以前又は以降の所定期間、抽出した時間情報を含み、かつ抽出した時間情報の前及び後の期間を含む所定期間等とすることができる。また、抽出した時間情報を含まず、かつ抽出した時間情報より前の所定期間、抽出した時間情報を含まず、かつ抽出した時間情報より後の所定期間等としてもよい。
特定部１１３は、特定したカードＩＤに、所定の変更タイミングを対応付けて、変更カードＤＢ１１５に記憶する。所定の変更タイミングとしては、例えば、特定したカードＩＤが示す選択肢カード１０が第１表示装置１３０上で選択された順に、所定時間間隔（例えば１０秒間隔）となる変更タイミングを対応付けることができる。例えば、カードＩＤＣ０００１、及びＣ０００６が特定され、カードＩＤがＣ０００１の選択肢カード１０が選択された時間情報がｔ１２、カードＩＤがＣ０００６の選択肢カード１０が選択された時間情報がｔ２４（ｔ１２＜ｔ２４）であるとする。この場合、１０秒間隔で変更タイミングを対応付けるとすると、カードＩＤ＝Ｃ０００１に変更タイミング「１０秒」、カードＩＤＣ０００６に変更タイミング「２０秒」を対応付ける。
次に、第１制御装置１２０について説明する。図１５に示すように、第１制御装置１２０は、機能部として、表示制御部１２１と、検出部１２２とを含む。
表示制御部１２１は、管理サーバ１１０から送信されたカード情報及び変更カード情報を受信し、カード情報が示す選択肢カード１０の各々が、第１表示装置１３０に表示されるように制御する。各選択肢カード１０の表示サイズは、予め定めたサイズとしてもよいし、第１表示装置１３０に所定枚数の選択肢カード１０が表示されるように計算されたサイズとしてもよい。
また、表示制御部１２１は、変更カード情報が示す変更カードの各々について、変更カード情報に含まれる変更タイミングが示すタイミングで、変更カードの表示態様を、他の選択肢カード１０と異なる表示態様に変更する。具体的には、表示制御部１２１は、変更カードの視認性が、他の選択肢カード１０よりも高くなるように、変更カードの表示態様を変更する。例えば、表示制御部１２１は、表示態様の変更として、表示サイズを拡大する、輝度や彩度を上げる、点滅させる、カードの枠に色を付ける等のいずれか、または組み合わせた表示制御を行うことができる。本実施形態では、変更カードの表示サイズを、他の選択肢カード１０と比べて大きくする場合について説明する。
具体的には、表示制御部１２１は、変更タイミングが到来した変更カードの表示サイズを所定倍（例えば４倍）に拡大する。また、表示制御部１２１は、変更カードの拡大表示に伴い、周辺の選択肢カード１０の表示位置を、拡大表示後の変更カードを回避する位置に移動させる。周辺の選択肢カード１０の移動後の位置の決定には、従来既知の画像の最適配置技術等を利用することができる。なお、周辺の選択肢カード１０を回避する位置に移動する場合に限定されず、拡大表示後の変更カードを、周辺の選択肢カード１０の上に重畳表示するようにしてもよい。表示制御部１２１は、現在拡大している変更カードとは異なる変更カードの変更タイミングが到来した場合には、現在拡大している変更カードを元の表示サイズに戻すと共に、周辺の選択肢カード１０の表示位置も元の位置に戻す。
なお、表示制御部１２１は、変更カードを拡大表示する際、表示サイズが所定倍となるまで、上下及び左右に予め定めた画素数ずつ拡大してもよいし、現在の表示サイズの所定倍（例えば、１．１倍）ずつ拡大してもよい。すなわち、現在の表示サイズから所定倍となる表示サイズまでの拡大表示の様子を、アニメーション表示により表示してもよい。この場合、変更カードの拡大表示の際に画面上に動きが生じるため、変更カードやその周辺の選択肢カード１０へのユーザ１０５の注意を引き易くなり、また、どのように表示態様が変更されたかも分かり易くなる。
検出部１２２は、第１表示装置１３０に表示された選択肢カード１０に対するユーザ１０５の選択操作を検出する。具体的には、検出部１２２は、ユーザ１０５による選択肢カード１０へのタッチの継続時間が所定時間（例えば、３秒）を経過したか否かを検出する。検出部１２２は、タッチの継続時間が所定時間を経過したことを検出すると、タッチされた選択肢カード１０のカードＩＤと、選択肢カード１０が選択されたタイミングを示す時間情報とを対応付けた選択情報を、管理サーバ１１０へ送信する。選択肢カード１０が選択されたタイミングは、例えば、タッチの継続時間が所定時間を超えたタイミングとすることができる。なお、選択肢カード１０に対する選択操作の検出の仕方は上記の例に限る必要はない。例えば、選択肢カード１０に対するタッチ操作を受け付けた場合に機能メニュー画面を表示し、表示した機能メニュー画面の中からカードを選択するという操作指示を受け付けるようにしてもよい。
次に、第２制御装置１４０について説明する。図１６に示すように、第２制御装置１４０は、機能部として、表示制御部１４１と、受付部１４２と、作成部１４３とを含む。
表示制御部１４１は、管理サーバ１１０から送信された背景情報を受信すると、受信した背景情報が示す背景１２を第２表示装置１５０に表示する。また、表示制御部１４１は、管理サーバ１１０からカード情報を受信すると、受信したカード情報が示す選択肢カード１０を、背景１２上に表示する。選択肢カード１０を表示する位置はランダムに決定してもよいし、予め定めた位置に表示してもよい。
また、表示制御部１４１は、受付部１４２から、受付情報（詳細は後述）を通知されると、受付情報に基づいて、選択肢カード１０の表示位置、表示サイズの変更、入力されたテキストデータの表示、描画された画像の表示等を行う。
受付部１４２は、第２表示装置１５０に表示された選択肢カード１０の表示位置の変更、表示サイズの変更、テキストデータの入力、手書きツールを利用した描画等のユーザ１０５の操作を受け付ける。受付部１４２は、受け付けたユーザ１０５の操作の内容を示す受付情報を表示制御部１４１に通知する。
作成部１４３は、ユーザ１０５によりビジョンの確定が指示されると、第２表示装置１５０に表示された背景１２上での各選択肢カード１０の表示位置を取得する。そして、作成部１４３は、第２表示装置１５０に表示されている背景１２の背景ＩＤ、選択肢カード１０のカードＩＤ、求めた各選択肢カード１０の表示位置、入力されたテキストデータ、及び描画された手書きデータを含むビジョン情報を作成する。作成部１４３は、ログイン情報や本システム利用時の登録情報などから、ビジョンを作成したユーザグループのユーザグループＩＤを取得し、作成したビジョン情報にユーザグループＩＤを付加して、管理サーバ１１０へ送信する。
次に、第３制御装置１６０について説明する。図１７に示すように、第３制御装置１６０は、機能部として、表示制御部１６１を含む。
表示制御部１６１は、管理サーバ１１０から送信された検出情報を受信すると、受信した検出情報を画像化し、第３表示装置１７０にライブマップとして表示する。具体的には、検出情報（音圧及び脈拍）をグラフ化したライブマップ（例えば、図６）を表示する場合には、表示制御部１６１は、既に受信済みの検出情報に基づいて表示されているグラフに、新たに受信した検出情報が示す部分を追加表示する。表示制御部１６１は、追加表示する際、受信した検出情報に対して、既に受信済みの検出情報を用いた平滑化等の処理を行ってもよい。新たに検出情報が受信される毎に、その検出情報が示す部分をグラフに追加することで、検出情報の時間経過に伴う変化の様子をリアルタイムに表示することができる。
また、ユーザ１０５の位置情報を示すライブマップ（例えば、図７）を表示する場合には、表示制御部１６１は、検出情報として受信した位置情報に対応するレイアウト図１４Ｃ上の座標値を計算する。表示制御部１６１は、計算した座標値に、該当のユーザ１０５に割り当てたマーク１４Ｄを表示する。時々刻々変化する位置情報に基づいてライブマップを表示することで、ユーザ１０５の移動の様子をリアルタムに表示することができる。また、過去の位置情報を時系列に辿ることで、ユーザ１０５の移動軌跡を取得することもできる。
また、表示制御部１６１は、管理サーバ１１０から送信された選択情報（カードＩＤ及び時間情報）と、その選択情報に含まれるカードＩＤに対応する選択肢カード１０のカード情報とを受信する。表示制御部１６１は、受信したカード情報が示す選択肢カード１０を、その選択肢カード１０が選択された際の検出情報に対応させて、ライブマップ上に表示する。
具体的には、図６に示すように、表示制御部１６１は、検出情報（音圧及び脈拍）をグラフ化したライブマップにおいて、グラフの横軸と、選択情報に含まれる時間情報とを対応させた位置に、受信したカード情報が示す選択肢カード１０を表示する。
なお、表示制御部１６１は、図６に示すライブマップと、図７に示すライブマップとを、第３表示装置１７０上で切り替え可能に表示してもよいし、２画面で同時に表示してもよい。また、第３表示装置１７０を、図６に示すライブマップ用と、図７に示すライブマップ用との２台設けるようにしてもよい。
管理サーバ１１０は、例えば図１８に示すコンピュータ２０で実現することができる。コンピュータ２０は、Central Processing Unit（ＣＰＵ）２１と、一時記憶領域としてのメモリ２２と、不揮発性の記憶部２３とを備える。また、コンピュータ２０は、入出力装置２４と、記録媒体２９に対するデータの読み込み及び書き込みを制御するRead/Write（Ｒ／Ｗ）部２５と、インターネット等のネットワークに接続されるネットワークインターフェース（Ｉ／Ｆ）２６とを備える。ＣＰＵ２１、メモリ２２、記憶部２３、入出力装置２４、Ｒ／Ｗ部２５、及びネットワークＩ／Ｆ２６は、バス２７を介して互いに接続される。
記憶部２３は、Hard Disk Drive（ＨＤＤ）、solid state drive（ＳＳＤ）、フラッシュメモリ等によって実現できる。記憶媒体としての記憶部２３には、コンピュータ２０を管理サーバ１１０として機能させるための管理プログラム３０が記憶される。管理プログラム３０は、管理プロセス３１と、転送プロセス３２と、特定プロセス３３とを有する。また、記憶部２３は、カードＤＢ１１４、変更カードＤＢ１１５、背景ＤＢ１１６、ビジョンＤＢ１１７、検出情報ＤＢ１１８、及び選択情報ＤＢ１１９の各々を構成する情報が記憶される情報記憶領域３４を有する。
ＣＰＵ２１は、管理プログラム３０を記憶部２３から読み出してメモリ２２に展開し、管理プログラム３０が有するプロセスを順次実行する。ＣＰＵ２１は、管理プロセス３１を実行することで、図８に示す管理部１１１として動作する。また、ＣＰＵ２１は、転送プロセス３２を実行することで、図８に示す転送部１１２として動作する。また、ＣＰＵ２１は、特定プロセス３３を実行することで、図８に示す特定部１１３として動作する。また、ＣＰＵ２１は、情報記憶領域３４から情報を読み出して、カードＤＢ１１４、変更カードＤＢ１１５、背景ＤＢ１１６、ビジョンＤＢ１１７、検出情報ＤＢ１１８、及び選択情報ＤＢ１１９の各々をメモリ２２に展開する。これにより、管理プログラム３０を実行したコンピュータ２０が、管理サーバ１１０として機能することになる。
第１制御装置１２０は、例えば図１９に示すコンピュータ４０で実現することができる。コンピュータ４０は、ＣＰＵ４１と、一時記憶領域としてのメモリ４２と、不揮発性の記憶部４３とを備える。また、コンピュータ４０は、記録媒体４９に対するデータの読み込み及び書き込みを制御するＲ／Ｗ部４５と、ネットワークＩ／Ｆ４６とを備える。ＣＰＵ４１、メモリ４２、記憶部４３、Ｒ／Ｗ部４５、及びネットワークＩ／Ｆ４６は、バス４７を介して互いに接続される。また、コンピュータ４０は、ネットワークＩ／Ｆ４６を介して、第１表示装置１３０と接続される。
記憶部４３は、ＨＤＤ、ＳＳＤ、フラッシュメモリ等によって実現できる。記憶媒体としての記憶部４３には、コンピュータ４０を第１制御装置１２０として機能させるための第１制御プログラム５０が記憶される。第１制御プログラム５０は、表示制御プロセス５１と、検出プロセス５２とを有する。
ＣＰＵ４１は、第１制御プログラム５０を記憶部４３から読み出してメモリ４２に展開し、第１制御プログラム５０が有するプロセスを順次実行する。ＣＰＵ４１は、表示制御プロセス５１を実行することで、図１５に示す表示制御部１２１として動作する。また、ＣＰＵ４１は、検出プロセス５２を実行することで、図１５に示す検出部１２２として動作する。これにより、第１制御プログラム５０を実行したコンピュータ４０が、第１制御装置１２０として機能することになる。
第２制御装置１４０は、例えば図２０に示すコンピュータ６０で実現することができる。コンピュータ６０は、ＣＰＵ６１と、一時記憶領域としてのメモリ６２と、不揮発性の記憶部６３とを備える。また、コンピュータ６０は、記録媒体６９に対するデータの読み込み及び書き込みを制御するＲ／Ｗ部６５と、ネットワークＩ／Ｆ６６とを備える。ＣＰＵ６１、メモリ６２、記憶部６３、Ｒ／Ｗ部６５、及びネットワークＩ／Ｆ６６は、バス６７を介して互いに接続される。また、コンピュータ６０は、ネットワークＩ／Ｆ６６を介して、第２表示装置１５０と接続される。
記憶部６３は、ＨＤＤ、ＳＳＤ、フラッシュメモリ等によって実現できる。記憶媒体としての記憶部６３には、コンピュータ６０を第２制御装置１４０として機能させるための第２制御プログラム７０が記憶される。第２制御プログラム７０は、表示制御プロセス７１と、受付プロセス７２と、作成プロセス７３とを有する。
ＣＰＵ６１は、第２制御プログラム７０を記憶部６３から読み出してメモリ６２に展開し、第２制御プログラム７０が有するプロセスを順次実行する。ＣＰＵ６１は、表示制御プロセス７１を実行することで、図１６に示す表示制御部１４１として動作する。また、ＣＰＵ６１は、受付プロセス７２を実行することで、図１６に示す受付部１４２として動作する。また、ＣＰＵ６１は、作成プロセス７３を実行することで、図１６に示す作成部１４３として動作する。これにより、第２制御プログラム７０を実行したコンピュータ６０が、第２制御装置１４０として機能することになる。
第３制御装置１６０は、例えば図２１に示すコンピュータ８０で実現することができる。コンピュータ８０は、ＣＰＵ８１と、一時記憶領域としてのメモリ８２と、不揮発性の記憶部８３とを備える。また、コンピュータ８０は、記録媒体８９に対するデータの読み込み及び書き込みを制御するＲ／Ｗ部８５と、ネットワークＩ／Ｆ８６とを備える。ＣＰＵ８１、メモリ８２、記憶部８３、Ｒ／Ｗ部８５、及びネットワークＩ／Ｆ８６は、バス８７を介して互いに接続される。また、コンピュータ８０は、ネットワークＩ／Ｆ８６を介して、第３表示装置１７０と接続される。
記憶部８３は、ＨＤＤ、ＳＳＤ、フラッシュメモリ等によって実現できる。記憶媒体としての記憶部８３には、コンピュータ８０を第３制御装置１６０として機能させるための第３制御プログラム９０が記憶される。第３制御プログラム９０は、表示制御プロセス９１を有する。
ＣＰＵ８１は、第３制御プログラム９０を記憶部８３から読み出してメモリ８２に展開し、第３制御プログラム９０が有するプロセスを順次実行する。ＣＰＵ８１は、表示制御プロセス９１を実行することで、図１７に示す表示制御部１６１として動作する。これにより、第３制御プログラム９０を実行したコンピュータ８０が、第３制御装置１６０として機能することになる。
なお、管理プログラム３０、第１制御プログラム５０、第２制御プログラム７０、及び第３制御プログラム９０の各々により実現される機能は、例えば半導体集積回路、より詳しくはApplication Specific Integrated Circuit（ＡＳＩＣ）等で実現することも可能である。
次に、本実施形態に係る画像制御システム１００の作用について説明する。画像制御システム１００により提供されるサービスの開始が指示されると、管理サーバ１１０において、図２２に示す第１管理処理が実行される。また、管理サーバ１１０では、図２３に示す第２管理処理、及び図２４に示す第３管理処理も実行される。また、第１制御装置１２０において、図２５に示す第１制御処理が実行される。また、第２制御装置１４０において、図２８に示す第２制御処理が実行される。さらに、第３制御装置１６０において、図２９に示す第３制御処理が実行される。以下、各処理について詳述する。なお、第１管理処理、第２管理処理、第３管理処理、第１制御処理、第２制御処理、及び第３制御処理は、開示の技術の画像制御方法の一例である。
まず、図２２に示す第１管理処理について説明する。ステップＳ１１で、管理部１１１が、カードＤＢ１１４から各選択肢カード１０のカード情報を取得し、変更カードＤＢ１１５から変更カード情報を取得する。そして、管理部１１１は、取得したカード情報及び変更カード情報を第１制御装置１２０へ送信する。
次に、ステップＳ１２で、管理部１１１が、背景ＤＢ１１６からいずれかの背景情報を取得し、第２制御装置１４０へ送信する。
次に、ステップＳ１３で、特定部１１３が、各センシングデバイス１８０で検出された検出情報を取得し、検出情報ＤＢ１１８に記憶する。次に、ステップＳ１４で、特定部１１３が、取得した検出情報を第３制御装置１６０へ送信する。
次に、ステップＳ１５で、転送部１１２が、第１制御装置１２０から、第１表示装置１３０に表示された選択肢カード１０から選択された選択肢カード１０に関する選択情報を受信したか否かを判定する。選択情報を受信した場合には、処理はステップＳ１６へ移行し、選択情報を受信していない場合には、処理はステップＳ１８へ移行する。
ステップＳ１６では、転送部１１２が、上記ステップＳ１５で受信した選択情報が示す選択肢カード１０のカード情報を第２制御装置１４０へ転送する。また、転送部１１２は、受信した選択情報と、受信した選択情報が示す選択肢カード１０のカード情報とを第３制御装置１６０へ転送する。次に、ステップＳ１７で、転送部１１２が、上記ステップＳ１５で受信した選択情報を選択情報ＤＢ１１９に記憶する。
次に、ステップＳ１８で、管理部１１１が、画像制御システム１００により提供されるサービスの終了が指示されたか否かを判定し、終了が指示されていない場合には、処理はステップＳ１３に戻り、終了が指示された場合には、第１管理処理は終了する。
次に、図２３に示す第２管理処理について説明する。ステップＳ２１で、管理部１１１が、第２制御装置１４０から送信されたビジョン情報を受信したか否かを判定する。ビジョン情報を受信していない場合には、本ステップの判定を繰り返す。ビジョン情報を受信した場合には、処理はステップＳ２２へ移行し、管理部１１１が、受信したビジョン情報にビジョンＩＤを付与して、ビジョンＤＢ１１７に記憶する。
次に、ステップＳ２３で、管理部１１１が、画像制御システム１００により提供されるサービスの終了が指示されたか否かを判定し、終了が指示されていない場合には、処理はステップＳ２１に戻る。終了が指示されている場合には、第２管理処理は終了する。
次に、図２４に示す第３管理処理について説明する。第３管理処理は、例えば、ワークショップが終了する都度、実行される。
ステップＳ３１で、特定部１１３が、検出情報ＤＢ１１８に記憶された検出情報から、所定の状態を示す検出情報の時間情報を抽出する。
次に、ステップＳ３２で、特定部１１３が、選択情報ＤＢ１１９を参照し、上記ステップＳ３１で抽出した時間情報に対応するタイミングで選択されている選択肢カード１０のカードＩＤを特定する。
次に、ステップＳ３３で、特定部１１３が、上記ステップＳ３２で特定したカードＩＤに、所定の変更タイミングを対応付けて、変更カードＤＢ１１５に記憶し、第３管理処理は終了する。
次に、図２５に示す第１制御処理について説明する。第１制御処理は、管理サーバ１１０から送信されたカード情報及び変更カード情報を第１制御装置１２０が受信すると開始する。
ステップＳ４１で、表示制御部１２１が、受信したカード情報が示す選択肢カード１０の各々が、第１表示装置１３０に表示されるように制御する。
次に、ステップＳ４２で、検出部１２２が、第１表示装置１３０に表示された選択肢カード１０が、ユーザ１０５によりタッチされたか否かを判定する。図２６に、選択肢カード１０が表示された第１表示装置１３０の表示領域の一部の一例を示す。図２６に示すように、いずれかの選択肢カード１０がユーザ１０５によりタッチされたことが検出されると、処理はステップＳ４３へ移行する。
ステップＳ４３では、検出部１２２が、選択肢カード１０に対するタッチが継続しているか否かを判定する。タッチが継続している場合には、処理はステップＳ４４へ移行し、継続していない場合には、処理はステップＳ４６へ移行する。
ステップＳ４４では、検出部１２２が、選択肢カード１０へのタッチの継続時間が所定時間（例えば、３秒）を経過したか否かを判定する。タッチの継続時間が所定時間を経過していない場合には、処理はステップＳ４３へ戻り、タッチの継続時間が所定時間を経過した場合には、処理はステップＳ４５へ移行する。
ステップＳ４５では、検出部１２２が、タッチされた選択肢カード１０のカードＩＤと、選択肢カード１０が選択されたタイミングを示す時間情報とを対応付けた選択情報を、管理サーバ１１０へ送信する。この選択情報に対応するカード情報が、上述した第１管理処理において、管理サーバ１１０の転送部１１２により、第２制御装置１４０及び第３制御装置１６０へ転送される。
次に、ステップＳ４６で、表示制御部１２１が、画像制御システム１００により提供されるサービスの終了が指示されたか否かを判定し、終了が指示されていない場合には、処理はステップＳ４２に戻る。
ステップＳ４２で、検出部１２２が、選択肢カード１０に対するタッチを検出していない場合には、処理はステップＳ４７へ移行する。ステップＳ４７では、表示制御部１２１が、受信した変更カード情報を参照して、いずれかの変更カードの変更タイミングか否かを判定する。変更タイミングの場合には、処理はステップＳ４８へ移行し、変更タイミングではない場合には、処理はステップＳ４２に戻る。
ステップＳ４８では、表示制御部１２１が、現在拡大表示している変更カードを元の表示サイズに戻すと共に、周辺の選択肢カード１０の表示位置を元の位置に戻す。そして、表示制御部１２１が、図２７に示すように、上記ステップＳ４７で変更タイミングが到来したと判定した変更カードの表示サイズを所定倍（例えば４倍）に拡大する。また、表示制御部１２１は、変更カードの拡大表示に伴い、周辺の選択肢カード１０の表示位置を、拡大表示後の変更カードを回避する、すなわち表示が重ならない位置に移動させる。そして、処理はステップＳ４２に戻る。
上記ステップＳ４６で、表示制御部１２１が、画像制御システム１００により提供されるサービスの終了が指示されたと判定した場合には、第１制御処理は終了する。
次に、図２８に示す第２制御処理について説明する。第２制御処理は、管理サーバ１１０から送信された背景情報を第２制御装置１４０が受信すると開始する。
ステップＳ５１で、表示制御部１４１が、受信した背景情報が示す背景１２を第２表示装置１５０に表示する。ここで表示された背景１２は、ユーザ１０５の指示により変更可能としてもよい。例えば、背景１２の変更が指示された場合、第２制御装置１４０が管理サーバ１１０へ背景情報を要求する。そして、管理サーバ１１０が、背景ＤＢ１１６から前回送信した背景情報とは異なる背景情報を、第２制御装置１４０に送信する。
次に、ステップＳ５２で、表示制御部１４１が、管理サーバ１１０からカード情報を受信したか否かを判定する。カード情報を受信している場合には、処理はステップＳ５３へ移行する。ここで受信するカード情報は、上述の第１管理処理において、第１表示装置１３０において選択された選択肢カード１０のカード情報が管理サーバ１１０により転送されたものである。ステップＳ５３では、表示制御部１４１が、受信したカード情報が示す選択肢カード１０を、背景１２上に表示し、処理はステップＳ５４へ移行する。一方、カード情報を受信していない場合には、ステップＳ５３の処理はスキップされ、ステップＳ５４へ移行する。
ステップＳ５４では、受付部１４２が、第２表示装置１５０に表示された選択肢カード１０の表示位置の変更、表示サイズの変更、テキストデータの入力、手書きツールを利用した描画等のユーザ１０５の操作を受け付けたか否かを判定する。操作を受け付けた場合には、処理はステップＳ５５へ移行する。ステップＳ５５では、受付部１４２が、受け付けたユーザ１０５の操作の内容を示す受付情報を表示制御部１４１に通知する。そして、表示制御部１４１が、受付情報に基づいて、選択肢カード１０の表示位置、表示サイズの変更、入力されたテキストデータの表示、描画された画像の表示等を行い、処理はステップＳ５６へ移行する。一方、ユーザ１０５の操作を受け付けていない場合には、ステップＳ５５の処理はスキップされ、ステップＳ５６へ移行する。
次に、ステップＳ５６で、作成部１４３が、ユーザ１０５によりビジョンの確定が指示されたか否かを判定する。ビジョンの確定が指示されると、処理はステップＳ５７へ移行する。ステップＳ５７では、作成部１４３が、第２表示装置１５０に表示された背景１２上での各選択肢カード１０の表示位置を取得する。そして、作成部１４３は、第２表示装置１５０に表示されている背景１２の背景ＩＤ、選択肢カード１０のカードＩＤ、求めた各選択肢カード１０の表示位置、入力されたテキストデータ、及び描画された手書きデータを含むビジョン情報を作成する。さらに、作成部１４３は、ログイン情報や本システム利用時の登録情報などから、ビジョンを作成したユーザグループのユーザグループＩＤを取得する。そして、取得したユーザグループＩＤを、作成したビジョン情報に付加して、管理サーバ１１０へ送信し、処理はステップＳ５８へ移行する。一方、ビジョンの確定が指示されていない場合には、ステップＳ５７の処理はスキップされ、ステップＳ５８へ移行する。
ステップＳ５８では、受付部１４２が、画像制御システム１００により提供されるサービスの終了が指示されたか否かを判定する。終了が指示されていない場合には、処理はステップＳ５２に戻り、終了が指示されている場合には、第２制御処理は終了する。
次に、図２９に示す第３制御処理について説明する。第３制御処理は、管理サーバ１１０から送信された検出情報を第３制御装置１６０が受信すると開始する。
ステップＳ６１で、表示制御部１６１が、受信した検出情報を画像化し、第３表示装置１７０にライブマップとして表示する。具体的には、検出情報（音圧及び脈拍）をグラフ化したライブマップ（例えば、図６）を表示する場合には、表示制御部１６１は、既に受信済みの検出情報に基づいて表示されているグラフに、新たに受信した検出情報が示す部分を追加表示する。また、ユーザ１０５の位置情報を示すライブマップ（例えば、図７）を表示する場合には、表示制御部１６１が、検出情報として受信した位置情報に対応するレイアウト図１４Ｃ上の座標値を計算する。そして、表示制御部１６１は、計算した座標値に、該当のユーザ１０５に割り当てたマーク１４Ｄを表示する。
次に、ステップＳ６２で、表示制御部１６１が、管理サーバ１１０から送信された選択情報（カードＩＤ及び時間情報）と、その選択情報に含まれるカードＩＤに対応する選択肢カード１０のカード情報とを受信したか否かを判定する。受信した場合には、処理はステップＳ６３へ移行し、受診していない場合には、処理はステップＳ６４へ移行する。
ステップＳ６３では、表示制御部１６１が、受信したカード情報が示す選択肢カード１０を、その選択肢カード１０が選択された際の検出情報に対応させて、ライブマップ上に表示する。図６に示すように、表示制御部１６１は、検出情報（音圧及び脈拍）をグラフ化したライブマップにおいて、グラフの横軸と、選択情報に含まれる時間情報とを対応させた位置に、受信したカード情報が示す選択肢カード１０を表示する。
次に、ステップＳ６４で、表示制御部１６１が、画像制御システム１００により提供されるサービスの終了が指示されたか否かを判定する。終了が指示されていない場合には、処理はステップＳ６１に戻り、終了が指示されている場合には、第３制御処理は終了する。
次に、図３０のシーケンス図を参照して、各装置間での情報のやり取りについて説明する。なお、図３０のシーケンス図に含まれる各処理について、図２２、図２３、図２４、図２５、図２８、及び図２９で説明した処理と同様の処理については、図２２、図２３、図２４、図２５、図２８、及び図２９で用いた符号と同様の符号を付して説明する。
まず、画像制御システム１００により提供されるサービスの開始が指示されると、管理サーバ１１０が、選択肢カード１０のカード情報及び変更カード情報を、第１制御装置１２０へ送信する（Ｓ１１）。そして、第１制御装置１２０が、カード情報に基づいて、第１表示装置１３０に選択肢カード１０を表示する（Ｓ４１）。また、管理サーバ１１０が、背景情報を第２制御装置１４０へ送信する（Ｓ１２）。そして、第２制御装置１４０が、背景情報に基づいて、第２表示装置１５０に背景１２を表示する（Ｓ５１）。
第１制御装置１２０は、受信した変更カード情報に基づいて、変更タイミングが到来した変更カードの表示態様を変更する（Ｓ４８）。いずれかの変更カードの変更タイミングが到来する都度、第１制御装置１２０は、該当の変更カードの表示態様を変更する。
管理サーバ１１０は、各センシングデバイス１８０から検出情報を取得し（Ｓ１３）、取得した検出情報を第３制御装置１６０へ送信する（Ｓ１４）。第３制御装置１６０は、検出情報を受信すると、受信した検出情報を画像化したライブマップを第３表示装置１７０に表示する（Ｓ６１）。
第１制御装置１２０は、ユーザ１０５による第１表示装置１３０上での選択肢カード１０の選択操作を検出する（Ｓ４３、Ｓ４４）。選択操作が検出されると、第１制御装置１２０が、選択された選択肢カード１０のカードＩＤと選択されたタイミングを示す時間情報とを含む選択情報を管理サーバ１１０へ送信する（Ｓ４５）。
管理サーバ１１０は、選択情報を受信すると、その選択情報に含まれるカードＩＤに対応するカード情報を、第２制御装置１４０へ転送する（Ｓ１６）。また、管理サーバ１１０は、そのカード情報と選択情報とを、第３制御装置１６０へ転送する（Ｓ１６）。
第２制御装置１４０は、カード情報を受信すると、受信したカード情報に基づいて、第２表示装置１５０に選択肢カード１０を表示する（Ｓ５３）。
また、第３制御装置１６０は、カード情報及び選択情報を受信すると、受信したカード情報及び選択情報に含まれる時間情報に基づいて、第３表示装置１７０に表示しているライブマップ上の対応する位置に選択肢カード１０を表示する（Ｓ６３）。
第２表示装置１５０において、ユーザ１０５がビジョンの確定を指示すると（Ｓ５６）、第２制御装置１４０が、第２表示装置１５０に表示されている背景１２及び選択肢カード１０に基づいてビジョン情報を作成し、管理サーバ１１０へ送信する（Ｓ５７）。
以上説明したように、本実施形態に係る画像制御システム１００によれば、ワークショップが行われる室内やワークショップの参加者であるユーザの状態を、センシングデバイスで検出する。そして、センシングデバイスで検出された検出情報のうち、発言が活発に交わされている状態などの所定の状態を示す検出情報が検出された時間に対応するタイミングで選択された選択肢カードを、変更カードＤＢに記憶しておく。そして、第１表示装置に表示した複数の選択肢カードのうち、変更カードＤＢに記憶された変更カードを、他の選択肢カードと異なる表示態様に変更する。これにより、ユーザが存在に気づいていなかった選択肢カードの存在に気付く可能性が高まり、ユーザが様々な選択肢を検討するきっかけを与えることができる。
また、変更カードの表示態様を、他の選択肢カードより視認性が高くなるように変更する。これにより、ワークショップが活発化していたタイミングで選択された選択肢カード、換言すればワークショップを活性化させることが期待できる選択肢カードに、よりユーザの注意が向くような表示を行うことができる。
なお、上記実施形態では、検出情報として、室内の音圧、ユーザの位置情報、及びユーザの脈拍を用いる場合について説明したが、これに限定されない。例えば、ユーザに装着した加速度センサの検出値や、ユーザをカメラで撮影した映像などから、ユーザの動きを検出情報として検出してもよい。この場合、例えば、ユーザが立ち上がったタイミング、手を大きく広げたタイミング等のタイミングで選択された選択肢カードを、表示態様を変更する変更カードとして特定することができる。また、マイクで検出したユーザの発話を音声認識し、音声認識結果が示すユーザの発話内容に、予め定めたキーワードが出現したタイミングで選択された選択肢カードを、変更カードとして特定してもよい。
また、上記実施形態において、ワークショップの目的や、ワークショップを行うユーザグループの属性に応じて、表示態様を変更する変更カードを特定するようにしてもよい。この場合、変更カードＤＢを、ワークショップの目的や、ワークショップを行ったユーザグループの属性毎に用意しておく。そして、管理サーバから第１制御装置に変更カード情報を送信する際に、これから行われるワークショップに応じた変更カードＤＢから取得した変更カード情報を送信すればよい。
また、上記実施形態では、各変更カードの変更タイミングを所定時間間隔とする場合について説明したが、変更タイミングの規定の仕方は、この例に限定されない。例えば、図２５に示す第１制御処理のステップＳ４１で、第１表示装置に選択肢カードを初期表示する時点で、図３１に示すように、全ての変更カード（図３１の例では、３枚）の表示態様を変更した上で表示してもよい。この場合、変更カードＤＢの「変更タイミング」の項目は省略することができる。また、選択肢カードが選択された際のワークショップ開始からの経過時間を、そのまま変更タイミングとして用いてもよい。すなわち、過去のワークショップで、ワークショップの開始から５分の時点で選択された選択肢カードが変更カードとして特定された場合、その変更カードは、第１表示装置への表示開始から５分後に表示態様を変更する。
また、変更カードの表示態様の変更は、上記実施形態の例に限定されない。例えば、第１表示装置に表示する選択肢カードを図３２の上図に示すように、複数の選択肢カード１０を全体として右方向、左方向、上方向、又は下方向（図３２の例では、右方向）に移動させる。そして、変更タイミングが到来した変更カード（図３２の例では、１０Ｆ）を、全体の移動方向とは逆方向又は交差する方向（図３２の例では、逆方向）へ移動させる。この移動に伴い、変更カード１０Ｆの周辺の選択肢カード１０を、図３２の下図に示すように、変更カード１０Ｆを回避するように移動させる。
上記のような選択肢カード１０の移動を実現するために、カードＤＢには、各選択肢カード１０の移動に関する情報が記憶される。図３３に、カードＤＢ２１４の一例を示す。図３３の例では、各選択肢カード１０の「カードＩＤ」に対応付けて、第１実施形態におけるカードＤＢ１１４の表示位置と同様の情報が、「初期表示位置」として記憶される。さらに、カードＩＤに対応付けて、各選択肢カード１０をどのように移動させるかを示す「移動情報」が記憶される。移動情報は、例えば、「１サイクル毎に所定方向（例えば、ｘ軸のプラス方向）へ、所定画素数分（例えば、１画素分）移動させる」のような、移動方向及び移動速度を含む情報とすることができる。
そして、図３４に示すように、変更カードＤＢ２１５には、表示態様変更後の「移動情報」を記憶しておく。なお、表示態様変更後の「移動情報」として、変更カードを停止させた状態で表示することを示す移動情報を記憶してもよい。この場合でも、他の選択肢カードが移動しているため、変更カードの移動を停止させることで、変更カードに目が行き易くなる。
第１制御装置１２０の表示制御部１２１は、管理サーバ１１０から送信されたカード情報を受信し、カード情報が示す選択肢カード１０の各々が、「初期表示位置」が示す表示位置に表示されるように、第１表示装置１３０を制御する。また、表示制御部１２１は、「移動情報」に基づいて、各選択肢カード１０を移動させる。また、表示制御部１２１は、変更カード情報に基づいて、変更タイミングが到来した変更カードについて、表示態様の変更として、移動方向及び移動速度を変更する。さらに、表示制御部１２１は、変更カードの移動方向及び移動速度の変更に伴い、周辺の選択肢カード１０を、変更カードを回避するように移動させる。周辺の選択肢カード１０の回避を伴う移動には、従来既知の画像の最適配置技術等を利用することができる。
また、上記実施形態において、第２表示装置を複数設けてもよい。この場合、第２表示装置の各々に異なる背景を表示する。そして、第１表示装置から選択された選択肢カードを第２表示装置に転送する際に、いずれの第２表示装置に転送するかを選択したうえで転送する。これにより、例えば、現在の状況用のビジョンと将来の希望用のビジョン等のように、それぞれ異なるビジョンを異なる第２表示装置に表示させることができる。
また、上記実施形態において、第１表示装置を複数設けて、複数の第１表示装置を連携して、１つの大型ディスプレイとして機能させてもよい。この場合、より多くの選択肢カードを表示することができる。
また、上記実施形態において、手書きのメモなどをスキャナで読み取り、選択肢カードと同様の電子的なカード形式として、第２表示装置に表示してもよい。これにより、選択肢カードで表された選択肢にはない情報をビジョンに反映させることができる。
また、上記実施形態では、第１表示装置１３０の表示制御を第１制御装置１２０が行い、第２表示装置１５０の表示制御を第２制御装置１４０が行い、第３表示装置１７０の表示制御を第３制御装置１２０が行う場合について説明したが、これに限定されない。例えば、管理サーバ１１０が、第１表示装置１３０、第２表示装置１５０、及び第３表示装置１７０の表示制御を行ってもよい。この場合、第１制御装置１２０の各機能部、第２制御装置１４０の各機能部、及び第３制御装置１６０の各機能部を、管理サーバ１１０に持たせればよい。
なお、上記実施形態における管理サーバ１１０の特定部１１３は、開示の技術の特定部の一例であり、第１制御装置１２０、第２制御装置１４０、及び第３制御装置１６０の各々の表示制御部１２１、１４１、１６１は、開示の技術の制御部の一例である。
また、上記実施形態では、管理プログラム３０、第１制御プログラム５０、第２制御プログラム７０、及び第３制御プログラム９０が記憶部２３、４３、６３、８３に予め記憶（インストール）されている態様を説明したが、これに限定されない。開示の技術に係るプログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＵＳＢメモリ等の記憶媒体に記憶された形態で提供することも可能である。
以上の実施形態に関し、更に以下の付記を開示する。
（付記１）
複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在するユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、
前記場所及び前記ユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定し、
特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する
ことを含む処理をコンピュータに実行させることを特徴とする画像制御方法。
（付記２）
前記検出情報は、前記場所における音圧、前記ユーザの脈拍、前記ユーザの発話内容、前記ユーザの動き、及び前記ユーザの位置情報の少なくとも１つを含む付記１に記載の画像制御方法。
（付記３）
前記選択肢情報を特定する際、
前記検出情報が前記場所における音圧の場合、所定値以上の音圧が検出された時間情報に対応するタイミングで選択操作が受け付けられた選択肢情報を特定し、
前記検出情報が前記ユーザの脈拍の場合、所定値以上の脈拍が検出された時間情報に対応するタイミングで選択操作が受け付けられた選択肢情報を特定し、
前記検出情報が前記ユーザの発話内容の場合、予め定めたキーワードを含む発話が検出された時間情報に対応するタイミングで選択操作が受け付けられた選択肢情報を特定し、
前記検出情報が前記ユーザの動きの場合、予め定めた大きさより大きい動きが検出された時間情報に対応するタイミングで選択操作が受け付けられた選択肢情報を特定し、
前記検出情報が前記ユーザの位置情報の場合、所定の条件を満たすユーザの位置、移動軌跡、又は移動速度が検出された時間情報に対応するタイミングで選択操作が受け付けられた選択肢情報を特定する
付記２に記載の画像制御方法。
（付記４）
前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を、前記他の選択肢情報と比較して、視認性が高くなる表示態様で表示する付記１〜付記３のいずれか１項に記載の画像制御方法。
（付記５）
前記第１記憶部に記憶される前記選択肢情報及び前記タイミング、並びに、前記第２記憶部に記憶される前記検出情報及び前記時間情報の各々に、前記複数の選択肢情報を用いて行われるワークショップの目的、又は前記ワークショップを行うユーザグループの属性が対応付けて記憶され、
前記表示装置に複数の選択肢情報を表示する際に、該複数の選択肢情報を用いて行われるワークショップの目的、又は該ワークショップを行うユーザグループに対応付けて前記第１記憶部に記憶された前記選択肢情報及び前記タイミングと、前記第２記憶部に記憶された前記検出情報及び前記時間情報とを参照して、前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を特定する
付記１〜付記４のいずれか１項に記載の画像制御方法。
（付記６）
前記他の選択肢情報とは異なる表示態様で表示する選択肢情報が複数存在する場合、他の選択肢情報と表示態様を異ならせるタイミングを、該複数の選択肢情報同士で同じタイミングにするか、又は、該複数の選択肢情報の各々に対する選択操作が受け付けられたタイミングに応じてそれぞれ異なるタイミングにする付記１〜付記５のいずれか１項に記載の画像制御方法。
（付記７）
前記検出情報と前記時間情報との関係を画像化して表示装置に表示することをさらに含む処理を前記コンピュータに実行させることを特徴とする付記１〜付記６のいずれか１項に記載の画像制御方法。
（付記８）
前記他の選択肢情報の各々を、前記表示装置上で上下方向又は左右方向に移動させるように表示すると共に、前記他の選択し情報と異なる表示態様で表示する選択肢情報を、停止させた状態で表示するか、又は、前記他の選択肢情報が移動している方向の逆方向又は交差する方向へ移動させるように表示する付記１〜付記７のいずれか１項に記載の画像制御方法。
（付記９）
前記表示装置上で選択操作を受け付けた選択肢情報を、他の表示装置に表示させる付記１〜付記８のいずれか１項に記載の画像制御方法。
（付記１０）
複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在するユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、前記場所及び前記ユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定する特定部と、
特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する制御部と、
を含む画像制御装置。
（付記１１）
前記検出情報は、前記場所における音圧、前記ユーザの脈拍、前記ユーザの発話内容、前記ユーザの動き、及び前記ユーザの位置情報の少なくとも１つを含む付記１０に記載の画像制御装置。
（付記１２）
前記制御部は、前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を、前記他の選択肢情報と比較して、視認性が高くなる表示態様で表示する付記１０又は付記１１に記載の画像制御装置。
（付記１３）
前記第１記憶部に記憶される前記選択肢情報及び前記タイミング、並びに、前記第２記憶部に記憶される前記検出情報及び前記時間情報の各々に、前記複数の選択肢情報を用いて行われるワークショップの目的、又は前記ワークショップを行うユーザグループの属性が対応付けて記憶され、
前記特定部は、前記表示装置に複数の選択肢情報を表示する際に、該複数の選択肢情報を用いて行われるワークショップの目的、又は該ワークショップを行うユーザグループに対応付けて前記第１記憶部に記憶された前記選択肢情報及び前記タイミングと、前記第２記憶部に記憶された前記検出情報及び前記時間情報とを参照して、前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を特定する
付記１０〜付記１２のいずれか１項に記載の画像制御装置。
（付記１４）
前記制御部は、前記他の選択肢情報とは異なる表示態様で表示する選択肢情報が複数存在する場合、他の選択肢情報と表示態様を異ならせるタイミングを、該複数の選択肢情報同士で同じタイミングにするか、又は、該複数の選択肢情報の各々に対する選択操作が受け付けられたタイミングに応じてそれぞれ異なるタイミングにする付記１０〜付記１３のいずれか１項に記載の画像制御装置。
（付記１５）
前記制御部は、前記検出情報と前記時間情報との関係を画像化して表示装置に表示する付記１０〜付記１４のいずれか１項に記載の画像制御装置。
（付記１６）
前記制御部は、前記表示装置上で選択操作を受け付けた選択肢情報を、他の表示装置に表示させる付記１０〜付記１５のいずれか１項に記載の画像制御装置。
（付記１７）
複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在するユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、
前記場所及び前記ユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定し、
特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する
ことを含む処理をコンピュータに実行させることを特徴とする画像制御プログラム。
（付記１８）
前記検出情報は、前記場所における音圧、前記ユーザの脈拍、前記ユーザの発話内容、前記ユーザの動き、及び前記ユーザの位置情報の少なくとも１つを含む付記１７に記載の画像制御プログラム。
（付記１９）
前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を、前記他の選択肢情報と比較して、視認性が高くなる表示態様で表示する付記１７又は付記１８に記載の画像制御プログラム。
（付記２０）
前記第１記憶部に記憶される前記選択肢情報及び前記タイミング、並びに、前記第２記憶部に記憶される前記検出情報及び前記時間情報の各々に、前記複数の選択肢情報を用いて行われるワークショップの目的、又は前記ワークショップを行うユーザグループの属性が対応付けて記憶され、
前記表示装置に複数の選択肢情報を表示する際に、該複数の選択肢情報を用いて行われるワークショップの目的、又は該ワークショップを行うユーザグループに対応付けて前記第１記憶部に記憶された前記選択肢情報及び前記タイミングと、前記第２記憶部に記憶された前記検出情報及び前記時間情報とを参照して、前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を特定する
付記１７〜付記１９のいずれか１項に記載の画像制御プログラム。
（付記２１）
前記他の選択肢情報とは異なる表示態様で表示する選択肢情報が複数存在する場合、他の選択肢情報と表示態様を異ならせるタイミングを、該複数の選択肢情報同士で同じタイミングにするか、又は、該複数の選択肢情報の各々に対する選択操作が受け付けられたタイミングに応じてそれぞれ異なるタイミングにする付記１７〜付記２０のいずれか１項に記載の画像制御プログラム。
（付記２２）
前記検出情報と前記時間情報との関係を画像化して表示装置に表示することをさらに含む処理を前記コンピュータに実行させることを特徴とする付記１７〜付記２１のいずれか１項に記載の画像制御プログラム。
（付記２３）
前記表示装置上で選択操作を受け付けた選択肢情報を、他の表示装置に表示させる付記１７〜付記２２のいずれか１項に記載の画像制御プログラム。
（付記２４）
第１表示装置を含む画像制御システムであって、
複数の選択肢情報が表示される前記第１表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記第１表示装置が配置された場所及び該場所に存在するユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、
前記場所及び前記ユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定する特定部を含む管理装置と、
前記管理装置により特定された選択肢情報を、他の選択肢情報とは異なる表示態様で前記第１表示装置に表示するように制御する第１表示制御部と、を含む第１制御装置と、
を含む画像制御システム。
（付記２５）
前記画像制御システムは、第２制御装置及び第２表示装置をさらに含み、
前記第１制御装置は、前記第１表示装置上で選択操作を受け付けた選択肢情報を、前記第２制御装置へ転送する転送部を含み、
前記第２制御装置は、前記転送部により転送された選択肢情報を前記第２表示装置に表示するように制御する第２表示制御部を含む
付記２４記載の画像制御システム。
（付記２６）
前記画像制御システムは、第３制御装置及び第３表示装置をさらに含み、
前記第１制御装置の転送部は、前記検出情報及び前記時間情報を前記第３制御装置へ転送し、
前記第３制御装置は、前記転送部により転送された前記検出情報と前記時間情報との関係を画像化して前記第３表示装置に表示するように制御する第３表示制御部を含む
付記２５記載の画像制御システム。
（付記２７）
複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在するユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、
前記場所及び前記ユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定し、
特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する
ことを含む処理をコンピュータに実行させることを特徴とする画像制御プログラムを記憶した記憶媒体。
１０ 選択肢カード
１０Ｆ 変更カード
１２ 背景
２０、４０、６０、８０ コンピュータ
２１、４１、６１、８１ ＣＰＵ
２２、４２、６２、８２ メモリ
２３、４３、６３、８３ 記憶部
２９、４９、６９、８９ 記録媒体
３０ 管理プログラム
５０ 第１制御プログラム
７０ 第２制御プログラム
９０ 第３制御プログラム
１００ 画像制御システム
１１０ 管理サーバ
１１１ 管理部
１１２ 転送部
１１３ 特定部
１２０ 第１制御装置
１２１ 表示制御部
１２２ 検出部
１３０ 第１表示装置
１４０ 第２制御装置
１４１ 表示制御部
１４２ 受付部
１４３ 作成部
１５０ 第２表示装置
１６０ 第３制御装置
１６１ 表示制御部
１７０ 第３表示装置
１８０ センシングデバイス
１１４、２１４ カードデータベース（ＤＢ）
１１５、２１５ 変更カードＤＢ
１１６ 背景ＤＢ
１１７ ビジョンＤＢ
１１８ 検出情報ＤＢ
１１９ 選択情報ＤＢ

Claims (9)

  1. 複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在し、前記表示装置を共通して利用する複数のユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、
    前記場所及び前記複数のユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定し、
    特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する
    ことを含む処理をコンピュータに実行させることを特徴とする画像制御方法。
  2. 前記検出情報は、前記場所における音圧、前記複数のユーザの各々の脈拍、前記複数のユーザの各々の発話内容、前記複数のユーザの各々の動き、及び前記複数のユーザの各々の位置情報の少なくとも１つを含む請求項１に記載の画像制御方法。
  3. 前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を、前記他の選択肢情報と比較して、視認性が高くなる表示態様で表示する請求項１又は請求項２に記載の画像制御方法。
  4. 前記第１記憶部に記憶される前記選択肢情報及び前記タイミング、並びに、前記第２記憶部に記憶される前記検出情報及び前記時間情報の各々に、前記複数の選択肢情報を用いて行われるワークショップの目的、又は前記ワークショップを行うユーザグループの属性が対応付けて記憶され、
    前記表示装置に複数の選択肢情報を表示する際に、該複数の選択肢情報を用いて行われるワークショップの目的、又は該ワークショップを行うユーザグループに対応付けて前記第１記憶部に記憶された前記選択肢情報及び前記タイミングと、前記第２記憶部に記憶された前記検出情報及び前記時間情報とを参照して、前記他の選択肢情報とは異なる表示態様で表示する選択肢情報を特定する
    請求項１〜請求項３のいずれか１項に記載の画像制御方法。
  5. 前記他の選択肢情報とは異なる表示態様で表示する選択肢情報が複数存在する場合、他の選択肢情報と表示態様を異ならせるタイミングを、該複数の選択肢情報同士で同じタイミングにするか、又は、該複数の選択肢情報の各々に対する選択操作が受け付けられたタイミングに応じてそれぞれ異なるタイミングにする請求項１〜請求項４のいずれか１項に記載の画像制御方法。
  6. 前記検出情報と前記時間情報との関係を画像化して表示装置に表示することをさらに含む処理を前記コンピュータに実行させることを特徴とする請求項１〜請求項５のいずれか１項に記載の画像制御方法。
  7. 前記表示装置上で選択操作を受け付けた選択肢情報を、他の表示装置に表示させる請求項１〜請求項６のいずれか１項に記載の画像制御方法。
  8. 複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在し、前記表示装置を共通して利用する複数のユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、前記場所及び前記複数のユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定する特定部と、
    特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する制御部と、
    を含む画像制御装置。
  9. 複数の選択肢情報が表示される表示装置上で選択操作を受け付けた選択肢情報と、該選択肢情報に対する選択操作が受け付けられたタイミングとを対応付けて記憶した第１記憶部と、前記表示装置が配置された場所及び該場所に存在し、前記表示装置を共通して利用する複数のユーザの少なくとも一方の状態を検出する検出装置により検出された検出情報と、該検出情報が検出された時間情報とを対応付けて記憶した第２記憶部とを参照し、
    前記場所及び前記複数のユーザの少なくとも一方が予め定めた状態であることを示す検出情報と対応付けて前記第２記憶部に記憶された時間情報に対応するタイミングと対応付けて前記第１記憶部に記憶された選択肢情報を特定し、
    特定した選択肢情報を、他の選択肢情報とは異なる表示態様で前記表示装置に表示するように制御する
    ことを含む処理をコンピュータに実行させることを特徴とする画像制御プログラム。
JP2016095505A 2016-05-11 2016-05-11 画像制御方法、装置、及びプログラム Active JP6722505B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016095505A JP6722505B2 (ja) 2016-05-11 2016-05-11 画像制御方法、装置、及びプログラム
US15/585,325 US10372297B2 (en) 2016-05-11 2017-05-03 Image control method and device
EP17170382.0A EP3244293B1 (en) 2016-05-11 2017-05-10 Selection option information presentation system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016095505A JP6722505B2 (ja) 2016-05-11 2016-05-11 画像制御方法、装置、及びプログラム

Publications (2)

Publication Number Publication Date
JP2017204146A JP2017204146A (ja) 2017-11-16
JP6722505B2 true JP6722505B2 (ja) 2020-07-15

Family

ID=58873597

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016095505A Active JP6722505B2 (ja) 2016-05-11 2016-05-11 画像制御方法、装置、及びプログラム

Country Status (3)

Country Link
US (1) US10372297B2 (ja)
EP (1) EP3244293B1 (ja)
JP (1) JP6722505B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018144424A (ja) * 2017-03-08 2018-09-20 コニカミノルタ株式会社 画像形成システム、画像形成システムの制御方法及び画像形成システムの制御プログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001060194A (ja) 1999-08-20 2001-03-06 Toshiba Corp 企画支援装置、企画支援方法および企画支援プログラムを格納したコンピュータ読取り可能な記録媒体
JP4018356B2 (ja) 2000-07-28 2007-12-05 株式会社東芝 製品設計方法、製品設計装置および製品設計プログラムを格納する記憶媒体
EP1993284B1 (en) * 2004-06-02 2013-07-03 Panasonic Corporation Picture coding apparatus and picture decoding apparatus
JP2006004131A (ja) * 2004-06-17 2006-01-05 Hitachi Ltd メッセージ表示方法およびその処理プログラム並びに電子会議システム
WO2007135796A1 (ja) * 2006-05-18 2007-11-29 Visual Interactive Sensitivity Research Institute Co., Ltd. コンテンツに対する利用者応答を評価する制御装置
US20100004977A1 (en) * 2006-09-05 2010-01-07 Innerscope Research Llc Method and System For Measuring User Experience For Interactive Activities
US9514436B2 (en) * 2006-09-05 2016-12-06 The Nielsen Company (Us), Llc Method and system for predicting audience viewing behavior
JP2010222993A (ja) * 2009-03-19 2010-10-07 Yanmar Co Ltd 内燃機関の排気浄化装置
US20120060094A1 (en) * 2010-09-08 2012-03-08 Jane Irwin System and method for displaying information related to video programs in a graphical user interface
US8988520B2 (en) * 2012-07-19 2015-03-24 Sony Corporation Method and apparatus for improving depth of field (DOF) in microscopy
WO2014085910A1 (en) 2012-12-04 2014-06-12 Interaxon Inc. System and method for enhancing content using brain-state data
JP6304941B2 (ja) * 2013-05-07 2018-04-04 キヤノン株式会社 会議情報記録システム、情報処理装置、制御方法およびコンピュータプログラム

Also Published As

Publication number Publication date
EP3244293B1 (en) 2021-02-24
US10372297B2 (en) 2019-08-06
US20170329470A1 (en) 2017-11-16
EP3244293A1 (en) 2017-11-15
JP2017204146A (ja) 2017-11-16

Similar Documents

Publication Publication Date Title
CN104364753B (zh) 用于突出显示活动界面元素的方法
JP5527423B2 (ja) 画像処理システム、画像処理方法、及び画像処理プログラムを記憶した記憶媒体
JP6337907B2 (ja) 表示制御装置、表示制御方法およびプログラム
JP6443340B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2013105346A (ja) 情報提示装置、情報提示方法、情報提示システム、情報登録装置、情報登録方法、情報登録システムおよびプログラム
US20130229342A1 (en) Information providing system, information providing method, information processing apparatus, method of controlling the same, and control program
JP2016224919A (ja) データ閲覧装置、データ閲覧方法、及びプログラム
JP2013105345A (ja) 情報登録装置、情報登録方法、情報登録システム、情報提示装置、情報提示方法、情報提示システムおよびプログラム
JP6851745B2 (ja) 画像制御方法、装置、及びプログラム
JP6852293B2 (ja) 画像処理システム、情報処理装置、情報端末、プログラム
JP6875861B2 (ja) 情報処理方法、装置、及びプログラム
JP2020091801A (ja) 作業分析システムおよび作業分析方法
JP6722505B2 (ja) 画像制御方法、装置、及びプログラム
US10915778B2 (en) User interface framework for multi-selection and operation of non-consecutive segmented information
JP5304467B2 (ja) 携帯端末装置、携帯端末表示方法、携帯端末表示システムおよびプログラム
JP6257822B1 (ja) 情報処理システム及びプログラム
US20220350471A1 (en) Method for providing contents by using widget in mobile electronic device and system thereof
JP2012221062A (ja) 情報処理装置、情報処理方法及びプログラム
TWI517080B (zh) 適性化導覽方法、系統及電腦程式產品
JP6512062B2 (ja) 選択肢情報の提示システム、方法、及びプログラム
JP2022106517A (ja) 情報処理方法、コンピュータプログラム及び情報処理装置
JP2018092419A (ja) 情報表示装置、情報表示方法及び記録媒体
CN112396996B (zh) 用于沙盘演示的多功能控制系统
US11393199B2 (en) Information display method
JP2012014597A (ja) 注意領域表示システム、注意領域表示方法、および注意領域表示プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190204

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200526

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200622

R150 Certificate of patent or registration of utility model

Ref document number: 6722505

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350