JP2023145192A - 情報処理装置及び情報処理プログラム - Google Patents
情報処理装置及び情報処理プログラム Download PDFInfo
- Publication number
- JP2023145192A JP2023145192A JP2022052530A JP2022052530A JP2023145192A JP 2023145192 A JP2023145192 A JP 2023145192A JP 2022052530 A JP2022052530 A JP 2022052530A JP 2022052530 A JP2022052530 A JP 2022052530A JP 2023145192 A JP2023145192 A JP 2023145192A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- information processing
- user
- projected
- real object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 153
- 238000012545 processing Methods 0.000 claims description 28
- 238000010586 diagram Methods 0.000 description 71
- 238000001514 detection method Methods 0.000 description 30
- 238000007639 printing Methods 0.000 description 30
- 230000006870 function Effects 0.000 description 21
- 238000000034 method Methods 0.000 description 20
- 230000000694 effects Effects 0.000 description 16
- 230000007423 decrease Effects 0.000 description 15
- 230000008569 process Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 9
- 108091008695 photoreceptors Proteins 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
- G06F3/1203—Improving or facilitating administration, e.g. print management
- G06F3/1208—Improving or facilitating administration, e.g. print management resulting in improved quality of the output result, e.g. print layout, colours, workflows, print preview
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1237—Print job management
- G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1237—Print job management
- G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
- G06F3/1256—User feedback, e.g. print preview, test print, proofing, pre-flight checks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
- G06F3/1285—Remote printer device, e.g. being remote from client or server
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K15/00—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers
- G06K15/02—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers using printers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Geometry (AREA)
- Quality & Reliability (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
【課題】所望の実物体に画像データを投影し、画像データの大きさ等を確認した後に印刷する場合に、投影対象となる実物体が複数であっても、所望の実物体を選択する。【解決手段】情報処理装置10は、CPU11を備える。CPU11は、画像データを取得し、予め定められた載置面上に載置された複数の実物体であって、画像データの投影対象の候補となる複数の実物体の各々の載置面上の位置を検出し、複数の実物体に対する、ユーザによる操作の内容、及び、複数の実物体の各々の載置面上の位置に応じて、複数の実物体の中から投影対象の実物体の選択を受け付け、選択を受け付けた実物体の載置面上の位置に応じて、当該実物体に対して画像データを投影した後に、当該画像データを印刷する制御を行う。【選択図】図7
Description
本開示は、情報処理装置及び情報処理プログラムに関する。
例えば、特許文献1には、物体に貼り付けるための印刷物など、物体の表面に載せられる候補画像を編集することが可能な情報処理装置が記載されている。この情報処理装置は、所定の空間に存在する物体を検出する検出手段と、検出手段が検出した物体の形状情報を取得する取得手段と、検出手段が検出した物体に、物体の表面に載せられる候補画像を投影させる投影制御手段と、候補画像と物体の形状情報とに基づいて、候補画像を所定の印刷装置に印刷させるための印刷設定情報を設定する設定手段と、を備える。
また、特許文献2には、ユーザの利用状況や意図を考慮してジェスチャに対応する動作を実行することが可能な表示制御装置が記載されている。この表示制御装置は、表示面に対して行われた操作から、ジェスチャの内容を判定する判定部と、判定部が判定したジェスチャに対応する、表示面で表示される表示オブジェクトの配置方向を設定する効果及び効果の対象となる表示オブジェクトを決定する効果決定部と、を備える。この効果決定部は、操作が表示面上に存在する物理オブジェクトと所定の位置関係にある操作である場合に、物理オブジェクトの配置位置に基づいて表示オブジェクトを表示させ、操作が物理オブジェクトに沿って線を描く操作である場合に、物理オブジェクト上に表示オブジェクトを表示させる。
ところで、所望の実物体に挿入したり、貼り付けたりする画像を印刷したい場合に、実物体の大きさに合わせて画像を印刷したいという要求がある。
1つの実物体に対して1つの画像データを投影し、当該画像データの大きさ等を調整する技術がある。しかしながら、画像データの投影対象となる実物体が複数ある場合に、所望の実物体を如何にして選択するかについては考慮されていない。
本開示は、所望の実物体に画像データを投影し、画像データの大きさ等を確認した後に印刷する場合に、投影対象となる実物体が複数であっても、所望の実物体を選択することができる情報処理装置及び情報処理プログラムを提供することを目的とする。
上記目的を達成するために、第1態様に係る情報処理装置は、プロセッサを備え、前記プロセッサが、画像データを取得し、予め定められた載置面上に載置された複数の実物体であって、前記画像データの投影対象の候補となる前記複数の実物体の各々の前記載置面上の位置を検出し、前記複数の実物体に対する、ユーザによる操作の内容、及び、前記複数の実物体の各々の前記載置面上の位置に応じて、前記複数の実物体の中から投影対象の実物体の選択を受け付け、前記選択を受け付けた実物体の前記載置面上の位置に応じて、当該実物体に対して前記画像データを投影した後に、当該画像データを印刷する制御を行う。
また、第2態様に係る情報処理装置は、第1態様に係る情報処理装置において、前記ユーザによる操作が、前記ユーザのジェスチャによる操作、前記ユーザによる前記載置面上に投影されたボタン操作、前記ユーザの音声による操作、及び、前記ユーザの視線による操作のいずれかの操作である。
また、第3態様に係る情報処理装置は、第1態様又は第2態様に係る情報処理装置において、前記プロセッサが、前記複数の実物体の各々の大きさを検出し、前記複数の実物体のうち第1実物体に前記画像データを投影している状態で、前記ユーザによる操作によって、前記第1実物体と大きさが異なる第2実物体の選択を受け付けた場合に、前記第2実物体の大きさに合わせて前記画像データの大きさを調整して前記第2実物体に投影する制御を行う。
また、第4態様に係る情報処理装置は、第1態様又は第2態様に係る情報処理装置において、前記プロセッサが、前記画像データに類似する過去の編集済み画像データが存在し、かつ、前記編集済み画像データに予め対応付けられた実物体と類似する実物体が前記複数の実物体の中に存在する場合、前記複数の実物体のうち前記類似する実物体に対して、前記画像データ及び前記編集済み画像データの少なくとも一方を投影する制御を行う。
また、第5態様に係る情報処理装置は、第4態様に係る情報処理装置において、前記プロセッサが、前記複数の実物体の各々の形状を検出し、前記検出した結果に基づいて、前記編集済み画像データに予め対応付けられた実物体と形状が類似する実物体が前記複数の実物体の中に存在するか否かを判定する。
また、第6態様に係る情報処理装置は、第4態様又は第5態様に係る情報処理装置において、前記プロセッサが、前記編集済み画像データが複数ある場合に、前記複数の編集済み画像データを、前記画像データと共に、又は、前記画像データに代えて、投影する制御を行う。
また、第7態様に係る情報処理装置は、第1態様又は第2態様に係る情報処理装置において、前記プロセッサが、前記ユーザによる操作によって、前記複数の実物体をグループ化して1つの投影対象とし、前記グループ化した1つの投影対象に対して、前記画像データを投影する制御を行う。
また、第8態様に係る情報処理装置は、第1態様又は第2態様に係る情報処理装置において、前記プロセッサが、前記複数の実物体のうち第1実物体に前記画像データを投影している状態で、前記第1実物体を移動又は回転させた場合に、前記画像データを前記第1実物体に追従して移動又は回転させる。
また、第9態様に係る情報処理装置は、第8態様に係る情報処理装置において、前記プロセッサが、前記ユーザによる操作が予め定めた操作である場合に、前記追従を解除する。
また、第10態様に係る情報処理装置は、第9態様に係る情報処理装置において、前記プロセッサが、前記追従を行う場合の前記載置面に投影する背景色と、前記追従を解除した場合の前記載置面に投影する背景色とが異なるように制御する。
また、第11態様に係る情報処理装置は、第1態様~第10態様の何れか1態様に係る情報処理装置において、前記プロセッサが、過去に得られた編集済み画像データの一覧である編集済み画像一覧を、前記載置面に投影する制御を行い、前記編集済み画像一覧から選択された編集済み画像データを、投影する画像データとする。
また、第12態様に係る情報処理装置は、第11態様に係る情報処理装置において、前記プロセッサが、前記編集済み画像一覧から選択された編集済み画像データに対して、前記ユーザによる予め定めた操作を受け付けた場合に、当該編集済み画像データの編集前画像データを投影する制御を行う。
また、第13態様に係る情報処理装置は、第1態様~第10態様の何れか1態様に係る情報処理装置において、前記プロセッサが、投影中の画像データを含む画像データの一覧である画像一覧を、前記載置面に投影する制御を行い、投影する画像データを追加する場合、前記画像一覧から選択された画像データを、投影する画像データとして追加する。
また、第14態様に係る情報処理装置は、第13態様に係る情報処理装置において、前記プロセッサが、前記画像一覧に含まれる前記投影中の画像データに対して、前記ユーザによる予め定めた操作を受け付けた場合、前記投影中の画像データを投影対象から除外する。
また、第15態様に係る情報処理装置は、第1態様~第10態様の何れか1態様に係る情報処理装置において、前記プロセッサが、画像データの一覧である画像一覧を、前記載置面の前記複数の実物体が載置された領域以外の領域に投影すると共に、前記載置面の前記複数の実物体が載置された領域に対して、前記画像一覧に含まれる画像データを投影する制御を行う。
また、第16態様に係る情報処理装置は、第15態様に係る情報処理装置において、前記プロセッサが、前記画像一覧から画像データが選択された場合、前記載置面の前記複数の実物体が載置された領域に投影中の画像データのうち、前記選択された画像データに対応する画像データの表示形態を変化させる。
また、第17態様に係る情報処理装置は、第16態様に係る情報処理装置において、前記プロセッサが、前記画像一覧から複数の画像データが選択された場合、前記複数の画像データをグループ化して1つの投影画像データとする。
更に、上記目的を達成するために、第18態様に係る情報処理プログラムは、画像データを取得し、予め定められた載置面上に載置された複数の実物体であって、前記画像データの投影対象の候補となる前記複数の実物体の各々の前記載置面上の位置を検出し、前記複数の実物体に対する、ユーザによる操作の内容、及び、前記複数の実物体の各々の前記載置面上の位置に応じて、前記複数の実物体の中から投影対象の実物体の選択を受け付け、前記選択を受け付けた実物体の前記載置面上の位置に応じて、当該実物体に対して前記画像データを投影した後に、当該画像データを印刷する制御を行うことを、コンピュータに実行させる。
第1態様及び第18態様によれば、所望の実物体に画像データを投影し、画像データの大きさ等を確認した後に印刷する場合に、投影対象となる実物体が複数であっても、所望の実物体を選択することができる、という効果を有する。
第2態様によれば、ジェスチャ操作、ボタン操作、音声操作、及び視線操作のいずれかの操作によって、直感的に所望の実物体を選択することができる、という効果を有する。
第3態様によれば、画像データを手動でリサイズする場合と比較して、画像データのリサイズに要する工数を低減することができる、という効果を有する。
第4態様によれば、投影対象とする実物体を手動で選択する場合と比較して、実物体の選択に要する工数を低減することができる、という効果を有する。
第5態様によれば、複数の実物体の中に、画像データと類似する編集済み画像データに予め対応付けられた実物体と形状が類似する実物体が存在するか否かを判定することができる、という効果を有する。
第6態様によれば、投影対象とする実物体に対して、画像データと類似する複数の編集済み画像データを投影することができる、という効果を有する。
第7態様によれば、複数の実物体をグループ化した1つの投影対象に対して画像データを投影することができる、という効果を有する。
第8態様によれば、投影する画像データを動かすのではなく、載置面上の実物体を動かして調整する場合に、実物体に画像データを追従させることができる、という効果を有する。
第9態様によれば、実物体に画像データを追従させたくない場合に、追従を解除することができる、という効果を有する。
第10態様によれば、ユーザが一見して、追従を行う状態であるか、あるいは、追従を解除した状態であるかを把握することができる、という効果を有する。
第11態様によれば、編集済み画像一覧の中から所望の編集済み画像データを選択して投影することができる、という効果を有する。
第12態様によれば、編集済み画像一覧の中から選択された編集済み画像データについての編集前画像データを投影することができる、という効果を有する。
第13態様によれば、投影中の画像データを含む画像一覧の中から所望の画像データを追加して投影することができる、という効果を有する。
第14態様によれば、画像一覧に含まれる投影中の画像データを投影対象から除外することができる、という効果を有する。
第15態様によれば、画像一覧を投影させながら、画像一覧に含まれる画像データを、複数の実物体が配置された載置面上に投影することができる、という効果を有する。
第16態様によれば、画像一覧から画像データが選択された場合に、ユーザが一見して、対応する投影中の画像データを把握することができる、という効果を有する。
第17態様によれば、画像一覧から選択された複数の画像データをグループ化することができる、という効果を有する。
以下、図面を参照して、本開示の技術を実施するための形態の一例について詳細に説明する。なお、動作、作用、機能が同じ働きを担う構成要素及び処理には、全図面を通して同じ符号を付与し、重複する説明を適宜省略する場合がある。各図面は、本開示の技術を十分に理解できる程度に、概略的に示してあるに過ぎない。よって、本開示の技術は、図示例のみに限定されるものではない。また、本実施形態では、本開示と直接的に関連しない構成や周知な構成については、説明を省略する場合がある。
[第1の実施形態]
図1は、第1の実施形態に係る情報処理装置10の外観の一例を示す図である。
図1は、第1の実施形態に係る情報処理装置10の外観の一例を示す図である。
図1に示すように、本実施形態に係る情報処理装置10は、撮影部18と、投影部19と、印刷部20と、を備えている。撮影部18及び投影部19は、印刷部20の上方に一体的に設けられている。印刷部20には、情報処理装置10の制御装置(図示省略)が内蔵される。印刷部20の上面には載置面(ステージ)30が設けられており、載置面30には実物体40が載置される。ここでいう実物体とは、実空間における物体を意味し、仮想空間における物体は除外される。図1の実物体40は、一例として、「うちわ」である。
撮影部18は、例えば、カメラ、好ましくは、書画カメラであり、載置面30上に載置された実物体40を連続的に撮影する。また、撮影部18は、載置面30上において実物体40の上にかざされたユーザの手を連続的に撮影する。
投影部19は、例えば、プロジェクタ、好ましくは、単焦点プロジェクタであり、載置面30上に載置された実物体40に対してユーザの所望の画像データを投影する。また、投影部19は、載置面30に対して、ユーザからの操作入力を受け付けるためのUI(User Interface)画面を投影する。
印刷部20は、例えば、インクジェット方式、電子写真方式等のプリンタであり、実物体40に投影して、ユーザにより編集された画像データに基づく画像を用紙等の記録媒体に印刷する。
本実施形態に係る情報処理装置10は、ユーザが所望する実物体40に挿入したり、貼り付けたりする画像を印刷する場合に、実物体40に画像データを投影しながら、画像データの大きさ等を調整した上で、調整後の画像データに基づく画像を印刷する処理(以下、「画像投影・印刷処理」という。)を行う機能を備えている。なお、情報処理装置10は、スキャン機能、プリント機能、及びコピー機能等を有していてもよい。これらコピー機能、プリント機能、及びスキャン機能は、情報処理装置10における画像処理の一例である。
図2は、本実施形態に係る実物体40の一例を示す図である。実物体40の一例としては、図2(A)に示すように、「プレゼントを入れる箱」でもよいし、図2(B)に示すように、「うちわ」でもよいし、図2(C)に示すように、「ユーザの手」でもよい。
図3は、本実施形態に係るユースケースの説明に供する図である。図3の例では、実物体40の一例としてのスマートフォンのケース部分に、画像データを印刷して得られた印刷物を貼り付けて、自作のスマートフォンを作る場合について示している。
図3に示すように、本実施形態に係る情報処理装置10によれば、ユーザによって載置面30上に載置された実物体40(図3の例ではスマートフォン)に対して、ユーザの所望の画像データ50を投影する。ユーザは投影された画像データ50を実物体40に合わせて編集し、編集された画像データ50を所望の用紙(例えば、はがきサイズの用紙)に印刷して印刷物51を得る。なお、この印刷物51は、実物体40に合わせて切り抜いた後の状態を示す。そして、ユーザは実物体40に対して印刷物51を貼り付けて成果物52(図3の例では自作のスマートフォン)を作成する。
図4は、本実施形態に係る別のユースケースの説明に供する図である。図4の例では、実物体40の一例としてのうちわに、画像データを印刷して得られた印刷物を貼り付けて、自作のうちわを作る場合について示している。
図4に示すように、本実施形態に係る情報処理装置10によれば、ユーザによって載置面30上に載置された実物体40(図4の例ではうちわ)に対して、ユーザの所望の画像データ50を投影する。ユーザは投影された画像データ50を実物体40に合わせて編集し、編集された画像データ50を所望の用紙(例えば、A4サイズの用紙)に印刷して印刷物51を得る。そして、ユーザは印刷物51を実物体40に合わせて切り抜き、実物体40に貼り付けることで自作のうちわを作成する。
図5は、本実施形態に係る更に別のユースケースの説明に供する図である。図5の例では、実物体40の一例としてのユーザの手に、画像データを印刷して得られた印刷物を貼り付けて、自作のネイルアートを作る場合について示している。
図5に示すように、本実施形態に係る情報処理装置10によれば、ユーザによって載置面30上に載置された実物体40(図5の例ではユーザの手)に対して、ユーザの所望の画像データ50(図5の例ではネイルアート)を投影する。但し、図5の例では、ユーザの手を載置面30に置いたままだと、操作し難いため、ユーザの手を撮影して得られた画像データを投影して、実物体40の代わりとしてもよい。この場合、画像データ50と、ユーザの手を表す画像データとを合成して表示させ、画像データ50のみを編集対象とする。ユーザは投影された画像データ50を実物体40に合わせて編集し、編集された画像データ50を所望の用紙(例えば、シール用紙)に印刷して印刷物51を得る。そして、ユーザは印刷物51を実物体40に合わせて切り抜き、実物体40に貼り付けることで自作のネイルアートを作成する。
図6は、第1の実施形態に係る情報処理装置10の電気的な構成の一例を示すブロック図である。
図6に示すように、本実施形態に係る情報処理装置10は、CPU(Central Processing Unit)11と、ROM(Read Only Memory)12と、RAM(Random Access Memory)13と、入出力インタフェース(I/O)14と、記憶部15と、表示部16と、外部インタフェース(外部I/F)17と、撮影部18と、投影部19と、印刷部20と、近距離通信部21と、を備えている。
CPU11、ROM12、RAM13、及びI/O14は、バスを介して各々接続されている。I/O14には、記憶部15と、表示部16と、外部I/F17と、撮影部18と、投影部19と、印刷部20と、近距離通信部21と、を含む各機能部が接続されている。これらの各機能部は、I/O14を介して、CPU11と相互に通信可能とされる。
CPU11、ROM12、RAM13、及びI/O14によって制御装置が構成される。制御装置は、情報処理装置10の一部の動作を制御するサブ制御部として構成されてもよいし、情報処理装置10の全体の動作を制御するメイン制御部の一部として構成されてもよい。制御装置の各ブロックの一部又は全部には、例えば、LSI(Large Scale Integration)等の集積回路又はIC(Integrated Circuit)チップセットが用いられる。上記各ブロックに個別の回路を用いてもよいし、一部又は全部を集積した回路を用いてもよい。上記各ブロック同士が一体として設けられてもよいし、一部のブロックが別に設けられてもよい。また、上記各ブロックのそれぞれにおいて、その一部が別に設けられてもよい。制御装置の集積化には、LSIに限らず、専用回路又は汎用プロセッサを用いてもよい。
記憶部15としては、例えば、HDD(Hard Disk Drive)、SSD(Solid State Drive)、フラッシュメモリ等が用いられる。記憶部15には、本実施形態に係る画像投影・印刷処理を実行するための情報処理プログラム15Aが記憶される。なお、この情報処理プログラム15Aは、ROM12に記憶されていてもよい。
情報処理プログラム15Aは、例えば、情報処理装置10に予めインストールされていてもよい。情報処理プログラム15Aは、不揮発性の記憶媒体に記憶して、又はネットワークを介して配布して、情報処理装置10に適宜インストールすることで実現してもよい。なお、不揮発性の記憶媒体の例としては、CD-ROM(Compact Disc Read Only Memory)、光磁気ディスク、HDD、DVD-ROM(Digital Versatile Disc Read Only Memory)、フラッシュメモリ、メモリカード等が想定される。
本実施形態では、ユーザが操作を行うためのUI画面は、投影部19が載置面30に対して投影するが、別途表示部16を備えて、表示部16が一部のUI画面を表示するようにしてもよい。表示部16には、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)、有機EL(Electro Luminescence)ディスプレイ等が用いられる。表示部16は、タッチパネルを一体的に有している。表示部16は、例えば、載置面30の一部に設けられる。表示部16は、操作パネルとして、情報処理装置10のユーザから画像投影・印刷処理に関する各種の指示を受け付ける。また、表示部16は、ユーザから受け付けた指示に応じて実行された処理の結果や、処理に対する通知等の各種の情報を表示する。
外部I/F17は、ユーザが持参するUSB(Universal Serial Bus)メモリ又はメモリカード等の可搬型記憶媒体と接続し、この可搬型記憶媒体に予め記憶されている画像データを情報処理装置10に入力する。
撮影部18は、上述したように、例えば、カメラ、好ましくは、書画カメラであり、載置面30上に載置された実物体40を連続的に撮影する。また、撮影部18は、載置面30上において実物体40の上にかざされたユーザの手を連続的に撮影する。
投影部19は、上述したように、例えば、プロジェクタ、好ましくは、単焦点プロジェクタであり、載置面30上に載置された実物体40に対してユーザの所望の画像データを投影する。また、投影部19は、載置面30に対して、ユーザからの操作入力を受け付けるためのUI画面を投影する。
印刷部20は、上述したように、例えば、インクジェット方式、電子写真方式等のプリンタであり、実物体40に投影して、ユーザにより編集された画像データに基づく画像を用紙等の記録媒体に印刷する。
画像を形成する方式が電子写真方式の場合、印刷部20は、感光体ドラム、帯電装置、露光装置、現像装置、転写装置、及び定着装置を含んでいる。帯電装置は、感光体ドラムに電圧を印加して感光体ドラムの表面を帯電させる。露光装置は、帯電装置で帯電された感光体ドラムを画像データに応じた光で露光することにより感光体ドラムに静電潜像を形成する。現像装置は、感光体ドラムに形成された静電潜像をトナーにより現像することで感光体ドラムにトナー像を形成する。転写装置は、感光体ドラムに形成されたトナー像を用紙に転写する。定着装置は、用紙に転写されたトナー像を加熱及び加圧により定着させる。
近距離通信部21は、ユーザが持参する携帯端末(例えば、スマートフォン等)との間で近距離無線通信を行い、この携帯端末に予め記憶されている画像データを情報処理装置10に入力する。近距離通信部21には、例えば、NFC(Near Field Communication)、Bluetooth(登録商標)等が適用される。NFCとは、13.56MHzの周波数を利用する通信距離10cm程度の近距離無線通信技術である。
ところで、上述したように、画像データの投影対象となる実物体40が複数ある場合に、所望の実物体を如何にして選択するかについては考慮されていない。
このため、本実施形態に係る情報処理装置10は、画像データの投影対象の候補となる複数の実物体40の各々の載置面30上の位置を検出し、複数の実物体40に対する、ユーザによる操作の内容、及び、複数の実物体40の各々の載置面30上の位置に応じて、複数の実物体40の中から投影対象の実物体40の選択を受け付け、選択を受け付けた実物体40の載置面30上の位置に応じて、実物体40に対して画像データを投影した後に、画像データを印刷する。
具体的に、本実施形態に係る情報処理装置10のCPU11は、記憶部15に記憶されている情報処理プログラム15AをRAM13に書き込んで実行することにより、図7に示す各部として機能する。なお、CPU11は、プロセッサの一例である。
図7は、第1の実施形態に係る情報処理装置10の機能的な構成の一例を示すブロック図である。
図7に示すように、本実施形態に係る情報処理装置10のCPU11は、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。
記憶部15には、画像DB(DataBase:データベース)151及び画像対応付けテーブル152が記憶されている。画像DB151は、ユーザが持参した可搬型記憶媒体又は携帯端末から取得された画像データを格納すると共に、過去に編集された編集済み画像データを格納する。また、画像対応付けテーブル152は、画像データと投影された実物体との対応関係を登録するためのデータテーブルである。画像対応付けテーブル152には、例えば、「犬の画像」を表す識別情報と、「うちわ」を表す識別情報とが対応付けられて登録される。
取得部11Aは、ユーザが持参する可搬型記憶媒体又は携帯端末から得られた画像データの中から、投影対象とする画像データを取得する。
物体検出部11Bは、載置面30上に載置された複数の実物体40を検出する。このとき、物体検出部11Bは、複数の実物体40の各々の載置面30上の位置を検出する。具体的には、撮影部18により複数の実物体40を撮影して得られた画像を解析することにより複数の実物体40を検出する。複数の実物体40の位置は、例えば、撮影部18により撮影して得られた載置面30を表す画像において特定の位置(中心、左上端、左下端、右上端、右下端)を基準点として座標で表される。
物体検出部11Bは、実物体40をキャプチャして輪郭線を検出してもよい。この輪郭線を、実物体40に対応する画像データに基づく画像と共に用紙に印刷することで、画像の切り取り線として利用することが可能とされる。
操作検出部11Cは、複数の実物体40に対する、ユーザによる操作の内容を検出する。ユーザによる操作は、例えば、ユーザのジェスチャによる操作、ユーザによる載置面30上に投影されたボタン操作、ユーザの音声による操作、及び、ユーザの視線による操作のいずれかの操作とされる。ジェスチャ操作の場合、撮影部18により実物体40の上にかざされたユーザの手を撮影して得られた画像を解析することによりユーザの手によるジェスチャ操作を検出する。
選択部11Dは、複数の実物体40に対する、ユーザによる操作の内容、及び、複数の実物体の各々の載置面30上の位置に応じて、複数の実物体40の中から投影対象の実物体40の選択を受け付ける。
投影制御部11Eは、投影部19を制御し、選択部11Dにより選択を受け付けた実物体40の載置面30上の位置に応じて、当該実物体40に対して、取得部11Aによる取得された画像データを投影する。このとき、投影制御部11Eは、画像データに対するユーザの編集操作を受け付ける。投影中の画像データの編集には、既存の技術が適用され、ユーザの操作に従って、例えば、投影画像の拡大、縮小、移動、回転、位置調整等の編集が可能とされる。なお、投影中の画像データを直接編集してもよいし、編集画面を別に投影して編集してもよい。
印刷制御部11Fは、印刷部20を制御し、投影部19により投影され、編集後の画像データを、指定された用紙サイズ(例えば、A4、B5、はがき等)、用紙種類(例えば、普通紙、厚紙、ラベル紙、シール紙等)に従って印刷する。
決済部11Gは、印刷部20により印刷して得られた印刷物に対して、例えば、ユーザの携帯端末又はICカードを用いた決済(電子決済)を行う。
次に、図8~図10を参照して、本実施形態に係る情報処理装置10による画像投影・印刷処理について具体的に説明する。なお、図8~図10の例では、載置面30を真上から見た状態を示している。
図8は、本実施形態に係る情報処理装置10による画像投影・印刷処理の説明に供する図である。
図8の(S1)では、ユーザが持参した可搬型記憶媒体又は携帯端末から取得した画像データのリストである画像リストを載置面30に投影する。ユーザが画像リストから印刷したい画像データ50を選択する。
(S2)では、ユーザが持参した複数の実物体40A、40B、40C(図8の例では「うちわ」)を載置面30に載置する。ここで、複数の実物体40A、40B、40Cを特に区別して説明する必要がない場合には、単に実物体40というものとする。
(S3)では、上記(S1)で選択した画像データ50を、上記(S2)で載置面30上に載置された複数の実物体40A、40B、40Cのうち中心の実物体40Bに投影する。
(S4)では、ユーザの手60(以下、「ユーザの指60」、「ユーザの両手60」ともいう。)によるジェスチャ操作を検出し、画像データ50の投影対象を実物体40Bから実物体40Cに移動させる。
(S5)では、ユーザの手60によるジェスチャ操作を検出し、投影されている画像データ50の編集を受け付け、編集済み画像データを印刷ジョブに追加する。
(S6)では、ユーザにより印刷ジョブとして登録された画像リストの中から印刷したい画像データが選択され、「印刷」ボタンが押下されると、選択された画像データを印刷する。
図9は、本実施形態に係るジェスチャ操作の説明に供する図である。
図9(A)に示すように、載置面30の中央部又は編集中の画像データ50の位置から左端部へ向けてユーザの手60を動かすジェスチャ操作は、編集の「Undo(元に戻す)」を行う操作とされる。また、図9(B)に示すように、載置面30の中央部又は編集中の画像データ50の位置から右端部へ向けてユーザの手60を動かすジェスチャ操作は、編集の「Redo(やり直し)」を行う操作とされる。また、図9(C)に示すように、載置面30の中央部又は編集中の画像データ50の位置から下端部へ向けてユーザの手60を動かすジェスチャ操作は、投影中の画像データ50の削除を行う操作とされる。なお、投影中の画像データ50に編集が加えられた場合、その旨を示すメッセージを投影し、ユーザの確認を得た上で削除することが望ましい。また、図9(D)に示すように、載置面30の中央部又は編集中の画像データ50の位置から上端部へ向けてユーザの手60を動かすジェスチャ操作は、編集中の画像データ50を編集済み画像データとして画像DB151に追加する操作とされる。
図10は、本実施形態に係る別のジェスチャ操作の説明に供する図である。
図10(A)に示すように、載置面30の上端部から下端部に向けてユーザの手60を動かすジェスチャ操作は、後述の編集済み画像一覧画面の投影を行う操作とされる。なお、その後、逆方向にユーザの手60を動かすと編集済み画像一覧画面の投影が終了する。画像データ50を編集中の場合、直近の編集内容は保持されたままとされる。また、図10(B)に示すように、載置面30の右端部から左端部に向けてユーザの手60を動かすジェスチャ操作は、印刷ジョブが1つ以上存在する場合、後述の印刷実行画面の投影を行う操作とされる。なお、投影中の画像データ50に編集が加えられた場合、その旨を示すメッセージを投影し、ユーザの確認を得た上で印刷実行画面を投影することが望ましい。一方、印刷ジョブが存在しない場合、その旨を示すメッセージを投影する。また、図10(C)に示すように、載置面30の下端部から上端部に向けてユーザの手60を動かすジェスチャ操作は、後述の投影画像選択画面の投影を行う操作とされる。また、図10(D)に示すように、載置面30の左端部から右端部に向けてユーザの手60を動かすジェスチャ操作は、後述の投影中オブジェクト一覧画面の投影を行う操作とされる。
次に、図11を参照して、第1の実施形態に係る情報処理装置10の作用を説明する。
図11は、第1の実施形態に係る情報処理プログラム15Aによる処理の流れの一例を示すフローチャートである。
まず、情報処理装置10に対して、画像投影・印刷処理の実行が指示されると、CPU11により情報処理プログラム15Aが起動され、以下の各ステップを実行する。
図11のステップS101では、CPU11が、ユーザが持参する可搬型記憶媒体又は携帯端末から画像データを取得する。
ステップS102では、CPU11が、ステップS101で取得した画像データのリストである画像リストを載置面30に投影し、ユーザから印刷したい画像データの選択を受け付ける。
ステップS103では、CPU11が、一例として、図12に示すように、ユーザによって載置面30に載置された複数の実物体40A~40Cを検出する。このとき、複数の実物体40A~40Cの各々についての載置面30上の位置を検出する。
図12は、本実施形態に係る載置面30上に載置された複数の実物体40A~40Cの一例を示す図である。図12の例では、複数の実物体40A~40Cの一例として複数の「うちわ」が載置面30に載置され、これら全てが投影対象候補とされる。なお、図12の例では、載置面30を真上から見た状態を示している。
ステップS104では、CPU11が、一例として、図13に示すように、載置面30に対して、ステップS102で選択を受け付けた画像データ50をデフォルト位置に投影する。
図13は、本実施形態に係る載置面30上に投影された画像データ50の一例を示す図である。図13の例では、画像データ50を投影するデフォルト位置が載置面30の略中央部とされる。
ステップS105では、CPU11が、複数の実物体40A~40Cに対する、ユーザの操作を検出する。一例として、図13に示すように、ユーザの手60によるジェスチャ操作を検出する。
ステップS106では、CPU11が、ステップS105で検出されたユーザの操作に従って、複数の実物体40A~40Cの中から投影対象とする実物体40の選択を受け付ける。
ステップS107では、CPU11が、ステップS106で選択を受け付けた実物体40に対して画像データ50を投影する。ここでは、図13に示すように、ユーザの手60によるジェスチャ操作を検出して、投影対象とする実物体40の選択を受け付け、投影を行う。
ここで、図14~図16を参照して、ユーザの手60によるジェスチャ操作について具体的に説明する。
図14は、本実施形態に係るユーザの手60によるジェスチャ操作の説明に供する図である。図14の例は、ユーザの手60ではじくような操作であるフリック操作について示している。
図14に示すように、載置面30上でユーザの手60によるフリック操作を行うと、ユーザの手60を動かした向きに位置する実物体40に画像データ50が移動する。図14の例では、ユーザの手60を左向きに1回フリックしたため、画像データ50がデフォルト位置から左側に位置する実物体40Aに移動する。更にユーザの手60を左向きに1回フリックすると、実物体40Aの左側には実物体が存在しないため、画像データ50が実物体40Aから実物体40Cに移動する。
図15は、本実施形態に係るユーザの手60による別のジェスチャ操作の説明に供する図である。図15の例は、ユーザの手60で画像データ50を引きずるような操作であるドラッグ操作について示している。
図15に示すように、載置面30上でユーザの手60によるドラッグ操作を行うと、ユーザの手60により画像データ50がドロップされた位置(つまり、離した位置)に最も近い実物体40に画像データ50が移動する。図15の例では、画像データ50を実物体40Aの付近でドロップしたため、画像データ50がデフォルト位置から実物体40Aに移動する。
図16は、本実施形態に係るユーザの手60による更に別のジェスチャ操作の説明に供する図である。図16の例は、ユーザの指60で実物体40をたたくような操作であるタップ操作について示している。
図16に示すように、載置面30上でユーザの指60によるタップ操作を行うと、ユーザの指60によりタップされた実物体40に画像データ50が移動する。図16の例では、実物体40Aが2回タップされたため、画像データ50がデフォルト位置から実物体40Aに移動する。なお、タップ操作に限定されるものではなく、ユーザの指60で指差しして特定された実物体40に画像データを移動させるようにしてもよい。
次に、図17~図20を参照して、ユーザの手60によるボタン操作について具体的に説明する。
図17~図20は、本実施形態に係るユーザの手60によるボタン操作の説明に供する図である。
図17に示すように、載置面30上に複数の実物体40A~40Cが載置され、実物体40Aが投影対象として選択されている。なお、図17の例では、投影対象として選択されている実物体40Aが枠70により明示されている。載置面30には、透明なオブジェクトとして、メッセージ表示欄71、「いいえ」ボタン72、及び「はい」ボタン73が投影される。メッセージ表示欄71には、「こちらで投影対象はあっているでしょうか?」というメッセージが表示される。ユーザは、投影対象があっている場合、ユーザの手60を「はい」ボタン73に動かし、投影対象があっていない場合、ユーザの手60を「いいえ」ボタン72に動かす。「はい」ボタン73又は「いいえ」ボタン72は、例えば、ユーザの手60によるタッチ操作又はユーザの手60を一定時間保持する操作によって選択される。
図18に示すように、ユーザの手60が「はい」ボタン73を選択すると、投影対象が確定される。一方、図19に示すように、ユーザの手60が「いいえ」ボタン72を選択すると、投影対象が変更される。図19の例では、枠70が実物体40Aから実物体40Bに移動して、投影対象が実物体40Aから実物体40Bに変更されている。
上記により投影対象が確定した場合、一例として、図20に示すように、ボタン操作を用いて投影する画像データを変更するようにしてもよい。
図20に示す載置面30には、透明なオブジェクトとして、図17~図19の例と同様に、メッセージ表示欄71、「いいえ」ボタン72、及び「はい」ボタン73が投影される。メッセージ表示欄71には、「こちらで投影画像はあっているでしょうか?」というメッセージが表示される。ユーザは、投影画像があっている場合、ユーザの手60を「はい」ボタン73に動かし、投影画像があっていない場合、ユーザの手60を「いいえ」ボタン72に動かす。「はい」ボタン73又は「いいえ」ボタン72は、例えば、ユーザの手60によるタッチ操作又はユーザの手60を一定時間保持する操作によって選択される。
図20の例では、「いいえ」ボタン72が選択される毎に投影中の画像データ50が変更される。そして、所望の画像データが表示された場合に、「はい」ボタン73を選択することで、投影画像が確定される。
図11に戻り、ステップS108では、CPU11が、ステップS107で投影中の画像データ50の編集を受け付ける。上述したように、ユーザの操作に従って、例えば、投影画像の拡大、縮小、移動、回転、位置調整等の編集が実行される。なお、編集済み画像データは画像DB151に格納され、編集済み画像データと実物体との対応関係は、画像対応付けテーブル152に登録される。
ステップS109では、CPU11が、ステップS108で編集後の画像データ50を、指定された用紙サイズ(例えば、A4、B5、はがき等)、用紙種類(例えば、普通紙、厚紙、ラベル紙、シール紙等)に従って印刷するように制御し、本情報処理プログラム15Aによる一連の処理を終了する。
なお、上記では、複数の実物体40の中から所望の実物体40を投影対象として選択する場合に、ユーザのジェスチャ操作及びボタン操作を用いる形態について説明したが、ユーザの音声による操作でも同様の選択操作が可能とされる。この場合、情報処理装置10が音声認識機能を備えていればよい。また、ユーザの視線による操作でも同様の選択操作が可能とされる。この場合、情報処理装置10は視線検出機能を備えていればよい。
このように本実施形態によれば、所望の実物体に画像データを投影し、画像データの大きさ等を確認した後に印刷する場合に、投影対象となる実物体が複数であっても、所望の実物体が選択される。
[第2の実施形態]
第2の実施形態では、投影画像を実物体の大きさに合わせて自動的にリサイズする形態について説明する。
第2の実施形態では、投影画像を実物体の大きさに合わせて自動的にリサイズする形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10A」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Aについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
物体検出部11Bは、複数の実物体40の各々の大きさを検出する。
投影制御部11Eは、複数の実物体40のうち第1実物体に画像データ50を投影している状態で、ユーザによる操作によって、第1実物体と大きさが異なる第2実物体の選択を受け付けた場合に、第2実物体の大きさに合わせて画像データの大きさを調整して第2実物体に投影する制御を行う。
図21は、第2の実施形態に係る画像データ50の自動リサイズ処理の説明に供する図である。
図21に示すように、リサイズ前においては、複数の実物体40A~40Cのうち第1実物体の一例である実物体40Aに画像データ50が投影されている。図21の例では、ユーザの指60により第2実物体の一例である実物体40Bがタップ操作されると、実物体40Bが選択される。このため、リサイズ後においては、選択された実物体40Bの大きさに合わせて画像データ50の大きさが調整され、実物体40Bに投影される。
このように本実施形態によれば、投影中の画像データが実物体の大きさに合わせてリサイズされる。このため、画像データのリサイズに要する工数が低減される。
[第3の実施形態]
第3の実施形態では、画像データの投影対象とする実物体を自動的に選択する形態について説明する。
第3の実施形態では、画像データの投影対象とする実物体を自動的に選択する形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10B」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Bについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、画像データ50に類似する過去の編集済み画像データが存在し、かつ、編集済み画像データに予め対応付けられた実物体と類似する実物体が複数の実物体40の中に存在する場合、複数の実物体40のうち類似する実物体に対して、画像データ50、及び、類似する編集済み画像データの少なくとも一方を投影する制御を行う。なお、類似する編集済み画像データは、例えば、画像データ50を編集して得られた画像データであり、元になる画像データが共通する画像データである。例えば、編集済み画像データに対して元になる画像データが同一であることが分かるように識別番号を予め付与しておけばよい。編集済み画像データは画像DB151に格納されている。また、類似の判定には、例えば、パターンマッチング、機械学習等の手法を用いてもよい。
また、類似する実物体を判定する場合、物体検出部11Bは、複数の実物体40の各々の形状を検出する。投影制御部11Eは、物体検出部11Bにより検出された結果に基づいて、編集済み画像データに予め対応付けられた実物体と形状が類似する実物体が複数の実物体40の中に存在するか否かを判定する。類似の判定には、例えば、パターンマッチング、機械学習等の手法が用いられる。また、実物体を特定する情報が同一であることをもって類似の実物体と判定してもよい。つまり、実物体40が例えば「うちわ」であれば、「うちわ」という情報を持つ実物体が類似と判定される。編集済み画像データに予め対応付けられた実物体を特定する情報は、画像対応付けテーブル152から得られる。
次に、図22を参照して、第3の実施形態に係る情報処理装置10の作用を説明する。
図22は、第3の実施形態に係る情報処理プログラム15Aによる自動選択処理の流れの一例を示すフローチャートである。
まず、情報処理装置10に対して、自動選択処理の実行が指示されると、CPU11により情報処理プログラム15Aが起動され、以下の各ステップを実行する。
図22のステップS111では、CPU11が、ユーザの操作に従って、載置面30に投影する画像データ50を選択する。
ステップS112では、CPU11が、ステップS111で選択した画像データ50と類似する編集済み画像データが画像DB151に有るか否かを判定する。画像DB151に有ると判定した場合(肯定判定の場合)、ステップS113に移行し、画像DB151にないと判定した場合(否定判定の場合)、ステップS116に移行する。
ステップS113では、CPU11が、画像データ50と類似する編集済み画像データに基づいて、画像対応付けテーブル152を参照する。
ステップS114では、CPU11が、ステップS113で参照した画像対応付けテーブル152から、載置面30上に載置された複数の実物体40A~40Cの中に、編集済み画像データに予め対応付けられた実物体と形状が類似する実物体が有るか否かを判定する。類似する実物体が有ると判定した場合(肯定判定の場合)、ステップS115に移行し、類似する実物体がないと判定した場合(否定判定の場合)、ステップS116に移行する。
ステップS115では、CPU11が、一例として、図23(A)に示すように、ステップS111で選択した画像データ50を、類似する実物体40Aに投影し、自動選択処理を終了する。図23(A)は、類似する実物体に投影された画像データ50の一例を示す図である。
一方、ステップS116では、CPU11が、一例として、図23(B)に示すように、ステップS111で選択した画像データ50を、載置面30のデフォルト位置に投影し、自動選択処理を終了する。図23(B)は、デフォルト位置に投影された画像データ50の一例を示す図である。
ここで、投影制御部11Eは、類似する編集済み画像データが複数ある場合に、一例として、図24に示すように、複数の編集済み画像データを、画像データ50と共に、又は、画像データ50に代えて、投影する制御を行うようにしてもよい。図24は、画像データ50と共に投影された複数の編集済み画像データ50A、50Bの一例を示す図である。図24の例において、画像データ50は現在編集中の画像データであり、編集済み画像データ50A、50Bは過去に編集されて画像DB151に格納されている画像データである。
このように本実施形態によれば、画像データの投影対象とする実物体が自動的に選択される。このため、ユーザが手動で選択する必要がなくなり、実物体の選択に要する工数が低減される。
[第4の実施形態]
第4の実施形態では、複数の投影対象候補をまとめて1つの投影対象とする形態について説明する。
第4の実施形態では、複数の投影対象候補をまとめて1つの投影対象とする形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10C」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Cについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、ユーザによる操作によって、複数の実物体40をグループ化して1つの投影対象とし、グループ化した1つの投影対象に対して、画像データ50を投影する制御を行う。
図25は、第4の実施形態に係る複数の実物体40A~40Cのグループ化処理の説明に供する図である。
図25に示すように、グループ化前においては、載置面30上に複数の実物体40A~40Cが並べて載置されている。これら複数の実物体40A~40Cは投影対象候補とされる。グループ化後においては、ユーザの指60のジェスチャ操作で複数の実物体40A~40Cがグループ化される。ジェスチャ操作は、例えば、グループ化したい複数の実物体40A~40Cの外周80を一筆でなぞるような操作である。
図26は、グループ化された複数の実物体40A~40Cに投影された画像データ50の一例を示す図である。
図26に示すように、ユーザにより選択された画像データ50が、グループ化された複数の実物体40A~40Cに投影される。この場合も、ユーザは投影中の画像データ50の編集を行うことが可能とされる。
このように本実施形態によれば、複数の実物体をグループ化して1つの投影対象とされる。このため、複数の実物体をグループ化した1つの投影対象に対して画像データを投影することが可能とされる。
[第5の実施形態]
第5の実施形態では、投影対象の実物体を移動又は回転させた場合に、投影画像が自動的に追尾する形態について説明する。
第5の実施形態では、投影対象の実物体を移動又は回転させた場合に、投影画像が自動的に追尾する形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10D」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Dについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、複数の実物体40のうち第1実物体に画像データ50を投影している状態で、第1実物体を移動又は回転させた場合に、画像データ50を第1実物体に追従して移動又は回転させる。
図27は、第5の実施形態に係る画像データ50の自動追尾処理の説明に供する図である。図27の例では、投影対象の実物体40を移動させた場合について示している。
図27の(S11)では、ユーザにより選択された画像データ50が第1実物体の一例である実物体40Aに投影されている。
(S12)では、ユーザが実物体40Aを矢印の方向(図27の例では右方向)に移動させる。
(S13)では、画像データ50が実物体40Aに追従して移動する。
図28は、第5の実施形態に係る画像データ50の別の自動追尾処理の説明に供する図である。図28の例では、投影対象の実物体40を回転させた場合について示している。
図28の(S21)では、ユーザにより選択された画像データ50が第1実物体の一例である実物体40Aに投影されている。
(S22)では、ユーザが実物体40Aを矢印の方向(図28の例では右方向)に回転させる。
(S23)では、画像データ50が実物体40Aに追従して回転する。
また、投影制御部11Eは、ユーザによる操作が予め定めた操作である場合に、追従を解除するようにしてもよい。なお、予め定めた操作とは、例えば、ユーザの両手を載置面30上にかざして一定時間保持する操作とされる。この場合、投影制御部11Eは、追従を行う場合の載置面30に投影する背景色と、追従を解除した場合の載置面30に投影する背景色とが異なるように制御する。ここでいう背景色とは、投影データ全体における画像部分以外の背景部分の色のことを意味する。
図29は、第5の実施形態に係る画像データ50の自動追尾解除処理の説明に供する図である。
図29の(S31)では、ユーザにより選択された画像データ50が実物体40Aに投影されている状態において、ユーザの両手60を載置面30上にかざし一定時間保持するジェスチャ操作を検出する。
(S32)では、画像データ50の自動追尾が解除され、自動追尾が解除されたことを明示するために、載置面30に投影する背景色を変化させる。図29の例では、ハッチングの違いで色の違いを表している。なお、この状態において、再び、ユーザの両手60を載置面30上にかざし一定時間保持するジェスチャ操作を検出すると、自動追尾状態となり、投影の背景色が元に戻る。
(S33)では、画像データ50の自動追尾が解除されると、ユーザの手60により実物体40Aを移動又は回転させても、画像データ50は追尾しない。
このように本実施形態によれば、投影対象の実物体を移動又は回転させた場合に、投影画像が自動的に追尾する。このため、投影画像を動かすのではなく、実物体を動かして調整する場合であっても対応が可能とされる。
[第6の実施形態]
第6の実施形態では、編集済み画像一覧画面を投影する制御を行う形態について説明する。
第6の実施形態では、編集済み画像一覧画面を投影する制御を行う形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10E」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Eについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、過去に得られた編集済み画像データの一覧である編集済み画像一覧画面を、載置面30に投影する制御を行う。この場合、投影制御部11Eは、編集済み画像一覧画面から選択された編集済み画像データを、投影する画像データとする。編集済み画像一覧画面は、一例として、上述の図10(A)に示すように、載置面30の上端部から下端部に向けてユーザの手60を動かすジェスチャ操作により投影される。
また、投影制御部11Eは、編集済み画像一覧画面から選択された編集済み画像データに対して、ユーザによる予め定めた操作を受け付けた場合に、当該編集済み画像データの編集前画像データを投影する制御を行うようにしてもよい。
図30(A)及び図30(B)は、第6の実施形態に係る編集済み画像一覧画面90の説明に供する図である。
図30(A)に示すように、載置面30に投影された編集済み画像一覧画面90には、未選択の編集済み画像データの一覧が表示される。ユーザが選択したい編集済み画像データに対して、例えば、ユーザの手60によるタッチ操作又はユーザの手60をかざしたまま一定時間保持する操作を行うと、選択済み画像となる。選択済み画像は、例えば、矩形枠の色が変化する、矩形枠の太さが変化する、等により明示化(つまり強調表示)される。また、トグルボタン91をスライド操作することで、選択済み、選択解除を切り替えるようにしてもよい。また、編集済み画像データの数が多い場合にはスクロールバー92をスライド操作することで選択するようにしてもよい。
図30(B)に示すように、上記により選択された選択済み画像に対して、例えば、ユーザの手60によるタッチ操作(2回タッチ等)又はユーザの手60をかざしたまま一定時間保持する操作(長時間保持等)を行うと、選択済み画像に関する詳細データ93が表示される。詳細データ93には、選択済み画像の編集前画像データが含まれる。
このように本実施形態によれば、編集済み画像一覧画面が投影されるため、投影する画像データとして編集済み画像データを選択することが可能とされる。
[第7の実施形態]
第7の実施形態では、投影画像選択画面を投影する制御を行う形態について説明する。
第7の実施形態では、投影画像選択画面を投影する制御を行う形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10F」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Fについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、投影中の画像データを含む画像データの一覧である画像一覧を含む投影画像選択画面を、載置面30に投影する制御を行う。投影制御部11Eは、投影する画像データを追加する場合、投影画像選択画面から選択された画像データを、投影する画像データとして追加する。投影画像選択画面は、一例として、上述の図10(C)に示すように、載置面30の下端部から上端部に向けてユーザの手60を動かすジェスチャ操作により投影される。
また、投影制御部11Eは、投影画像選択画面に含まれる投影中の画像データに対して、ユーザによる予め定めた操作を受け付けた場合、投影中の画像データを投影対象から除外するようにしてもよい。
図31(A)、図31(B)、図32(A)、図32(B)、及び図33は、第7の実施形態に係る投影画像選択画面100の説明に供する図である。
図31(A)に示すように、載置面30に投影された投影画像選択画面100には、投影中(選択済み)の画像データを含む画像データの一覧が表示される。投影画像選択画面100は、新たな画像データを追加で投影する、又は、投影中の画像データを投影対象から除外、つまり、削除するための画面である。
図31(B)に示すように、ユーザが未選択の画像データに対して、例えば、ユーザの手60によるタッチ操作又はユーザの手60をかざしたまま一定時間保持する操作を行うと、選択済み画像となる。選択済み画像は、例えば、矩形枠の色が変化する、矩形枠の太さが変化する、等により明示化(つまり強調表示)される。
図32(A)に示すように、ユーザが投影中(選択済み)の画像データに対して、例えば、ユーザの手60によるタッチ操作又はユーザの手60をかざしたまま一定時間保持する操作を行うと、表示数増減ボタン101が表示される。表示数増減ボタン101は、投影中(編集中)の画像データの表示数を追加又は減少するための操作ボタンである。図32(A)の例では、表示数が「1」となっており、「-」をタッチ操作すると、表示数が1つ減少して「0」になり、「+」をタッチ操作すると、表示数が1つ増加して「2」になる。
図32(B)に示すように、表示数増減ボタン101の表示数が「0」になると、投影中(編集中)の画像データが投影対象から除外、つまり、削除される。この場合、例えば、「編集中の画像を保存せず投影を終了しますか?」というメッセージ102を表示して、ユーザに確認することが望ましい。
図33に示すように、ユーザが未選択の画像データに対して、例えば、ユーザの手60によるタッチ操作又はユーザの手60をかざしたまま一定時間保持する操作を行うと、選択済み画像となる。選択済み画像は、例えば、矩形枠の色が変化する、矩形枠の太さが変化する、等により明示化(つまり強調表示)される。図33の例では、上述の図31(B)の例とは異なり、トグルボタン103をスライド操作することで、選択済み、選択解除を切り替えるようにしてもよい。
このように本実施形態によれば、投影画像選択画面が投影されるため、投影する画像データの追加又は削除を行うことが可能とされる。
[第8の実施形態]
第8の実施形態では、投影中オブジェクト一覧画面を投影する制御を行う形態について説明する。
第8の実施形態では、投影中オブジェクト一覧画面を投影する制御を行う形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10G」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Gについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、画像データの一覧である画像一覧を含む投影中オブジェクト一覧画面を、載置面30の複数の実物体40が載置された領域以外の領域に投影すると共に、載置面30の複数の実物体40が載置された領域に対して、画像一覧に含まれる画像データを投影する制御を行う。投影中オブジェクト一覧画面は、一例として、上述の図10(D)に示すように、載置面30の左端部から右端部に向けてユーザの手60を動かすジェスチャ操作により投影される。
また、投影制御部11Eは、投影中オブジェクト一覧画面から画像データが選択された場合、載置面30の複数の実物体40が載置された領域に投影中の画像データのうち、選択された画像データに対応する画像データの表示形態を変化させるようにしてもよい。
また、投影制御部11Eは、投影中オブジェクト一覧画面から複数の画像データが選択された場合、複数の画像データをグループ化して1つの投影画像データとしてもよい。
図34(A)、図34(B)、図35(A)、図35(B)、図36(A)、図36(B)、図37(A)、図37(B)、及び図38は、第8の実施形態に係る投影中オブジェクト一覧画面110の説明に供する図である。
図34(A)に示すように、投影中オブジェクト一覧画面110は、載置面30の複数の実物体40A、40Bが載置された領域以外の領域に投影される。投影中オブジェクト一覧画面110には、画像データA1~A3が含まれる、画像データA1に対応する投影中の画像データは編集中であることを示す。また、画像データA2には表示数増減ボタン111A、画像データA3には表示数増減ボタン111Bがそれぞれ対応付けられている。なお、編集中の画像には表示数増減ボタンは表示されず、編集中であることを示す表示を行う。印刷ジョブに追加済みの画像で投影中の画像については表示数増減ボタンを表示してもよい。表示数増減ボタン111Aでは表示数が「2」とされ、表示数増減ボタン111Bでは表示数が「0」とされる。表示数が「0」である場合、画像データA3に対応する画像データは投影されない。但し、画像データA3に対応する画像データは投影されないだけで、削除されるわけではない。この場合、載置面30の複数の実物体40A、40Bが載置された領域には、画像データA1に対応する1つの画像データ50が投影され、画像データA2に対応する2つの画像データ50Cが投影され、画像データA3に対応する画像データは投影されない。編集中の画像データ50は実物体40Bに投影される。
図34(B)に示すように、投影中オブジェクト一覧画面110から画像データA2がユーザの指60によりタッチ操作された場合、載置面30の複数の実物体40A、40Bが載置された領域に投影中の画像データ50、50Cのうち、タッチ操作された画像データA2に対応する画像データ50Cの表示形態を変化させる。画像データ50Cは、例えば、矩形枠の色が変化する、矩形枠の太さが変化する、等により明示化(つまり強調表示)される。
図35(A)に示すように、ユーザの指60により表示数増減ボタン111Aの「-」がタッチ操作されると、画像データ50Cの表示数が「1」となり、図35(B)に示すように、画像データ50Cの表示数が変更される。つまり、表示数増減ボタン111Aの「-」又は「+」の操作により表示数を増減させることが可能とされる。この表示数の増減に応じて、画像データ50Cの表示数が変更される。
投影中の複数の画像データを1つにまとめる場合、図36(A)に示すように、ユーザが投影中オブジェクト一覧画面110に含まれる未選択の画像データに対して、例えば、ユーザの手60によるタッチ操作(2回タッチ等)又はユーザの手60をかざしたまま一定時間保持する操作(長時間保持)を行うと、図36(B)に示すように、選択済み画像となる。選択済み画像は、例えば、矩形枠の色が変化する、矩形枠の太さが変化する、等により明示化(つまり強調表示)される。
図37(A)に示すように、ユーザが投影中オブジェクト一覧画面110においてグループ化したい全ての画像データA1~A3に対して選択操作を行い、画像データA1~A3を選択済み画像にすると、対応する投影中の画像データ50、50Cを囲う枠112が投影される。枠112は、投影中の画像データ50、50Cがグループ化されたことを示す枠である。
図37(B)に示すように、投影中オブジェクト一覧画面110には、投影中の画像データ50、50Cのグループ化に応じて、画像データA1~A3がグループ化されたことを示す枠113が表示される。
図38に示すように、ユーザの操作により、枠112を実物体40Bに移動させて、枠112に含まれる画像データ50、50Cを実物体40Bに投影させる。この投影に伴い、投影中オブジェクト一覧画面110では、画像データA1~A3を含む枠113のサイズが変更される。
このように本実施形態によれば、投影中オブジェクト一覧画面が投影されるため、投影中の画像データを見ながら、投影対象の実物体を選択することが可能とされる。
[第9の実施形態]
第9の実施形態では、印刷実行画面及び決済画面を投影する制御を行う形態について説明する。
第9の実施形態では、印刷実行画面及び決済画面を投影する制御を行う形態について説明する。
本実施形態に係る情報処理装置(以下、「情報処理装置10H」という。)のCPU11は、上記第1の実施形態で説明した情報処理装置10と同様に、取得部11A、物体検出部11B、操作検出部11C、選択部11D、投影制御部11E、印刷制御部11F、及び決済部11Gとして機能する。以下、本実施形態に係る情報処理装置10Hについて、上記第1の実施形態に係る情報処理装置10との相違点を説明する。
投影制御部11Eは、印刷対象とされた画像データの一覧である画像一覧を含む印刷実行画面を、載置面30に投影する制御を行う。印刷実行画面は、一例として、上述の図10(B)に示すように、載置面30の右端部から左端部に向けてユーザの手60を動かすジェスチャ操作により投影される。
また、投影制御部11Eは、印刷対象とされた画像データの一覧である画像一覧を含む決済画面を、載置面30に投影する制御を行うようにしてもよい。
図39~図41は、第9の実施形態に係る印刷実行画面120の説明に供する図である。
図39に示すように、載置面30に投影された印刷実行画面120には、印刷対象とされた画像データの一覧が表示される。印刷実行画面120には、印刷ボタン121、スクロールバー122、及び料金表示欄123が含まれる。なお、各画像データには印刷枚数増減ボタン「-1+」が対応付けられており、「-」又は「+」を操作することで印刷枚数を調整することが可能である。ユーザが印刷したい画像データを選択すると、指定された用紙サイズ、部数等の印刷条件に応じた印刷料金が料金表示欄123に表示される。画像データの数が多い場合にはスクロールバー122をスクロール操作して画像データを選択することができる。料金表示欄123の料金は部数に応じて変更される。印刷条件を変更したい場合には、一例として、図40に示す画面に遷移すればよい。
図40に示すように、上記により選択された選択済み画像に対して、例えば、ユーザの手60によるタッチ操作(2回タッチ等)又はユーザの手60をかざしたまま一定時間保持する操作(長時間保持等)を行うと、選択済み画像の印刷条件に関する詳細データ124が表示される。詳細データ124には、選択済み画像の印刷条件が含まれ、用紙サイズ、部数等の変更を受け付ける。ユーザは所望の印刷条件を設定した後に印刷ボタン121を操作すると、後述の決済画面に遷移する。
本実施形態に係る情報処理装置10Hは、ユーザが編集した画像データを印刷する際に、最適なサイズの用紙を自動的に選択する。一方、ユーザが希望する用紙サイズがある場合には、以下の2つのケースが考えられる。
(1)最適な用紙サイズ≦ユーザの希望する用紙サイズの場合、用紙は1枚で対応する。
(2)最適な用紙サイズ>ユーザの希望する用紙サイズの場合、用紙は複数枚で対応する。
(2)最適な用紙サイズ>ユーザの希望する用紙サイズの場合、用紙は複数枚で対応する。
このため、一例として、図41の印刷実行画面120に示すように、「必要枚数」という項目を表示するようにしてもよい。例えば、最適な用紙サイズが「A4」で、ユーザの希望する用紙サイズが「B5」である場合、上記(2)に該当するため、「必要枚数」が「2」となっている。なお、図41の例では、A3サイズを100円/枚とし、それ以外を50円/枚として換算している。また、投影しながら編集中に縮尺を変更する際に、現在の投影画像に最適な用紙サイズが動的に投影されるようにするとより望ましい。
図42~図44は、第9の実施形態に係る決済画面130の説明に供する図である。
図42に示すように、決済画面130は、一例として、上述の図39に示す印刷ボタン121が操作されることで投影される。決済方法としては、例えば、スマートフォンやICカード等を用いた各種の電子決済でもよいし、コインベンダ等を用いた現金決済でもよい。決済画面130には、支払いボタン131、スクロールバー132、及び料金表示欄133が含まれる。画像データの数が多い場合にはスクロールバー132をスクロール操作して画像データを確認することができる。料金表示欄133の料金は部数に応じて変更される。ユーザにより支払いボタン131が操作され、支払いが完了することをもって、印刷が実行される。
図43及び図44に示すように、決済画面130では、プリント(印刷)及びスキャン等の別のサービスも提供できるようにしてもよい。図43の例では、プリント134が選択されており、図44の例では、スキャン135が選択されている状態を示している。図43及び図44の例に示すように、サービスの内容に応じて料金が異なっていてもよい。具体的に、図43のプリント134の例では料金「400円」であり、図44のスキャン135の例では料金「240円」である。
このように本実施形態によれば、印刷実行画面及び決済画面が投影されるため、画像データの印刷、決済を行うことが可能とされる。
なお、上記各実施形態において、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ(例えば、CPU:Central Processing Unit、等)や、専用のプロセッサ(例えば、GPU:Graphics Processing Unit、ASIC: Application Specific Integrated Circuit、FPGA:Field Programmable Gate Array、プログラマブル論理デバイス、等)を含むものである。
また、上記各実施形態におけるプロセッサの動作は、1つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は、上記各実施形態において記載した順序のみに限定されるものではなく、適宜変更してもよい。
以上、実施形態に係る情報処理装置を例示して説明した。実施形態は、情報処理装置が備える各部の機能をコンピュータに実行させるためのプログラムの形態としてもよい。実施形態は、これらのプログラムを記憶したコンピュータが読み取り可能な非一時的記憶媒体の形態としてもよい。
その他、上記実施形態で説明した情報処理装置の構成は、一例であり、主旨を逸脱しない範囲内において状況に応じて変更してもよい。
また、上記実施形態で説明したプログラムの処理の流れも、一例であり、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。
また、上記実施形態では、プログラムを実行することにより、実施形態に係る処理がコンピュータを利用してソフトウェア構成により実現される場合について説明したが、これに限らない。実施形態は、例えば、ハードウェア構成や、ハードウェア構成とソフトウェア構成との組み合わせによって実現してもよい。
10 情報処理装置
11 CPU
11A 取得部
11B 物体検出部
11C 操作検出部
11D 選択部
11E 投影制御部
11F 印刷制御部
11G 決済部
12 ROM
13 RAM
14 I/O
15 記憶部
15A 情報処理プログラム
16 表示部
17 外部I/F
18 撮影部
19 投影部
20 印刷部
21 近距離通信部
30 載置面
40、40A~40C 実物体
151 画像DB
152 画像対応付けテーブル
11 CPU
11A 取得部
11B 物体検出部
11C 操作検出部
11D 選択部
11E 投影制御部
11F 印刷制御部
11G 決済部
12 ROM
13 RAM
14 I/O
15 記憶部
15A 情報処理プログラム
16 表示部
17 外部I/F
18 撮影部
19 投影部
20 印刷部
21 近距離通信部
30 載置面
40、40A~40C 実物体
151 画像DB
152 画像対応付けテーブル
Claims (18)
- プロセッサを備え、
前記プロセッサは、
画像データを取得し、
予め定められた載置面上に載置された複数の実物体であって、前記画像データの投影対象の候補となる前記複数の実物体の各々の前記載置面上の位置を検出し、
前記複数の実物体に対する、ユーザによる操作の内容、及び、前記複数の実物体の各々の前記載置面上の位置に応じて、前記複数の実物体の中から投影対象の実物体の選択を受け付け、
前記選択を受け付けた実物体の前記載置面上の位置に応じて、当該実物体に対して前記画像データを投影した後に、当該画像データを印刷する制御を行う
情報処理装置。 - 前記ユーザによる操作は、前記ユーザのジェスチャによる操作、前記ユーザによる前記載置面上に投影されたボタン操作、前記ユーザの音声による操作、及び、前記ユーザの視線による操作のいずれかの操作である
請求項1に記載の情報処理装置。 - 前記プロセッサは、前記複数の実物体の各々の大きさを検出し、
前記複数の実物体のうち第1実物体に前記画像データを投影している状態で、前記ユーザによる操作によって、前記第1実物体と大きさが異なる第2実物体の選択を受け付けた場合に、前記第2実物体の大きさに合わせて前記画像データの大きさを調整して前記第2実物体に投影する制御を行う
請求項1又は請求項2に記載の情報処理装置。 - 前記プロセッサは、前記画像データに類似する過去の編集済み画像データが存在し、かつ、前記編集済み画像データに予め対応付けられた実物体と類似する実物体が前記複数の実物体の中に存在する場合、前記複数の実物体のうち前記類似する実物体に対して、前記画像データ及び前記編集済み画像データの少なくとも一方を投影する制御を行う
請求項1又は請求項2に記載の情報処理装置。 - 前記プロセッサは、前記複数の実物体の各々の形状を検出し、
前記検出した結果に基づいて、前記編集済み画像データに予め対応付けられた実物体と形状が類似する実物体が前記複数の実物体の中に存在するか否かを判定する
請求項4に記載の情報処理装置。 - 前記プロセッサは、前記編集済み画像データが複数ある場合に、前記複数の編集済み画像データを、前記画像データと共に、又は、前記画像データに代えて、投影する制御を行う
請求項4又は請求項5に記載の情報処理装置。 - 前記プロセッサは、前記ユーザによる操作によって、前記複数の実物体をグループ化して1つの投影対象とし、
前記グループ化した1つの投影対象に対して、前記画像データを投影する制御を行う
請求項1又は請求項2に記載の情報処理装置。 - 前記プロセッサは、前記複数の実物体のうち第1実物体に前記画像データを投影している状態で、前記第1実物体を移動又は回転させた場合に、前記画像データを前記第1実物体に追従して移動又は回転させる
請求項1又は請求項2に記載の情報処理装置。 - 前記プロセッサは、前記ユーザによる操作が予め定めた操作である場合に、前記追従を解除する
請求項8に記載の情報処理装置。 - 前記プロセッサは、前記追従を行う場合の前記載置面に投影する背景色と、前記追従を解除した場合の前記載置面に投影する背景色とが異なるように制御する
請求項9に記載の情報処理装置。 - 前記プロセッサは、過去に得られた編集済み画像データの一覧である編集済み画像一覧を、前記載置面に投影する制御を行い、
前記編集済み画像一覧から選択された編集済み画像データを、投影する画像データとする
請求項1~請求項10の何れか1項に記載の情報処理装置。 - 前記プロセッサは、前記編集済み画像一覧から選択された編集済み画像データに対して、前記ユーザによる予め定めた操作を受け付けた場合に、当該編集済み画像データの編集前画像データを投影する制御を行う
請求項11に記載の情報処理装置。 - 前記プロセッサは、投影中の画像データを含む画像データの一覧である画像一覧を、前記載置面に投影する制御を行い、
投影する画像データを追加する場合、前記画像一覧から選択された画像データを、投影する画像データとして追加する
請求項1~請求項10の何れか1項に記載の情報処理装置。 - 前記プロセッサは、前記画像一覧に含まれる前記投影中の画像データに対して、前記ユーザによる予め定めた操作を受け付けた場合、前記投影中の画像データを投影対象から除外する
請求項13に記載の情報処理装置。 - 前記プロセッサは、画像データの一覧である画像一覧を、前記載置面の前記複数の実物体が載置された領域以外の領域に投影すると共に、
前記載置面の前記複数の実物体が載置された領域に対して、前記画像一覧に含まれる画像データを投影する制御を行う
請求項1~請求項10の何れか1項に記載の情報処理装置。 - 前記プロセッサは、前記画像一覧から画像データが選択された場合、前記載置面の前記複数の実物体が載置された領域に投影中の画像データのうち、前記選択された画像データに対応する画像データの表示形態を変化させる
請求項15に記載の情報処理装置。 - 前記プロセッサは、前記画像一覧から複数の画像データが選択された場合、前記複数の画像データをグループ化して1つの投影画像データとする
請求項16に記載の情報処理装置。 - 画像データを取得し、
予め定められた載置面上に載置された複数の実物体であって、前記画像データの投影対象の候補となる前記複数の実物体の各々の前記載置面上の位置を検出し、
前記複数の実物体に対する、ユーザによる操作の内容、及び、前記複数の実物体の各々の前記載置面上の位置に応じて、前記複数の実物体の中から投影対象の実物体の選択を受け付け、
前記選択を受け付けた実物体の前記載置面上の位置に応じて、当該実物体に対して前記画像データを投影した後に、当該画像データを印刷する制御を行うことを、
コンピュータに実行させるための情報処理プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022052530A JP2023145192A (ja) | 2022-03-28 | 2022-03-28 | 情報処理装置及び情報処理プログラム |
US17/893,461 US20230306653A1 (en) | 2022-03-28 | 2022-08-23 | Information processing device, information processing method, and non-transitory computer readable medium |
EP22198772.0A EP4254141A1 (en) | 2022-03-28 | 2022-09-29 | Information processing device, information processing method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022052530A JP2023145192A (ja) | 2022-03-28 | 2022-03-28 | 情報処理装置及び情報処理プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023145192A true JP2023145192A (ja) | 2023-10-11 |
Family
ID=83508454
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022052530A Pending JP2023145192A (ja) | 2022-03-28 | 2022-03-28 | 情報処理装置及び情報処理プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230306653A1 (ja) |
EP (1) | EP4254141A1 (ja) |
JP (1) | JP2023145192A (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0611870B2 (ja) | 1986-06-27 | 1994-02-16 | 徳山曹達株式会社 | 無機化合物/染料複合体粒子 |
JP6207211B2 (ja) | 2013-04-18 | 2017-10-04 | キヤノン株式会社 | 情報処理装置及びその制御方法 |
JP6356235B2 (ja) * | 2013-06-26 | 2018-07-11 | オセ−テクノロジーズ・ベー・ヴエーOce’−Nederland Besloten Vennootshap | フラットベッドプリンタ上に印刷を生成するための方法、そのための装置、およびそのコンピュータプログラム |
EP3106312B1 (en) * | 2015-06-19 | 2018-03-07 | Roland DG Corporation | Printing device and printing method |
JP2022026888A (ja) * | 2020-07-31 | 2022-02-10 | キヤノン株式会社 | プログラム、情報処理装置の制御方法、および情報処理装置 |
-
2022
- 2022-03-28 JP JP2022052530A patent/JP2023145192A/ja active Pending
- 2022-08-23 US US17/893,461 patent/US20230306653A1/en active Pending
- 2022-09-29 EP EP22198772.0A patent/EP4254141A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230306653A1 (en) | 2023-09-28 |
EP4254141A1 (en) | 2023-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10701222B2 (en) | Image forming apparatus, image editing method and non-transitory computer-readable recording medium for forming an image on a recording medium based on an image displayed on a display section | |
US9152261B2 (en) | Display input device, and image forming apparatus including touch panel portion | |
US20130271402A1 (en) | Display input device, and image forming apparatus including touch panel portion | |
JP2012014319A (ja) | 表示装置 | |
JP2023145192A (ja) | 情報処理装置及び情報処理プログラム | |
JP6930082B2 (ja) | 情報処理装置、画像形成装置、及びプログラム | |
JP2015141268A (ja) | 情報処理装置、及びその情報処理装置を含む画像形成装置 | |
CN103428396B (zh) | 显示输入装置、显示输入方法以及图像形成装置 | |
JP6440143B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2023177595A (ja) | 情報処理装置及び情報処理プログラム | |
JP6581709B2 (ja) | 画像処理方法 | |
JP5802810B2 (ja) | 表示入力装置および画像形成装置 | |
JP6322272B2 (ja) | 表示装置、設定方法、コンピュータプログラム及びそれを記録した記録媒体 | |
JP2018030271A (ja) | 画像処理装置及び画像処理プログラム | |
JP6200528B2 (ja) | 画像形成装置及び画像処理方法 | |
JP5876451B2 (ja) | 画像形成装置、記録媒体決定方法、コンピュータプログラム及び記録媒体 | |
JP6068562B2 (ja) | 表示装置、コンピュータプログラム及びそれを記録した記録媒体 | |
JP2013222298A (ja) | 表示入力装置および画像形成装置 | |
JP5858582B2 (ja) | 表示入力装置および画像形成装置 | |
JP2017185821A (ja) | 画像形成装置及び画像処理方法 | |
JPH0637943A (ja) | 表示装置 | |
JP2013222266A (ja) | 表示入力装置および画像形成装置 |