JP2018101396A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2018101396A JP2018101396A JP2017140523A JP2017140523A JP2018101396A JP 2018101396 A JP2018101396 A JP 2018101396A JP 2017140523 A JP2017140523 A JP 2017140523A JP 2017140523 A JP2017140523 A JP 2017140523A JP 2018101396 A JP2018101396 A JP 2018101396A
- Authority
- JP
- Japan
- Prior art keywords
- volume data
- unit
- processing apparatus
- image processing
- rendering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/203—Drawing of straight lines or curves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/10—Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Geometry (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
- Image Generation (AREA)
- Processing Or Creating Images (AREA)
- Position Input By Displaying (AREA)
- Architecture (AREA)
- Computing Systems (AREA)
Abstract
Description
指示体のセンサ上における指示位置を検出する位置検出部と、
前記位置検出部で検出された指示位置を、その内部の所定位置とした立体形状のボリュームデータを生成するボリュームデータ生成部と、
前記ボリュームデータ生成部で生成された前記ボリュームデータにレンダリングを施すレンダリング処理部と、
を備え、
前記レンダリング処理部は、前記位置検出部で検出された前記指示体による指示位置に基づいて、2次元曲面を設定し、設定された前記2次元曲面の一方の面側に存在する前記ボリュームデータにレンダリングを施す
ことを特徴とする画像処理装置を提供する。
この実施形態の位置検出部202は、図2に示すように、センサ204と、このセンサ204に接続されるペン指示検出回路205とで構成されている。センサ204は、タブレット端末200の表示画面201Dの大きさに対応した大きさのセンサ面(指示入力面)を備えており、光透過性を有する、第1の導体群211と第2の導体群212とによって形成されている。
図4は、画像処理装置本体100の構成例を示すブロック図である。前述もしたように、この例の画像処理装置本体100はコンピュータにより構成されるものであり、CPU(Central Processing Unit)で構成される制御部101に対して、システムバス102を介して、位置検出部インターフェース(インターフェースは、図ではI/Fと記す)103、表示コントローラ104、座標データ等解析部105、制御指示検出保持部106、2D画像データ生成部107、ボリュームデータ生成部108、表示画像情報生成部109、レンダリング処理部110、のそれぞれが接続されて構成されている。
以上のように構成されている画像処理装置本体100における処理動作の流れの例を、図6のフローチャートを参照しながら説明する。
以上説明したようにして、この実施形態の画像処理装置によれば、座標データに基づいて、所定の3D基準形状のボリュームデータを生成するようにするだけで、電子ペン203によるストローク状の指示入力を、油絵の具で描いたように厚みを表示することが可能となる。しかも、上述の実施形態では、電子ペン203に印加されている筆圧値に応じて、ボリュームデータを生成する基準となる3D基準形状の大きさを変更するので、使用者は、筆圧により、油絵の具の厚みを変化させるようにすることができ、使用者の実際の筆致に応じた絵画の描画表現をすることが可能である。
なお、レンダリング処理部110におけるレンダリング対象データ生成部111の処理は、上述のような処理に限られるものではない。例えば、電子ペン203により指示された位置の座標データに基づいて、2次元曲面を設定し、その2次元曲面上に、ボリュームデータ生成部で生成したボリュームデータを配置することができるように、当該ボリュームデータを変形する。すなわち、典型的には、電子ペン203により指示された位置の座標データを含む2次元曲面で、ボリュームデータを切断し、その切断面を2次元曲面に置くようにして、レンダリング対象のボリュームデータを生成する。
上述の実施形態では、指示体は、電子ペンとしたが、指であってもよい。また、電子ペンにペンは、静電容量方式のものとしたが、電子ペンは、電磁誘導方式や、その他の方式のものでよく、その方式は問わない。
Claims (15)
- 指示体のセンサ上における指示位置を検出する位置検出部と、
前記位置検出部で検出された指示位置を、その内部の所定位置とした立体形状のボリュームデータを生成するボリュームデータ生成部と、
前記ボリュームデータ生成部で生成された前記ボリュームデータにレンダリングを施すレンダリング処理部と、
を備え、
前記レンダリング処理部は、前記位置検出部で検出された前記指示体による指示位置に基づいて、2次元曲面を設定し、設定された前記2次元曲面の一方の面側に存在する前記ボリュームデータにレンダリングを施す
ことを特徴とする画像処理装置。 - 前記レンダリング処理部は、前記位置検出部で検出された前記指示体による指示位置に基づいて、前記ボリュームデータ生成部で生成されたボリュームデータ内に前記2次元曲面を設定し、前記2次元曲面の一方の面側に存在する前記ボリュームデータをレンダリングする
ことを特徴とする請求項1に記載の画像処理装置。 - 前記レンダリング処理部は、前記位置検出部で検出された前記指示体による指示位置に基づいて前記2次元曲面を設定し、前記2次元曲面上に配置できるように、前記ボリュームデータ生成部で生成された前記ボリュームデータを変形し、前記変形した前記ボリュームデータを、前記2次元曲面の一方の面側に配置して、前記2次元曲面の一方の面側に存在する前記変形した前記ボリュームデータをレンダリングする
ことを特徴とする請求項1に記載の画像処理装置。 - 前記レンダリング処理部は、前記2次元曲面に平行な面で、前記ボリュームデータ生成部で生成された前記ボリュームデータを切断し、その切断面が前記2次元曲面に配置されるようにする
ことを特徴とする請求項3に記載の画像処理装置。 - 前記ボリュームデータ生成部は、前記位置検出部で検出された前記指示位置が連続する場合には、連続する前記指示位置のそれぞれについて前記立体形状のボリュームデータを生成し、かつ、生成した前記指示位置のそれぞれで合成することで、前記連続する前記指示位置に対応するボリュームデータを生成する
ことを特徴とする請求項4に記載の画像処理装置。 - 前記位置検出部は、前記指示体に印加される筆圧を、前記指示体による指示位置毎に検出する機能を有し、
前記ボリュームデータ生成部は、前記指示位置毎の前記立体形状の大きさを、前記指示位置毎に検出された前記筆圧に応じたものとして前記ボリュームデータを生成する
ことを特徴とする請求項1に記載の画像処理装置。 - 前記立体形状は複数個の異なる形状の中から選択可能とされている
ことを特徴とする請求項1に記載の画像処理装置。 - 前記2次元曲面の設定位置は、変更設定可能とされている
ことを特徴とする請求項1に記載の画像処理装置。 - 前記設定される前記2次元曲面は、前記位置検出部のセンサ平面に対応している
ことを特徴とする請求項2に記載の画像処理装置。 - 前記指示体に対応する筆種を選択する選択部を備え、
前記ボリュームデータの大きさは、前記筆種及び前記筆圧に応じて変更する
ことを特徴とする請求項6に記載の画像処理装置。 - 前記指示体に対応する筆種を選択する選択部を備え、
前記筆種に応じて、前記ボリュームデータ生成部でボリュームデータを生成する前記立体形状が異なる
ことを特徴とする請求項1に記載の画像処理装置。 - 前記レンダリング処理部は、サーフェスレンダリングを行う
ことを特徴とする請求項1に記載の画像処理装置。 - 前記レンダリング処理部は、ボリュームレンダリングを行う
ことを特徴とする請求項1に記載の画像処理装置。 - 前記位置検出部からの前記指示位置の検出信号から、2次元画像を生成する機能を備える
ことを特徴とする請求項1に記載の画像処理装置。 - 指示体のセンサ上における指示位置を検出する位置検出部を備える画像処理装置が備えるコンピュータを、
前記位置検出部で検出された指示位置を、その内部の所定位置とした立体形状のボリュームデータを生成するボリュームデータ生成部、
前記ボリュームデータ生成部で生成された前記ボリュームデータにレンダリングを施すレンダリング処理部、
として機能させるためのプログラムであって、
前記レンダリング処理部は、前記位置検出部で検出された前記指示体による指示位置に基づいて、2次元曲面を設定し、設定された前記2次元曲面の一方の面側に存在する前記ボリュームデータにレンダリングを施す
ことを特徴とするプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/383,798 | 2016-12-19 | ||
US15/383,798 US10234964B2 (en) | 2016-12-19 | 2016-12-19 | Image processing apparatus |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018101396A true JP2018101396A (ja) | 2018-06-28 |
JP2018101396A5 JP2018101396A5 (ja) | 2020-08-27 |
JP6990057B2 JP6990057B2 (ja) | 2022-01-12 |
Family
ID=62562426
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017140523A Active JP6990057B2 (ja) | 2016-12-19 | 2017-07-20 | 画像処理装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10234964B2 (ja) |
JP (1) | JP6990057B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018201317A1 (zh) * | 2017-05-03 | 2018-11-08 | 深圳市柔宇科技有限公司 | 触控笔、触控装置、书法练习系统及方法 |
WO2019142457A1 (ja) * | 2018-01-16 | 2019-07-25 | ソニー株式会社 | 照明制御装置及び照明制御方法、照明装置、並びに照明システム |
CN110162258A (zh) * | 2018-07-03 | 2019-08-23 | 腾讯数码(天津)有限公司 | 个性化场景图像的处理方法及装置 |
CN109144393B (zh) * | 2018-08-28 | 2020-08-07 | 维沃移动通信有限公司 | 一种图像显示方法及移动终端 |
KR102149105B1 (ko) * | 2019-09-18 | 2020-08-27 | 세종대학교산학협력단 | 혼합현실 기반 3차원 스케치 장치 및 방법 |
US20220004299A1 (en) * | 2020-07-01 | 2022-01-06 | Wacom Co., Ltd. | Systems and methods for dynamic shape sketching |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11296696A (ja) * | 1998-04-14 | 1999-10-29 | Shima Seiki Mfg Ltd | 3次元画像処理装置 |
JP2004295441A (ja) * | 2003-03-26 | 2004-10-21 | Tatsumi Denshi Kogyo Kk | 自動写真作成装置および自動写真作成方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3071553B2 (ja) | 1992-03-24 | 2000-07-31 | 株式会社ワコム | 可変容量コンデンサ及びこれを利用した位置指示器 |
EP1008112B1 (en) | 1996-06-04 | 2005-03-02 | Adobe Systems Incorporated | Techniques for creating and modifying 3d models and correlating such models with 2d pictures |
US7236178B2 (en) * | 2001-07-19 | 2007-06-26 | Autodesk, Inc. | Dynamically adjusted brush for direct paint systems on parameterized multi-dimensional surfaces |
US20070268304A1 (en) * | 2006-05-22 | 2007-11-22 | Microsoft Corporation | Gradient Brush and Stroke |
US8232990B2 (en) | 2010-01-05 | 2012-07-31 | Apple Inc. | Working with 3D objects |
JP5534419B2 (ja) | 2010-03-09 | 2014-07-02 | 株式会社ワコム | 位置指示器、可変容量コンデンサ及び入力装置 |
US9142056B1 (en) * | 2011-05-18 | 2015-09-22 | Disney Enterprises, Inc. | Mixed-order compositing for images having three-dimensional painting effects |
US9202309B2 (en) * | 2011-09-01 | 2015-12-01 | Adobe Systems Incorporated | Methods and apparatus for digital stereo drawing |
JP5892595B2 (ja) | 2012-02-06 | 2016-03-23 | 株式会社ワコム | 位置指示器 |
JP6073467B2 (ja) * | 2013-04-25 | 2017-02-01 | シャープ株式会社 | タッチパネルシステムおよび電子機器 |
US10331331B2 (en) * | 2014-11-07 | 2019-06-25 | Samsung Electronics Co., Ltd. | Display device and method of controlling display device |
-
2016
- 2016-12-19 US US15/383,798 patent/US10234964B2/en active Active
-
2017
- 2017-07-20 JP JP2017140523A patent/JP6990057B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11296696A (ja) * | 1998-04-14 | 1999-10-29 | Shima Seiki Mfg Ltd | 3次元画像処理装置 |
JP2004295441A (ja) * | 2003-03-26 | 2004-10-21 | Tatsumi Denshi Kogyo Kk | 自動写真作成装置および自動写真作成方法 |
Also Published As
Publication number | Publication date |
---|---|
US10234964B2 (en) | 2019-03-19 |
US20180173333A1 (en) | 2018-06-21 |
JP6990057B2 (ja) | 2022-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2018101396A (ja) | 画像処理装置 | |
US9288373B2 (en) | System and method for human computer interaction | |
US9256288B2 (en) | Apparatus and method for selecting item using movement of object | |
US20180088676A1 (en) | Gesture interface | |
CN105593786B (zh) | 对象位置确定 | |
US11941207B2 (en) | Touch control method for display, terminal device, and storage medium | |
CN107615214A (zh) | 界面控制系统、界面控制装置、界面控制方法及程序 | |
DE102009023875A1 (de) | Gestenerkennungsschittstellensystem mit vertikaler Anzeigefläche | |
JP6344530B2 (ja) | 入力装置、入力方法、及びプログラム | |
KR20120095084A (ko) | 포인터를 사용하지 않는 가상 터치 장치 및 방법 | |
CN102650906B (zh) | 一种用户界面的控制方法及装置 | |
US20160078679A1 (en) | Creating a virtual environment for touchless interaction | |
US10754446B2 (en) | Information processing apparatus and information processing method | |
JP2014115733A (ja) | 情報処理装置、情報処理方法、プログラム、および記録媒体 | |
US20150268828A1 (en) | Information processing device and computer program | |
US10175780B2 (en) | Behind-display user interface | |
CN108227968B (zh) | 光标控制方法和装置 | |
JP7210131B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2015203597A (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2023531302A (ja) | 動的な形状スケッチングのためのシステム及び方法 | |
CN109935318B (zh) | 三维脉波的显示方法、装置、计算机设备及存储介质 | |
KR101388668B1 (ko) | 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치와 방법 및 그에 대한 기록매체 | |
KR101863275B1 (ko) | 동적 형상 표시 장치 및 이를 이용한 동적 형상 표시 방법 | |
KR20170039345A (ko) | 전자펜 시스템 | |
CN108498117A (zh) | 表示采用不同成像模式获取的超声数据的方法和超声成像系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200709 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200709 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210812 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210818 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211015 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6990057 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |