JP2020525962A - インテリジェントホワイトボード連携システムおよび方法 - Google Patents
インテリジェントホワイトボード連携システムおよび方法 Download PDFInfo
- Publication number
- JP2020525962A JP2020525962A JP2020520432A JP2020520432A JP2020525962A JP 2020525962 A JP2020525962 A JP 2020525962A JP 2020520432 A JP2020520432 A JP 2020520432A JP 2020520432 A JP2020520432 A JP 2020520432A JP 2020525962 A JP2020525962 A JP 2020525962A
- Authority
- JP
- Japan
- Prior art keywords
- whiteboard
- color
- foreground
- stroke
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 239000003550 marker Substances 0.000 claims abstract description 106
- 238000010606 normalization Methods 0.000 claims abstract description 13
- 239000003086 colorant Substances 0.000 claims description 16
- 238000001514 detection method Methods 0.000 claims description 8
- 238000009499 grossing Methods 0.000 claims description 6
- 238000009877 rendering Methods 0.000 claims description 4
- 238000012937 correction Methods 0.000 claims description 3
- 230000010354 integration Effects 0.000 abstract description 2
- 238000004891 communication Methods 0.000 description 4
- 238000005457 optimization Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000013481 data capture Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000012015 optical character recognition Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000000699 topical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/32—Digital ink
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/28—Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/16—Image preprocessing
- G06V30/162—Quantising the image signal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/18—Extraction of features or characteristics of the image
- G06V30/18105—Extraction of features or characteristics of the image related to colour
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/21—Monitoring or handling of messages
- H04L51/214—Monitoring or handling of messages using selective forwarding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
- H04L65/4015—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6072—Colour correction or control adapting to different types of images, e.g. characters, graphs, black and white image portions
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Security & Cryptography (AREA)
- Data Mining & Analysis (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Character Discrimination (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Drawing Aids And Blackboards (AREA)
Abstract
Description
ホワイトボードの内容を取り込むために、特定の実施形態において、カメラは、広い視野(例えば、100°〜180°のHFOV)、高分解能センサ(例えば、12MP超)、およびイメージセンサよりも分解能が高い光学レンズを有する。特定の実施形態において、そのようなカメラは、二重のイメージパイプラインを有し、一方は、デジタルパンチルトズーム(PTZ)動作を可能にする、ビデオストリームのためものものであり、他方はホワイトボードの内容のためのものである。
背景白色ピクセルとして分類されない全てのピクセルは、前景ピクセルとみなされる。ピクセルは、初期デモザイク処理後に、前景マーカ色に属する前景ピクセルとして事前に分類することができる。1つの実施形態における背景白色の特定および背景白色ピクセルの分類に続いて、残りのピクセルが、前景ピクセルとして確認される。次に、前景ピクセルに対し、更なる処理および高度な色正規化が行われる。
本開示の1つの実施形態によれば、インテリジェントホワイトボード連携システムにおけるアクセスのために、結果として得られるホワイトボードイメージの分解能および一貫性、ならびにホワイトボードデータおよび内容の精度を改善するために、全ての前景マーカ色のストロークが再構成または「デジタル化」される。
1つの実施形態によれば、本開示のシステムは、ホワイトボード会議のための未加工ホワイトボードビデオ信号からタイムスタンプを付されたホワイトボードデータを生成するように適合される。システムは、ホワイトボード検出ユニット、背景ユニット、前景マーカユニット、ストロークデジタイザ、およびディスプレイを備える。様々な実施形態において、以下に論考される追加のコンポーネントの各々を含む、システムにおける各コンポーネントまたはユニットは、ハードウェア、ソフトウェア、ファームウェアまたはそれらの組合せとすることができる。各コンポーネントは、互いに電子的にまたはデジタルで接続され、それによって、データおよび信号が、システム内およびこれらのコンポーネント間で送信される。代替的な実施形態におけるディスプレイは、システムの他のコンポーネントに無線で接続される。別の実施形態では、システムは、各々がホワイトボード会議の個々のユーザまたは参加者によって操作または利用される多数のディスプレイを含む。
Claims (53)
- ホワイトボードビデオ信号からタイムスタンプを付されたデータを取り込むための方法であって、
前記方法は、
ホワイトボードの4つの角部を計算し、それによって前記ホワイトボードを定義することと、
背景白色を特定し、背景白色ピクセルを識別することと、
前景マーカ色ごとおよび前景ピクセルごとに色正規化を行うことと、
所定の幅を有する前景マーカ色ごとにストロークを再構成すること、
を含み、
各ストロークは、前記ホワイトボードビデオ信号に基づいてタイムスタンプと関連付けられる、方法。 - ストロークを再構成することは、
前景マーカ色のストロークの断面からの変曲点を、その長さに沿って接続し、それによってペン曲線を生成することと、
所定の幅を有する前記ペン曲線に基づいて、再構成されたストロークをレンダリングすることと、
を含む、請求項1に記載の方法。 - 前記定の幅は、ストロークの平均幅である、請求項2に記載の方法。
- 前記所定の幅は、他の前景マーカ色と比較して、前景マーカ色ごとに変動する、請求項2に記載の方法。
- 変曲点を接続することは、前記変曲点にスプライン補間を適用することを含む、請求項2に記載の方法。
- 前記スプライン補間は、平滑化スプライン補間である、請求項5に記載の方法。
- 前記平滑化スプライン補間は、三次平滑化スプライン補間である、請求項6に記載の方法。
- ホワイトボードを定義することは、
内部が白色の長方形を検出することと、
前記ホワイトボードのアスペクト比を特定することと、
を更に含む、請求項1に記載の方法。 - ホワイトボードを定義することは、台形補正を更に含む、請求項8に記載の方法。
- 背景白色を特定し、背景白色ピクセルを識別することは、
前記ホワイトボード内の各ピクセルを代替的な色空間に変換することと、
その色空間におけるピクセルのクラスタのヒストグラムを生成することと、
最頻色を特定することと、
を更に含み、
前記最頻色は、前記背景白色として定義される、請求項1に記載の方法。 - 前記代替的な色空間は、HSV、YCbCr、YPbPr、TSL、CIELABおよびCIELUV空間のうちの1つである、請求項10に記載の方法。
- 背景白色を特定し、背景白色ピクセルを識別することは、局所パッチのための多数の局所背景白色を推定することを更に含む、請求項10に記載の方法。
- 前記局所パッチは、多数のピクセルの各々を取り囲む、20×20、50×50、および75×75の寸法のうちの1つである、請求項12に記載の方法。
- 前記多数のピクセルは、前記ホワイトボード内の各ピクセルを含む、請求項13に記載の方法。
- 多数の局所背景白色を推定することは、局所パッチごとに代替的な色空間においてピクセルのクラスタリングを行うことを更に含み、
前記代替的な色空間は、HSV、YCbCr、YPbPr、TSL、CIELABおよびCIELUV空間のうちの1つである、請求項12に記載の方法。 - 局所パッチごとに背景白色ピクセルのバイナリマスクを生成することと、
ピクセルが全ての局所パッチの所定のパーセンテージを超えて背景白色である場合、そのピクセルを背景白色として分類することと、
を更に含む、請求項15に記載の方法。 - 前記所定のパーセンテージは90%である、請求項16に記載の方法。
- ピクセルが背景白色として分類されない場合、そのピクセルを前景ピクセルとして分類することを更に含む、請求項16に記載の方法。
- 前景マーカ色ごとおよび前景ピクセルごとに色正規化を行うことは、
i)代替的な色空間において前景ピクセルのクラスタリングを行うことであって、前記代替的な色空間は、HSV、YCbCr、YPbPr、TSL、CIELABおよびCIELUV空間のうちの1つであることと、
ii)前記クラスタリングに基づいて前景ピクセルを前景マーカ色として分類することと、
iii)前景マーカ色ごとにバイナリマスクを生成することと、
を更に含み、
各前景マーカ色は、その前景マーカ色として分類された全てのピクセルの最も典型的な色として定義され、
前記最も典型的な色は、その前景マーカ色のメディアンおよび平均のうちの1つである、請求項1に記載の方法。 - イメージセンサ色平面ごとに、前景マーカ色として分類された各ピクセルを取り囲む局所パッチ内で極大輝度を有する背景白色ピクセルを識別することと、
前記背景白色ピクセルの前記極大輝度で除算することによって前記前景マーカピクセルの値を正規化することと、
を更に含む、請求項19に記載の方法。 - 前記局所パッチは、前景マーカ色として分類された前記ピクセルを取り囲む、20×20、50×50、および75×75の寸法のうちの1つである、請求項20に記載の方法。
- イメージセンサ色平面ごとに、前景マーカ色として分類された前記ピクセルを取り囲む前記局所パッチにおいて、最も暗い輝度を有する前景マーカ色ピクセルを識別することと、
前景マーカピクセルとして分類された前記ピクセルの前記値を、前記最も暗い輝度を減算することによって正規化し、それによって前記イメージセンサ色平面の正規化されたグレースケールイメージを導出することと、
を更に含む、請求項21に記載の方法。 - イメージセンサ色平面ごとに前記正規化されたグレースケールイメージをマージすることによって、高分解能グレースケールイメージを生成することを更に含む、請求項22に記載の方法。
- 前記高分解能グレースケールイメージにおいて対応する前景マーカ色として分類された各ピクセルに前記最も典型的な前景マーカ色を適用することによって、高分解能カラーイメージを再構成することを更に含み、
前記最も典型的な前景マーカ色は、前記対応する前景マーカ色のメディアンおよび平均のうちの1つである、請求項23に記載の方法。 - 前記ホワイトボードビデオ信号の時系列を比較することによって、前記ホワイトボードのビューを間欠的に遮る人物を除去することと、
静止していると判断されたイメージからのみホワイトボードデータを取り込むことと、
を更に含む、請求項1に記載の方法。 - ホワイトボード会議のために、未加工ホワイトボードビデオイメージからタイムスタンプを付されたホワイトボードデータを生成するためのシステムであって、
前記システムは、
前記未加工ホワイトボードビデオイメージからホワイトボードを検出するように適合されたホワイトボード検出ユニットと、
大域背景白色を定義し、ピクセルを背景白色として分類するように適合された背景ユニットと、
各前景マーカ色を定義し、ピクセルを前景マーカ色として分類するように適合された前景マーカユニットと、
各前景マーカ色のストロークを再構成するように適合されたストロークデジタイザと、
タイムスタンプに関連付けられた、再構成されたホワイトボードイメージをレンダリングするように適合されたディスプレイと、
を備え、
各ストロークは前記未加工ホワイトボードビデオイメージに基づくタイムスタンプと関連付けられる、システム。 - 前記ストロークデジタイザは、(i)前景マーカ色のストロークの断面からの変曲点を、その長さに沿って接続し、それによってペン曲線を生成することと、(ii)所定の幅を有する前記ペン曲線に基づいて、再構成されたストロークをレンダリングすることと、によって前記再構成されたストロークを生成するように更に適合される、請求項26に記載のシステム。
- 前記所定の幅は、前記ストロークの平均幅である、請求項27に記載のシステム。
- 前記所定の幅は、他の前景マーカ色と比較して、前景マーカ色ごとに変動する、請求項27に記載のシステム。
- 前記ストロークデジタイザは、前記変曲点にスプライン補間を適用することによって前記ペン曲線を導出するように更に適合される、請求項27に記載のシステム。
- 前記スプライン補間は、平滑化スプライン補間である、請求項30に記載のシステム。
- 平滑化スプライン補間は、三次平滑化スプライン補間である、請求項31に記載のシステム。
- 前記背景ユニットは、局所パッチのための多数の局所背景白色を推定し、背景白色のためのバイナリマスクを生成するように更に適合される、請求項26に記載のシステム。
- 前記局所パッチは、多数のピクセルの各々を取り囲む、20×20、50×50、および75×75の寸法のうちの1つである、請求項26に記載のシステム。
- 前記多数のピクセルは、前記ホワイトボード内の各ピクセルを含む、請求項34に記載のシステム。
- 前記前景マーカユニットは、前景色として分類された各前景ピクセルを取り囲む局所パッチに基づいて、前景マーカ色ごとに別個に、およびイメージセンサ色平面ごとに別個に、色を正規化するように更に適合される、請求項26に記載のシステム。
- 前記前景マーカユニットは、前記局所パッチ内で識別された、最大局所背景白色および前景色ピクセルの最も暗い輝度に基づいて色を正規化するように更に適合される、請求項36に記載のシステム。
- 前記前景マーカユニットは、イメージセンサ色平面ごとに別個に正規化されたグレースケールイメージを生成し、それによって、イメージセンサ色平面とごとに別個に正規化されたグレースケールイメージを組み合わせることによって、高分解能のグレースケールイメージを生成するように更に適合される、請求項37に記載のシステム。
- 前記前景マーカユニットは、前記高分解能グレーイメージにおいて対応する前景マーカ色として分類された各ピクセルに前記定義された前景マーカ色を適用することによって高分解能カラーイメージを再構成するように更に適合される、請求項38に記載のシステム。
- 再構成されたストロークを、それらのタイムスタンプに基づいてインデックス付けし、前記ディスプレイにおいて、ユーザによって指定されたストロークに対応する前記ホワイトボードビデオイメージの一部を再生するように適合されたビデオストロークレビュアを更に備える、請求項26に記載のシステム。
- 前記ディスプレイは、タッチスクリーン入力を受信するように更に適合される、請求項40に記載のシステム。
- ユーザからの単語入力に基づいて再構成されたストロークを検索し、この単語入力に対応する再構成されたストロークが見つかった場合、これを識別し、前記ディスプレイにおいて、前記再構成されたストロークを所定の色で強調するように適合された単語検出器を更に備える、請求項26に記載のシステム。
- ユーザからの音声入力に基づいて前記ホワイトボードビデオイメージ信号を検索し、この音声入力に対応する再構成されたストロークが見つかった場合、これを識別し、前記ディスプレイにおいて、前記再構成されたストロークを所定の色で強調するように適合された音声検出器を更に備える、請求項26に記載のシステム。
- 前記ディスプレイは、ユーザの入力に対応する再構成されたストロークの隣にクラウドグラフィックを表示するように適合されたワードクラウドパブリッシャを更に備える、請求項26に記載のシステム。
- 前記ホワイトボード会議の参加者のバイオメトリック署名を記憶し、それによって、前記参加者の前記バイオメトリック署名のうちの1つに基づいて前記参加者が識別されることを可能にするように適合されたバイオメトリックデータベースを更に備える、請求項26に記載のシステム。
- 前記バイオメトリック署名は、ストローク署名、顔署名、および音声署名のうちの1つである、請求項45に記載のシステム。
- 複数の参加者のためのホワイトボードビデオ連携システムであって、
請求項45に記載のシステムと、
前記バイオメトリックデータベースにおける前記参加者の対応する署名のうちの1つに基づいて、タイムスタンプを付されたホワイトボードデータを参加者に配信するように適合されたメッセージングユニットと、
を備える、ホワイトボードビデオ連携システム。 - 前記メッセージングユニットは、Slack、Facebook Workplace、Cisco Spark、Microsoft Teams、HipChat、およびEmailのうちの1つである、請求項47に記載のシステム。
- 前記メッセージングユニットは、ホワイトボードジェスチャを認識するように更に適合され、前記ホワイトボードジェスチャは、前記ホワイトボード上の四角形、タップ、ドットおよびハッシュタグを含む、請求項48に記載のシステム。
- 前記メッセージングユニットは、(i)再構成されたホワイトボードイメージ内のハッシュタグを検出し、(ii)前記検出されたハッシュタグ領域と、所定のユーザチャネルとの間の一致を特定し、(iii)前記検出されたハッシュタグ領域内の前記再構成されたホワイトボードイメージを前記一致したユーザチャネルに投稿するように適合される、請求項49に記載のシステム。
- 前記ディスプレイは、所定の時刻より後のタイムスタンプを有する再構成されたストロークのみを示し、それによって、前記複数の参加者が、前記所定の時刻から仮想連携セッションを始めることを可能にするように更に適合される、請求項47に記載のシステム。
- アナログホワイトボードイメージを再構成するシステムであって、
請求項26に記載のシステムと、
前記ディスプレイに接続されたインクプリンタと、
を備え、
前記インクプリンタは、前記ディスプレイ内の前記再構成されたホワイトボードイメージに基づいてホワイトボードプリントアウトを出力するように適合される、システム。 - 前記インクプリンタは、前記ホワイトボードプリントアウトのサイズを調整するように更に適合される、請求項52に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/632,953 US10387747B2 (en) | 2017-06-26 | 2017-06-26 | Intelligent whiteboard collaboratio systems and methods |
US15/632,953 | 2017-06-26 | ||
PCT/US2018/039373 WO2019005706A1 (en) | 2017-06-26 | 2018-06-25 | SYSTEMS AND INTELLIGENT METHODS OF COLLABORATING WHITEBOARD |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020525962A true JP2020525962A (ja) | 2020-08-27 |
JP7230016B2 JP7230016B2 (ja) | 2023-02-28 |
Family
ID=64693322
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020520432A Active JP7230016B2 (ja) | 2017-06-26 | 2018-06-25 | インテリジェントホワイトボード連携システムおよび方法 |
Country Status (9)
Country | Link |
---|---|
US (2) | US10387747B2 (ja) |
EP (1) | EP3646241A4 (ja) |
JP (1) | JP7230016B2 (ja) |
KR (1) | KR102670702B1 (ja) |
CN (1) | CN110809769B (ja) |
AU (1) | AU2018295212B2 (ja) |
CA (1) | CA3067222A1 (ja) |
NO (1) | NO20191491A1 (ja) |
WO (1) | WO2019005706A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6996367B2 (ja) * | 2018-03-14 | 2022-01-17 | 株式会社リコー | 電子黒板システム、電子黒板、方法、プログラム及び会議システム |
US11638147B2 (en) | 2019-11-22 | 2023-04-25 | International Business Machines Corporation | Privacy-preserving collaborative whiteboard using augmented reality |
US11245871B1 (en) * | 2021-01-04 | 2022-02-08 | Servicenow, Inc. | Gesture-based whiteboard |
WO2023122537A1 (en) * | 2021-12-20 | 2023-06-29 | Canon U.S.A., Inc. | Apparatus and method for enhancing a whiteboard image |
WO2023235581A1 (en) * | 2022-06-03 | 2023-12-07 | Canon U.S.A., Inc. | Apparatus and method for enhancing a whiteboard image |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030028901A1 (en) * | 2001-06-14 | 2003-02-06 | International Business Machines Corporation | Periodic broadcast and location of evolving media content with application to seminar and stroke media |
JP2004080750A (ja) * | 2002-06-19 | 2004-03-11 | Microsoft Corp | ホワイトボードおよび音声のキャプチャのためのシステムおよび方法 |
US20040165786A1 (en) * | 2003-02-22 | 2004-08-26 | Zhengyou Zhang | System and method for converting whiteboard content into an electronic document |
JP2007334876A (ja) * | 2006-06-19 | 2007-12-27 | Reallusion Inc | 文書イメージ処理システムおよび文書イメージ処理方法 |
JP2011524572A (ja) * | 2008-06-14 | 2011-09-01 | マイクロソフト コーポレーション | マルチメディア会議イベント用のホワイトボード管理手法 |
US20150135328A1 (en) * | 2013-11-14 | 2015-05-14 | Wells Fargo Bank, N.A. | Vehicle interface |
US20150213395A1 (en) * | 2014-01-24 | 2015-07-30 | T Minus 5 Llc | Meeting Tracking |
US20160210037A1 (en) * | 2015-01-21 | 2016-07-21 | Lenovo (Singapore) Pte. Ltd. | Presentation of representation of handwriting input on display |
Family Cites Families (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5404439A (en) * | 1992-04-15 | 1995-04-04 | Xerox Corporation | Time-space object containment for graphical user interface |
EP0566293B1 (en) * | 1992-04-15 | 2003-07-16 | Xerox Corporation | Graphical drawing and editing systems and methods therefor |
US5592608A (en) * | 1993-10-15 | 1997-01-07 | Xerox Corporation | Interactively producing indices into image and gesture-based data using unrecognized graphical objects |
US6144991A (en) * | 1998-02-19 | 2000-11-07 | Telcordia Technologies, Inc. | System and method for managing interactions between users in a browser-based telecommunications network |
US6473794B1 (en) * | 1999-05-27 | 2002-10-29 | Accenture Llp | System for establishing plan to test components of web based framework by displaying pictorial representation and conveying indicia coded components of existing network framework |
SG121851A1 (en) * | 1999-06-30 | 2006-05-26 | Silverbrook Res Pty Ltd | Method and system for conferencing using processing sensor |
US7653925B2 (en) * | 1999-11-17 | 2010-01-26 | Ricoh Company, Ltd. | Techniques for receiving information during multimedia presentations and communicating the information |
US20010035976A1 (en) * | 2000-02-15 | 2001-11-01 | Andrew Poon | Method and system for online presentations of writings and line drawings |
US6859909B1 (en) * | 2000-03-07 | 2005-02-22 | Microsoft Corporation | System and method for annotating web-based documents |
US6904182B1 (en) * | 2000-04-19 | 2005-06-07 | Microsoft Corporation | Whiteboard imaging system |
US20030095113A1 (en) * | 2001-11-21 | 2003-05-22 | Yue Ma | Index and retrieval system and method for scanned notes from whiteboard |
US7177483B2 (en) * | 2002-08-29 | 2007-02-13 | Palo Alto Research Center Incorporated. | System and method for enhancement of document images |
US7298930B1 (en) * | 2002-11-29 | 2007-11-20 | Ricoh Company, Ltd. | Multimodal access of meeting recordings |
JP2005108230A (ja) * | 2003-09-25 | 2005-04-21 | Ricoh Co Ltd | オーディオ/ビデオコンテンツ認識・処理機能内蔵印刷システム |
US7260278B2 (en) * | 2003-11-18 | 2007-08-21 | Microsoft Corp. | System and method for real-time whiteboard capture and processing |
US20050227218A1 (en) * | 2004-03-06 | 2005-10-13 | Dinesh Mehta | Learning system based on metadata framework and indexed, distributed and fragmented content |
US7284192B2 (en) * | 2004-06-24 | 2007-10-16 | Avaya Technology Corp. | Architecture for ink annotations on web documents |
US7724953B2 (en) * | 2006-05-17 | 2010-05-25 | Qualcomm Incorporated | Whiteboard, blackboard, and document image processing |
US9740293B2 (en) * | 2009-04-02 | 2017-08-22 | Oblong Industries, Inc. | Operating environment with gestural control and multiple client devices, displays, and users |
US8385971B2 (en) * | 2008-08-19 | 2013-02-26 | Digimarc Corporation | Methods and systems for content processing |
JP5219706B2 (ja) * | 2008-09-12 | 2013-06-26 | キヤノン株式会社 | 画像処理装置、画像処理方法、及び、画像処理プログラム |
US20120072843A1 (en) * | 2010-09-20 | 2012-03-22 | Disney Enterprises, Inc. | Figment collaboration system |
US8723789B1 (en) * | 2011-02-11 | 2014-05-13 | Imimtek, Inc. | Two-dimensional method and system enabling three-dimensional user interaction with a device |
US20130031457A1 (en) * | 2011-07-28 | 2013-01-31 | Peter Griffiths | System for Creating and Editing Temporal Annotations of Documents |
CN104106037B (zh) * | 2012-02-13 | 2017-10-03 | 日立麦克赛尔株式会社 | 投影仪,图形输入·显示装置,便携终端和程序 |
US9013454B2 (en) * | 2012-03-02 | 2015-04-21 | Ricoh Co., Ltd. | Associating strokes with documents based on the document image |
US8805068B2 (en) * | 2012-12-13 | 2014-08-12 | Microsoft Corporation | Automatic classification and color enhancement of a markable surface |
US20140313216A1 (en) * | 2013-04-18 | 2014-10-23 | Baldur Andrew Steingrimsson | Recognition and Representation of Image Sketches |
US9665259B2 (en) * | 2013-07-12 | 2017-05-30 | Microsoft Technology Licensing, Llc | Interactive digital displays |
JP6255826B2 (ja) * | 2013-09-13 | 2018-01-10 | 株式会社リコー | システム、情報処理装置、画像表示方法、プログラム、記憶媒体 |
US20150135067A1 (en) * | 2013-11-14 | 2015-05-14 | Wells Fargo Bank, N.A. | Intelligent data presentation |
CN107534704B (zh) * | 2015-05-07 | 2020-11-06 | 株式会社理光 | 一种经由通信网络连接的信息处理方法、设备和介质 |
US9658702B2 (en) * | 2015-08-12 | 2017-05-23 | Smart Technologies Ulc | System and method of object recognition for an interactive input system |
-
2017
- 2017-06-26 US US15/632,953 patent/US10387747B2/en active Active
-
2018
- 2018-06-25 CN CN201880042784.0A patent/CN110809769B/zh active Active
- 2018-06-25 EP EP18825019.5A patent/EP3646241A4/en active Pending
- 2018-06-25 CA CA3067222A patent/CA3067222A1/en active Pending
- 2018-06-25 KR KR1020207002116A patent/KR102670702B1/ko active IP Right Grant
- 2018-06-25 JP JP2020520432A patent/JP7230016B2/ja active Active
- 2018-06-25 WO PCT/US2018/039373 patent/WO2019005706A1/en unknown
- 2018-06-25 AU AU2018295212A patent/AU2018295212B2/en active Active
-
2019
- 2019-06-30 US US16/458,062 patent/US11205087B2/en active Active
- 2019-12-18 NO NO20191491A patent/NO20191491A1/en not_active Application Discontinuation
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030028901A1 (en) * | 2001-06-14 | 2003-02-06 | International Business Machines Corporation | Periodic broadcast and location of evolving media content with application to seminar and stroke media |
JP2004080750A (ja) * | 2002-06-19 | 2004-03-11 | Microsoft Corp | ホワイトボードおよび音声のキャプチャのためのシステムおよび方法 |
US20040165786A1 (en) * | 2003-02-22 | 2004-08-26 | Zhengyou Zhang | System and method for converting whiteboard content into an electronic document |
JP2007334876A (ja) * | 2006-06-19 | 2007-12-27 | Reallusion Inc | 文書イメージ処理システムおよび文書イメージ処理方法 |
JP2011524572A (ja) * | 2008-06-14 | 2011-09-01 | マイクロソフト コーポレーション | マルチメディア会議イベント用のホワイトボード管理手法 |
US20150135328A1 (en) * | 2013-11-14 | 2015-05-14 | Wells Fargo Bank, N.A. | Vehicle interface |
US20150213395A1 (en) * | 2014-01-24 | 2015-07-30 | T Minus 5 Llc | Meeting Tracking |
US20160210037A1 (en) * | 2015-01-21 | 2016-07-21 | Lenovo (Singapore) Pte. Ltd. | Presentation of representation of handwriting input on display |
Non-Patent Citations (3)
Title |
---|
LI-WEI HE;ZHENGYOU ZHANG: "Real-Time Whiteboard Capture and Processing Using a Video Camera for Remote Collaboration", IEEE TRANSACTIONS ON MULTIMEDIA VOL.9 NO.1 JANUARY 2007, vol. Volume: 9, Issue: 1, JPN6022027634, January 2007 (2007-01-01), pages 198 - 206, ISSN: 0004818578 * |
武部 浩明: "デジタルペンを活用したグループワーク電子化支援システム", 電子情報通信学会技術研究報告 VOL.111 NO.500, vol. PRMU2011-260, HIP2011-88 (2012-3), JPN6022027633, 22 March 2012 (2012-03-22), JP, pages 129 - 134, ISSN: 0004818577 * |
神谷 葉月: "インタラクティブな手書き幾何作図のための自由曲線整形法", 情報処理学会 研究報告 ヒューマンコンピュータインタラクション(HCI), vol. Vol.2017-HCI-171 No.17, JPN6022027632, 16 January 2017 (2017-01-16), JP, pages 1 - 8, ISSN: 0004818576 * |
Also Published As
Publication number | Publication date |
---|---|
CN110809769A (zh) | 2020-02-18 |
US20190325253A1 (en) | 2019-10-24 |
NO20191491A1 (en) | 2019-12-18 |
JP7230016B2 (ja) | 2023-02-28 |
AU2018295212B2 (en) | 2023-04-20 |
EP3646241A4 (en) | 2021-03-24 |
US11205087B2 (en) | 2021-12-21 |
CN110809769B (zh) | 2024-02-13 |
CA3067222A1 (en) | 2019-01-03 |
US10387747B2 (en) | 2019-08-20 |
KR20200022453A (ko) | 2020-03-03 |
WO2019005706A1 (en) | 2019-01-03 |
AU2018295212A1 (en) | 2020-01-16 |
US20180373954A1 (en) | 2018-12-27 |
KR102670702B1 (ko) | 2024-05-31 |
EP3646241A1 (en) | 2020-05-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7230016B2 (ja) | インテリジェントホワイトボード連携システムおよび方法 | |
CN109804622B (zh) | 红外图像流的重新着色 | |
US9524028B2 (en) | Visual language for human computer interfaces | |
CN107408205B (zh) | 用红外成像区分前景和背景 | |
US10469701B2 (en) | Image processing method that obtains special data from an external apparatus based on information multiplexed in image data and apparatus therefor | |
Du et al. | Saliency-guided color-to-gray conversion using region-based optimization | |
US11138695B2 (en) | Method and device for video processing, electronic device, and storage medium | |
US20180336397A1 (en) | Method for detecting a live face for access to an electronic device | |
TWI701018B (zh) | 資訊處理裝置、資訊處理方法、及程式 | |
US20180232192A1 (en) | System and Method for Visual Enhancement, Annotation and Broadcast of Physical Writing Surfaces | |
JP6779688B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
KR20150112535A (ko) | 비디오 대표 이미지 관리 장치 및 방법 | |
Hadiprakoso et al. | Face anti-spoofing using CNN classifier & face liveness detection | |
Zangana et al. | A new algorithm for human face detection using skin color tone | |
CN109583330B (zh) | 一种用于人脸照片的毛孔检测方法 | |
TW201738844A (zh) | 監控裝置、監控方法及計數方法 | |
US20180116582A1 (en) | Elasticity evaluation apparatus, elasticity evaluation method, and elasticity evaluation program | |
Sandnes et al. | Simple and practical skin detection with static RGB-color lookup tables: A visualization-based study | |
Devi et al. | Active facial tracking | |
Singhai et al. | Hand segmentation for hand gesture recognition | |
CN109766831A (zh) | 一种道路色带识别方法、装置、计算机设备、及存储介质 | |
KR20240147241A (ko) | 지문 융선의 디지털 증강 장치 및 방법 | |
CN118840335A (en) | Health condition identification method, device, equipment and readable storage medium | |
Reddy et al. | Log-gabor filters and lda based facial expression recognition | |
CN112907492A (zh) | 物体运动轨迹的生成方法及生成系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210607 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220705 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20221004 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20221005 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20221107 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20221129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7230016 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |