JP7403115B2 - 映像送信装置、アプリケーションプログラム及び映像送信方法 - Google Patents
映像送信装置、アプリケーションプログラム及び映像送信方法 Download PDFInfo
- Publication number
- JP7403115B2 JP7403115B2 JP2019128627A JP2019128627A JP7403115B2 JP 7403115 B2 JP7403115 B2 JP 7403115B2 JP 2019128627 A JP2019128627 A JP 2019128627A JP 2019128627 A JP2019128627 A JP 2019128627A JP 7403115 B2 JP7403115 B2 JP 7403115B2
- Authority
- JP
- Japan
- Prior art keywords
- video data
- frame image
- video
- screen
- specific pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 30
- 230000005540 biological transmission Effects 0.000 title claims description 21
- 230000008569 process Effects 0.000 claims description 19
- 230000008859 change Effects 0.000 claims description 2
- 230000002123 temporal effect Effects 0.000 claims 1
- 238000004458 analytical method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000000873 masking effect Effects 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000007704 transition Effects 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 3
- 238000004590 computer program Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Description
図1は、一実施形態に係る画面共有システム1の構成を例示する図である。画面共有システム1は、映像送信装置10の画面を共有するサービスを提供するシステムである。画面共有システム1は、映像送信装置10及び映像受信装置20を有する。一例において、画面共有システム1は、ソフトウェアのサポートサービスに用いられる。映像送信装置10は、画面共有サービスを受ける顧客により使用される端末である。映像受信装置20は、画面共有サービスを提供するサポート事業者により使用される端末である。サポート事業者は、画面を共有するためのアプリケーション(以下「画面共有アプリ」という)で顧客の端末(映像送信装置10)の画面を共有しながら、顧客による映像送信装置10の操作等のサポートを行う。映像送信装置10及び映像受信装置20は、例えばスマートフォン、タブレット端末、又はラップトップ型コンピュータ等の汎用コンピュータである。映像送信装置10は通信回線2により映像受信装置20に接続されている。通信回線2は、例えば、インターネット、移動体通信網、電話回線、又はLAN(Local Area Network)を含む。
映像送信装置10のユーザは、UI部105を用いてアプリ152を起動する。映像送信装置10はユーザの操作に応じた画面(例えば、図5に例示した画面)をUI部105に表示する。アプリ152がフォアグラウンドで動作している状態において、画面共有アプリ153はバックグラウンドで動作し、UI部105に表示される画像を他の端末と共有するための処理を実行する。
本発明は上述の実施形態に限定されるものではなく、種々の変型実施が可能である。以下、変形例をいくつか説明する。以下の変形例のうち2つ以上のものが組み合わせて用いられてもよい。
上述の実施形態では、図6のステップS105において検出する特定のパターンとして、図7を例示した。検出される特定のパターンは上述の実施形態で示したものに限られない。例えば、パスコード(暗証番号)の入力画面から検知されるパターンであってもよい。また、他の例として、例えば、図11に例示されるような、複数のウィンドウが重畳して表示された画面から検知されるパターンであってもよい。
上述の実施形態では、フォアグラウンドで動作するアプリケーション(アプリ152)が非公開データを取り扱う企業においてその非公開データを解析するアプリケーションである場合の動作を説明した。アプリ152は上述した実施形態で示したものに限られない。アプリ152は、種々のものが適用可能である。例えば、アプリ152は、汎用のカメラアプリケーションであってもよい。この場合、カメラで撮影された画像(例えば、書類の画像)に所定の文字列が含まれていると、その文字列の部分がマスク処理された画面が共有される。このように、フォアグラウンドで動作するアプリケーションが汎用のカメラアプリである場合であっても、上述の実施形態と同様に、画面を他の装置と共有するシステムにおいて、情報がより簡単に秘匿される。
データ処理の流れは実施形態において例示したものに限定されない。OS151は、圧縮された映像データを出力する代わりに、圧縮されていない(すなわちデコード不要の)映像データを出力してもよい。この場合、画面共有アプリ153はデコーダー32を有さなくてもよい。取得部31は、OS151から圧縮されていない映像データを取得する。取得部31は、映像データをフレームメモリに書き込む。以下は、OS151が圧縮された映像データを出力する場合と同様である。
映像送信装置10の機能構成は図2で例示したものに限定されない。図2に示した機能の一部が省略されてもよく、また、図示されていない機能が追加されてもよい。また、画面共有システム1を構成する装置における機能の分担は、実施形態において例示したものに限定されない。例えば、映像データの解析処理やマスク処理を映像受信装置20が行ってもよい。また、例えば、画面共有システム1がクラウドサーバを備える構成とし、映像送信装置10がクラウドサーバに映像データを送信し、クラウドサーバが映像データの解析処理やマスク処理を実行してもよい。
Claims (6)
- オペレーティングシステム及びアプリケーションプログラムに従って画面を表示し、ユーザの操作を受け付けるUI手段と、
圧縮された映像データであって前記UI手段に表示されている画面を示す映像データの入力を受け付ける受け付け手段と、
前記映像データをデコードしてフレーム画像を取得する取得手段と、
前記フレーム画像を解析し、秘匿すべき部分を自動的に特定する特定手段と、
前記フレーム画像のうち前記特定された部分にマスク処理を施す処理手段と、
前記マスク処理後の1以上のフレーム画像を記憶する記憶手段と、
前記マスク処理されたフレーム画像をエンコードし、映像データを生成する生成手段と、
前記生成された映像データを、前記ユーザとは別のユーザが操作する映像受信装置に送信する送信手段と
を有し、
一のフレーム画像において特定のパターンが検知された場合、前記送信手段は、当該特定のパターンが検知された時点で前記記憶手段に記憶されているフレーム画像をエンコードした映像データを出力することなしに、映像データの出力を停止し、
前記特定のパターンが、
異なる複数のアプリケーションプログラムのウインドウが一画面に含まれるパターン、又は
パスコードの入力画面のパターン
である
映像送信装置。 - 前記映像データは、前記映像送信装置において表示される画面の時間変化を示す
請求項1に記載の映像送信装置。 - 前記映像データは、第1ソフトウェアから出力され、
前記受け付け手段、前記取得手段、前記特定手段、前記処理手段、前記生成手段、及び前記送信手段は、前記第1ソフトウェアと異なる第2ソフトウェアにより実装される
請求項1又は2に記載の映像送信装置。 - 前記第1ソフトウェアは、前記オペレーティングシステムである
請求項3に記載の映像送信装置。 - オペレーティングシステムがインストールされ、当該オペレーティングシステム及びアプリケーションプログラムに従って画面を表示し、ユーザの操作を受け付けるUI手段を有するコンピュータに処理を実行させる当該アプリケーションプログラムであって、当該処理が、
圧縮された映像データであって前記UI手段に表示されている画面を示す映像データの入力を受け付けるステップと、
前記映像データをデコードしてフレーム画像を取得するステップと、
前記フレーム画像を解析し、秘匿すべき部分を自動的に特定するステップと、
前記フレーム画像のうち前記特定された部分にマスク処理を施すステップと、
前記マスク処理後の1以上のフレーム画像を記憶手段に記憶するステップと、
前記マスク処理されたフレーム画像をエンコードし、映像データを生成するステップと、
前記生成された映像データを、前記ユーザとは別のユーザが操作する映像受信装置に送信するステップと
を含み、
一のフレーム画像において特定のパターンが検知された場合、当該特定のパターンが検知された時点で前記記憶手段に記憶されているフレーム画像をエンコードした映像データを出力することなしに、映像データの出力を停止し、
前記特定のパターンが、
異なる複数のアプリケーションプログラムのウインドウが一画面に含まれるパターン、又は
パスコードの入力画面のパターン
である
アプリケーションプログラム。 - オペレーティングシステム及びアプリケーションプログラムに従って画面を表示し、ユーザの操作を受け付けるUI手段を有するコンピュータに実装される映像送信方法であって、
前記コンピュータが、圧縮された映像データであって前記UI手段に表示されている画面を示す映像データの入力を受け付けるステップと、
前記コンピュータが、前記映像データをデコードしてフレーム画像を取得するステップと、
前記コンピュータが、前記フレーム画像を解析し、秘匿すべき部分を自動的に特定するステップと、
前記コンピュータが、前記フレーム画像のうち前記特定された部分にマスク処理を施すステップと、
前記コンピュータが、前記マスク処理後の1以上のフレーム画像を記憶手段に記憶するステップと、
前記コンピュータが、前記マスク処理されたフレーム画像をエンコードし、映像データを生成するステップと、
前記コンピュータが、前記生成された映像データを、前記ユーザとは別のユーザが操作する映像受信装置に送信するステップと
を有し、
一のフレーム画像において特定のパターンが検知された場合、当該特定のパターンが検知された時点で前記記憶手段に記憶されているフレーム画像をエンコードした映像データを出力することなしに、映像データの出力を停止し、
前記特定のパターンが、
異なる複数のアプリケーションプログラムのウインドウが一画面に含まれるパターン、又は
パスコードの入力画面のパターン
である
映像送信方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019128627A JP7403115B2 (ja) | 2019-07-10 | 2019-07-10 | 映像送信装置、アプリケーションプログラム及び映像送信方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019128627A JP7403115B2 (ja) | 2019-07-10 | 2019-07-10 | 映像送信装置、アプリケーションプログラム及び映像送信方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021016032A JP2021016032A (ja) | 2021-02-12 |
JP7403115B2 true JP7403115B2 (ja) | 2023-12-22 |
Family
ID=74530627
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019128627A Active JP7403115B2 (ja) | 2019-07-10 | 2019-07-10 | 映像送信装置、アプリケーションプログラム及び映像送信方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7403115B2 (ja) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008046567A (ja) | 2006-08-21 | 2008-02-28 | Fujitsu Ltd | 情報処理装置,情報処理装置における外部表示監視方法及びプログラム |
JP2012079170A (ja) | 2010-10-04 | 2012-04-19 | Ntt Docomo Inc | 表示装置、開示制御装置、開示制御方法、及びプログラム |
JP2013172301A (ja) | 2012-02-21 | 2013-09-02 | Nintendo Co Ltd | 情報処理システム、制御装置、情報処理プログラム及び画像表示方法 |
JP2014212473A (ja) | 2013-04-19 | 2014-11-13 | 株式会社ニコン | 通信装置、及び頭部装着表示装置 |
JP2015029297A (ja) | 2009-09-14 | 2015-02-12 | ティヴォ インク | メディアコンテンツのフィンガプリントの抽出 |
JP2017199314A (ja) | 2016-04-28 | 2017-11-02 | キヤノンマーケティングジャパン株式会社 | 情報処理システム、情報処理装置、クライアント端末、その制御方法及びプログラム |
JP2017212744A (ja) | 2012-07-09 | 2017-11-30 | ヴィド スケール インコーポレイテッド | 電力認識型ビデオ復号およびストリーミング |
JP2018061214A (ja) | 2016-10-07 | 2018-04-12 | パナソニックIpマネジメント株式会社 | 監視映像解析システム及び監視映像解析方法 |
-
2019
- 2019-07-10 JP JP2019128627A patent/JP7403115B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008046567A (ja) | 2006-08-21 | 2008-02-28 | Fujitsu Ltd | 情報処理装置,情報処理装置における外部表示監視方法及びプログラム |
JP2015029297A (ja) | 2009-09-14 | 2015-02-12 | ティヴォ インク | メディアコンテンツのフィンガプリントの抽出 |
JP2012079170A (ja) | 2010-10-04 | 2012-04-19 | Ntt Docomo Inc | 表示装置、開示制御装置、開示制御方法、及びプログラム |
JP2013172301A (ja) | 2012-02-21 | 2013-09-02 | Nintendo Co Ltd | 情報処理システム、制御装置、情報処理プログラム及び画像表示方法 |
JP2017212744A (ja) | 2012-07-09 | 2017-11-30 | ヴィド スケール インコーポレイテッド | 電力認識型ビデオ復号およびストリーミング |
JP2014212473A (ja) | 2013-04-19 | 2014-11-13 | 株式会社ニコン | 通信装置、及び頭部装着表示装置 |
JP2017199314A (ja) | 2016-04-28 | 2017-11-02 | キヤノンマーケティングジャパン株式会社 | 情報処理システム、情報処理装置、クライアント端末、その制御方法及びプログラム |
JP2018061214A (ja) | 2016-10-07 | 2018-04-12 | パナソニックIpマネジメント株式会社 | 監視映像解析システム及び監視映像解析方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2021016032A (ja) | 2021-02-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111078070B (zh) | Ppt视频弹幕的播放控制方法、装置、终端及介质 | |
US20210329079A1 (en) | Methods, devices and computer-readable storage media for processing a hosted application | |
KR101936839B1 (ko) | 단말기 장치에서 스크린 캡처 서비스를 제공하는 방법, 장치, 저장 매체 및 기기 | |
US20130141471A1 (en) | Obscuring graphical output on remote displays | |
CN111078078B (zh) | 视频播放控制方法、装置、终端及计算机可读存储介质 | |
JP2015509633A (ja) | アプリケーション表示方法および端末 | |
CN109145813B (zh) | 一种图像匹配算法测试方法和装置 | |
CN110750664A (zh) | 图片的显示方法及装置 | |
JP7261732B2 (ja) | 文字の色を決定する方法および装置 | |
US9830474B2 (en) | Concealing sensitive content from unauthorized users | |
KR101984825B1 (ko) | Api 정보를 이용한 클라우드 디스플레이 화면의 부호화 방법 및 그 장치 | |
WO2020049958A1 (ja) | 情報処理システム、情報処理方法、端末装置および情報処理装置 | |
JP7403115B2 (ja) | 映像送信装置、アプリケーションプログラム及び映像送信方法 | |
CN113228561A (zh) | 在计算环境内提供虚拟桌面 | |
US20140307116A1 (en) | Method and system for managing video recording and/or picture taking in a restricted environment | |
US8818092B1 (en) | Multi-threaded text rendering | |
CN108132767B (zh) | 应用窗口预览方法和系统 | |
KR102324352B1 (ko) | Ai 기반 프로그램 자동 생성 시스템 | |
TWI465912B (zh) | 電子裝置間建立連線之方法 | |
CN107315970B (zh) | 一种敏感数据的交互方法及装置 | |
JP6395971B1 (ja) | グラフィカルコマンドトークンの修正 | |
US20150142795A1 (en) | Configurable media processing with meta effects | |
CN112926420A (zh) | 一种显示设备和菜单文字识别方法 | |
CN112584226B (zh) | 一种共享桌面时的截屏方法和装置 | |
CN112559111B (zh) | 一种共享桌面时的截屏方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220330 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230314 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230605 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230905 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7403115 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |