JP2017503198A5 - - Google Patents

Download PDF

Info

Publication number
JP2017503198A5
JP2017503198A5 JP2016540004A JP2016540004A JP2017503198A5 JP 2017503198 A5 JP2017503198 A5 JP 2017503198A5 JP 2016540004 A JP2016540004 A JP 2016540004A JP 2016540004 A JP2016540004 A JP 2016540004A JP 2017503198 A5 JP2017503198 A5 JP 2017503198A5
Authority
JP
Japan
Prior art keywords
determining
projection target
content
area
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016540004A
Other languages
English (en)
Other versions
JP6317452B2 (ja
JP2017503198A (ja
Filing date
Publication date
Priority claimed from US14/136,310 external-priority patent/US9484005B2/en
Application filed filed Critical
Publication of JP2017503198A publication Critical patent/JP2017503198A/ja
Publication of JP2017503198A5 publication Critical patent/JP2017503198A5/ja
Application granted granted Critical
Publication of JP6317452B2 publication Critical patent/JP6317452B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (32)

  1. 投影ターゲットを、前記ターゲットに関連付けられた情報に基づいて、1つまたは複数のフレーム内のオブジェクトを認識するためのオブジェクト認識を使用することによって決定するステップと、
    前記投影ターゲットの1つまたは複数の範囲を決定するステップと、
    1つまたは複数のプロセッサによって、コンテンツが投影されることになるコンテンツエリアと、コンテンツが投影されないことになる空きエリアとを決定するステップであって、前記コンテンツエリアおよび前記空きエリアは、前記1つまたは複数の範囲に基づいて決定され、前記コンテンツエリアはさらに、前記オブジェクトに関連付けられた指定コンテンツエリアに基づいて決定されるステップと、
    前記1つまたは複数のプロセッサによって、スケーリングファクタを決定するステップと、
    前記スケーリングファクタに基づいて、前記コンテンツエリア内に投影するためのコンテンツを生成するステップと、
    前記空きエリアを生成するステップと
    を含む方法。
  2. 前記投影ターゲットの1つまたは複数の範囲を決定するステップが、
    前記投影ターゲットの1つまたは複数の画像を受信するステップと、
    前記1つまたは複数の画像から、前記投影ターゲットの形状を決定するステップと
    を含む、請求項1に記載の方法。
  3. 前記投影ターゲットの前記決定された形状に基づいて、前記投影ターゲットのアウトラインを決定するステップをさらに含む、請求項2に記載の方法。
  4. 前記1つまたは複数の画像に基づいて、前記投影ターゲットを含むエリアの深度マップを決定するステップをさらに含む、請求項2に記載の方法。
  5. スケーリングファクタを決定するステップが、前記決定された深度マップに基づいて、前記投影ターゲットまでの距離を決定するステップを含む、請求項4に記載の方法。
  6. 前記投影ターゲットの形状を決定するステップが、前記決定された深度マップ内の背景から前記投影ターゲットをセグメント化するステップを含む、請求項4に記載の方法。
  7. 前記空きエリアを生成するステップが、前記投影ターゲットの前記決定された形状に基づいて、仮想マスクを作成するステップを含む、請求項2に記載の方法。
  8. プロジェクタによって、前記決定されたコンテンツエリア内で前記投影ターゲット上で前記生成されたコンテンツを投影するステップをさらに含む、請求項1に記載の方法。
  9. プロジェクタによって、前記生成された空きエリアを投影するステップをさらに含む、請求項1に記載の方法。
  10. 前記生成された空きエリアを投影するステップが、暗いピクセルを投影するステップを含む、請求項9に記載の方法。
  11. 前記投影ターゲットを追跡するステップと、
    前記追跡するステップに基づいて、前記決定されたコンテンツエリアと前記決定された空きエリアとを調整するステップと
    をさらに含む、請求項1に記載の方法。
  12. ジェスチャを検出するステップと、
    前記検出されたジェスチャに基づいて、前記空きエリアがエリアを有していないと決定するステップと
    をさらに含む、請求項1に記載の方法。
  13. ジェスチャを検出するステップと、
    前記検出されたジェスチャに基づいて、第2の投影ターゲットを決定するステップと、
    前記第2の投影ターゲットの1つまたは複数の範囲を決定するステップと、
    前記第2の投影ターゲットの前記決定された1つまたは複数の範囲に基づいて、第2のコンテンツエリアと第2の空きエリアとを決定するステップと、
    前記第2の投影ターゲットまでの距離に基づいて、第2のスケーリングファクタを決定するステップと、
    投影デバイスによって、前記決定されたコンテンツエリア内で前記第2の投影ターゲット上にコンテンツを投影するステップと
    をさらに含む、請求項1に記載の方法。
  14. 投影ターゲットの1つまたは複数の投影パラメータに基づいて、コンテンツエリアと空きエリアとを投影するように構成されたプロジェクタであって、前記投影ターゲットは、前記ターゲットに関連付けられた情報に基づいて、1つまたは複数のフレーム内のオブジェクトを認識するためのオブジェクト認識を使用することによって決定され、前記コンテンツエリアはさらに、前記オブジェクトに関連付けられた指定コンテンツエリアに基づいて決定される、プロジェクタと、
    前記投影ターゲットを含む視野の1つまたは複数の画像をキャプチャするように構成されたカメラと、
    前記プロジェクタおよび前記カメラに結合された、1つまたは複数のプロセッサであって、前記1つまたは複数の投影パラメータを決定するように構成された、1つまたは複数のプロセッサと、
    前記1つまたは複数のプロセッサに結合されたメモリと
    を備える装置。
  15. 前記1つまたは複数のプロセッサが、前記1つまたは複数の画像を処理すること、および、前記投影ターゲットまでの距離と、前記投影ターゲットの形状と、前記投影ターゲットのアウトラインとを決定することによって、前記1つまたは複数の投影パラメータを決定するように構成される、請求項14に記載の装置。
  16. 前記空きエリアが、前記コンテンツエリアの決定されたアウトラインの外側に投影された暗いピクセルを備える、請求項14に記載の装置。
  17. 前記カメラが、デジタルライトプロセッシング(DLP)プロジェクタ、レーザービームステアリング(LBS)プロジェクタ、リキッドクリスタルオンシリコン(LCoS)プロジェクタのうちの少なくとも1つを備える、請求項14に記載の装置。
  18. 前記カメラが、ユーザによって行われたジェスチャをキャプチャするようにさらに構成される、請求項14に記載の装置。
  19. 前記ジェスチャが、プライベートモードとパブリックモードとの間で切り替えるためのジェスチャを含む、請求項18に記載の装置。
  20. 投影ターゲットを、前記ターゲットに関連付けられた情報に基づいて、1つまたは複数のフレーム内のオブジェクトを認識するためのオブジェクト認識を使用することによって決定するための手段と、
    前記投影ターゲットの1つまたは複数の範囲を決定するための手段と、
    前記決定された1つまたは複数の範囲に基づいて、コンテンツが投影されることになるコンテンツエリアと、コンテンツが投影されないことになる空きエリアとを決定するための手段であって、前記コンテンツエリアはさらに、前記オブジェクトに関連付けられた指定コンテンツエリアに基づいて決定される、手段と、
    スケーリングファクタを決定するための手段と、
    前記スケーリングファクタに基づいて、前記コンテンツエリア内に投影するためのコンテンツを生成するための手段と、
    前記空きエリアを生成するための手段と
    を備えるシステム。
  21. 前記投影ターゲットの1つまたは複数の範囲を決定するための前記手段が、
    前記投影ターゲットの1つまたは複数の画像を受信するための手段と、
    前記1つまたは複数の画像から、前記投影ターゲットの形状を決定するための手段と
    を備える、請求項20に記載のシステム。
  22. 前記1つまたは複数の画像に基づいて、前記投影ターゲットを含むエリアの深度マップを決定するための手段をさらに備える、請求項21に記載のシステム。
  23. 前記決定されたコンテンツエリア内で前記投影ターゲット上で前記生成されたコンテンツを投影するための手段をさらに備える、請求項20に記載のシステム。
  24. 前記生成された空きエリアを投影するための手段をさらに備える、請求項20に記載のシステム。
  25. 前記投影ターゲットを追跡するための手段と、
    前記追跡に基づいて、前記決定されたコンテンツエリアと前記決定された空きエリアとを調整するための手段と
    をさらに備える、請求項20に記載のシステム。
  26. ジェスチャを検出するための手段と、
    前記検出されたジェスチャに基づいて、前記空きエリアがエリアを有していないと決定するための手段と
    をさらに備える、請求項20に記載のシステム。
  27. ジェスチャを検出するための手段と、
    前記検出されたジェスチャに基づいて、第2の投影ターゲットを決定するための手段と、
    前記第2の投影ターゲットの1つまたは複数の範囲を決定するための手段と、
    前記第2の投影ターゲットの前記決定された1つまたは複数の範囲に基づいて、第2のコンテンツエリアと第2の空きエリアとを決定するための手段と、
    前記第2の投影ターゲットまでの距離に基づいて、第2のスケーリングファクタを決定するための手段と、
    投影デバイスによって、前記決定されたコンテンツエリア内で前記第2の投影ターゲット上にコンテンツを投影するための手段と
    をさらに備える、請求項20に記載のシステム。
  28. 1つまたは複数のプロセッサによって実行されると、前記1つまたは複数のプロセッサを含むシステムに、
    投影ターゲットを、前記ターゲットに関連付けられた情報に基づいて、1つまたは複数のフレーム内のオブジェクトを認識するためのオブジェクト認識を使用することによって決定するステップであって、前記コンテンツエリアはさらに、前記オブジェクトに関連付けられた指定コンテンツエリアに基づいて決定される、ステップと、
    前記投影ターゲットの1つまたは複数の範囲を決定するステップと、
    1つまたは複数のプロセッサによって、前記決定された1つまたは複数の範囲に基づいて、コンテンツが投影されることになる前記コンテンツエリアと、コンテンツが投影されないことになる空きエリアとを決定するステップと、
    前記1つまたは複数のプロセッサによって、スケーリングファクタを決定するステップと、
    前記スケーリングファクタに基づいて、前記コンテンツエリア内に投影するためのコンテンツを生成するステップと、
    前記空きエリアを生成するステップと
    を含む方法を実行させる命令を含む、非一時的コンピュータ可読記憶媒体。
  29. 前記ターゲットに関連付けられた前記情報が、ユーザによって提供された情報、コンテンツプロバイダによって提供された情報、小売業者によって提供された情報、または製造業者によって提供された情報のうちの少なくとも1つを備える、請求項1に記載の方法。
  30. 前記ターゲットに関連付けられた前記情報が、ユーザによって提供された情報、コンテンツプロバイダによって提供された情報、小売業者によって提供された情報、または製造業者によって提供された情報のうちの少なくとも1つを備える、請求項14に記載の装置。
  31. 前記ターゲットに関連付けられた前記情報が、ユーザによって提供された情報、コンテンツプロバイダによって提供された情報、小売業者によって提供された情報、または製造業者によって提供された情報のうちの少なくとも1つを備える、請求項20に記載のシステム。
  32. 前記ターゲットに関連付けられた前記情報が、ユーザによって提供された情報、コンテンツプロバイダによって提供された情報、小売業者によって提供された情報、または製造業者によって提供された情報のうちの少なくとも1つを備える、請求項28に記載の非一時的コンピュータ可読記憶媒体。
JP2016540004A 2013-12-20 2014-12-09 ターゲット上に投影するためのコンテンツをトリミングするための方法、装置、システム及び非一時的コンピュータ可読記憶媒体 Active JP6317452B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/136,310 2013-12-20
US14/136,310 US9484005B2 (en) 2013-12-20 2013-12-20 Trimming content for projection onto a target
PCT/US2014/069197 WO2015094785A1 (en) 2013-12-20 2014-12-09 Trimming content for projection onto a target

Publications (3)

Publication Number Publication Date
JP2017503198A JP2017503198A (ja) 2017-01-26
JP2017503198A5 true JP2017503198A5 (ja) 2017-03-23
JP6317452B2 JP6317452B2 (ja) 2018-04-25

Family

ID=52358969

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016540004A Active JP6317452B2 (ja) 2013-12-20 2014-12-09 ターゲット上に投影するためのコンテンツをトリミングするための方法、装置、システム及び非一時的コンピュータ可読記憶媒体

Country Status (6)

Country Link
US (1) US9484005B2 (ja)
EP (1) EP3085080A1 (ja)
JP (1) JP6317452B2 (ja)
KR (1) KR101842075B1 (ja)
CN (1) CN105830439B (ja)
WO (1) WO2015094785A1 (ja)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6176014B2 (ja) * 2013-09-12 2017-08-09 カシオ計算機株式会社 投影装置、投影制御方法及びプログラム
KR102324398B1 (ko) * 2014-09-17 2021-11-10 삼성전자 주식회사 전자 장치 및 이의 화면 표시 제어 방법
US9396400B1 (en) * 2015-07-30 2016-07-19 Snitch, Inc. Computer-vision based security system using a depth camera
JP6512058B2 (ja) * 2015-10-08 2019-05-15 富士通株式会社 投影装置、映像投影方法及び映像投影用コンピュータプログラム
US10197998B2 (en) 2015-12-27 2019-02-05 Spin Master Ltd. Remotely controlled motile device system
US11062383B2 (en) 2016-05-10 2021-07-13 Lowe's Companies, Inc. Systems and methods for displaying a simulated room and portions thereof
US20190221184A1 (en) * 2016-07-29 2019-07-18 Mitsubishi Electric Corporation Display device, display control device, and display control method
DE102016215746A1 (de) * 2016-08-23 2018-03-01 Robert Bosch Gmbh Projektor mit berührungsfreier Steuerung
US11226704B2 (en) * 2016-09-29 2022-01-18 Sony Group Corporation Projection-based user interface
CN106507076A (zh) * 2016-11-25 2017-03-15 重庆杰夫与友文化创意有限公司 一种投影方法、装置及系统
US20180225477A1 (en) 2017-02-07 2018-08-09 International Business Machines Corporation Device display security with user-specified filtering of display contents
US20180278835A1 (en) * 2017-03-21 2018-09-27 Honeywell International Inc. Systems and methods for enabling dynamic privacy zones in the field of view of a security camera based on motion detection
CN107464271A (zh) * 2017-07-18 2017-12-12 山东捷瑞数字科技股份有限公司 一种为展示内容动态添加投影遮罩的方法
JP2019060963A (ja) * 2017-09-25 2019-04-18 ソニー株式会社 表示処理装置、表示処理方法及びプログラム
US10339718B1 (en) * 2017-12-29 2019-07-02 Verizon Patent And Licensing Inc. Methods and systems for projecting augmented reality content
JP7073817B2 (ja) * 2018-03-19 2022-05-24 セイコーエプソン株式会社 投写装置および投写方法
US10643362B2 (en) * 2018-03-26 2020-05-05 Lenovo (Singapore) Pte Ltd Message location based on limb location
CN110507983A (zh) * 2018-05-21 2019-11-29 仁宝电脑工业股份有限公司 互动式投影系统和互动式投影方法
KR102558106B1 (ko) * 2018-05-30 2023-07-21 엘지디스플레이 주식회사 디스플레이 패널, 디스플레이 장치 및 가상 현실/증강 현실 장치
JP2021144064A (ja) * 2018-06-06 2021-09-24 ソニーグループ株式会社 情報処理装置、情報処理方法及びプログラム
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
US11393170B2 (en) 2018-08-21 2022-07-19 Lenovo (Singapore) Pte. Ltd. Presentation of content based on attention center of user
CN111182278B (zh) * 2018-11-09 2022-06-14 上海云绅智能科技有限公司 一种投影展示管理方法及系统
CN110032328A (zh) * 2018-12-06 2019-07-19 阿里巴巴集团控股有限公司 一种操作对象的尺寸调节方法及装置
US10789780B1 (en) * 2019-03-29 2020-09-29 Konica Minolta Laboratory U.S.A., Inc. Eliminating a projected augmented reality display from an image
US11710310B2 (en) 2019-06-19 2023-07-25 Apple Inc. Virtual content positioned based on detected object
US10948997B1 (en) * 2019-12-20 2021-03-16 Facebook Technologies, Llc Artificial reality notification triggers
WO2021142601A1 (en) * 2020-01-14 2021-07-22 Citrix Systems, Inc. Content resolution adjustment for passive display devices
CN111338591B (zh) * 2020-02-25 2022-04-12 京东方科技集团股份有限公司 一种虚拟现实显示设备及显示方法
CN113391503A (zh) * 2020-03-11 2021-09-14 苏州佳世达光电有限公司 投影机及投影方法
TWI733436B (zh) * 2020-05-06 2021-07-11 微星科技股份有限公司 等比例投影方法及裝置
CN111754575B (zh) * 2020-06-30 2022-04-29 成都极米科技股份有限公司 对象定位方法、投影方法、装置和投影仪
JP7023022B1 (ja) * 2021-02-04 2022-02-21 Fairy Devices株式会社 首掛け型装置及び遠隔作業支援システム
US11836205B2 (en) 2022-04-20 2023-12-05 Meta Platforms Technologies, Llc Artificial reality browser configured to trigger an immersive experience
US11755180B1 (en) 2022-06-22 2023-09-12 Meta Platforms Technologies, Llc Browser enabled switching between virtual worlds in artificial reality
KR20240079996A (ko) * 2022-11-29 2024-06-05 삼성전자주식회사 복수의 영역들 내에 미디어 콘텐트 및 사용자 인터페이스를 표시하기 위한 전자 장치 및 그 방법

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6597410B1 (en) * 1999-11-10 2003-07-22 International Business Machines Corporation System for the automatic adaptation of projector images and a method for the implementation thereof
US6753907B1 (en) * 1999-12-23 2004-06-22 Justsystem Corporation Method and apparatus for automatic keystone correction
JP4009851B2 (ja) * 2002-05-20 2007-11-21 セイコーエプソン株式会社 投写型画像表示システム、プロジェクタ、プログラム、情報記憶媒体および画像投写方法
JP2006508475A (ja) * 2002-11-29 2006-03-09 ブラッコ イメージング ソチエタ ペル アチオニ 三次元表示装置におけるスケーリング制御装置とその方法
JP3882929B2 (ja) * 2004-03-29 2007-02-21 セイコーエプソン株式会社 画像処理システム、プロジェクタおよび画像処理方法
US7268893B2 (en) * 2004-11-12 2007-09-11 The Boeing Company Optical projection system
JP4379532B2 (ja) * 2007-07-26 2009-12-09 パナソニック電工株式会社 照明装置
EP2327059B1 (en) 2008-10-02 2014-08-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Intermediate view synthesis and multi-view data signal extraction
US9569001B2 (en) * 2009-02-03 2017-02-14 Massachusetts Institute Of Technology Wearable gestural interface
CN102449680B (zh) * 2009-05-26 2014-05-21 松下电器产业株式会社 信息呈现装置
US8745494B2 (en) * 2009-05-27 2014-06-03 Zambala Lllp System and method for control of a simulated object that is associated with a physical location in the real world environment
EP2474167A4 (en) 2009-09-01 2014-12-10 Prime Focus Vfx Services Ii Inc SYSTEM AND PROCESS FOR TRANSFORMING TWO-DIMENSIONAL IMAGES TO THREE-DIMENSIONAL IMAGES
US8121618B2 (en) * 2009-10-28 2012-02-21 Digimarc Corporation Intuitive computing methods and systems
JP2011188023A (ja) * 2010-03-04 2011-09-22 Sony Corp 情報処理装置、情報処理方法およびプログラム
JPWO2011114420A1 (ja) * 2010-03-15 2013-06-27 Necディスプレイソリューションズ株式会社 投射型表示装置およびその制御方法
CN102959616B (zh) * 2010-07-20 2015-06-10 苹果公司 自然交互的交互真实性增强
JP5541031B2 (ja) 2010-09-16 2014-07-09 セイコーエプソン株式会社 プロジェクター、およびプロジェクターの制御方法
US9122053B2 (en) 2010-10-15 2015-09-01 Microsoft Technology Licensing, Llc Realistic occlusion for a head mounted augmented reality display
US8884984B2 (en) 2010-10-15 2014-11-11 Microsoft Corporation Fusing virtual content into real content
US9213405B2 (en) 2010-12-16 2015-12-15 Microsoft Technology Licensing, Llc Comprehension and intent-based content for augmented reality displays
US8928735B2 (en) * 2011-06-14 2015-01-06 Microsoft Corporation Combined lighting, projection, and image capture without video feedback
US8933970B2 (en) * 2012-09-11 2015-01-13 Longsand Limited Controlling an augmented reality object
US9179232B2 (en) * 2012-09-17 2015-11-03 Nokia Technologies Oy Method and apparatus for associating audio objects with content and geo-location
US9569892B2 (en) * 2013-09-26 2017-02-14 Qualcomm Incorporated Image capture input and projection output

Similar Documents

Publication Publication Date Title
JP2017503198A5 (ja)
JP2016540267A5 (ja)
US9906772B2 (en) Method for performing multi-camera capturing control of an electronic device, and associated apparatus
JP2016522889A5 (ja)
JP2016529959A5 (ja)
US9412153B2 (en) Using depth for recovering missing information in an image
SG10201709781TA (en) Display apparatus and method of displaying using projectors
JP6094775B2 (ja) ビデオコンテンツ処理方法及びシステム
WO2017222671A3 (en) Depth image provision apparatus and method
MY181550A (en) Building height calculation method, device, and storage medium
JP2016509705A5 (ja)
JP2017500766A5 (ja)
MX2016003874A (es) Metodo y aparato para determinar parametro espacial basado en imagen y dispositivo de terminal.
WO2013028280A3 (en) Dynamic selection of surfaces in real world for projection of information thereon
JP2017208677A5 (ja)
US10809053B2 (en) Movement assisting device, movement assisting method, and computer program product
TWI545508B (zh) 用於執行臉部追蹤功能的方法及其電子裝置
JP2015068858A5 (ja)
US9774833B2 (en) Projector auto-focus correction with the aid of a camera
WO2016101524A1 (zh) 纠正被摄物体拍摄倾斜方法、装置及移动终端、存储介质
JP2017169074A5 (ja)
JP2017072795A5 (ja)
JP2014055999A5 (ja)
JP2018514977A5 (ja)
JP2015082806A5 (ja) 情報処理装置及びその制御方法、並びにプログラム