JP7005161B2 - 電子機器及びその制御方法 - Google Patents
電子機器及びその制御方法 Download PDFInfo
- Publication number
- JP7005161B2 JP7005161B2 JP2017074496A JP2017074496A JP7005161B2 JP 7005161 B2 JP7005161 B2 JP 7005161B2 JP 2017074496 A JP2017074496 A JP 2017074496A JP 2017074496 A JP2017074496 A JP 2017074496A JP 7005161 B2 JP7005161 B2 JP 7005161B2
- Authority
- JP
- Japan
- Prior art keywords
- range
- display
- content
- displayed
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
る。また、全方位画像あるいは全方位ではないにせよ広範囲のデータを有する広範囲画像のパノラマ展開やマッピング処理、変換などの各種画像処理も行う。画像処理部104は特定の画像処理を施すための専用の回路ブロックで構成してもよい。また、画像処理の種別によっては画像処理部104を用いずにCPU101がプログラムに従って画像処理を施すことも可能である。
・タッチパネル106aにタッチしていなかった指やペンが新たにタッチパネル106aにタッチしたこと、すなわち、タッチの開始(以下、タッチダウン(Touch-Down)と称する。)
・タッチパネル106aを指やペンがタッチしている状態であること(以下、タッチオン(Touch-On)と称する)
・指やペンがタッチパネル106aをタッチしたまま移動していること(以下、タッチムーブ(Touch-Move)と称する)
・タッチパネル106aへタッチしていた指やペンがタッチパネル106aから離れた
こと、すなわち、タッチの終了(以下、タッチアップ(Touch-Up)と称する)
・タッチパネル106aに何もタッチしていない状態(以下、タッチオフ(Touch-Off)と称する)
検出部113が電子機器100の姿勢を検出することは、ユーザーの頭部の姿勢(ユーザーの視線が向いている方向)を検出することと同等である。
ら、表示対象となるVR画像を読みこむ。また、VR画像の属性情報として付帯されている映像範囲(有効映像範囲)を示す情報を取得する。有効映像範囲を示す情報とは、VR画像が、上下方向、左右方向にどの角度範囲分の有効な映像を有しているかという情報である。有効映像範囲を示す情報は、VR画像の有効映像範囲を特定できる情報であればよく、画角、視野角、方位角、仰角、俯角、高度角度、ステラジアンなどによって表される角度情報であってもよいし、上下、左右の画素数や座標などの位置情報であってもよい。また、有効映像範囲を示す情報は、VR画像を撮像したカメラの機種情報(機種を特定することで撮影可能な範囲を特定可能)や撮影時のズームの情報等でもよい。CPU101は、有効映像範囲を示す情報を取得すると、上下左右360度との差分で無効映像範囲(非映像範囲)も特定(算出)する。なお、逆に、VR画像の属性情報から無効映像範囲を示す情報を取得し、そこから有効映像範囲を算出してもよいし、有効映像範囲を示す情報と無効映像範囲を示す情報の双方をVR画像の属性情報から取得してもよい。
・暫定表示範囲504の右端と有効映像範囲501の右端との距離a1
・暫定表示範囲504の上端と有効映像範囲501の上端との距離a2
・暫定表示範囲504の左端と有効映像範囲501の左端との距離a3
・暫定表示範囲504の下端と有効映像範囲501の下端との距離a4
hと比較する例を説明したが、これに限るものではない。例えば、距離a1~a4のうち最も短い距離だけを距離Athと比較し、距離Ath以下となった場合にS406に進み、そうでない場合にS405に進むようにしてもよい。また、距離a1~a4のうち、姿勢変化前の表示範囲503から姿勢変化後に算出した暫定表示範囲504への移動方向に応じて、暫定表示範囲504の端が有効映像範囲の端から離れる方向の距離は判定に用いなくてもよい。図示の例では、距離a3については閾値Athと比較しなくともよい。また、距離a1~a4を全て同じ閾値Athと比較するのではなく、距離a1~a4ごとに異なる閾値と比較するようにしてもよい。例えば左右方向の距離a1、a3は距離Ath1と比較し、距離Ath1以下となった場合にS406に進むようにする。上下方向の距離距a2、a4は距離Ath2(<Ath1)と比較し、距離Ath2以下となった場合にS406に進むようにする。そして、それら以外の場合にS405に進むようにする。このようにすれば、以降の処理により、人間が首を大きく動かしやすい方向である左右方向の姿勢の変化の場合は、上下方向の姿勢の変化の場合よりも早めに、表示範囲が有効映像範囲の端に達しそうであることをユーザーに注意喚起することができる。
、現在表示されている範囲(表示範囲)が、VR画像全体におけるどこの範囲(位置関係)であるのかを認識することができる。図5(b2)の例では、白抜き部512が黒塗り部513に近くなっており、これ以上右に視線(表示範囲)を移動するとそろそろ無効映像範囲に達することが分かる。
・暫定表示範囲504の右端が有効映像範囲501の右端を超えている場合(すなわちa1<0の場合):暫定表示範囲504の右端と有効映像範囲501の右端との距離
・暫定表示範囲504の上端が有効映像範囲501の上端を超えている場合(すなわちa2<0の場合):暫定表示範囲504の上端と有効映像範囲501の上端との距離
・暫定表示範囲504の左端が有効映像範囲501の左端を超えている場合(すなわちa3<0の場合):暫定表示範囲504の左端と有効映像範囲501の左端との距離
・暫定表示範囲504の下端が有効映像範囲501の下端を超えている場合は(すなわちa4<0の場合:暫定表示範囲504の下端と有効映像範囲501の下端との距離
ってS408の判定は姿勢に基づいた判定としてもよい。
囲ガイド510において表示範囲が無効映像範囲に重なる。この重なった範囲は、重なっていない範囲と識別可能な表示形態で表示する(図示の例では白塗りとも黒塗りとも異なるグレーで表示している)。
過量が最大幅Bmaxとなる範囲を表示範囲503として表示する。最大幅Bmaxは、表示範囲503の幅よりも小さい値に設定するものとする。有効映像範囲501からの暫定表示範囲504の超過量bが、表示範囲503に含める無効映像範囲の最大幅Bmaxを超え、閾値Bthを超えるまでは、図6(c1)に示す表示範囲503が保持され、図6(c2)のような表示が行われる。このような表示によって、現在表示されている映像の端を超える領域はブランク領域であり、映像が存在しないことをユーザにより直感的に理解させることができる。なおこの時、表示範囲が無効映像範囲に一部重なるため、範囲ガイド510において表示範囲と無効映像範囲とが重なる。この重なった範囲は、重なっていない範囲と識別可能な表示形態で表示する(図示の例では白塗りとも黒塗りとも異なるグレーで表示している)。有効映像範囲501からの暫定表示範囲504の超過量bがBthを超えた場合は前述した通りの処理を行う。
図4で説明したVR表示処理に代えて、図7に示すVR表示処理を行ってもよい。図7におけるVR表示処理は、図4におけるS408とS411の処理の省き、代わりにS711を追加したものである。
と、それ以上同じ方向に姿勢変化があっても表示範囲は移動すること無く停止する。このように、無効映像範囲の幅が閾値Cthより小さいか否かに応じて、表示範囲の端を超えたブランク領域を表示するか、ブランク領域を表示せずに表示範囲が停止するかが異なる。
端に達したためであることが認識できる。従って高負荷処理による処理能力の低下、処理異常、故障などといった他の要因が原因であると誤認識することを防止することができる。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。ま
た、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (10)
- 電子機器であって、
前記電子機器の姿勢を検出する検出手段と、
無効映像範囲を含むコンテンツの一部を画面に表示するように制御し、前記検出手段で検出された姿勢に応じて前記画面に表示される前記コンテンツの一部の位置を変更する表示制御手段と
を有し、
前記検出手段は、360度の姿勢の変化を検出可能であり、
前記検出手段で検出された姿勢に応じて前記画面に表示される前記コンテンツの一部の位置が前記コンテンツの有効映像範囲の一端に達した後、前記コンテンツの有効映像範囲の一端を超えるように前記検出手段で検出された姿勢がさらに所定量よりも大きく変化した場合に、
前記表示制御手段は、前記コンテンツの無効映像範囲に対応する画角が所定の角度未満であれば、前記画面に表示される前記コンテンツの一部の位置を前記コンテンツの有効映像範囲の他端の位置に変更し、
前記表示制御手段は、前記コンテンツの無効映像範囲に対応する画角が前記所定の角度以上であれば、前記画面に表示される前記コンテンツの一部の位置を前記一端の位置から変更しない
ことを特徴とする電子機器。 - ユーザーによる操作を検出する検出手段と、
無効映像範囲を含むコンテンツの一部を画面に表示するように制御し、前記検出手段で検出された前記ユーザーによる操作に応じて前記画面に表示される前記コンテンツの一部の位置を変更する表示制御手段と
を有し、
前記検出手段は、360度分のユーザーによる操作の変化を検出可能であり、
前記検出手段で検出された前記ユーザーによる操作に応じて前記画面に表示される前記コンテンツの一部の位置が前記コンテンツの有効映像範囲の一端に達した後、前記コンテンツの有効映像範囲の一端を超えるように前記検出手段で所定量よりも大きい操作量の前記ユーザーによる操作がさらに検出された場合に、
前記表示制御手段は、前記コンテンツの無効映像範囲に対応する画角が所定の角度未満であれば、前記画面に表示される前記コンテンツの一部の位置を前記コンテンツの有効映像範囲の他端の位置に変更し、
前記表示制御手段は、前記コンテンツの無効映像範囲に対応する画角が前記所定の角度以上であれば、前記画面に表示される前記コンテンツの一部の位置を前記一端の位置から変更しない
ことを特徴とする電子機器。 - 前記所定の角度は、180度である
ことを特徴とする請求項1または2に記載の電子機器。 - 前記表示制御手段は、前記画面に表示される前記コンテンツの一部の位置を前記コンテンツの有効映像範囲の一端の位置から前記コンテンツの有効映像範囲の他端の位置に変更する途中で、ブランク領域を表示するように制御する
ことを特徴とする請求項1乃至3のいずれか1項に記載の電子機器。 - 前記表示制御手段は、前記画面に表示される前記コンテンツの一部の位置が前記コンテンツの一端に達した場合に、その旨を示す通知を前記画面に表示するように制御する
ことを特徴とする請求項1乃至4のいずれか1項に記載の電子機器。 - 前記表示制御手段は、前記画面に表示されるコンテンツの一部とともに、前記画面に表示されるコンテンツの一部と前記コンテンツ全体との位置関係を表す表示アイテムを表示するように制御する
ことを特徴とする請求項1乃至5の何れか1項に記載の電子機器。 - 電子機器の制御方法であって、
前記電子機器の姿勢を検出する検出ステップと、
無効映像範囲を含むコンテンツの一部を画面に表示するように制御し、前記検出ステップで検出された姿勢に応じて前記画面に表示される前記コンテンツの一部の位置を変更する表示制御ステップと
を有し、
前記検出ステップでは、360度の姿勢の変化を検出可能であり、
前記検出ステップで検出された姿勢に応じて前記画面に表示される前記コンテンツの一部の位置が前記コンテンツの有効映像範囲の一端に達した後、前記コンテンツの有効映像範囲の一端を超えるように前記検出ステップで検出された姿勢がさらに所定量よりも大きく変化した場合に、
前記表示制御ステップでは、前記コンテンツの無効映像範囲に対応する画角が所定の角度未満であれば、前記画面に表示される前記コンテンツの一部の位置を前記コンテンツの有効映像範囲の他端の位置に変更し、
前記表示制御ステップでは、前記コンテンツの無効映像範囲に対応する画角が前記所定の角度以上であれば、前記画面に表示される前記コンテンツの一部の位置を前記一端の位置から変更しない
ことを特徴とする電子機器の制御方法。 - ユーザーによる操作を検出する検出ステップと、
無効映像範囲を含むコンテンツの一部を画面に表示するように制御し、前記検出ステップで検出された前記ユーザーによる操作に応じて前記画面に表示される前記コンテンツの一部の位置を変更する表示制御ステップと
を有し、
前記検出ステップでは、360度分のユーザーによる操作の変化を検出可能であり、
前記検出ステップで検出された前記ユーザーによる操作に応じて前記画面に表示される前記コンテンツの一部の位置が前記コンテンツの有効映像範囲の一端に達した後、前記コンテンツの有効映像範囲の一端を超えるように前記検出ステップで所定量よりも大きい操作量の前記ユーザーによる操作がさらに検出された場合に、
前記表示制御ステップでは、前記コンテンツの無効映像範囲の画角が所定の角度未満であれば、前記画面に表示される前記コンテンツの一部の位置を前記コンテンツの有効映像範囲の他端の位置に変更し、
前記表示制御ステップでは、前記コンテンツの無効映像範囲の画角が前記所定の角度以上であれば、前記画面に表示される前記コンテンツの一部の位置を前記一端の位置から変更しない
ことを特徴とする電子機器の制御方法。 - 請求項7または8に記載の制御方法の各ステップをコンピュータに実行させるためののプログラム。
- コンピュータを、請求項7または8に記載の制御方法の各ステップをコンピュータに実行させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017074496A JP7005161B2 (ja) | 2017-04-04 | 2017-04-04 | 電子機器及びその制御方法 |
DE112018001867.9T DE112018001867T5 (de) | 2017-04-04 | 2018-01-26 | Elektronische Vorrichtung und deren Steuerverfahren |
KR1020197031077A KR102278229B1 (ko) | 2017-04-04 | 2018-01-26 | 전자기기 및 그 제어 방법 |
PCT/JP2018/002464 WO2018186004A1 (ja) | 2017-04-04 | 2018-01-26 | 電子機器及びその制御方法 |
CN201880023865.6A CN110494915B (zh) | 2017-04-04 | 2018-01-26 | 电子装置及其控制方法和计算机可读介质 |
GB1914081.3A GB2574780B (en) | 2017-04-04 | 2018-01-26 | Electronic device and control method thereof |
US16/592,035 US11100903B2 (en) | 2017-04-04 | 2019-10-03 | Electronic device and control method for controlling a display range on a display |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017074496A JP7005161B2 (ja) | 2017-04-04 | 2017-04-04 | 電子機器及びその制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018180051A JP2018180051A (ja) | 2018-11-15 |
JP7005161B2 true JP7005161B2 (ja) | 2022-02-04 |
Family
ID=64275226
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017074496A Active JP7005161B2 (ja) | 2017-04-04 | 2017-04-04 | 電子機器及びその制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7005161B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11683464B2 (en) | 2018-12-28 | 2023-06-20 | Canon Kabushiki Kaisha | Electronic device, control method, and non-transitorycomputer readable medium |
JP7208002B2 (ja) * | 2018-12-28 | 2023-01-18 | キヤノン株式会社 | 電子機器及びその制御方法 |
JP7327938B2 (ja) * | 2018-12-28 | 2023-08-16 | キヤノン株式会社 | 電子機器およびその制御方法およびプログラムおよび記憶媒体 |
JP7313822B2 (ja) * | 2018-12-28 | 2023-07-25 | キヤノン株式会社 | 電子機器、その制御方法、プログラム及び記憶媒体 |
JP7278774B2 (ja) * | 2018-12-28 | 2023-05-22 | キヤノン株式会社 | 電子機器及びその制御方法 |
JP7204482B2 (ja) * | 2018-12-28 | 2023-01-16 | キヤノン株式会社 | 電子機器及びその制御方法 |
JP7214475B2 (ja) * | 2018-12-28 | 2023-01-30 | キヤノン株式会社 | 電子機器及びその制御方法 |
JP7267764B2 (ja) * | 2019-02-08 | 2023-05-02 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140333718A1 (en) | 2013-03-26 | 2014-11-13 | Htc Corporation | Panorama photographing method, panorama displaying method, and image capturing method |
WO2016013272A1 (ja) | 2014-07-23 | 2016-01-28 | ソニー株式会社 | 情報処理装置及び情報処理方法、並びに画像表示システム |
-
2017
- 2017-04-04 JP JP2017074496A patent/JP7005161B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140333718A1 (en) | 2013-03-26 | 2014-11-13 | Htc Corporation | Panorama photographing method, panorama displaying method, and image capturing method |
WO2016013272A1 (ja) | 2014-07-23 | 2016-01-28 | ソニー株式会社 | 情報処理装置及び情報処理方法、並びに画像表示システム |
Also Published As
Publication number | Publication date |
---|---|
JP2018180051A (ja) | 2018-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7005161B2 (ja) | 電子機器及びその制御方法 | |
JP3926837B2 (ja) | 表示制御方法および装置、プログラム、並びに携帯機器 | |
US10412379B2 (en) | Image display apparatus having live view mode and virtual reality mode and operating method thereof | |
US20160292922A1 (en) | Display control device, display control method, and recording medium | |
CN108604175B (zh) | 装置和关联方法 | |
KR20170126295A (ko) | 헤드 마운티드 디스플레이 장치 및 그것의 제어방법 | |
US20160291687A1 (en) | Display control device, display control method, and recording medium | |
CN108474950B (zh) | Hmd设备及其控制方法 | |
US9544556B2 (en) | Projection control apparatus and projection control method | |
US10979700B2 (en) | Display control apparatus and control method | |
US11100903B2 (en) | Electronic device and control method for controlling a display range on a display | |
JP7005160B2 (ja) | 電子機器及びその制御方法 | |
JP2021089382A (ja) | 電子機器、電子機器の制御方法、プログラム、記憶媒体 | |
CN111381750B (zh) | 电子装置及其控制方法和计算机可读存储介质 | |
JP7187307B2 (ja) | 電子機器及びその制御方法 | |
US20200257396A1 (en) | Electronic device and control method therefor | |
US11036287B2 (en) | Electronic device, control method for electronic device, and non-transitory computer readable medium | |
JP7278773B2 (ja) | 電子機器及びその制御方法 | |
JP7118383B1 (ja) | 表示システム、表示方法、及び表示プログラム | |
WO2019102885A1 (ja) | 画像の表示部分を変更可能な電子機器 | |
JP2021128234A (ja) | 電子機器及びその制御方法 | |
CN112578983A (zh) | 手指取向触摸检测 | |
CN114424151A (zh) | 用于vr和ar环境中的基于手的用户交互的装置和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20181116 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200403 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210608 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210914 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220105 |