RU2015102056A - Электронное устройство и способ для отрисовки панорамного изображения - Google Patents

Электронное устройство и способ для отрисовки панорамного изображения Download PDF

Info

Publication number
RU2015102056A
RU2015102056A RU2015102056A RU2015102056A RU2015102056A RU 2015102056 A RU2015102056 A RU 2015102056A RU 2015102056 A RU2015102056 A RU 2015102056A RU 2015102056 A RU2015102056 A RU 2015102056A RU 2015102056 A RU2015102056 A RU 2015102056A
Authority
RU
Russia
Prior art keywords
image
fragment
rendering result
transparent layer
intermediate rendering
Prior art date
Application number
RU2015102056A
Other languages
English (en)
Other versions
RU2606310C2 (ru
Inventor
Кирилл Сергеевич Дмитренко
Original Assignee
Общество С Ограниченной Ответственностью "Яндекс"
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Общество С Ограниченной Ответственностью "Яндекс" filed Critical Общество С Ограниченной Ответственностью "Яндекс"
Priority to RU2015102056A priority Critical patent/RU2606310C2/ru
Priority to PCT/IB2015/052563 priority patent/WO2016116782A1/en
Priority to US15/526,445 priority patent/US20180300854A1/en
Publication of RU2015102056A publication Critical patent/RU2015102056A/ru
Application granted granted Critical
Publication of RU2606310C2 publication Critical patent/RU2606310C2/ru

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/04—Texture mapping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/08—Volume rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/50—Lighting effects
    • G06T15/503—Blending, e.g. for anti-aliasing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/08—Bandwidth reduction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00—Indexing scheme for image rendering
    • G06T2215/12—Shadow map, environment map
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

1. Электронное устройство (208) для отрисовки панорамного изображения, содержащего первый фрагмент (310) изображения и второй фрагмент (308) изображения, содержащее:постоянный носитель (120, 130) компьютерной информации; экран (142);сетевой интерфейс (150), позволяющий обмен данными с удаленным сервером (222); ипроцессор (110, 111), выполненный с возможностью:получения от удаленного сервера первого (310) фрагмента изображения; создания первого промежуточного результата (404) отрисовки с помощью связывания первого фрагмента (310) изображения с первым прозрачным слоем (410);сохранения на постоянном носителе (120, 130) первого промежуточного результата (404) отрисовки;после получения команды отрисовать не менее части панорамного изображения:доступа к сохраненному на постоянном носителе (120, 130) первому промежуточному результату (404) отрисовки; доступа к сохраненному на постоянном носителе (120, 130) второму промежуточному результату (414) отрисовки, содержащему второй фрагмент (308) изображения, связанный со вторым прозрачным слоем (420);объединения первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки для отрисовки части панорамного изображения; и отображения на экране (142) части панорамного изображения.2. Устройство (208) по п. 1, в котором первый фрагмент (310) изображения является первым треугольным фрагментом, а второй фрагмент (308) изображения является вторым треугольным фрагментом.3. Устройство (208) по п. 1, в котором первый прозрачный слой (410) имеет ширину и высоту, полностью вмещающие первый фрагмент (310) изображения, а второй прозрачный слой (420) имеет ширину и высоту, полностью вмещающие второй фрагмент (308) изображения.4. Устройство (208) по п. 1, в котором первый прозрачный слой (410) и второй прозрачный слой (420)

Claims (34)

1. Электронное устройство (208) для отрисовки панорамного изображения, содержащего первый фрагмент (310) изображения и второй фрагмент (308) изображения, содержащее:
постоянный носитель (120, 130) компьютерной информации; экран (142);
сетевой интерфейс (150), позволяющий обмен данными с удаленным сервером (222); и
процессор (110, 111), выполненный с возможностью:
получения от удаленного сервера первого (310) фрагмента изображения; создания первого промежуточного результата (404) отрисовки с помощью связывания первого фрагмента (310) изображения с первым прозрачным слоем (410);
сохранения на постоянном носителе (120, 130) первого промежуточного результата (404) отрисовки;
после получения команды отрисовать не менее части панорамного изображения:
доступа к сохраненному на постоянном носителе (120, 130) первому промежуточному результату (404) отрисовки; доступа к сохраненному на постоянном носителе (120, 130) второму промежуточному результату (414) отрисовки, содержащему второй фрагмент (308) изображения, связанный со вторым прозрачным слоем (420);
объединения первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки для отрисовки части панорамного изображения; и отображения на экране (142) части панорамного изображения.
2. Устройство (208) по п. 1, в котором первый фрагмент (310) изображения является первым треугольным фрагментом, а второй фрагмент (308) изображения является вторым треугольным фрагментом.
3. Устройство (208) по п. 1, в котором первый прозрачный слой (410) имеет ширину и высоту, полностью вмещающие первый фрагмент (310) изображения, а второй прозрачный слой (420) имеет ширину и высоту, полностью вмещающие второй фрагмент (308) изображения.
4. Устройство (208) по п. 1, в котором первый прозрачный слой (410) и второй прозрачный слой (420) имеют прямоугольную форму.
5. Устройство (208) по п. 1, в котором процессор выполнен с возможностью соединения первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки посредством отрисовки части панорамного изображения, отображаемого на экране (142).
6. Устройство (208) по п. 1, в котором процессор выполнен с возможностью объединения первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки посредством объединения первого фрагмента (310) изображения и второго фрагмента (308) изображения только при необходимости отображения первого фрагмента (310) изображения и второго фрагмента (308) изображения на экране (142).
7. Устройство (208) по п. 1, в котором процессор (110, 111) выполнен с возможностью определения необходимости отображения части панорамного изображения на экране (142) и при недостаточности первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки, хранящихся в постоянном носителе (120, 130) компьютерной информации, для отрисовки части панорамного изображения, которое должно быть отображено на экране (142), осуществления:
запроса третьего информационного фрагмента, связанного с панорамным изображением у удаленного сервера (222);
получения от удаленного сервера (222) третьего фрагмента изображения;
создания третьего промежуточного результата отрисовки посредством объединения третьего информационного фрагмента с третьим прозрачным слоем; при этом третий промежуточный результат отрисовки содержит третий фрагмент изображения, связанный с третьим прозрачным слоем;
сохранения на постоянном носителе (120, 130) третьего промежуточного результата отрисовки;
доступа к сохраненному на постоянном носителе (120, 130) компьютерной информации третьему промежуточному результату отрисовки; и
объединения первого, второго и третьего промежуточных результатов отрисовки для отрисовки части панорамного изображения, которое должно быть отображено.
8. Устройство (208) по п. 1, в котором получение команды отрисовать панорамное изображение происходит в ответ на получение команды отображения от удаленного сервера (222) и взаимодействия пользователя (170) с электронным устройством (208).
9. Устройство (208) по п. 1, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит по меньшей мере частичное преобразование первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки в двухмерную поверхность или в трехмерную поверхность.
10. Устройство (208) по п. 1, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит по меньшей мере частичное сопоставление первого фрагмента (310) изображения и второго фрагмента (308) изображения на двухмерной поверхности или на трехмерной поверхности.
11. Устройство (208) по п. 1, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит по меньшей мере частичное наложение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414).
12. Устройство (208) по п. 1, в котором первый фрагмент (310) изображения и второй фрагмент (308) изображения отвечают соответствующей части сферы, связанной с панорамным изображением.
13. Устройство (208) по п. 1, в котором процессор выполнен с возможностью при объединении первого фрагмента (310) изображения с первым прозрачным слоем (410) выполнения наложения первого фрагмента (310) изображения на первый прозрачный слой (410).
14. Устройство (208) по п. 1, в котором процессор выполнен с возможностью объединения первого фрагмента (310) изображения с первым прозрачным слоем (410) выполнением объединения первого фрагмента (310) с контуром-сеткой, связанным с панорамным изображением.
15. Устройство (208) по п. 1, в котором панорамное изображение представляет собой двухмерное изображение или объемное изображение.
16. Устройство (208) по п. 1, в котором первый прозрачный слой (410) и второй прозрачный слой (420) представляют собой один и тот же прозрачный слой.
17. Устройство (208) по п. 1, в котором первый прозрачный слой (410) и второй прозрачный слой (420) являются двумя разными прозрачными слоями.
18. Способ (800) для отрисовки панорамного изображения, содержащего первый фрагмент (310) изображения и второй фрагмент (308) изображения включающий:
получение первого фрагмента (802) изображения;
создание (804) процессором (110, 111) первого промежуточного результата (404) отрисовки с помощью объединения первого фрагмента (310) изображения с первым прозрачным слоем (410);
сохранение (806) на постоянном носителе (120, 130) компьютерной информации первого промежуточного результата (404) отрисовки;
после получения (808) команды отрисовать не менее части панорамного изображения, выполнение:
доступа (810) к сохраненному на постоянном носителе (120, 130) первому промежуточному результату (404) отрисовки;
доступа (812) к сохраненному на постоянном носителе (120, 130) второму промежуточному результату (414) отрисовки, содержащему второй фрагмент (308) изображения, связанный со вторым прозрачным слоем (420);
объединение (814) первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки для отрисовки части панорамного изображения; и
отображение (816) на экране (142) части панорамного изображения.
19. Способ по п. 18, в котором первый фрагмент (310) изображения является первым треугольным фрагментом, а второй фрагмент (308) изображения является вторым треугольным фрагментом.
20. Способ по пп. 18 и 19, в котором используют первый прозрачный слой (410) с шириной и высотой, полностью вмещающей первый фрагмент (310) изображения, и используют второй прозрачный слой (420) с шириной и высотой, полностью вмещающей второй фрагмент изображения.
21. Способ по п. 18, в котором используют первый прозрачный слой (410) и второй прозрачный слой (420) прямоугольной формы.
22. Способ по п. 18, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки сводится к отрисовке части панорамного изображения, которое будет отображено на экране (142).
23. Способ по п. 18, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит
объединение первого фрагмента (310) изображения и второго фрагмента (308) изображения только при необходимости отображения первого и второго фрагмента изображения на экране (142).
24. Способ по п. 18, в котором определяют необходимость отображения части панорамного изображения на экране (142) и при недостатке первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки, хранящихся в постоянном носителе (120, 130), для отрисовки части панорамного изображения, и выполняют:
запрос третьего информационного фрагмента, связанного с панорамным изображением;
получение третьего фрагмента изображения;
создание третьего промежуточного результата отрисовки с помощью объединения третьего информационного фрагмента с третьим прозрачным слоем; при этом третий промежуточный результат отрисовки содержит третий фрагмент изображения, связанный с третьим прозрачным слоем;
сохранение на постоянном носителе (120, 130) первого промежуточного результата (404) отрисовки;
доступ к сохраненному на постоянном носителе (120, 130) третьему промежуточному результату отрисовки; и
объединение первого промежуточного результата (404) отрисовки, второго промежуточного результата (414) отрисовки и третьего промежуточного результата отрисовки для отрисовки части панорамного изображения, которое должно быть отображено.
25. Способ по п. 18, в котором получают команду отрисовать панорамное изображение при получении команды отображения от удаленного сервера (222) и взаимодействия пользователя с электронным устройством (208).
26. Способ по п. 18, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит по меньшей мере частичное преобразование первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки в двухмерную поверхность или в трехмерную поверхность.
27. Способ по п. 18, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит по меньшей мере частичное сопоставление первого фрагмента (310) изображения и
второго фрагмента (308) изображения на двухмерной поверхности или на трехмерной поверхности.
28. Способ по п. 18, в котором объединение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414) отрисовки содержит по меньшей мере частичное наложение первого промежуточного результата (404) отрисовки и второго промежуточного результата (414).
29. Способ по п. 18, в котором используют первый фрагмент (310) изображения и второй фрагмент (308) изображения, отвечающие соответствующей части сферы, связанной с панорамным изображением.
30. Способ по п. 18, в котором объединение первого фрагмента (310) изображения с первым прозрачным слоем (410) включает наложение первого фрагмента (310) изображения на первый прозрачный слой (410).
31. Способ по п. 18, в котором объединение первого фрагмента (310) изображения с первым прозрачным слоем (410) включает объединение первого фрагмента (310) с контуром-сеткой, связанным с панорамным изображением.
32. Способ по п. 18, в котором используют в качестве панорамного изображения двухмерное изображение или объемное изображение.
33. Способ по п. 18, в котором в качестве первого прозрачного слоя (410) и второго прозрачного слоя (420) используют один и тот же прозрачный слой.
34. Способ по п. 18, в котором в качестве первого прозрачного слоя (410) и второго прозрачного слоя (420) используют два различных прозрачных слоя.
RU2015102056A 2015-01-23 2015-01-23 Электронное устройство и способ для отрисовки панорамного изображения RU2606310C2 (ru)

Priority Applications (3)

Application Number Priority Date Filing Date Title
RU2015102056A RU2606310C2 (ru) 2015-01-23 2015-01-23 Электронное устройство и способ для отрисовки панорамного изображения
PCT/IB2015/052563 WO2016116782A1 (en) 2015-01-23 2015-04-08 Method and electronic device for rendering a panorama image
US15/526,445 US20180300854A1 (en) 2015-01-23 2015-04-08 Method and electronic device for rendering a panorama image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2015102056A RU2606310C2 (ru) 2015-01-23 2015-01-23 Электронное устройство и способ для отрисовки панорамного изображения

Publications (2)

Publication Number Publication Date
RU2015102056A true RU2015102056A (ru) 2016-08-20
RU2606310C2 RU2606310C2 (ru) 2017-01-10

Family

ID=56416472

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2015102056A RU2606310C2 (ru) 2015-01-23 2015-01-23 Электронное устройство и способ для отрисовки панорамного изображения

Country Status (3)

Country Link
US (1) US20180300854A1 (ru)
RU (1) RU2606310C2 (ru)
WO (1) WO2016116782A1 (ru)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107230179A (zh) * 2017-04-27 2017-10-03 北京小鸟看看科技有限公司 全景图像的存储方法、展示方法及设备
US11170563B2 (en) * 2018-01-04 2021-11-09 8259402 Canada Inc. Immersive environment with digital environment to enhance depth sensation
CN109493410B (zh) * 2018-09-25 2023-05-16 叠境数字科技（上海）有限公司 一种千兆级像素图像的实时渲染方法
WO2020084778A1 (ja) * 2018-10-26 2020-04-30 株式会社ソニー・インタラクティブエンタテインメント コンテンツ再生装置、画像データ出力装置、コンテンツ作成装置、コンテンツ再生方法、画像データ出力方法、およびコンテンツ作成方法
US11330030B2 (en) * 2019-07-25 2022-05-10 Dreamworks Animation Llc Network resource oriented data communication

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6369830B1 (en) * 1999-05-10 2002-04-09 Apple Computer, Inc. Rendering translucent layers in a display system
KR101089489B1 (ko) * 2003-11-18 2011-12-02 스칼라도 아베 디지털 이미지 처리 방법 및 이미지 표현 포맷
US7734412B2 (en) * 2006-11-02 2010-06-08 Yahoo! Inc. Method of client side map rendering with tiled vector data
DE202008018626U1 (de) * 2007-05-25 2017-01-31 Google Inc. System zum Betrachten von Panoramabildern
US8217956B1 (en) * 2008-02-29 2012-07-10 Adobe Systems Incorporated Method and apparatus for rendering spherical panoramas
EP2643820B1 (en) * 2010-11-24 2018-01-24 Google LLC Rendering and navigating photographic panoramas with depth information in a geographic information system
US8810626B2 (en) * 2010-12-20 2014-08-19 Nokia Corporation Method, apparatus and computer program product for generating panorama images
US9245373B2 (en) * 2012-12-04 2016-01-26 Nintendo Co., Ltd. Caching in map systems for displaying panoramic images

Also Published As

Publication number Publication date
RU2606310C2 (ru) 2017-01-10
WO2016116782A1 (en) 2016-07-28
US20180300854A1 (en) 2018-10-18

Similar Documents

Publication Publication Date Title
US10026230B2 (en) Augmented point cloud for a visualization system and method
US8817046B2 (en) Color channels and optical markers
US10223839B2 (en) Virtual changes to a real object
KR102208773B1 (ko) 파노라마 영상 압축 방법 및 장치
RU2015102056A (ru) Электронное устройство и способ для отрисовки панорамного изображения
US20150356770A1 (en) Street view map display method and system
US9361731B2 (en) Method and apparatus for displaying video on 3D map
JP5757592B2 (ja) 超解像画像を生成する方法，装置，コンピュータプログラム製品
CN104850388B (zh) 网页绘制方法及装置
US20170186243A1 (en) Video Image Processing Method and Electronic Device Based on the Virtual Reality
KR102049456B1 (ko) 광 필드 영상을 생성하는 방법 및 장치
CN108876706A (zh) 根据全景图像的缩略图生成
WO2018133757A1 (zh) 场景的渲染方法、装置和存储介质
KR20130089649A (ko) 3차원 이미지에서 컨텐츠를 검열하는 방법 및 장치
KR102238573B1 (ko) 감소된 왜곡을 갖는 물체의 3차원 재구성을 생성하기 위한 방법 및 장치
WO2018113339A1 (zh) 一种投影图构建方法及装置
EP2692140A2 (en) Real-time depth extraction using stereo correspondence
JP2018180654A (ja) 情報処理装置、画像生成方法及びプログラム
CN107079139A (zh) 没有物理触发的增强现实
JP2013149219A (ja) 映像処理装置及びその制御方法
US20160163057A1 (en) Three-Dimensional Shape Capture Using Non-Collinear Display Illumination
JP2023115088A5 (ru)
JP2018519733A5 (ru)
JP6168872B2 (ja) 画像処理装置、画像処理方法及びプログラム
Hao et al. Interactive image completion with perspective constraint