JP7496412B2 - 画像表示システム、画像処理装置、画像表示方法、およびコンピュータプログラム - Google Patents

画像表示システム、画像処理装置、画像表示方法、およびコンピュータプログラム Download PDF

Info

Publication number
JP7496412B2
JP7496412B2 JP2022512924A JP2022512924A JP7496412B2 JP 7496412 B2 JP7496412 B2 JP 7496412B2 JP 2022512924 A JP2022512924 A JP 2022512924A JP 2022512924 A JP2022512924 A JP 2022512924A JP 7496412 B2 JP7496412 B2 JP 7496412B2
Authority
JP
Japan
Prior art keywords
image
display
data
frame
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022512924A
Other languages
English (en)
Japanese (ja)
Other versions
JPWO2021199184A5 (enrdf_load_stackoverflow
JPWO2021199184A1 (enrdf_load_stackoverflow
Inventor
活志 大塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of JPWO2021199184A1 publication Critical patent/JPWO2021199184A1/ja
Publication of JPWO2021199184A5 publication Critical patent/JPWO2021199184A5/ja
Application granted granted Critical
Publication of JP7496412B2 publication Critical patent/JP7496412B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20112—Image segmentation details
    • G06T2207/20132—Image cropping

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
JP2022512924A 2020-03-30 2020-03-30 画像表示システム、画像処理装置、画像表示方法、およびコンピュータプログラム Active JP7496412B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/014619 WO2021199184A1 (ja) 2020-03-30 2020-03-30 画像表示システム、画像処理装置、画像表示方法、およびコンピュータプログラム

Publications (3)

Publication Number Publication Date
JPWO2021199184A1 JPWO2021199184A1 (enrdf_load_stackoverflow) 2021-10-07
JPWO2021199184A5 JPWO2021199184A5 (enrdf_load_stackoverflow) 2022-12-15
JP7496412B2 true JP7496412B2 (ja) 2024-06-06

Family

ID=77927049

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022512924A Active JP7496412B2 (ja) 2020-03-30 2020-03-30 画像表示システム、画像処理装置、画像表示方法、およびコンピュータプログラム

Country Status (3)

Country Link
US (1) US12101561B2 (enrdf_load_stackoverflow)
JP (1) JP7496412B2 (enrdf_load_stackoverflow)
WO (1) WO2021199184A1 (enrdf_load_stackoverflow)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112799773B (zh) * 2021-02-23 2025-03-28 京东方科技集团股份有限公司 一种数据可视化方法、终端设备、系统和存储介质
EP4064691A1 (en) * 2021-03-23 2022-09-28 Ricoh Company, Ltd. Communication management device, image communication system, communication management method, and carrier means
US12132634B2 (en) * 2021-10-21 2024-10-29 At&T Intellectual Property I, L.P. Managing extended reality experience
US12190007B1 (en) * 2022-06-28 2025-01-07 Apple Inc. Pre-processing crop of immersive video
KR20240125363A (ko) * 2023-02-10 2024-08-19 삼성전자주식회사 단말 예측 기반 스플릿 렌더링 방법 및 장치
US20240374998A1 (en) * 2023-05-08 2024-11-14 Sony Interactive Entertainment Inc. Filling in frames using prediction for when connection drops

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008219156A (ja) 2007-02-28 2008-09-18 Sony Corp 画像配信システムと画像配信装置、画像配信方法、プログラムおよび記録媒体
JP2012033038A (ja) 2010-07-30 2012-02-16 Fujitsu Ltd 模擬映像生成装置、方法、プログラム
WO2015068656A1 (ja) 2013-11-11 2015-05-14 株式会社ソニー・コンピュータエンタテインメント 画像生成装置および画像生成方法
WO2015122052A1 (ja) 2014-02-17 2015-08-20 株式会社ソニー・コンピュータエンタテインメント 画像送信装置、情報処理端末、画像送信方法、情報処理方法、プログラム及び情報記憶媒体
WO2015182189A1 (ja) 2014-05-28 2015-12-03 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
WO2017199859A1 (ja) 2016-05-18 2017-11-23 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
WO2017208957A1 (ja) 2016-06-01 2017-12-07 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置、画像生成システム、および画像生成方法
WO2017221784A1 (ja) 2016-06-21 2017-12-28 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置、画像生成システム、および画像生成方法
WO2018079166A1 (ja) 2016-10-26 2018-05-03 ソニー株式会社 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム
JP2018166279A (ja) 2017-03-28 2018-10-25 Kddi株式会社 クライアント状態に応じた映像を配信する映像配信装置、システム、プログラム及び方法
WO2019013016A1 (ja) 2017-07-13 2019-01-17 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
WO2019026765A1 (ja) 2017-08-02 2019-02-07 株式会社ソニー・インタラクティブエンタテインメント レンダリング装置、ヘッドマウントディスプレイ、画像伝送方法、および画像補正方法
WO2019116994A1 (ja) 2017-12-12 2019-06-20 株式会社ソニー・インタラクティブエンタテインメント 画像補正装置、画像補正方法およびプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05324799A (ja) * 1992-05-15 1993-12-07 Hitachi Ltd バーチャルリアリティ制御方法および装置
JP5324799B2 (ja) 2008-02-29 2013-10-23 三菱重工業株式会社 プリンタ装置、および誤印字防止制御方法
JP2012160904A (ja) * 2011-01-31 2012-08-23 Sony Corp 情報処理装置、情報処理方法、プログラム、及び撮像装置
US9392102B2 (en) * 2011-08-23 2016-07-12 Samsung Electronics Co., Ltd. Apparatus and method for providing panoramic view during video telephony and video messaging
GB2527503A (en) * 2014-06-17 2015-12-30 Next Logic Pty Ltd Generating a sequence of stereoscopic images for a head-mounted display
JP6632443B2 (ja) 2016-03-23 2020-01-22 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
US10395418B2 (en) * 2017-08-18 2019-08-27 Microsoft Technology Licensing, Llc Techniques for predictive prioritization of image portions in processing graphics
WO2019122493A1 (en) * 2017-12-19 2019-06-27 Nokia Technologies Oy Gaze dependent foveated rendering apparatus, method, computer program and system

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008219156A (ja) 2007-02-28 2008-09-18 Sony Corp 画像配信システムと画像配信装置、画像配信方法、プログラムおよび記録媒体
JP2012033038A (ja) 2010-07-30 2012-02-16 Fujitsu Ltd 模擬映像生成装置、方法、プログラム
WO2015068656A1 (ja) 2013-11-11 2015-05-14 株式会社ソニー・コンピュータエンタテインメント 画像生成装置および画像生成方法
WO2015122052A1 (ja) 2014-02-17 2015-08-20 株式会社ソニー・コンピュータエンタテインメント 画像送信装置、情報処理端末、画像送信方法、情報処理方法、プログラム及び情報記憶媒体
WO2015182189A1 (ja) 2014-05-28 2015-12-03 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
WO2017199859A1 (ja) 2016-05-18 2017-11-23 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
WO2017208957A1 (ja) 2016-06-01 2017-12-07 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置、画像生成システム、および画像生成方法
WO2017221784A1 (ja) 2016-06-21 2017-12-28 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置、画像生成システム、および画像生成方法
WO2018079166A1 (ja) 2016-10-26 2018-05-03 ソニー株式会社 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム
JP2018166279A (ja) 2017-03-28 2018-10-25 Kddi株式会社 クライアント状態に応じた映像を配信する映像配信装置、システム、プログラム及び方法
WO2019013016A1 (ja) 2017-07-13 2019-01-17 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
WO2019026765A1 (ja) 2017-08-02 2019-02-07 株式会社ソニー・インタラクティブエンタテインメント レンダリング装置、ヘッドマウントディスプレイ、画像伝送方法、および画像補正方法
WO2019116994A1 (ja) 2017-12-12 2019-06-20 株式会社ソニー・インタラクティブエンタテインメント 画像補正装置、画像補正方法およびプログラム

Also Published As

Publication number Publication date
WO2021199184A1 (ja) 2021-10-07
US20230139216A1 (en) 2023-05-04
US12101561B2 (en) 2024-09-24
JPWO2021199184A1 (enrdf_load_stackoverflow) 2021-10-07

Similar Documents

Publication Publication Date Title
JP7496412B2 (ja) 画像表示システム、画像処理装置、画像表示方法、およびコンピュータプログラム
JP7429512B2 (ja) 画像処理装置、画像データ転送装置、画像処理方法、および画像データ転送方法
US12363309B2 (en) Image data transfer apparatus and image compression
JP7389602B2 (ja) 画像表示システム、画像処理装置、および動画配信方法
JP7555698B2 (ja) 画像データ転送装置および画像データ転送方法
JP7498553B2 (ja) 画像処理装置、画像表示システム、画像データ転送装置、および画像処理方法
JP7496677B2 (ja) 画像データ転送装置、画像表示システム、および画像圧縮方法
JP7491676B2 (ja) 画像データ転送装置および画像圧縮方法
JP7362903B2 (ja) 画像データ転送装置、画像表示システム、および画像データ転送方法
US10769754B2 (en) Virtual reality cinema-immersive movie watching for headmounted displays
JP7393267B2 (ja) 画像データ転送装置、画像表示システム、および画像データ転送方法
JP7555277B2 (ja) 画像表示システム、表示装置、および画像表示方法
JP7441936B2 (ja) 画像データ転送装置、画像生成方法およびコンピュータプログラム
CN119563158A (zh) 扩展现实编码

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220930

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240514

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240527

R150 Certificate of patent or registration of utility model

Ref document number: 7496412

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150