JP2013243702A5 - プログラム、記録媒体及び符号化方式決定方法 - Google Patents
プログラム、記録媒体及び符号化方式決定方法 Download PDFInfo
- Publication number
- JP2013243702A5 JP2013243702A5 JP2013134169A JP2013134169A JP2013243702A5 JP 2013243702 A5 JP2013243702 A5 JP 2013243702A5 JP 2013134169 A JP2013134169 A JP 2013134169A JP 2013134169 A JP2013134169 A JP 2013134169A JP 2013243702 A5 JP2013243702 A5 JP 2013243702A5
- Authority
- JP
- Japan
- Prior art keywords
- frame
- encoding
- target frame
- target
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000875 corresponding Effects 0.000 claims description 23
- 238000011156 evaluation Methods 0.000 claims description 13
- 238000000034 method Methods 0.000 claims description 11
Description
本発明は、プログラム、記録媒体及び符号化方式決定方法に関し、特に符号化動画データのストリーミング配信技術に関する。
本発明は、上述の問題点に鑑みてなされたものであり、描画処理により得られた画面を高速かつ効率的に動画符号化するプログラム、記録媒体及び符号化方式決定方法を提供することを目的とする。
前述の目的を達成するために、本発明の少なくとも１つの実施形態に係るプログラムは、コンピュータに、符号化対象の対象フレーム及び符号化に係り参照される参照フレームの各々について、各フレームの画像の描画に用いられた視点情報と、各フレームの画像の描画において生成された深度バッファとを取得する処理と、対象フレームの深度バッファに定義された領域内の評価画素について、参照フレームの深度バッファにおける評価画素に対応する対応画素の位置と、該対応画素の推定深度値とを、対象フレーム及び参照フレームの各々について取得された視点情報及び対象フレームの深度バッファに基づいて特定する処理と、推定深度値と参照フレームの深度バッファの対応画素の深度値とに基づいて、評価画素が含まれる領域と対応する対象フレームの画像の対象ブロックに使用する符号化方式を決定する処理と、を実行させる。
前述の目的を達成するために、本発明の少なくとも１つの実施形態に係る符号化方式決定方法は、符号化対象の対象フレーム及び符号化に係り参照される参照フレームの各々について、各フレームの画像の描画に用いられた視点情報と、各フレームの画像の描画において生成された深度バッファとを取得する工程と、対象フレームの深度バッファに定義された領域内の評価画素について、参照フレームの深度バッファにおける評価画素に対応する対応画素の位置と、該対応画素の推定深度値とを、対象フレーム及び参照フレームの各々について取得された視点情報及び対象フレームの深度バッファに基づいて特定する工程と、推定深度値と参照フレームの深度バッファの対応画素の深度値とに基づいて、評価画素が含まれる領域と対応する対象フレームの画像の対象ブロックに使用する符号化方式を決定する工程と、を有する。
Claims (9)
- コンピュータに、
符号化対象の対象フレーム及び符号化に係り参照される参照フレームの各々について、各フレームの画像の描画に用いられた視点情報と、各フレームの画像の描画において生成された深度バッファとを取得する処理と、
前記対象フレームの深度バッファに定義された領域内の評価画素について、前記参照フレームの深度バッファにおける前記評価画素に対応する対応画素の位置と、該対応画素の推定深度値とを、前記対象フレーム及び前記参照フレームの各々について取得された視点情報及び前記対象フレームの深度バッファに基づいて特定する処理と、
前記推定深度値と前記参照フレームの深度バッファの前記対応画素の深度値とに基づいて、前記評価画素が含まれる領域と対応する前記対象フレームの画像の対象ブロックに使用する符号化方式を決定する処理と、
を実行させるプログラム。 - 前記決定する処理は、
前記推定深度値と前記対応画素の深度値とを同一でないと判断する場合に、前記対象フレームのみを用いる第１符号化方式を前記対象ブロックに使用すると決定し、
前記推定深度値と前記対応画素の深度値とを同一であると判断する場合に、前記対象フレームと前記参照フレームとを用いる第２の符号化方式を前記対象ブロックに使用すると決定する請求項１に記載のプログラム。 - 前記評価画素は、前記定義された領域の各々について複数設定され、
前記決定する処理は、前記推定深度値と前記対応画素の深度値とを同一であると判断する前記評価画素の数が閾値を上回った場合に、前記第２の符号化方式を前記対象ブロックに使用することを決定する請求項２に記載のプログラム。 - 前記定義された領域は矩形状であり、
前記第２の符号化方式は、前記定義された矩形状の領域の頂点に対応する画素の位置に基づいて前記参照フレームの画像から生成される、前記対象ブロックと同じ画素数を有する画像を参照画像として使用する符号化方式である請求項２または３に記載のプログラム。 - 前記コンピュータは、決定された符号化方式に基づいて前記対象フレームを符号化する符号化手段と、前記符号化手段により符号化された前記対象フレームとを取得して前記対象フレームを復号する復号手段と、に接続され、
前記プログラムは、前記対象ブロックについて決定された符号化方式を示す情報を前記符号化手段と前記復号手段とに出力する処理を、前記コンピュータにさらに実行させる請求項１乃至４のいずれか１項に記載のプログラム。 - 前記出力する処理は、前記符号化方式を示す情報に加え、前記対象フレームの視点情報及び深度バッファを前記復号手段に出力する請求項５に記載のプログラム。
- 前記出力する処理は、前記復号手段への出力を、前記符号化手段による前記対象フレームの符号化処理と並行して行う請求項５または６に記載のプログラム。
- 請求項１乃至７のいずれか１項に記載のプログラムを記録したコンピュータが読み取り可能な記録媒体。
- 符号化対象の対象フレーム及び符号化に係り参照される参照フレームの各々について、各フレームの画像の描画に用いられた視点情報と、各フレームの画像の描画において生成された深度バッファとを取得する工程と、
前記対象フレームの深度バッファに定義された領域内の評価画素について、前記参照フレームの深度バッファにおける前記評価画素に対応する対応画素の位置と、該対応画素の推定深度値とを、前記対象フレーム及び前記参照フレームの各々について取得された視点情報及び前記対象フレームの深度バッファに基づいて特定する工程と、
前記推定深度値と前記参照フレームの深度バッファの前記対応画素の深度値とに基づいて、前記評価画素が含まれる領域と対応する前記対象フレームの画像の対象ブロックに使用する符号化方式を決定する工程と、
を有する符号化方式決定方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013134169A JP5833599B2 (ja) | 2012-02-23 | 2013-06-26 | プログラム、記録媒体及び符号化方式決定方法 |
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012037769 | 2012-02-23 | ||
| JP2012037769 | 2012-02-23 | ||
| JP2012100328 | 2012-04-25 | ||
| JP2012100328 | 2012-04-25 | ||
| JP2013134169A JP5833599B2 (ja) | 2012-02-23 | 2013-06-26 | プログラム、記録媒体及び符号化方式決定方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013519908A Division JP5307958B1 (ja) | 2012-02-23 | 2013-02-20 | 動画配信サーバ、動画再生装置、制御方法、プログラム、及び記録媒体 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2013243702A JP2013243702A (ja) | 2013-12-05 |
| JP2013243702A5 true JP2013243702A5 (ja) | 2015-02-19 |
| JP5833599B2 JP5833599B2 (ja) | 2015-12-16 |
Family
ID=49005415
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013519908A Active JP5307958B1 (ja) | 2012-02-23 | 2013-02-20 | 動画配信サーバ、動画再生装置、制御方法、プログラム、及び記録媒体 |
| JP2013134169A Active JP5833599B2 (ja) | 2012-02-23 | 2013-06-26 | プログラム、記録媒体及び符号化方式決定方法 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013519908A Active JP5307958B1 (ja) | 2012-02-23 | 2013-02-20 | 動画配信サーバ、動画再生装置、制御方法、プログラム、及び記録媒体 |
Country Status (7)
| Country | Link |
|---|---|
| US (2) | US8988501B2 (ja) |
| EP (1) | EP2672452B1 (ja) |
| JP (2) | JP5307958B1 (ja) |
| KR (1) | KR20140133770A (ja) |
| CN (1) | CN103392189B (ja) |
| CA (1) | CA2821830A1 (ja) |
| WO (1) | WO2013125220A1 (ja) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2668822C (en) | 1996-08-08 | 2011-03-15 | Hitachi Chemical Company, Ltd. | Graphite particles and lithium secondary cell using them as negative electrode |
| US8872888B2 (en) | 2010-10-01 | 2014-10-28 | Sony Corporation | Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system |
| KR20150003406A (ko) | 2012-04-12 | 2015-01-08 | 가부시키가이샤 스퀘어.에닉스.홀딩스 | 동화상 배포 서버, 동화상 재생 장치, 제어 방법, 기록 매체, 및 동화상 배포 시스템 |
| US20150188977A1 (en) * | 2013-11-04 | 2015-07-02 | Google Inc. | Verifying Content Rendering on a Client Device |
| EP3125125A4 (en) | 2014-03-24 | 2018-07-25 | Square Enix Co., Ltd. | Interactive system, terminal device, server device, control method, program, and recording medium |
| US10225546B2 (en) * | 2016-02-26 | 2019-03-05 | Qualcomm Incorporated | Independent multi-resolution coding |
| CN107527375A (zh) * | 2016-06-20 | 2017-12-29 | 北京八亿时空信息工程有限公司 | 在无线智能终端设备上加载三维模型的方法及系统 |
| US10560678B2 (en) * | 2016-11-09 | 2020-02-11 | Mediatek Inc. | Method and apparatus having video encoding function with syntax element signaling of rotation information of content-oriented rotation applied to 360-degree image content or 360-degree video content represented in projection format and associated method and apparatus having video decoding function |
| WO2019098092A1 (ja) * | 2017-11-15 | 2019-05-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 符号化装置、復号装置、符号化方法及び復号方法 |
| US10572748B2 (en) * | 2017-12-06 | 2020-02-25 | GM Global Technology Operations LLC | Autonomous vehicle adaptive parallel image processing system |
| GB2571306A (en) * | 2018-02-23 | 2019-08-28 | Sony Interactive Entertainment Europe Ltd | Video recording and playback systems and methods |
| US10972738B2 (en) * | 2018-03-29 | 2021-04-06 | Mediatek Inc. | Video encoding apparatus having reconstruction buffer with fixed size and/or bandwidth limitation and associated video encoding method |
| CN110365980A (zh) * | 2019-09-02 | 2019-10-22 | 移康智能科技（上海）股份有限公司 | 动态调整图像编码区域的方法 |
| JP7439556B2 (ja) * | 2020-02-14 | 2024-02-28 | オムロン株式会社 | 画像処理装置、画像センサ、画像処理装置の制御方法 |
| CN111651131B (zh) * | 2020-05-18 | 2024-02-27 | 武汉联影医疗科技有限公司 | 图像的显示方法、装置和计算机设备 |
| JP7410413B2 (ja) * | 2021-04-02 | 2024-01-10 | 株式会社カプコン | 情報処理システム、情報処理端末およびプログラム |
| CN114466174B (zh) * | 2022-01-21 | 2023-04-28 | 南方科技大学 | 一种多视点3d图像编码方法、设备、系统和存储介质 |
| CN117596394B (zh) * | 2024-01-18 | 2024-05-24 | 之江实验室 | 一种自适应精度的深度图帧间压缩方法 |
Family Cites Families (48)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2821792B2 (ja) | 1990-04-04 | 1998-11-05 | 鹿島建設株式会社 | 型枠装置 |
| CA2144253C (en) * | 1994-04-01 | 1999-09-21 | Bruce F. Naylor | System and method of generating compressed video graphics images |
| JP3287977B2 (ja) * | 1995-04-28 | 2002-06-04 | 松下電器産業株式会社 | 動きベクトル検出方法および装置と動画像符号化方法および装置 |
| US6167088A (en) * | 1998-04-03 | 2000-12-26 | Sarnoff Corporation | Method and apparatus for performing adaptive encoding rate control of a video information stream including 3:2 pull-down video information |
| US7024466B2 (en) | 2000-04-07 | 2006-04-04 | Movielink, Llc | Network configured for delivery of content for download to a recipient |
| US7155415B2 (en) | 2000-04-07 | 2006-12-26 | Movielink Llc | Secure digital content licensing system and method |
| EP1277305B1 (en) | 2000-04-07 | 2011-09-21 | Blockbuster LLC | Secure digital content licensing system and method |
| US20020073033A1 (en) | 2000-04-07 | 2002-06-13 | Sherr Scott Jeffrey | Online digital video signal transfer apparatus and method |
| US20020154157A1 (en) | 2000-04-07 | 2002-10-24 | Sherr Scott Jeffrey | Website system and process for selection and delivery of electronic information on a network |
| US20020032905A1 (en) | 2000-04-07 | 2002-03-14 | Sherr Scott Jeffrey | Online digital video signal transfer apparatus and method |
| US6868191B2 (en) | 2000-06-28 | 2005-03-15 | Telefonaktiebolaget Lm Ericsson (Publ) | System and method for median fusion of depth maps |
| FI109633B (fi) | 2001-01-24 | 2002-09-13 | Gamecluster Ltd Oy | Menetelmä videokuvan pakkauksen nopeuttamiseksi ja/tai sen laadun parantamiseksi |
| US6741259B2 (en) | 2001-03-30 | 2004-05-25 | Webtv Networks, Inc. | Applying multiple texture maps to objects in three-dimensional imaging processes |
| JP2002369205A (ja) * | 2001-06-06 | 2002-12-20 | Matsushita Electric Ind Co Ltd | 動画像生成装置 |
| CN1656465B (zh) | 2002-03-22 | 2010-05-26 | 迈克尔·F·迪林 | 用于由多个互连节点执行渲染计算来渲染图形的方法和系统 |
| US6975329B2 (en) | 2002-12-09 | 2005-12-13 | Nvidia Corporation | Depth-of-field effects using texture lookup |
| EP1588327B1 (en) | 2003-01-17 | 2018-09-26 | Koninklijke Philips N.V. | Full depth map acquisition |
| GB2406184B (en) | 2003-09-17 | 2006-03-15 | Advanced Risc Mach Ltd | Data processing system |
| US20090027383A1 (en) | 2003-11-19 | 2009-01-29 | Lucid Information Technology, Ltd. | Computing system parallelizing the operation of multiple graphics processing pipelines (GPPLs) and supporting depth-less based image recomposition |
| JP4242318B2 (ja) * | 2004-04-26 | 2009-03-25 | 任天堂株式会社 | ３次元画像生成装置および３次元画像生成プログラム |
| US7558428B2 (en) | 2004-09-13 | 2009-07-07 | Microsoft Corporation | Accelerated video encoding using a graphics processing unit |
| JP2007251543A (ja) * | 2006-03-15 | 2007-09-27 | Seiko Epson Corp | 表示制御装置、その制御方法、情報再生装置及び電子機器 |
| JP4735471B2 (ja) | 2006-08-16 | 2011-07-27 | ソニー株式会社 | 復号処理装置及び復号処理方法並びに復号処理プログラム |
| ES2439444T3 (es) * | 2006-10-30 | 2014-01-23 | Nippon Telegraph And Telephone Corporation | Método de codificación y método de descodificación de vídeo, aparatos para los mismos, programas para los mismos y medios de almacenamiento que almacenan los programas |
| JP4357537B2 (ja) | 2007-02-26 | 2009-11-04 | 富士通株式会社 | 配信経路制御装置 |
| JP4931223B2 (ja) * | 2007-03-30 | 2012-05-16 | 株式会社バンダイナムコゲームス | 動きベクトル探索プログラム、情報記憶媒体、動きベクトル探索装置、及び、ネットワークシステム |
| KR100918862B1 (ko) * | 2007-10-19 | 2009-09-28 | 광주과학기술원 | 참조영상을 이용한 깊이영상 생성방법 및 그 장치, 생성된깊이영상을 부호화/복호화하는 방법 및 이를 위한인코더/디코더, 그리고 상기 방법에 따라 생성되는 영상을기록하는 기록매체 |
| WO2009058600A1 (en) | 2007-11-02 | 2009-05-07 | Symbol Technologies, Inc. | Efficient encoding and decoding of mixed data strings in rfid tags and other media |
| EP2364190B1 (en) | 2008-05-12 | 2018-11-21 | GameFly Israel Ltd. | Centralized streaming game server |
| US8154553B2 (en) | 2008-05-22 | 2012-04-10 | Playcast Media System, Ltd. | Centralized streaming game server |
| US8264493B2 (en) | 2008-05-12 | 2012-09-11 | Playcast Media Systems, Ltd. | Method and system for optimized streaming game server |
| CN101291415B (zh) * | 2008-05-30 | 2010-07-21 | 华为终端有限公司 | 一种三维视频通信的方法、装置及系统 |
| US9973739B2 (en) | 2008-10-17 | 2018-05-15 | Nokia Technologies Oy | Sharing of motion vector in 3D video coding |
| EP2184713A1 (en) | 2008-11-04 | 2010-05-12 | Koninklijke Philips Electronics N.V. | Method and device for generating a depth map |
| US8429269B2 (en) | 2009-12-09 | 2013-04-23 | Sony Computer Entertainment Inc. | Server-side rendering |
| JP4815004B2 (ja) * | 2010-04-16 | 2011-11-16 | シャープ株式会社 | 多視点画像符号化装置 |
| EP2384001A1 (en) | 2010-04-29 | 2011-11-02 | Alcatel Lucent | Providing of encoded video applications in a network environment |
| TW201230818A (en) | 2010-11-26 | 2012-07-16 | Panasonic Corp | Image encoding method, image decoding method, image encoding device, image decoding device, program, and integrated circuit |
| US9565449B2 (en) | 2011-03-10 | 2017-02-07 | Qualcomm Incorporated | Coding multiview video plus depth content |
| JP5076132B1 (ja) | 2011-05-25 | 2012-11-21 | 株式会社スクウェア・エニックス・ホールディングス | 描画制御装置、その制御方法、プログラム、記録媒体、描画サーバ、及び描画システム |
| ES2869204T3 (es) | 2011-06-24 | 2021-10-25 | Mitsubishi Electric Corp | Dispositivo de codificación de imágenes, dispositivo de decodificación de imágenes, método de codificación de imágenes, método de decodificación de imágenes |
| US9044677B2 (en) * | 2011-07-11 | 2015-06-02 | Roblox Corporation | System for optimizing processing capacity for a group of gaming appliances engaged in play of an online game |
| JP5155462B2 (ja) * | 2011-08-17 | 2013-03-06 | 株式会社スクウェア・エニックス・ホールディングス | 動画配信サーバ、動画再生装置、制御方法、プログラム、及び記録媒体 |
| TW201320716A (zh) | 2011-11-01 | 2013-05-16 | Acer Inc | 動態景深調整裝置及其方法 |
| EP2781091B1 (en) | 2011-11-18 | 2020-04-08 | GE Video Compression, LLC | Multi-view coding with efficient residual handling |
| WO2013107931A1 (en) | 2012-01-19 | 2013-07-25 | Nokia Corporation | An apparatus, a method and a computer program for video coding and decoding |
| KR20150003406A (ko) | 2012-04-12 | 2015-01-08 | 가부시키가이샤 스퀘어.에닉스.홀딩스 | 동화상 배포 서버, 동화상 재생 장치, 제어 방법, 기록 매체, 및 동화상 배포 시스템 |
| KR101664758B1 (ko) | 2012-09-21 | 2016-10-10 | 노키아 테크놀로지스 오와이 | 비디오 코딩 방법 및 장치 |
-
2013
- 2013-02-20 JP JP2013519908A patent/JP5307958B1/ja active Active
- 2013-02-20 EP EP13733944.6A patent/EP2672452B1/en active Active
- 2013-02-20 CA CA2821830A patent/CA2821830A1/en not_active Abandoned
- 2013-02-20 KR KR1020137022055A patent/KR20140133770A/ko not_active Application Discontinuation
- 2013-02-20 CN CN201380000762.5A patent/CN103392189B/zh active Active
- 2013-02-20 WO PCT/JP2013/000957 patent/WO2013125220A1/ja active Application Filing
- 2013-06-26 JP JP2013134169A patent/JP5833599B2/ja active Active
- 2013-07-10 US US13/938,612 patent/US8988501B2/en active Active
-
2015
- 2015-02-11 US US14/619,540 patent/US9491433B2/en active Active
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2013243702A5 (ja) | プログラム、記録媒体及び符号化方式決定方法 | |
| JP2016111695A5 (ja) | ||
| JP2013527693A5 (ja) | ||
| JP2016517682A5 (ja) | ||
| JP2017511620A5 (ja) | ||
| JP2017508349A5 (ja) | ||
| JP2018509032A5 (ja) | ||
| RU2014123342A (ru) | Способ кодирования и декодирования изображений, устройство кодирования и декодирования и соответсвующие компьютерные программы | |
| JP2015534776A5 (ja) | ||
| JP2011151838A5 (ja) | ||
| JP2014158305A5 (ja) | ||
| JP2013232935A5 (ja) | ||
| JP2018530963A5 (ja) | ||
| JP2014116912A5 (ja) | ||
| RU2014138042A (ru) | Способ и система уменьшения локализованных артефактов в данных визуализации | |
| JP2015532061A5 (ja) | ||
| JP2013254480A5 (ja) | ||
| JP2015520581A5 (ja) | ||
| EP2797051A3 (en) | Image saliency map determination device, method, program, and recording medium | |
| JP2015019152A5 (ja) | ||
| JP2014099904A5 (ja) | ||
| JP2014131141A5 (ja) | 符号化装置、符号化方法、及びプログラム | |
| JP2014053945A5 (ja) | Ｍｐｅｇ−４ビデオ信号を復号する方法、非一時的なコンピュータ可読記憶媒体、復号器およびプログラム | |
| JP2012239085A5 (ja) | ||
| JP2013161405A5 (ja) | 被写体判定装置、被写体判定方法及びプログラム |