JP2010219786A5 - - Google Patents

Download PDF

Info

Publication number
JP2010219786A5
JP2010219786A5 JP2009063228A JP2009063228A JP2010219786A5 JP 2010219786 A5 JP2010219786 A5 JP 2010219786A5 JP 2009063228 A JP2009063228 A JP 2009063228A JP 2009063228 A JP2009063228 A JP 2009063228A JP 2010219786 A5 JP2010219786 A5 JP 2010219786A5
Authority
JP
Japan
Prior art keywords
image processing
importance
processing apparatus
image
pixel blocks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009063228A
Other languages
Japanese (ja)
Other versions
JP5210212B2 (en
JP2010219786A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2009063228A priority Critical patent/JP5210212B2/en
Priority claimed from JP2009063228A external-priority patent/JP5210212B2/en
Publication of JP2010219786A publication Critical patent/JP2010219786A/en
Publication of JP2010219786A5 publication Critical patent/JP2010219786A5/ja
Application granted granted Critical
Publication of JP5210212B2 publication Critical patent/JP5210212B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明の目的を達成するために、例えば、本発明の画像処理装置は以下の構成を備える。即ち、画像データを取得する手段と、前記画像データが示す画像を複数の画素ブロックに分割する手段と、複数チャネルを含む音声データを取得する手段と、前記音声データを用いて音源の位置を求め、求めた音源の位置と、前記画像中における前記複数の画素ブロックのそれぞれの位置と、を用いて、前記音源と前記複数の画素ブロックのそれぞれとの間の距離を求める手段と、前記複数の画素ブロックのそれぞれに対し、該画素ブロックについて求めた距離に応じた重要度を示す重要度情報を割り当てる割り当て手段と、前記複数の画素ブロックのそれぞれを圧縮する際、より高い重要度を示す重要度情報が割り当てられた画素ブロックは、より高い画質で復号されるように圧縮し、より低い重要度を示す重要度情報が割り当てられた画素ブロックは、より低い画質で復号されるように圧縮する手段と、圧縮されたそれぞれの画素ブロックと、前記音声データと、を出力する出力手段とを備えることを特徴とする。 In order to achieve the object of the present invention, for example, an image processing apparatus of the present invention comprises the following arrangement. That is, calculated and means for acquiring image data, means for dividing the image by the image data indicating a plurality of pixels blocks, a means for acquiring speech data including a plurality of channels, the position of the sound source using the sound data , wherein the position of the sound source obtained by using the respective positions of said plurality of pixel blocks in the said image, means for determining the distance between each of the sound sources and the plurality of pixel blocks, said plurality for each pixel block, and assigning means for assigning the importance information indicating the degree of importance according to the distance determined for the pixel block, when compressing each of said plurality of pixel blocks, important exhibit higher importance The pixel block to which the degree information is assigned is compressed so as to be decoded with higher image quality, and the importance information indicating the lower importance is assigned. Element block, characterized in that it comprises means for compressing as decoded at a lower quality, each pixel block and compressed, and output means for outputting, and the audio data.

Claims (8)

画像データを取得する手段と、
前記画像データが示す画像を複数の画素ブロックに分割する手段と、
複数チャネルを含む音声データを取得する手段と、
前記音声データを用いて音源の位置を求め、求めた音源の位置と、前記画像中における前記複数の画素ブロックのそれぞれの位置と、を用いて、前記音源と前記複数の画素ブロックのそれぞれとの間の距離を求める手段と、
前記複数の画素ブロックのそれぞれに対し、該画素ブロックについて求めた距離に応じた重要度を示す重要度情報を割り当てる割り当て手段と、
前記複数の画素ブロックのそれぞれを圧縮する際、より高い重要度を示す重要度情報が割り当てられた画素ブロックは、より高い画質で復号されるように圧縮し、より低い重要度を示す重要度情報が割り当てられた画素ブロックは、より低い画質で復号されるように圧縮する手段と、
圧縮されたそれぞれの画素ブロックと、前記音声データと、を出力する出力手段と
を備えることを特徴とする画像処理装置。
Means for obtaining image data;
It means for dividing an image by the image data indicating a plurality of pixel blocks,
Means for acquiring audio data including multiple channels;
Using the audio data , a position of a sound source is obtained, and the obtained sound source position and each position of the plurality of pixel blocks in the image are used to obtain the sound source and each of the plurality of pixel blocks. Means for determining the distance between,
For each of said plurality of pixel blocks, and assigning means for assigning the importance information indicating the degree of importance according to the distance determined for the pixel block,
When compressing each of the plurality of pixel blocks, the pixel block to which importance information indicating higher importance is assigned is compressed so as to be decoded with higher image quality, and importance information indicating lower importance is compressed. Means for compressing so that the pixel block assigned with is decoded with lower image quality;
An image processing apparatus comprising: an output unit that outputs each compressed pixel block and the audio data.
前記割り当て手段は、前記複数の画素ブロックのそれぞれに対し、該画素ブロックについて求めた距離の大小に応じた重要度を示す重要度情報を割り当てることを特徴とする請求項1に記載の画像処理装置。 It said assigning means, wherein for each of a plurality of pixel blocks, an image processing apparatus according to claim 1, characterized in that assigning the importance information indicating the degree of importance according to the magnitude of the distance calculated for the pixel block . 前記割り当て手段は、
前記複数の画素ブロックのそれぞれに対し、該画素ブロックに対する前記音源からの音量を示す音量情報を、該画素ブロックについて求めた距離を用いて求める計算手段と、
前記複数の画素ブロックのそれぞれに対し該画素ブロックについて求めた音量情報が示す音量の大小に応じた重要度を示す重要度情報を割り当てる手段と
を備えることを特徴とする請求項1に記載の画像処理装置。
The assigning means includes
Against each of the plurality of pixel blocks, and calculating means for volume information indicating sound volume from the sound source to pair the pixel block, determined using the distances calculated for the pixel block,
Against each of the plurality of pixel blocks, according to claim 1, characterized in that it comprises a means for assigning the importance information indicating the degree of importance according to the magnitude of the volume indicated by the volume information obtained for pixel blocks Image processing device.
前記計算手段は、前記音源との距離がより小さい画素ブロックに対してはより大きい音量を示す音量情報を求めることを特徴とする請求項3に記載の画像処理装置。   The image processing apparatus according to claim 3, wherein the calculation unit obtains volume information indicating a larger volume for a pixel block having a smaller distance from the sound source. 前記出力手段は、前記音声データを圧縮してから出力することを特徴とする請求項1に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein the output unit compresses and outputs the audio data. 前記出力手段は、圧縮されたそれぞれの画素ブロックを、対応する重要度情報が示す重要度が高い順に並び替え、並び替えた画素ブロックの集合と、前記音声データと、を含むストリームを出力することを特徴とする請求項1に記載の画像処理装置。   The output means rearranges each compressed pixel block in descending order of importance indicated by corresponding importance information, and outputs a stream including the rearranged set of pixel blocks and the audio data. The image processing apparatus according to claim 1. 画像処理装置が行う画像処理方法であって、
前記画像処理装置の画像データ取得手段が、画像データを取得する工程と、
前記画像処理装置の分割手段が、前記画像データが示す画像を複数の画素ブロックに分割する工程と、
前記画像処理装置の音声データ取得手段が、複数チャネルを含む音声データを取得する工程と、
前記画像処理装置の計算手段が、前記音声データを用いて音源の位置を求め、求めた音源の位置と、前記画像中における前記複数の画素ブロックのそれぞれの位置と、を用いて、前記音源と前記複数の画素ブロックのそれぞれとの間の距離を求める工程と、
前記画像処理装置の割り当て手段が、前記複数の画素ブロックのそれぞれに対し、該画素ブロックについて求めた距離に応じた重要度を示す重要度情報を割り当てる割り当て工程と、
前記画像処理装置の圧縮手段が、前記複数の画素ブロックのそれぞれを圧縮する際、より高い重要度を示す重要度情報が割り当てられた画素ブロックは、より高い画質で復号されるように圧縮し、より低い重要度を示す重要度情報が割り当てられた画素ブロックは、より低い画質で復号されるように圧縮する工程と、
前記画像処理装置の出力手段が、圧縮されたそれぞれの画素ブロックと、前記音声データと、を出力する出力工程と
を備えることを特徴とする画像処理方法。
An image processing method performed by an image processing apparatus,
An image data acquisition unit of the image processing apparatus acquires image data;
A step of dividing an image indicated by the image data into a plurality of pixel blocks by a dividing unit of the image processing apparatus ;
Audio data acquisition means of the image processing apparatus acquires audio data including a plurality of channels;
It said computing means of the image processing apparatus determines the position of the sound source using the sound data, by using the position of the determined sound source, and a respective position of said plurality of pixel blocks in the said image, the sound source And determining a distance between each of the plurality of pixel blocks;
Assigning means of the image processing apparatus, for each of said plurality of pixel blocks, and allocation step of allocating the importance information indicating the degree of importance according to the distance determined for the pixel block,
When the compression unit of the image processing apparatus compresses each of the plurality of pixel blocks, the pixel block to which importance information indicating higher importance is assigned is compressed so as to be decoded with higher image quality, Compressing a pixel block to which importance information indicating a lower importance is assigned so that the pixel block is decoded with a lower image quality;
An image processing method, wherein the output means of the image processing apparatus includes an output step of outputting each compressed pixel block and the audio data.
コンピュータを、請求項1乃至の何れか1項に記載の画像処理装置が有する各手段として機能させるためのコンピュータプログラム。 A computer program for causing a computer to function as each unit included in the image processing apparatus according to any one of claims 1 to 6 .
JP2009063228A 2009-03-16 2009-03-16 Image processing apparatus and image processing method Active JP5210212B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009063228A JP5210212B2 (en) 2009-03-16 2009-03-16 Image processing apparatus and image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009063228A JP5210212B2 (en) 2009-03-16 2009-03-16 Image processing apparatus and image processing method

Publications (3)

Publication Number Publication Date
JP2010219786A JP2010219786A (en) 2010-09-30
JP2010219786A5 true JP2010219786A5 (en) 2012-04-26
JP5210212B2 JP5210212B2 (en) 2013-06-12

Family

ID=42978157

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009063228A Active JP5210212B2 (en) 2009-03-16 2009-03-16 Image processing apparatus and image processing method

Country Status (1)

Country Link
JP (1) JP5210212B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10121337B2 (en) * 2016-12-30 2018-11-06 Axis Ab Gaze controlled bit rate
US11501532B2 (en) 2019-04-25 2022-11-15 International Business Machines Corporation Audiovisual source separation and localization using generative adversarial networks
JP2023042323A (en) * 2021-09-14 2023-03-27 株式会社Jvcケンウッド User terminal, data processing method and data processing program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06217276A (en) * 1992-08-27 1994-08-05 Toshiba Corp Moving picture encoding device

Similar Documents

Publication Publication Date Title
EP3273410A3 (en) Mip map compression
KR102201726B1 (en) Method for compressing a higher order ambisonics(hoa) signal, method for decompressing a compressed hoa signal, apparatus for compressing a hoa signal, and apparatus for decompressing a compressed hoa signal
NZ608999A (en) Composite video streaming using stateless compression
RU2016105691A (en) DEVICE AND METHOD FOR EFFECTIVE CODING OF METADATA OBJECTS
JP2016520864A5 (en)
JP2012161074A5 (en)
JP2014014144A5 (en)
JP2010103681A5 (en)
EP4300488A3 (en) Stereo audio encoder and decoder
IN2013MU02340A (en)
JP2015019152A5 (en)
EP3041157A8 (en) Physical layer coding/decoding method and apparatus thereof
JP2011223337A5 (en) Image decoding apparatus and method
MY190014A (en) Data compression
JP2014219790A5 (en)
JP2015043495A5 (en)
JP2015002368A5 (en)
JP2019529979A (en) Quantizer with index coding and bit scheduling
JP2010246049A5 (en)
JP2010219786A5 (en)
US20170155967A1 (en) Method and apparatus for facilitaing live virtual reality streaming
EP2635026A3 (en) Parallel pyramid entropy coding for video and image compression
JP2015019364A (en) Image compression apparatus and method
JP2017208706A5 (en)
JP5210212B2 (en) Image processing apparatus and image processing method