JP2021158402A5

JP2021158402A5 - 画像データ転送装置、画像表示システム、および画像データ転送方法

Info

Publication number: JP2021158402A5
Application number: JP2020053773A
Authority: JP
Filing date: 2020-03-25
Publication date: 2022-05-12
Anticipated expiration: 2040-03-25

Claims

クライアント端末に動画像のデータを転送する画像データ転送装置であって、
前記動画像を構成するフレームのデータを生成しメモリに書き込む描画部と、
前記クライアント端末に接続された表示パネルの走査順に係る情報を取得する表示方式情報取得部と、
前記フレームの画素のデータを、前記走査順に係る情報に基づく順序で前記メモリから読み出し、圧縮符号化する圧縮符号化部と、
圧縮符号化されたフレームのデータを、前記クライアント端末にストリーミング転送する通信部と、
を備え、
前記圧縮符号化部と前記通信部は、前記走査順に対応する順序で、１フレームより小さい単位のデータをパイプライン処理することを特徴とする画像データ転送装置。
前記圧縮符号化部は、前記走査順に係る情報に基づき決定した境界線でフレーム平面を分割してなる部分画像単位で、前記フレームのデータを圧縮符号化することを特徴とする請求項１に記載の画像データ転送装置。
前記表示方式情報取得部は、前記表示パネルが複数の部分パネルで構成されるとき、当該複数の部分パネルの走査順に係る情報を取得し、
前記圧縮符号化部は、前記複数の部分パネルの走査順に応じて前記メモリから画素のデータを読み出す順序を切り替えることを特徴とする請求項１または２に記載の画像データ転送装置。
前記表示方式情報取得部は、前記表示パネルの向きに係る情報を取得し、
前記圧縮符号化部は、前記メモリから画素のデータを読み出す順序を、前記表示パネルの向きの変化に応じて変化させることを特徴とする請求項１から３のいずれかに記載の画像データ転送装置。
前記圧縮符号化部は、前記画素のデータの読み出しにおいて、所定数の連続した画素を読み出し単位とし、その幅での読み出しを前記表示パネルの走査方向に対応する方向に進捗させることを特徴とする請求項１から４のいずれかに記載の画像データ転送装置。
前記圧縮符号化部は、前記画素のデータの読み出しにおいて、所定数の連続した画素を読み出し単位とし、その幅での読み出しを、前記クライアント端末における前記画素のデータの処理順に基づく方向に進捗させることを特徴とする請求項１から４のいずれかに記載の画像データ転送装置。
前記圧縮符号化部は、前記読み出し単位の画素数のＮ倍（Ｎは自然数）の幅を有する部分画像単位で、前記フレームのデータを圧縮符号化することを特徴とする請求項５または６に記載の画像データ転送装置。
前記表示方式情報取得部は、前記クライアント端末が処理可能な前記部分画像の幅、前記表示パネルが走査制御可能な最小単位領域の幅、および圧縮符号化方式が対応可能な単位領域の最小幅に係る情報を取得し、
前記圧縮符号化部はさらに、前記部分画像の幅を当該情報に基づき決定することを特徴とする請求項７に記載の画像データ転送装置。
前記圧縮符号化部は、前記読み出し単位の画素数を、前記メモリへのアクセスに用いるバス幅またはメモリアクセス幅の自然数倍とすることを特徴とする請求項５から８のいずれかに記載の画像データ転送装置。
前記表示方式情報取得部は、前記クライアント端末における前記部分画像のバッファメモリの容量に係る情報を取得し、
前記圧縮符号化部は、前記表示パネルへの表示までに要する処理時間のジッタに基づき、前記クライアント端末におけるバッファリングに必要な前記部分画像の数を計算し、当該数と前記バッファメモリの容量に応じて前記部分画像のデータサイズを決定することを特徴とする請求項７または８に記載の画像データ転送装置。
前記描画部は、描画するフレームの解像度および画素データのフォーマットを、前記クライアント端末とのハンドシェイクにより決定することを特徴とする請求項１から１０のいずれかに記載の画像データ転送装置。
前記表示パネルが複数の部分パネルで構成されるとき、前記圧縮符号化部は、前記部分パネルの境界を跨がないように前記部分画像を形成することを特徴とする請求項２に記載の画像データ転送装置。
前記表示方式情報取得部は、前記表示パネルが複数の部分パネルで構成されるとき、前記圧縮符号化部は、圧縮符号化の最小単位が前記部分パネルの境界を跨がないように制御することを特徴とする請求項１から１２のいずれかに記載の画像データ転送装置。
前記表示パネルが複数の部分パネルで構成されるとき、前記圧縮符号化部は、各部分パネルに表示させる画像を分けて圧縮符号化することを特徴とする請求項１から１３のいずれかに記載の画像データ転送装置。
動画像のデータを転送するサーバと、当該動画像のデータを受信して表示パネルに表示させるクライアント端末と、を含む画像表示システムであって、
前記クライアント端末は、
接続された表示パネルの走査順に係る情報を取得し、前記サーバに送信する表示方式取得部を備え、
前記サーバは、
前記動画像を構成するフレームのデータを生成しメモリに書き込む描画部と、
前記走査順に係る情報を取得する表示方式情報取得部と、
前記フレームの画素のデータを、前記走査順に係る情報に基づく順序で前記メモリから読み出し、圧縮符号化する圧縮符号化部と、
圧縮符号化されたフレームのデータを、前記クライアント端末にストリーミング転送する通信部と、
を備え、
前記圧縮符号化部と前記通信部は、前記走査順に対応する順序で、１フレームより小さい単位のデータをパイプライン処理することを特徴とする画像表示システム。
クライアント端末に動画像のデータを転送する画像データ転送装置が、
前記動画像を構成するフレームのデータを生成しメモリに書き込むステップと、
前記クライアント端末に接続された表示パネルの走査順に係る情報を取得するステップと、
前記フレームの画素のデータを、前記走査順に係る情報に基づく順序で前記メモリから読み出し、圧縮符号化するステップと、
圧縮符号化されたフレームのデータを、前記クライアント端末にストリーミング転送するステップと、
を含み、
前記圧縮符号化するステップと前記ストリーミング転送するステップは、前記走査順に対応する順序で、１フレームより小さい単位のデータをパイプライン処理することを特徴とする画像データ転送方法。
クライアント端末に動画像のデータを転送するコンピュータに、
前記動画像を構成するフレームのデータを生成しメモリに書き込む機能と、
前記クライアント端末に接続された表示パネルの走査順に係る情報を取得する機能と、
前記フレームの画素のデータを、前記走査順に係る情報に基づく順序で前記メモリから読み出し、圧縮符号化する機能と、
圧縮符号化されたフレームのデータを、前記クライアント端末にストリーミング転送する機能と、
を実現させ、
前記圧縮符号化する機能と前記ストリーミング転送する機能は、前記走査順に対応する順序で、１フレームより小さい単位のデータをパイプライン処理することを特徴とするコンピュータプログラム。