JP2000236553A - 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体 - Google Patents

画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体

Info

Publication number
JP2000236553A
JP2000236553A JP10929399A JP10929399A JP2000236553A JP 2000236553 A JP2000236553 A JP 2000236553A JP 10929399 A JP10929399 A JP 10929399A JP 10929399 A JP10929399 A JP 10929399A JP 2000236553 A JP2000236553 A JP 2000236553A
Authority
JP
Japan
Prior art keywords
encoding
data
frame
security
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10929399A
Other languages
English (en)
Other versions
JP3976942B2 (ja
Inventor
Mitsuru Maeda
充 前田
Yuji Inoue
裕司 井上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP10929399A priority Critical patent/JP3976942B2/ja
Priority to US09/459,859 priority patent/US6965643B1/en
Priority to AT99310134T priority patent/ATE387809T1/de
Priority to DE1999638220 priority patent/DE69938220T2/de
Priority to EP19990310134 priority patent/EP1014724B1/en
Priority to CNB991229959A priority patent/CN1231062C/zh
Priority to KR10-1999-0059126A priority patent/KR100386104B1/ko
Publication of JP2000236553A publication Critical patent/JP2000236553A/ja
Application granted granted Critical
Publication of JP3976942B2 publication Critical patent/JP3976942B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2541—Rights Management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates

Abstract

(57)【要約】 【課題】 画像の著作権保護による画像の再生／停止を
好適に処理する画像処理装置を提供することである。 【解決手段】 画像データを入力し、前記画像データを
保護するためのセキュリティデータを生成し、前記セキ
ュリティデータに応じて符号化モードを制御し、前記制
御された符号化モードを用いて前記画像データを符号化
する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像処理装置及び
方法、画像処理プログラムが記録されたコンピュータ可
読記録媒体に関し、特に画像の著作権保護を行うための
画像処理に関するものである。
【０００２】
【従来の技術】近年、動画像符号化技術の標準化が急速
に進んでいる。MPEG-1, 2やH.261, H.263 （これらの
符号化方式はＩＳＯ(International Organization for
Standardization：国際標準化機構)やＩＴＵ（Internat
ional Telecommunication Union：国際電気通信連合）
によって国際標準化されている）といった符号化の標準
が制定されおり、さらにコンピュータ・放送・通信など
多くの領域で利用できる、汎用的な次世代マルチメディ
ア符号化規格としてMPEG-4の国際標準化作業が進められ
ている。上記符号化技術によって画像のディジタル化が
進み、動画像データの蓄積、通信を急速に発展させた。
【０００３】例えばMPEG-4においては、例えばある瞬間
の動画シーンを、その構成要素である「人」「自動車」
「背景」「音楽」「ビデオ」などのオブジェクト毎の集
合体と考え、各オブジェクト毎に適応的な符号化処理を
行って動画像データを高能率に符号化する。
【０００４】MPEG-4のようなマルチオブジェクト符号化
技術においては、圧縮符号化された各オブジェクトの組
み合わせ方で１つのシーンが表現される。従って、ある
MPEG-4データに他のMPEG-4データからのオブジェクトデ
ータを再利用して別のシーンを容易に表現することが可
能である。
【０００５】上述したようなディジタル符号化規格の普
及に伴い、コンテンツ業界からは著作権保護の問題が強
く提起されるようになってきた。即ち、著作権が保護さ
れることが十分に保証されていない規格に対しては、安
心して優良なコンテンツを提供することができない、と
いう問題が生じている。
【０００６】MPEG-4ではこの問題は深刻である。何故な
らば上述したようにMPEG-4ではオブジェクト別に符号化
され、操作／加工することが可能であるからである。従
って、MPEG-4のようなマルチオブジェクト符号化では、
オブジェクト単位の知的所有権保護は円滑な各オブジェ
クト再利用の観点から当然の要求となり、また、その対
象が人等であった場合、肖像権の保護も必要となってき
ている。
【０００７】そこで、動画像の一部の著作権を保護する
ために、動画像の一部を再生させないために動画像の復
号を一時的に停止させる方法が考えられる。動画像での
肖像権や著作権を考えた時、それらが関係する部分の復
号を停止させ、関係する部分が終了した後、復号を再開
する方式である。
【０００８】
【発明が解決しようとする課題】しかしながら、以下の
ような問題が発生する。
【０００９】動画像の符号化方式ではフレーム間相関を
利用した符号化が一般的に用いられる。前述のH.261,
H.263やMPEG-1, 2さらにはMPEG-4といった符号化方式が
有名である。これらの符号化方式では基本的に時間的に
前のフレーム或いは前後のフレームを参照し、動き補償
を行って符号化を行っている。
【００１０】図２５にH.261, H.263等の再生の様子を示
す。I*はフレーム内符号化（イントラ(intra)符号化）
を行うフレームを、P*はフレーム間符号化（インター(i
nter)符号化）するフレームを表している。図２５中で
時刻は時間の流れる方向、Securityは復号化処理を止め
る期間を黒帯で示し、符号は符号化処理順の画面の並び
を示し、表示は表示順の画面の並びを示す。
【００１１】今、P4からP9の期間に対して著作権の保護
（Security）する目的で復号が停止されたとする。動画
像の復号がP3で停止し、以後復号が再開されるまで画像
が表示されない状態となる。復号の停止と同時に、バッ
ファへの符号化データの書き込みも停止するため、P4か
らP9の符号化データは廃棄される。そのため、P10から
の復号を開始すると本来P10が参照すべきP9は廃棄され
ているので、P10以降の復号処理が正常に行われず、フ
レーム内符号化が行われているI1が復号されるまでのP
10からP13のフレームの画像が乱れたり、或いは復号動
作が中断してしまう。
【００１２】図２６にMPEG-1, 2, 4等の再生の様子を示
す。B*は両方向（双方向）フレーム間符号化するフレー
ムを表している。図２６中で時刻は時間の流れる方向、
Securityは復号化処理を止める期間を黒帯で示し、符号
は符号化処理順の画面の並びを示し、表示は表示順の画
面の並びを示す。Bフレームによって画面の符号化処理
順序と原画面の順序とは異なっている。
【００１３】今、B10からP3の符号化データに対して著
作権の保護によって復号が停止されたとする。動画像の
復号がB10で停止し、以後復号が再開されるまで画像が
表示されない状態となる。復号の停止と同時に、バッフ
ァへの符号化データの書き込みも停止するため、B11か
らP3の符号化データは廃棄される。そのため、復号が禁
止された時、P1は復号されているが、B11が復号され
ず、1フレーム抜けたり、P1を表示できなかったりす
る。
【００１４】また、復号を再開した時、B30からの復号
を開始すると本来B30が参照すべきP3は廃棄されている
ので、B30以降の復号処理が正常に行われず、フレーム
内符号化が行われているI1が復号されるまで画像に乱れ
が生じる。B30やB31、B40やB41のフレーム画像の復号処
理が正常に行われず、画像が乱れたり、復号動作が中断
してしまう。
【００１５】従って、本発明は前記課題を考慮して画像
の著作権保護による画像の再生／停止を好適に処理する
画像処理装置及び方法並びに画像処理プログラムが記録
されたコンピュータ可読記録媒体を提供することを目的
としている。
【００１６】
【課題を解決するための手段】本発明の画像処理装置
は、画像データを入力する入力手段と、前記画像データ
を保護するためのセキュリティデータを生成する生成手
段と、複数種の符号化モードを用いて前記画像データを
符号化する符号化手段と、前記セキュリティデータに応
じて前記符号化手段の符号化モードを制御する制御手段
と有することを特徴とする。
【００１７】また、本発明の画像処理方法は、画像デー
タを入力し、前記画像データを保護するためのセキュリ
ティデータを生成し、前記セキュリティデータに応じて
符号化モードを制御し、前記制御された符号化モードを
用いて前記画像データを符号化することを特徴とする。
【００１８】また、本発明の画像処理プログラムが記録
されたコンピュータ可読記録媒体は、画像データを入力
する入力工程の手順コードと、セキュリティデータを生
成する生成工程の手順コードと、複数種の符号化モード
を用いて前記画像データを符号化する符号化工程の手順
コードと、前記セキュリティデータに応じて前記符号化
工程の符号化モードを制御する制御工程の手順とを記録
したことを特徴とする。
【００１９】
【発明の実施の形態】＜第１の実施例＞以下、本発明の
第１の実施例を、図面を用いて詳細に説明する。
【００２０】図１は、本発明の第１の実施例としての画
像処理装置の構成を示すブロック図である。
【００２１】図１において、１０００は動画像の一部ま
たは全てに再生を許可したり、禁止したりするセキュリ
ティ情報を符号化するセキュリティ符号化器である。１
００１は動画像データを符号化するビデオ符号化部であ
る。
【００２２】本実施例では、動画像符号化データがMPEG
-1符号化方式で符号化する場合について説明する。MPEG
-1符号化方式についてはISO/IEC11172-2に詳細が記載さ
れているので説明を省略する。更に、説明を容易にする
ためにフレーム単位での符号化されているものとし、フ
レーム内符号化を行うIフレームモードとフレーム間相
関を用いるPフレームモードとからなっているものとす
る。
【００２３】１００２はセキュリティ符号化データと動
画像符号化データを多重化し、動画像データを生成する
多重化器、１００３は多重化された動画像データを蓄積
している記憶装置である。
【００２４】１００５は通信回路であり、LANや公衆回
線、無線回線、放送電波等で構成されている。１００
４，１００６は通信インターフェースであり、通信回路
１００５から動画像データを送受信する。
【００２５】１００７は動画像データをセキュリティ符
号化データと動画像符号化データに分離する分離器、１
００８はセキュリティ符号化データを復号し、認証デー
タと比較して動画像の再生の停止と再生の再開を指示す
るセキュリティ復号部、１００９は動画像符号化データ
を復号し、動画像を再生するビデオ復号部、１０１０は
再生された動画像を表示するモニタである。
【００２６】上記のように構成された装置における動画
像データの処理動作を以下で説明する。
【００２７】不図示の操作者は、ビデオ符号化部１００
１に動画像データを入力し、著作権の保護を開始する時
刻、著作権の保護を終了する時刻、セキュリティを解除
する解除キーを示すセキュリティ情報をセキュリティ符
号化部１０００に入力する。
【００２８】ここでセキュリティ符号化部１０００につ
いて詳細に説明する。
【００２９】図２は、セキュリティ符号化部１０００の
詳細なブロック図である。
【００３０】図２において、１０１はセキュリティ情報
を入力する入力端子、１０２はセキュリティ情報に基づ
き、復号を禁止するフレームを決定するセキュリティ設
定指示器、１０３はセキュリティ情報を符号化するセキ
ュリティ符号化器、１０４は符号化されたセキュリティ
符号化データを出力する出力端子、１０５はセキュリテ
ィ設定指示器１０２の出力に基づき、ビデオ符号化部１
００１を制御する制御信号を発生させる制御信号発生
器、１０６はシステム全体の時間の同期を図るためのタ
イマー、１０７は制御信号を出力する出力端子である。
【００３１】上記のように構成されたセキュリティ符号
化部１０００の符号化動作を以下で説明する。
【００３２】セキュリティ設定指示器１０２は入力され
たセキュリティ情報を禁止が発生する時刻順に並び替
え、これを保持しておく。セキュリティ符号化器１０３
はこれらのセキュリティ情報を符号化し、出力端子１０
４から多重化器１００２へ出力する。
【００３３】セキュリティ符号化データについて詳細に
説明する。
【００３４】図３は、セキュリティ符号化データの構成
を示す。
【００３５】２００１は符号長を表すCodeLength符号、
２００２は著作権の認証に必要な情報を表すIPcode符
号、２００３は著作権等の保護を開始する時間を示すSe
curityStartTime符号、２００４は著作権等の保護を解
除する時間を示すSecurityEndTime符号である。尚、２
００２〜２００４の符号はセキュリティをかけたい動画
像部分が分割されて複数あればその組み合わせが複数連
続する。
【００３６】尚、本実施例ではセキュリティ符号化デー
タは、多重化器１００２により動画像データの先頭に多
重化するものとする。しかし、この方式に限定されるも
のではなく、セキュリティ符号化データは、動画像デー
タに時分割多重されて伝送されてもよい。
【００３７】図２の説明に戻り、セキュリティ設定指示
器１０２はセキュリティの著作権等の保護を開始する時
間と著作権等の保護を終了する時間を制御信号発生器１
０５に順に入力する。制御信号発生器１０５はタイマ１
０６の時刻とこれらの時刻を比較し、著作権保護のため
の制御信号を発生させ、出力端子１０７からビデオ符号
化部１００１に出力する。
【００３８】次に、ビデオ符号化部１００１を詳細に説
明する。
【００３９】図４は、ビデオ符号化部１００１の詳細な
ブロック図である。
【００４０】図４において、１２１は画像データを入力
する入力端子、１２２はフレーム単位の画像を格納する
フレームメモリ、１２３はマクロブロック毎に画素単位
の差分を求める減算器、１２４はDCT変換と変換係数を
量子化するDCT・量子化器、１２５は得られた量子化結
果をエントロピー符号化するテクスチャ符号化器であ
る。
【００４１】１２６は量子化された変換係数を入力し、
逆量子化、逆DCT変換を行う逆量子化・IDCT器、１２７
はマクロブロック毎に画素単位の加算を行う加算器、１
２８は動き補償を行うためのフレーム画像を格納する参
照フレームメモリ、１２９はフレームメモリ１２２と参
照フレームメモリ１２８から動きベクトルを求め、動き
補償を行う動き補償器である。１３０は動き補償器１２
９の出力結果であるマクロブロックの符号化モード、動
きベクトル等の動き補償に関する符号を生成する動き補
償符号化器である。
【００４２】１３１は図２の制御信号発生器１０５から
制御信号を入力する入力端子、１３２は符号化のフレー
ムモードを設定するフレームモード設定器、１３３はフ
レームモードを含むヘッダを符号化するヘッダ符号化
器、１３４はテクスチャ符号化器１２５，動き補償符号
化器１３０，ヘッダ符号化器１３３の出力データを多重
化する多重化器、１３５は多重化器より発生された符号
化データを一時蓄積するバッファである。
【００４３】１３６は符号量の制御を行うレート制御器
であり、DCT・量子化器１２４の量子化係数を制御す
る。１３７は多重化器１３４の出力を外部に出力する出
力端子である。
【００４４】上記のように構成されたビデオ符号化部１
００１における符号化処理を以下で説明する。
【００４５】入力端子１２１から動画像の画像データが
順次入力され、フレームメモリ１２２に格納される。入
力端子１３１から符号化するフレームのセキュリティ情
報が禁止／許可を示す制御信号が入力される。
【００４６】最初に、セキュリティがかからず、フレー
ムモード設定器１３２に「許可」が入力されている状態
について説明する。
【００４７】フレームモード設定器１３２は、一定の周
期でフレーム内符号化を行い、その他のフレームではフ
レーム間符号化を行う。尚、本実施例では１５フレーム
おきにIフレームモードで符号化したIフレームが存在
し、その他の１４フレームがPフレームモードで符号化
したPフレームがあるものとする。
【００４８】フレームモード設定器１３２は、動き補償
器１２９、フレームメモリ１２２、参照フレームメモリ
１２８に制御信号を送り、Pフレームモードの時には動
き補償を行い、Iフレームモードの時には動き補償を行
わないように制御する。また、決定したフレームモード
をヘッダ符号化器１３３へ出力する。ヘッダ符号化器１
３３はMPEG-1の仕様に則してヘッダの符号化データを生
成する。
【００４９】動き補償器１２９は、マクロブロック（例
えば、１６×１６画素で構成されたブロック）毎に、I
フレームモードの時は０を出力し、Pフレームモードの
時はフレームメモリ１２２と参照フレームメモリ１２８
とを参照し、動きベクトルを求め、動き補償による予測
マクロブロックを出力する。
【００５０】フレームメモリ１２２に格納されたフレー
ム画像データはマクロブロック毎に減算器１２３に入力
される。減算器１２３は、動き補償器１２９から出力さ
れるマクロブロックの値と画素毎の減算を行う。減算器
１２３の減算結果はDCT・量子化器１２４へ出力され、D
CT変換後、量子化係数によって量子化される。
【００５１】ＤＣＴ・量子化器１２４の量子化結果は、
テクスチャ符号化器１２５へ出力され、マクロブロック
の符号化モード，量子化係数，量子化結果等をMPEG-1の
符号化仕様に基づいて符号化（ハフマン符号に基くエン
トロピー符号化（可変長符号化））し、多重化器１３４
へ出力する。
【００５２】また、DCT・量子化器１２４の出力データ
は、逆量子化・IDCT器１２６に入力され、逆量子化、逆D
CT変換を行い、画素データまたは動き補償による誤差デ
ータを獲得する。前記誤差データは、加算器１２７で動
き補償器１２９の結果と加算される。
【００５３】加算器１２７で求められた画素値は、参照
フレームメモリ１２８に格納される。動き補償器１２９
で得られた動きベクトルは、動き補償符号化器１３０へ
出力し、動き補償符号化器１３０は前記動きベクトルを
符号化して多重化器１３４へ出力する。
【００５４】多重化器１３４は、テクスチャ符号化器１
２５、動き補償符号化器１３０、ヘッダ符号化器１３３
からの出力をMPEG-1の形式に従って多重化し、バッファ
１３５へ出力する。バッファ１３５に蓄積された符号化
データは、出力端子１３７から出力される。また、バッ
ファ内に蓄積されている符号量をレート制御器１３７が
監視し、DCT・量子化器１２４の量子化係数を変化させ
て符号の発生量を制御する。
【００５５】次に、セキュリティがかかり、セキュリテ
ィ情報が許可から禁止になる場合について説明する。
【００５６】この時、フレームモード設定器１３２は特
別な動作はせず、通常と変らずそれまでのIフレームモ
ードとPフレームモードの周期にしたがってモードの設
定を行う。このため、他の部分に関してもセキュリティ
が許可の状態と変らず動作する。
【００５７】次に、セキュリティが解除され、セキュリ
ティ情報が禁止から許可になる場合について説明する。
【００５８】この時、フレームモード設定器１３２は解
除された最初のフレームのフレームモードをIフレーム
モードとする。従って、ヘッダ符号化器１３３は符号化
されるフレームはIフレームモードであること示す符号
化データを出力し、動き補償器１２９は動作せず、動き
補償を行わない。そのIフレームに続くフレーム以降は
予め設定してあったIフレームとPフレームの周期に従っ
てモードの設定を行う。
【００５９】出力端子１３７から出力された動画像の符
号化データは、セキュリティ符号化データと多重化器１
００２で多重化される。
【００６０】多重化された動画像データは記憶装置１０
０３に蓄積されたり、通信インターフェース１００４を
介して通信回路１００５へ送出される。
【００６１】次に、上述のように得られた動画像データ
の復号動作について詳細に説明する。
【００６２】記憶装置１００３や通信インターフェース
１００６から上述のように生成された動画像データを入
力する。入力された動画像データの動画像符号化データ
とセキュリティ符号化データとは分離器１００７で分離
され、動画像符号化データはビデオ復号部１００５に、
セキュリティ符号化データはセキュリティ復号部１００
４に出力される。
【００６３】ここでセイキュリティ復号部１００８につ
いて詳細に説明する。
【００６４】図５は、セキュリティ復号部１００８の詳
細なブロック図を説明する。
【００６５】図５において、１５１はセキュリティ符号
化データを入力する入力端子、１５２はセキュリティ符
号化データを復号し、認証情報、著作権保護を行う時間
に関する情報を獲得するセキュリティ復号器、１５３は
認証情報を解析し、復号を行うか禁止するかを決定する
セキュリティ認証器、１５４は動画像の再生を正しく行
うために時刻を発生させるのタイマ、１５５はセキュリ
ティ認証器１５３の決定に従ってビデオ復号部１００９
の制御を行う信号を発生させる制御信号発生器、１５６
は制御信号発生器１５５で発生した制御信号をビデオ復
号部１００５に送出する出力端子である。
【００６６】上記のように構成されたセキュリティ復号
部１００８の復号動作を以下で説明する。
【００６７】入力端子１５１から入力されたセキュリテ
ィ符号化データは、セキュリティ復号器１５２で復号さ
れ、図３に示す符号から、CodeLength符号２００１を復
号し、符号化データの全体量を把握し、セキュリティを
かける各部分について、IPcode符号２００２、Security
StartTime符号２００３、SecurityEndTime符号２００４
を復号し、それぞれの情報を獲得する。
【００６８】認証に必要な情報は、セキュリティ認証器
１５３に入力される。また、制御信号発生器１５５は、
セキュリティ認証器１５３からの指示が無い場合はビデ
オ復号部１００９が前記動画像符号化データの復号処理
を行うように出力端子１５６からビデオ復号部１００９
へ制御信号を出力する。
【００６９】セキュリティ認証器１５３は、不図示の操
作部により操作者が入力した認証情報とセキュリティ復
号器１５２から復号された認証情報とを比較し、復号を
許可するか否かを判定する。
【００７０】その判定の結果、復号を許可する場合には
制御信号発生器１５５には復号許可を知らせる。この
時、すでにビデオ復号部１００９が動画像データの復号
を行うように制御信号を発生させている場合は、その制
御信号は変化させない。
【００７１】一方、判定の結果、復号が禁止されている
場合、セキュリティ認証器１５３は復号処理を禁止する
信号を制御信号発生器１５５へ出力する。制御信号発生
器１５５はセキュリティ復号器１５２から出力された該
当する著作権保護を行う時間に関する情報とタイマ１５
４から出力される時刻とを比較し、著作権保護を開始す
る時間と前記時刻が等しくなった時、動画像の復号を停
止させる信号を出力端子１５６から出力する。また、該
当する著作権保護を行う時間に関する情報とタイマ１５
４から入力される時刻とを比較し、著作権保護を終了す
る時間と前記時刻が等しくなった時、動画像の復号を再
開させる信号を出力端子１５６から出力する。
【００７２】ビデオ復号部１００９は、動画像符号化デ
ータとセキュリティ復号部１００８から制御信号に基づ
いて復号処理を行う。
【００７３】ここでビデオ復号部１００９について詳細
に説明する。
【００７４】図６は、ビデオ復号部１００９の詳細なブ
ロック図である。
【００７５】図６において、２０１は動画像符号化デー
タを入力する画像データ入力端子、２０２はセキュリテ
ィ復号部１００８から制御信号を入力する制御信号入力
端子、２０３は入力された動画像符号化データを格納す
るバッファである。
【００７６】２０４はバッファ２０３からMPEG-1符号化
データを読み出し、符号の内容を表すヘッダ情報と、動
き補償を行うための動き補償符号、DCT変換係数を符号
化したデータとをそれぞれ分離する分離器である。
【００７７】２０５は分離器２０４によって分離された
ヘッダ情報を復号するヘッダ復号器であり、各種スター
トコード、画像のサイズ、各フレームの符号化モードを
復号して情報を獲得する。
【００７８】２０６は動き補償符号を復号し、各マクロ
ブロックの符号化モード、動きベクトル等を復号し、動
き補償に必要な情報を獲得する動き補償復号器、２０７
はテクスチャ復号器であり、符号を復号し、量子化係
数、DCT変換係数の量子化結果等を獲得する。
【００７９】２０８は逆量子化・IDCT器であり、量子化
係数、DCT変換係数の量子化結果等を入力し、逆量子
化、逆DCT変換を行い、画素データまたは動き補償によ
る誤差データを獲得する。
【００８０】２０９は動き補償結果と前記誤差データを
加算する加算器、２１０は動き補償に必要な参照フレー
ムを格納する参照フレームメモリ、２１１は参照フレー
ムメモリ２１０の内容を動きベクトル復号器２０６の結
果にしたがって動き補償を行う動き補償器である。
【００８１】２１２は復号されたフレームの画像を出力
するために一時格納する表示フレームメモリ、２１３は
モニタ１０１０に動画像データを出力する出力端子であ
る。
【００８２】上記のように構成されたビデオ復号部１０
０９における復号化処理を以下で説明する。
【００８３】まず、制御信号入力端子２０２からの制御
信号が復号可能を指示している場合、動画像符号化デー
タを画像データ入力端子２０１から入力し、その情報を
バッファ２０３に蓄積する。一方、制御信号入力端子２
０２からの制御信号が復号禁止を指示している場合、前
記動画像符号化データのバッファ２０３への蓄積は行わ
ず、データを読み捨てる。
【００８４】まず、制御信号が復号可能を指示している
場合の復号動作について説明する。
【００８５】分離器２０４は、バッファ２０３から符号
化データを入力し、符号の内容を表すヘッダ情報と、動
き補償を行うための動き補償符号、DCT変換係数を符号
化したデータをそれぞれ分離する。ヘッダ復号器２０５
は、各種スタートコード、画像のサイズ、各フレームの
符号化モードを復号して情報を獲得する。
【００８６】動き補償復号器２０６は、分離器２０４に
よって分離された動き補償符号を復号し、各マクロブロ
ックの符号化モード、動きベクトル等を復号し、動き補
償に必要な情報を獲得し、Pフレームであればこれらの
情報を動き補償器２１１に入力し、動き補償を行う。
【００８７】テクスチャ復号器２０７は、分離器２０４
によって分離された符号化データを復号して量子化係
数、DCT変換係数の量子化結果等を獲得する。その復号
された量子化データは、逆量子化・IDCT器２０８に入力
され、画素データまたは動き補償による誤差データを求
める。
【００８８】前記誤差データは、加算器２０９において
動き補償器２１１からの出力データと加算される。動き
補償器２１１は、動き補償復号器２０６からフレーム内
符号を行うマクロブロックであれば値０を、そうでなけ
れば得られた動きベクトルにしたがって、参照フレーム
メモリ２１０から動き補償を行い、参照マクロブロック
データを加算器２０９へ出力する。
【００８９】加算器２０９で求められた画素値は参照フ
レームメモリ２１０及び表示フレームメモリ２１２に格
納される。表示フレームメモリ２１３に格納された画像
データは、出力端子２１３を介してモニタ１０１０へ出
力され表示される。
【００９０】次に、制御信号が復号許可から復号禁止を
指示した場合の復号動作について説明する。
【００９１】バッファ２０３は、符号の入力を停止さ
せ、ヘッダ復号器２０５、動き補償復号器２０６、動き
補償器２１１、テクスチャ復号器２０７の動作も停止さ
せる。さらに、参照フレームメモリ２１０、表示フレー
ムメモリ２１２の更新を禁止する。この結果、出力端子
２１２からは最後に復号されたフレームの画像データが
出力される。このため、モニタ１０１０では復号が許可
されていた最終フレームが表示され続ける。
【００９２】次に、制御信号が復号禁止から復号許可を
指示し復号の再開を指示した場合の復号動作について説
明する。
【００９３】バッファ２０３は、符号の入力を再開さ
せ、ヘッダ復号器２０５を動作させる。先頭のフレーム
はIフレームであるから、テクスチャ復号器２０７の動
作を再開させ、参照フレームメモリ２１０、表示フレー
ムメモリ２１２の更新を再開する。以後、制御信号が復
号禁止になるまで、各部の動作を継続させ、Iフレー
ム、Pフレームの復号を継続する。これにより、モニタ
１０１０の表示も更新され、動画像の表示が再開され
る。
【００９４】上述したような一連の選択動作により復号
が再開される最初のフレームに対して、フレーム内符号
化処理を行うことでフレームの画像が乱れたり、復号動
作が中断したりすることを容易に防止することができ
る。
【００９５】例えば、図７に示すようにP4〜P9までの符
号化フレーム期間が著作権の保護（Security）がかか
り、認証できなくても、Securityがかかった時点から、
そのSecurityがかかる直前のフレームのP3のフレームの
表示が続くようになり、Securityが解除された次のフレ
ームがIフレームに必ずなっているので、Securityが解
除された次のフレームから正しく復号でき、画像の途切
れや画像の乱れがなくなり、しかもSecurityの解除後の
画像復帰までに遅延（画面飛び）が全くなくなり、正常
な画像をユーザーに提示することができる。
【００９６】尚、上記実施例では復号が禁止されている
期間、禁止直前に復号された画像が出力されることにな
るが、所定の画像を予めメモリ等に記憶しておき、その
所定画像を出力するようにしてもよい。
【００９７】また、本実施例においてメモリ構成等は適
宜変更可能である。動画像の符号化はMPEG-1符号化方式
に限定されず、フレームをフィールドとすることでMPEG
-2符号化方式でも可能であり、H.261, H.263等の符号化
方式でも可能なことは言うまでもない。
【００９８】また、セキュリティ符号化データのフォー
マット、認証方式、著作権等を保護する部分の指定法式
等は上記実施例に限定されず、他のフォーマット、認証
方式等を用いてももちろん構わない。例えば、図８に示
すように図３の各符号に加え、音声に対する著作権保護
か、動画像に対する著作権かを識別する為のA/Vフラグ
２００５が追加してももちろん構わない。
【００９９】また、MPEG-4のマルチオブジェクトについ
ては図９に示すようにオブジェクトを識別するためのOb
jectcode符号２００６を追加し、オブジェクト毎にセキ
ュリティを設定、符号化し、ビデオ符号化部を複数持
ち、各ビデオ符号化部で各オブジェクトのセキュリティ
が解除された先頭のVOPをI-VOPで符号化することによっ
て復号の安全性の確保し、画質の劣化を防ぐことができ
る。
【０１００】更に、セキュリティが解除された先頭にMP
EG-1,2であればGroup of Pictureヘッダを、MPEG-4であ
ればGroup of VOPのヘッダを設けてももちろん構わな
い。
【０１０１】＜第２の実施例＞第２の実施例の画像処理
装置の構成は図１の構成と同様であり，ビデオ符号化部
１００１の内部構成及び処理が異なり、他は第１の実施
例と同様である。従って、ここでは第２の実施例におけ
るビデオ符号化部１００１の構成及び動作のみを説明す
る。
【０１０２】本実施例では、動画像符号化データがMPEG
-1符号化方式で符号化する場合について説明する。MPEG
-1符号化方式についてはISO/IEC11172-2に詳細が記載さ
れているので説明を省略する。更に、説明を容易にする
ためにフレーム単位での符号化されているものとし、フ
レーム内符号化を行うIフレームモード、フレーム間相
関を用いて時間的に前のフレームから予測するPフレー
ムモード及び時間的に前後のフレームから予測するBフ
レームモードとからなっているものとする。
【０１０３】次に、本実施例でのビデオ符号化部１００
１を詳細に説明する。
【０１０４】図１０は、第２の実施例におけるビデオ符
号化部１００１の詳細なブロック図である。
【０１０５】図１０において、３０１は画像データを入
力する入力端子、３０２，３０３，３０４はフレーム単
位の画像を格納するフレームメモリ、３０５はマクロブ
ロック毎に画素単位の差分を求める減算器、３０６はDC
T変換と変換係数を量子化するDCT・量子化器、３０７は
得られた量子化結果をエントロピー符号化するテクスチ
ャ符号化器である。
【０１０６】３０８は量子化された変換係数を入力し、
逆量子化、逆DCT変換を行う逆量子化・IDCT器、３０９
はマクロブロック毎に画素単位の加算を行う加算器、３
１０，３１１は動き補償を行うためのフレーム画像を格
納する参照フレームメモリ、３１２はフレームメモリ３
０２，３０３，３０４のいずれかと参照フレームメモリ
３１０または３１１から動きベクトルを求め、動き補償
を行う動き補償器である。
【０１０７】３１３は動き補償器３１２の出力結果であ
るマクロブロックの符号化モード、動きベクトル等の動
き補償に関する符号を生成する動き補償符号化器であ
る。
【０１０８】３１４は図２の制御信号発生器１０５から
制御信号を入力する入力端子、３１５は符号化のフレー
ムモードを設定するフレームモード設定器、３１６はフ
レームモードを含むヘッダを符号化するヘッダ符号化
器、３１７はテクスチャ符号化器３０７，動き補償符号
化器３１３，ヘッダ符号化器３１６の出力データを多重
化する多重化器、３１８は多重化器より発生された符号
化データを一時蓄積するバッファである。
【０１０９】３１９は符号量の制御を行うレート制御器
であり、DCT・量子化器３０６の量子化係数を制御す
る。３２０はバッファ３１８の出力を外部に出力する出
力端子である。
【０１１０】上記のように構成されたビデオ符号化部１
００１における符号化処理を以下で説明する。
【０１１１】入力端子３０１から動画像の画像データが
順次入力され、フレームメモリ３０２に格納される。入
力端子３１４から符号化するフレームのセキュリティ情
報が禁止／許可を示す制御信号が入力される。
【０１１２】最初に、セキュリティがかからず、フレー
ムモード設定器３１５に「許可」が入力されている状態
について説明する。
【０１１３】フレームモード設定器３１５は、一定の周
期でフレーム内符号化を行い、その他のフレームではフ
レーム間符号化を行う。尚、本実施例では１５フレーム
おきにIフレームモードで符号化したIフレームが存在
し、その他の４フレームがPフレームモードで符号化し
たPフレームがあるものとし、残りをBフレームモードで
符号化したBフレームがあるものする。PフレームとIフ
レームまたはPフレームの間に2フレームのBフレームが
挟まった並びで１つの周期を形成する。すなわち、 I B B P B B P B B P B B P B B I B B P… となり、Iフレームから次のIフレームまでが15フレーム
である。
【０１１４】フレームメモリ３０２，３０３，３０４に
は順にフレーム画像が入力される。最初のフレームはフ
レームメモリ３０２に、次のフレーム画像はフレームメ
モリ３０３に、その次のフレーム画像はフレームメモリ
３０４に格納される。その次はフレームメモリ３０２に
格納される。以後、順番に格納を行う。
【０１１５】フレームモード設定器３１５は、フレーム
モードを上記の周期に従って決定する。決定したフレー
ムモードをヘッダ符号化器３１６へ出力する。ヘッダ符
号化器３１６はMPEG-1の仕様に則してヘッダの符号化デ
ータを生成する。
【０１１６】フレームモード設定器３１５がIフレーム
モードを設定した時には動き補償を行わないため、動き
補償器３１２に制御信号を送り、動き補償は行わず、０
を出力するように制御する。フレームメモリ３０２，３
０３，３０４のうち、Iフレームモードで符号化するフ
レームが格納されたフレームメモリから画像データを読
み出すように制御する。
【０１１７】フレームモード設定器３１５がPフレーム
モードを設定した時には動き補償を行うように制御す
る。フレームメモリ３０２，３０３，３０４のうち、P
フレームモードで符号化するフレームが格納されたフレ
ームメモリから画像データを読み出すように制御する。
参照フレームメモリ３１０，３１１から最後に符号化さ
れたフレーム画像が格納されている参照フレームメモリ
から画像データを読み出すように制御する。これらを動
き補償器３１２に入力して動き補償を行う。
【０１１８】フレームモード設定器３１５がBフレーム
モードを設定した時には動き補償を行うように制御す
る。フレームメモリ３０２，３０３，３０４のうち、B
フレームモードで符号化するフレームが格納されたフレ
ームメモリから画像データを読み出すように制御する。
参照フレームメモリ３１０，３１１の両方から画像デー
タを読み出すように制御する。これらを動き補償器３１
２に入力して動き補償を行う。また、この時、Bフレー
ムモードで符号化された画像データの参照フレーム３１
０，３１１への書き込みは行わない。
【０１１９】動き補償器３１２は、マクロブロック（例
えば、１６×１６画素で構成されたブロック）毎に、I
フレームモードの時は０を出力する。
【０１２０】Pフレームモードの時は、フレームメモリ
３０２，３０３，３０４のうち符号化対象のフレームが
格納されているフレームメモリと、参照フレームメモリ
３１０，３１１のうち直前に符号化されたフレーム画像
が格納されている参照フレームメモリとを参照し、動き
ベクトルを求め、動き補償による予測マクロブロックを
出力する。
【０１２１】Bフレームモードの時はフレームメモリ３
０２，３０３，３０４のうち符号化対象のフレームが格
納されているフレームメモリと参照フレームメモリ３１
０，３１１の両方とを参照し、動きベクトルを求め、動
き補償による予測マクロブロックを出力する。
【０１２２】フレームメモリから読み出されたフレーム
画像データはマクロブロック毎に減算器３０５に入力さ
れる。減算器３０５は、動き補償器３１２から出力され
るマクロブロックの値と画素毎の減算を行う。減算器３
０５の減算結果はDCT・量子化器３０６へ出力され、DCT
変換後、量子化係数によって量子化される。
【０１２３】ＤＣＴ・量子化器３０６の量子化結果は、
テクスチャ符号化器３０７へ出力され、マクロブロック
の符号化モード，量子化係数，量子化結果等をMPEG-1の
符号化仕様に基づいて符号化（ハフマン符号に基くエン
トロピー符号化（可変長符号化））し、多重化器３１７
へ出力する。
【０１２４】また、DCT・量子化器３０６の出力データ
は、逆量子化・IDCT器３０８に入力され、逆量子化、逆D
CT変換を行い、画素データまたは動き補償による誤差デ
ータを獲得する。前記誤差データは、加算器３０９で動
き補償器３１２の結果と加算される。
【０１２５】加算器３０９で求められた画素値は、Iフ
レームモードおよびPフレームモードの場合のみ、参照
フレームメモリ３１０、または参照フレームメモリのう
ちより過去に符号化された画像データが格納されていた
参照フレームメモリに格納される。
【０１２６】動き補償器３１２で得られた動きベクトル
は、動き補償符号化器３１３へ出力し、動き補償符号化
器３１３は前記動きベクトルを符号化して多重化器３１
７へ出力する。
【０１２７】多重化器３１７は、テクスチャ符号化器３
０７、動き補償符号化器３１３、ヘッダ符号化器３１６
からの出力をMPEG-1の形式に従って多重化し、バッファ
３１８へ出力する。
【０１２８】バッファ３１８に蓄積された符号化データ
は、出力端子３２０から出力される。また、バッファ内
に蓄積されている符号量をレート制御器３１９が監視
し、DCT・量子化器３０６の量子化係数を変化させて符
号の発生量を制御する。
【０１２９】次に、セキュリティがかかり、セキュリテ
ィ情報が許可から禁止になる場合について説明する。
【０１３０】この時、フレームモード設定器３１５はセ
キュリティ情報が許可から禁止になる直前のフレームモ
ードによってフレームモードの変更を行う。図１１にそ
の様子を示す。
【０１３１】図１１は、セキュリティ情報が許可から禁
止になる場合の符号化モードの変更の様子を説明する図
である。
【０１３２】図１１において、I*はIフレームモードで
符号化されたフレームを示し、P*はPフレームモードで
符号化されたフレームを示し、B*はBフレームモードで
符号化されたフレームを示す。また矢印はセキュリティ
によって禁止になる位置を表している。
【０１３３】図１１（ａ）は、動画像データの先頭であ
る場合、またはgroup of Pictureの先頭でclosed_gop符
号（MPEG符号データに含まれるデータのひとつでGOP内
の画像が他のGOPから独立再生可能なことを示すフラ
グ）が１であった場合で、I0の次のB1から復号が禁止に
なる場合を示している。この時、符号化の順番において
もI0で復号を終了しても、復号ができなかったり、復号
画像が乱れるフレームが無いので、フレームモードの変
更は行われない。
【０１３４】図１１（ｂ）は、I0、B1に続いて次のB2か
ら復号が禁止になる場合を示している。この時、P3は表
示の順番でB1の後に表示されるが、符号ではP3はB1の前
にあるため、P3を復号すると復号側で表示される可能性
がある。従って、本来BフレームであるB1のフレームをP
フレームモードで符号化することに変更する。すると図
１１（ｂ）に示す変更後符号順に示すようになり、Ｐ3
は参照されなくなる。このとき、P3のフレームがIフレ
ームモードで符号化されていても同様にフレームモード
の変更を行う。
【０１３５】図１１（ｃ）は、I0、B1、B2に続いて次の
P3から復号が禁止になる場合を示している。この時、図
１１（ｂ）に示した場合と同様に符号ではP3はB2の前に
あるため、P3を復号すると復号側で表示される可能性が
ある。従って、本来BフレームであるB1、B2のフレーム
をPフレームモードで符号化することに変更する。する
と図１１（ｃ）に示す変更後符号順に示すようになり、
P3は参照されなくなる。このとき、P3のフレームがIフ
レームモードで符号化されていても同様にフレームモー
ドの変更を行う。
【０１３６】図１１（ｄ）は、P3の次から復号が禁止に
なる場合を示している。この時、符号ではP3はB1、B2の
前にあるため、B1、B2が復号されない可能性がある。従
って、本来BフレームであるB1、B2のフレームをPフレー
ムモードで符号化することに変更する。すると図１１
（ｄ）に示す変更後符号順に示すようになり、復号側で
特別な構成をとらずともかならず、P1、P2が復号され
る。この時、図１１（ｅ）のようにP3のフレームがIフ
レームモードで符号化されていても同様にフレームモー
ドの変更を行う。
【０１３７】次に、セキュリティが解除され、セキュリ
ティ情報が禁止から許可になる場合について説明する。
【０１３８】この時、フレームモード設定器３１５はセ
キュリティ情報が禁止から許可になる前後のフレームモ
ードによってフレームモードの変更を行う。図１２にそ
の様子を示す。
【０１３９】図１２は、セキュリティ情報が禁止から許
可になる場合の符号化モードの変更の様子を説明する図
である。
【０１４０】図１２において、矢印はセキュリティが解
除され復号可能になる位置を表している。
【０１４１】図１２（ａ）は、動画像データの先頭であ
る場合、またはgroup of Pictureの先頭でclosed_gop符
号が１であった場合で、I0の次のB1から復号が許可とな
る場合を示している。この時、I0に続くB1、B2、P3おい
て、I0を参照しているために復号が正しく行えないとい
う問題が生じる。このため、B1のフレームをIフレーム
モードで符号化することに変更する。すると図１２
（ａ）に示す変更後符号順に示すようになり、復号側で
特別な構成をとらずともかならず、B2、P3も正しく表示
される。I3のフレームがIフレームモードで符号化され
ていても同様にフレームモードの変更を行う。
【０１４２】図１２（ｂ）は、I0、B1に続いて次のB2か
ら復号が許可になる場合を示している。この時、B2、P3
において、I0を参照しているために復号が正しく行えな
いという問題が生じる。このため、B2のフレームをIフ
レームモードで符号化し、B2のフレームをPフレームモ
ードで符号化することに変更する。すると図１２（ｂ）
に示す変更後符号順に示すようになり、復号側で特別な
構成をとらずともかならず、I2、P3も正しく表示され
る。P3のフレームがIフレームモードで符号化されてい
ても同様にフレームモードの変更を行う。
【０１４３】図１２（ｃ）は、I0、B1、B2に続いて次の
P3から復号が許可になる場合を示している。この時、P3
はI0を参照しているために復号が正しく行えないという
問題が生じる。またP3の後にB1、B2があり、これらの復
号や表示の処理をどうするかという問題が生じる。この
ため、符号の順を正しくするためにB1、B2のフレームを
Pフレームモードで符号化し、B2のフレームをPフレーム
モードで符号化することに変更する。すると図１２
（ｃ）に示す変更後符号順に示すようになり、復号側で
特別な構成をとらずともかならず、P3が正しく表示され
る。P3のフレームがIフレームモードで符号化されてい
ても同様にフレームモードの変更を行う。
【０１４４】図１２（ｄ）は、P3の次から復号が許可に
なる場合を示している。この時、符号ではP3はB1、B2の
前にあるため、B1、B2を復号してしまう可能性がある。
このため、B1、B2の符号化データがP3の前にある必要が
生じる。従って、B1、B2のフレームをPフレームモード
で符号化することに変更する。すると図１２（ｄ）に示
す変更後符号順に示すようになり、復号側で特別な構成
をとらずともかならず、P3が正しく表示される。P3のフ
レームがIフレームモードで符号化されていても同様に
フレームモードの変更を行う。尚、図示されていないが
P3の後の画面はIフレームモードで符号化されるように
フレームモードの変更を行う。
【０１４５】または、図１２（ｅ）に示すようにB1をI0
とP2を参照して符号化するようにし、B2のフレームをP
フレームモードで符号化しても構わない。
【０１４６】これらの符号化モードにしたがって符号化
し、セキュリティに関する符号化モードの変更がない場
合は通常の周期で符号化する。
【０１４７】出力端子３２０から出力された動画像の符
号化データは第１の実施例と同様にセキュリティ符号化
データと多重化器１００２で多重化される。
【０１４８】復号処理に関しては第１の実施例と同様な
ので説明は省略する。
【０１４９】上述したような一連の選択動作によりセキ
ュリティによって復号が停止させられたり、再開させら
れたりするフレーム及びその前後のフレームに対して、
フレームモードを変更し、セキュリティによるの復号の
停止／許可を跨いで動き補償を行わないことで復号側に
特別な仕組みを設けなくても、フレームの画像が乱れた
り、復号動作が中断したりすることを容易に防止するこ
とができる。
【０１５０】例えば、図１３に示すようにP1〜B30まで
の符号化フレーム期間が著作権の保護（Security）がか
かり、認証できなくても、Securityがかかった時点か
ら、そのSecurityがかかる直前のフレームのP11フレー
ムの表示が続くようになり、Securityが解除された次の
フレームがIフレームに必ずなっているので、Security
が解除された次のフレームから正しく復号でき、画像の
途切れや画像の乱れがなくなり、しかもSecurityの解除
後の画像復帰までに遅延（画面飛び）が全くなくなり、
正常な画像をユーザーに提示することができる。
【０１５１】尚、上記実施例では復号が禁止されている
期間、禁止直前に復号された画像が出力されることにな
るが、所定の画像を予めメモリ等に記憶しておき、その
所定画像を出力するようにしてもよい。
【０１５２】また、本実施例においてメモリ構成等は適
宜変更可能である。動画像の符号化はMPEG-1符号化方式
に限定されず、フレームをフィールドとすることでMPEG
-2符号化方式でも可能であり、H.261, H.263等の符号化
方式でも可能なことは言うまでもない。
【０１５３】また、 I B B B P B B B P B B B P B B B I B B B P B B B P
… とGOP内の構成が変わっても、復号が停止時には、図１
４や図１５に示すように、再開時には、図１６に示すよ
うにフレーム及びその前後のフレームに対して、フレー
ムモードを変更し、セキュリティによるの復号の停止／
許可を跨いで動き補償を行わないことによって、復号側
に特別な仕組みを設けなくても、フレームの画像が乱れ
たり、復号動作が中断したりすることを容易に防止する
ことができる。このように任意の周期において実施がか
のうであることは言うでもない。
【０１５４】ＢフレームモードをＰフレームモードに変
更するだけではなく、Ｉフレームモードに変更すること
も可能である。
【０１５５】＜第３の実施例＞図１７は、本発明の第３
の実施例としての画像処理装置の構成を示すブロック図
である。
【０１５６】図１７において、４００は動画像符号化デ
ータを記憶する記憶装置である。尚、本実施例では説明
を簡単にするために動画像の符号化方式として双方向予
測符号化を用いていないH.261, H263方式を使用したと
する。尚、本実施例は双方向予測符号化モード（Ｂフレ
ームモード）を使用しないMPEG-1,2方式にも適用可能で
ある。
【０１５７】４０１は動画像の一部または全てに再生を
許可したり、禁止したりするセキュリティ情報を設定す
るセキュリティ設定部、４０２は動画像符号化データを
セキュリティ設定部の指示に従って変換する符号変換
部、４０３はセキュリティ情報を符号化するセキュリテ
ィ符号化部、４０４はセキュリティ符号データと動画像
符号データを多重化し動画像データを生成する多重化
器、４０５は動画像データを記憶する記憶装置である。
【０１５８】上記のように構成された装置における動画
像データの処理動作を以下で説明する。
【０１５９】不図示の操作者は、記憶装置４００に記憶
されている動画像符号化データを選択する。また、動画
像符号化データに対して、著作権の保護を開始する時
刻、著作権の保護を終了する時刻、セキュリティを解除
する解除キーを示すセキュリティ情報をセキュリティ設
定部４０１に入力する。
【０１６０】セキュリティ設定部４０１は、入力された
セキュリティ情報を禁止が発生する時刻順に並び替え、
これを動画像の対応するフレームを認識するために保持
しておく。セキュリティ符号化部４０３はこれらのセキ
ュリティ情報を符号化し、多重化器４０４に出力する。
【０１６１】符号変換部４０２は対応するフレーム、及
びその周囲のフレームに関して符号を変換する。
【０１６２】ここで、符号変換部４０２を詳細に説明す
る。
【０１６３】図１８は、第３の実施例における符号変換
部４０２の詳細なブロック図を示す。
【０１６４】図１８において、４５１は動画像符号化デ
ータを入力する入力端子、４５２はH.261或いはH.263符
号化方式で符号化された符号化データをヘッダ符号と画
像符号化データに分離する分離器である。
【０１６５】尚、前記ヘッダ符号とは、符号の特性を示
す情報、例えば各種スタートコード、画像のサイズ、ビ
ットレート、フレームモード等を符号化した符号であ
る。前記画像符号化データとは量子化結果の符号、動き
ベクトルの符号、マクロブロックの符号化モード等、動
画像の画像を表す符号である。
【０１６６】４５３,４５４は分離器４５２によって分
離されたそれぞれの符号を一時格納するバッファ、４５
５はセキュリティ設定部４０１からフレーム単位のセキ
ュリティを入力する入力端子、４５６はフレーム毎に設
定されたセキュリティを判定して各部に指示を出すセキ
ュリティ設定指示器、４５７，４６２はヘッダ符号を復
号するヘッダ復号器である。
【０１６７】４５８，４５９，４６０，４６１はセキュ
リティ設定指示器４５６の指示に従って入出力を選択す
るセレクタ、４６３はヘッダ情報を符号化するヘッダ符
号化器、４６４は画像符号化データを復号して動画像の
画像を得る復号器、４６５は動画像の画像を符号化して
画像符号化データを得る符号化器である。
【０１６８】４６６は発生した符号を多重化しH.261或
いはH.263符号化データを獲得する多重化器、４６７は
多重化器４６６から得られた動画像符号化データを出力
する出力端子である。
【０１６９】上記のように構成された符号変換部４０２
における符号化処理を以下で説明する。
【０１７０】入力端子４５１から動画像データが順次入
力され、分離器４５２でヘッダ符号と画像符号化データ
に分離される。前記ヘッダ符号はバッファ４５３に、前
記画像符号化データはバッファ４５４に格納される。
【０１７１】バッファ４５３に格納されたヘッダ符号
は、ヘッダ復号器４５７で復号され、フレームの符号化
モードを獲得し、セキュリティ設定指示器４５６へ出力
する。
【０１７２】セキュリティ設定指示器４５６は、各フレ
ームに対してセキュリティがかかっているか否かを判定
し、セキュリティが開始されたフレームとセキュリティ
が解除されたフレームの時間的に周囲のフレームのフレ
ームモードを解析する。
【０１７３】その解析の結果、フレームモードの変更が
必要なフレームに対してはセレクタ４５８，４５９，４
６０，４６１を操作してヘッダ復号器４６２、ヘッダ符
号化器４６３、復号器４６４、符号化器４６５を介する
ように設定し、ヘッダ符号化器４６３に変更したフレー
ムモードを入力する。変更が必要の無い場合はそれぞれ
を通過する入出力を選択する。
【０１７４】最初に、セキュリティがかからず、セキュ
リティ設定指示器４５６で変更が必要でない場合につい
て説明する。
【０１７５】セキュリティ設定指示器４５６は、セレク
タ４５８，４５９，４６０，４６１にヘッダ復号器４６
２、ヘッダ符号化器４６３、復号器４６４、符号化器４
６５を通過させるように指示を出す。バッファ４５３，
４５４に格納されたそれぞれの符号化データをフレーム
単位で読み出し、多重化器４６６に出力する。多重化器
４６６は分離器４５２とは逆の動作を行い、入力と同じ
符号を生成し、出力端子４６７から出力する。
【０１７６】次に、セキュリティがかかり、セキュリテ
ィ情報が許可から禁止になる場合について説明する。
【０１７７】この時、第１の実施例と同様にフレームモ
ードは変更しない。即ち、セキュリティがかからない場
合と同じ処理を行う。
【０１７８】最後に、セキュリティが解除され、セキュ
リティ情報が禁止から許可になる場合について説明す
る。
【０１７９】この時、フレームモード設定器３０４は、
解除された最初のフレームのフレームモードを強制的に
Iフレームモードとする。第１の実施例と同様に次のIフ
レームまでPフレームモードで符号化を行う。
【０１８０】即ち、セキュリティ設定指示器４５６はセ
レクタ４５８，４５９，４６０，４６１にヘッダ復号器
４６２、ヘッダ符号化器４６３、復号器４６４、符号化
器４６５を経由するように指示を出す。
【０１８１】つまり、以下のような動作が行われる。
【０１８２】バッファ４５３、４５４に格納されたそれ
ぞれの符号化データをフレーム単位で読み出し、ヘッダ
復号器４６２はヘッダ符号を復号し、ヘッダ符号化器４
６３でフレームモードに関する情報を置換して符号化す
る。ヘッダ符号化器４６３で得られた符号化データはセ
レクタ４５９を介して多重化器４６６に出力する。
【０１８３】また、復号器４６４は画像データを復号
し、フレームの画像データを再生し、符号化器４６５は
セキュリティ設定指示器４５６が指示するフレームモー
ドで符号化する。符号化器４６５で得られた符号化デー
タはセレクタ４６１を介して多重化器４６６に出力す
る。
【０１８４】多重化器４６６は、分離器４５２とは逆の
動作を行い、符号化データを多重化して出力端子４６７
から出力する。それ以降はセキュリティが許可の状態と
変らない動作を行う。
【０１８５】このような一連の選択動作により符号化デ
ータをセキュリティの状態にしたがって変換することに
よって、セキュリティを追加しても復号側でフレームの
画像が乱れたり、復号動作が中断したりすることを容易
に防止することができる。
【０１８６】尚、本実施例においてメモリ構成等は適宜
変更可能である。また、動画像の符号化はH.261, 263符
号化方式に限定されず、MPEG-1, 2符号化方式でも可能
であり、各オブジェクトに対して同様な操作を行うこと
でMPEG-4でも可能である。
【０１８７】＜第４の実施例＞第４の実施例の画像処理
装置の構成は図１７の構成と同様であり，符号化変換部
４０２の内部構成及び処理が異なり、他は第３の実施例
と同様である。従って、ここでは第２の実施例における
ビデオ符号化部４０２の構成及び動作のみを説明する。
尚、本実施例では説明を簡単にするために動画像の符号
化方式として双方向予測符号化を用いるMPEG-1方式を使
用したとする。本実施例ではMPEG-1,2,4およびH.261,H.
263方式にも適用可能である。
【０１８８】次に、本実施例での符号変換部４０２を詳
細に説明する。
【０１８９】図１９は、第４の実施例における符号変換
部４０２の詳細なブロック図を示す。
【０１９０】図１９において、４７１は動画像符号化デ
ータを入力する入力端子、４７２はMPEG−1符号化方式
で符号化された符号化データをヘッダ符号と画像符号化
データに分離する分離器である。
【０１９１】尚、前記ヘッダ符号とは、符号の特性を示
す情報、例えば各種スタートコード、画像のサイズ、ビ
ットレート、フレームモード等を符号化した符号であ
る。前記画像符号化データとは量子化結果の符号、動き
ベクトルの符号、マクロブロックの符号化モード等、動
画像の画像を表す符号である。
【０１９２】４７３,４７４は分離器４７２によって分
離されたそれぞれの符号を一時格納するバッファ、４７
５はセキュリティ設定部４０１からフレーム単位のセキ
ュリティを入力する入力端子、４７６はフレーム毎に設
定されたセキュリティを判定して各部に指示を出すセキ
ュリティ設定指示器、４７７，４８２はヘッダ符号を復
号するヘッダ復号器である。
【０１９３】４７８，４７９，４８０，４８１はセキュ
リティ設定指示器４７６の指示に従って入出力を選択す
るセレクタ、４８３はヘッダ情報を符号化するヘッダ符
号化器、４８４は画像符号化データを復号して動画像の
画像を得る復号器、４８５は動画像の画像を符号化して
画像符号化データを得る符号化器である。
【０１９４】４８６は発生した符号を多重化しMPEG−1
符号化データを獲得する多重化器、４８７は多重化器４
８６から得られた動画像符号化データを出力する出力端
子である。
【０１９５】４８８は各フレームのフレームモードとセ
キュリティ設定指示器４７６から出力されるセキュリテ
ィ情報からフレームモードを設定するフレームモード設
定器である。
【０１９６】上記のように構成された第４の実施例の符
号変換部４０２における符号化処理を以下で説明する。
【０１９７】入力端子４７１から動画像データが順次入
力され、分離器４７２でヘッダ符号と画像符号化データ
に分離される。前記ヘッダ符号はバッファ４７３に、前
記画像符号化データはバッファ４７４に格納される。
【０１９８】バッファ４７３に格納されたヘッダ符号
は、ヘッダ復号器４７７で復号され、フレームの符号化
モードを獲得し、セキュリティ設定指示器４７６へ出力
する。
【０１９９】セキュリティ設定指示器４７６は、各フレ
ームに対してセキュリティがかかっているか否かを判定
し、セキュリティが開始されたフレームとセキュリティ
が解除されたフレームの時間的に周囲のフレームのフレ
ームモードを解析する。
【０２００】その解析の結果、フレームモードの変更が
必要なフレームに対してはセレクタ４７８，４７９，４
８０，４８１を操作してヘッダ復号器４８２、ヘッダ符
号化器４８３、復号器４８４、符号化器４８５を介する
ように設定し、ヘッダ符号化器４８３に変更したフレー
ムモードを入力する。変更が必要の無い場合はそれぞれ
を通過する入出力を選択する。
【０２０１】最初に、セキュリティがかからず、セキュ
リティ設定指示器４７６で変更が必要でない場合につい
て説明する。
【０２０２】セキュリティ設定指示器４７６は、セレク
タ４７８，４７９，４８０，４８１にヘッダ復号器４８
２、ヘッダ符号化器４８３、復号器４８４、符号化器４
８５を通過させるように指示を出す。また、フレームモ
ード設定器４８８も動作させない。
【０２０３】バッファ４７３，４７４に格納されたそれ
ぞれの符号化データをフレーム単位で読み出し、多重化
器４８６に出力する。多重化器４８６は、分離器４７２
とは逆の動作を行い、入力と同じ符号を生成し、出力端
子４８７から出力する。
【０２０４】次に、セキュリティがかかり、セキュリテ
ィ情報が許可から禁止になる場合について説明する。
【０２０５】この時、第２の実施例と同様にフレームモ
ードを変更する。フレームモード設定器４８８を動作さ
せる。フレームモード設定器４８８はセキュリティがか
かるタイミングが図１１（ａ）から図１１（ｄ）のいず
れかを判定し、その前後のフレームの符号化モードを決
定する。
【０２０６】セキュリティ設定指示器４７６はセレクタ
４７８，４７９，４８０，４８１にヘッダ復号器４８
２、ヘッダ符号化器４８３、復号器４８４、符号化器４
８５を経由するように指示を出す。
【０２０７】つまり、以下のような動作が行われる。
【０２０８】バッファ４７３,４７４に格納されたそれ
ぞれの符号化データをフレーム単位で読み出し、ヘッダ
復号器４８２はヘッダ符号を復号し、ヘッダ符号化器４
８３でフレームモードに関する情報を置換して符号化す
る。ヘッダ符号化器４８３で得られた符号化データはセ
レクタ４７９を介して多重化器４８６に出力する。
【０２０９】また、復号器４８４は画像データを復号
し、フレームの画像データを再生し、符号化器４８５は
セキュリティ設定指示器４７６が指示するフレームモー
ドで符号化する。符号化器４８５で得られた符号化デー
タはセレクタ４８１を介して多重化器４８６に出力す
る。次のIフレームまで周期的に定められたフレームモ
ードで復号・符号化を行う。
【０２１０】多重化器４８６は、分離器４７２とは逆の
動作を行い、符号化データを多重化して出力端子４８７
から出力する。それ以降はセキュリティが許可の状態と
変らない動作を行う。
【０２１１】最後に、セキュリティが解除され、セキュ
リティ情報が禁止から許可になる場合について説明す
る。
【０２１２】この時、フレームモード設定器４８８は、
第２の実施例と同様にフレームモードを変更する。フレ
ームモード設定器４８８はセキュリティがかかるタイミ
ングが図１２（ａ）から図１２（ｄ）のいずれかを判定
し、その前後のフレームの符号化モードを決定する。セ
キュリティがかけられた時と同様に復号・符号化を行
い、符号化データを多重化して出力端子４６７から出力
する。それ以降はセキュリティが許可の状態と変らない
動作を行う。
【０２１３】このような一連の選択動作により符号化デ
ータをセキュリティの状態にしたがって変換することに
よって、セキュリティを追加しても復号側でフレームの
画像が乱れたり、復号動作が中断したりすることを容易
に防止することができる。
【０２１４】尚、本実施例においてメモリ構成等は適宜
変更可能である。また、動画像の符号化はMPEG-１符号
化方式に限定されず、MPEG- 2符号化方式でも可能であ
り、各オブジェクトに対して同様な操作を行うことでMP
EG-4でも可能である。
【０２１５】＜第５の実施例＞図２０は、本発明の第５
の実施例としての画像処理装置の構成を示すブロック図
である。
【０２１６】図２０において、５００は装置全体の制
御、及び種々の処理を行う中央演算装置（CPU）、５０
１は本装置の制御に必要なオペレーティングシステム
（OS）、ソフトウェア、演算に必要な必要な記憶領域を
提供するメモリである。
【０２１７】５０２は種々の装置をつなぎ、データ、制
御信号をやり取りするバス、５０３は動画像データを蓄
積する記憶装置、５０４は通信回路であり、LAN、公衆
回線、無線回線、放送電波等で構成されている。
【０２１８】５０５は通信回路５０４から動画像データ
を受信する通信インターフェース、５０６は表示する動
画像のフレームデータを格納する表示フレームメモリ、
５０７は再生された動画像を表示するモニタである。
【０２１９】メモリ５０１のメモリの使用、格納状況を
図２１に示す。
【０２２０】メモリ５０１には装置全体を制御し、各種
ソフトウェアを動作させるためのOS、音声や動画像の同
期制御のための情報を符号化した符号化データを符号化
するSystemsエンコーダソフト、著作権等の保護を行う
ための符号化データを符号化するセキュリティエンコー
ダソフト、動画像の符号化を行う動画像エンコーダソフ
ト、音声等の符号化を行うオーエンコーダコーダソフト
が格納されている。
【０２２１】また、符号化する画像を動き補償時に参照
するために格納する画像エリア、各種演算のパラメータ
等を格納しておくワーキングエリアが存在する。
【０２２２】このような構成において、処理に先立ち、
Systemsデコーダを動作させ、動画像と音声の同期等を
別途監視させる。記憶装置５０３または通信インターフ
ェース５０５からセキュリティ符号化データ、動画像符
号化データ、音声符号化データで構成される動画像デー
タが入力し、メモリ５０１のワークエリアに格納する。
尚、動画像符号化データはH.263で符号化されたものと
して説明を続けるが、動き補償を行う符号化方式であれ
ば構わない。
【０２２３】次に、記憶装置５０３に格納されている動
画像データのCPU５００による符号化動作を図２２に示
すフローチャートに従って説明する。
【０２２４】まず、動画像エンコーダソフトを動作させ
て先頭フレームをIフレームモードで符号化する。動画
像データが記憶装置５０３から入力されているか否かを
ステップS02で判断し、動画像データが入力されている
場合はステップS03へ進み、動画像データが入力されて
いない時はフローを終了する。
【０２２５】ステップS03では、セキュリティエンコー
ダソフトを動作させ、当該動画像フレームについてセキ
ュリティ情報を決定する。セキュリティ情報が禁止から
許可となった(Restart)場合はステップS05へ進み、それ
以外はステップS04へ進む。
【０２２６】ステップS04では、動画像エンコーダソフ
トを動作させて動画像をH.263の符号化方式に従ってPフ
レームで符号化する。Pフレームの符号化に関しては同
一位置のマクロブロックが連続する１３２フレームに１
度はフレーム内符号化するように設定されている。この
動画像符号化データにセキュリティ情報を多重化してメ
モリ５０１のワークエリアに格納し、ステップS02に戻
る。
【０２２７】ステップS05では、動画像エンコーダソフ
トを動作させて動画像をH.263の符号化方式に従ってIフ
レームで符号化する。この動画像符号化データにセキュ
リティ情報を多重化してメモリ５０１のワークエリアに
格納し、ステップS02に戻る。
【０２２８】このようにして生成され、ワークエリアに
格納された符号化データは符号化終了とともに読み出さ
れ、記憶装置３０３に蓄積されたり、通信インターフェ
ース３０５を介して通信回路５０４に送出されたりす
る。
【０２２９】このような一連の選択動作によりセキュリ
ティが解除され、復号可能になった時に、画面の途切れ
や乱れがない、正しく復号が可能になる符号化を行う装
置の一部、または全てをソフトウェアで実現することが
可能になる。
【０２３０】＜第６の実施例＞第６の実施例の画像処理
装置の構成は図２０の構成と同様である。第６の実施例
と第５の実施例とでは、記憶装置５０３に格納されてい
る動画像データのCPU５００による符号化動作が異な
る。従って、ここでは符号化動作についてのみ説明す
る。
【０２３１】記憶装置５０３に格納されている動画像デ
ータのCPU５００による符号化動作を図２３、図２４に
示すフローチャートに従って説明する。
【０２３２】まず、動画像データが記憶装置５０３から
入力されているか否かをステップS11で判断し、動画像
データが入力されている場合はステップS１２へ進み、
動画像データが入力されていない時はフローを終了す
る。
【０２３３】ステップS12では、セキュリティエンコー
ダソフトを動作させ、当該動画像フレームについてセキ
ュリティ情報を決定し、セキュリティ情報が禁止（Ｓｔ
ｏｐ）でなければステップS13へ進み、禁止であればス
テップS14へ進む。
【０２３４】ステップS13では、動画像エンコーダソフ
トを動作させ、先頭フレームをIフレームモードで符号
化する。以降、予め定めた周期にしたがって、Iフレー
ムモードで符号化するフレーム、Pフレームモードで符
号化するフレーム、Bフレームモードで符号化するフレ
ーム決定して符号化し、セキュリティ情報を多重化して
メモリ５０１のワークエリアに格納し、ステップS11に
戻る。
【０２３５】ステップS14では、許可状態の最終フレー
ム（図１１中の太枠で囲まれたフレーム）のフレームモ
ードがIフレームモードか否かを判定する。最終フレー
ムがIフレームであればステップS15へ進み、それ以外で
あればステップS17へ進む。
【０２３６】ステップS15では、最終フレームより前の
フレームが前記Iフレームを参照して符号化しているか
否かを判定する。参照していなければステップS20へ進
み、それ以外はステップS16へ進む。
【０２３７】ステップS16では、最終フレーム前のIフレ
ームより前のBフレームモードで符号化する予定であっ
たフレームでそれより前のPフレームまたはIフレームま
でのフレームをPフレームモードで符号化し、セキュリ
ティ情報を多重化してメモリ５０１のワークエリアに格
納し、ステップS20へ進む。
【０２３８】ステップS17では、許可状態の最終フレー
ムのフレームモードがBフレームモードか否かを判定す
る。最終フレームがBフレームであればステップS18へ進
み、それ以外であればステップS19へ進む。
【０２３９】ステップS18では、最終フレーム前のBフレ
ームを含めてそれより前のBフレームモードで符号化す
る予定であったフレームで最終フレームより前のPフレ
ームまたはIフレームまでのフレームをPフレームモード
で符号化し、セキュリティ情報を多重化してメモリ５０
１のワークエリアに格納し、ステップS20へ進む。
【０２４０】ステップS19では、最終フレーム前のPフレ
ームより前のBフレームモードで符号化する予定であっ
たフレームで最終フレームより前のPフレームまたはIフ
レームまでのフレームをPフレームモードで符号化しス
テップS20へ進む。
【０２４１】ステップS20では、セキュリティエンコー
ダソフトを動作させ、当該動画像フレームについてセキ
ュリティ情報を決定する。セキュリティ情報が禁止から
許可となった(Restart)場合はステップS22へ進み、それ
以外はステップS21へ進む。
【０２４２】ステップS21では、動画像エンコーダソフ
トを動作させて動画像をMPEG-2符号化方式に従って予め
定められた周期によって各フレームモードで符号化し、
セキュリティ情報を多重化してメモリ５０１のワークエ
リアに格納する。
【０２４３】ステップS22では、セキュリティ情報が禁
止から許可に変る直前、すなわちセキュリティがかけら
れた最終フレームがフレームモードBで符号化する予定
であれば、ステップS23へ進み、それ以外はステップS24
へ進む。
【０２４４】ステップS23では、最終フレームおよび最
終フレームより前のPフレームまたはIフレームまでのフ
レームをPフレームモードで符号化し、セキュリティ情
報を多重化してメモリ５０１のワークエリアに格納して
ステップS26へ進む。
【０２４５】ステップS24では、セキュリティがかけら
れた最終フレームの１つ前のフレームがフレームモード
Bで符号化する予定か否かを判定する。フレームモードB
で符号化する予定であればステップS25に進み、それ以
外であればステップS26へ進む。
【０２４６】ステップS25では、最終フレームより前のP
フレームまたはIフレームまでのフレームをPフレームモ
ードで符号化し、セキュリティ情報を多重化してメモリ
５０１のワークエリアに格納してステップS26へ進む。
【０２４７】ステップS26では、セキュリティ情報が禁
止から許可に変った先頭のフレームをIフレームモード
で符号化し、セキュリティ情報を多重化してメモリ５０
１のワークエリアに格納し、ステップS11に戻る。
【０２４８】このようにして生成され、ワークエリアに
格納された符号化データは符号化終了とともに読み出さ
れ、記憶装置３０３に蓄積されたり、通信インターフェ
ース３０５を介して通信回路５０４に送出されたりす
る。
【０２４９】セキュリティによって復号が停止させられ
たり、再開させられたりするフレーム及びその前後のフ
レームに対して、フレームモードを変更し、セキュリテ
ィによるの復号の停止／許可を跨いで動き補償を行わな
いことで復号側に特別な仕組みを設けなくても、フレー
ムの画像が乱れたり、復号動作が中断したりすることを
容易に防止することができる。
【０２５０】＜その他の実施例＞本発明は複数の機器
（たとえばホストコンピュータ、インタフェース機器、
リーダ、プリンタ等）から構成されるシステムに適用し
ても一つの機器（たとえばコーデック、デジタルカメ
ラ）からなる装置に適用してもよい。
【０２５１】また前述した実施形態の機能を実現する様
に各種のデバイスを動作させる様に該各種デバイスと接
続された装置あるいはシステム内のコンピュータに、前
記実施形態機能を実現するためのソフトウエアのプログ
ラムコードを供給し、そのシステムあるいは装置のコン
ピュータ（CPUあるいはMPU）を格納されたプログラムに
従って前記各種デバイスを動作させることによって実施
したものも本願発明の範疇に含まれる。
【０２５２】またこの場合、前記ソフトウエアのプログ
ラムコード自体が前述した実施形態の機能を実現するこ
とになり、そのプログラムコード自体、及びそのプログ
ラムコードをコンピュータに供給するための手段、例え
ばかかるプログラムコードを格納した記憶媒体は本発明
を構成する。
【０２５３】かかるプログラムコードを格納する記憶媒
体としては例えばフロッピーディスク、ハードディス
ク、光ディスク、光磁気ディスク、CD-ROM,、磁気テー
プ、不揮発性のメモリカード、ROM等を用いることが出
来る。
【０２５４】またコンピュータが供給されたプログラム
コードを実行することにより、前述の実施形態の機能が
実現されるだけではなく、そのプログラムコードがコン
ピュータにおいて稼働しているOS（オペレーティングシ
ステム）、あるいは他のアプリケーションソフト等と共
同して前述の実施形態の機能が実現される場合にもかか
るプログラムコードは本願発明の実施形態に含まれるこ
とは言うまでもない。
【０２５５】更に供給されたプログラムコードが、コン
ピュータの機能拡張ボードやコンピュータに接続された
機能拡張ユニットに備わるメモリに格納された後そのプ
ログラムコードの指示に基づいてその機能拡張ボードや
機能格納ユニットに備わるCPU等が実際の処理の一部ま
たは全部を行い、その処理によって前述した実施形態の
機能が実現される場合も本願発明に含まれることは言う
までもない。
【０２５６】また、セキュリティ符号化データのフォー
マット、認証方式、著作権等を保護する部分の指定法式
等は上記実施例に限定されず、他のフォーマット、認証
方式等を用いてももちろん構わない。
【０２５７】
【発明の効果】以上の説明から明らかなように、本発明
では、動画像の著作権保護による動画像の停止・再生を
好適に処理することができる。これにより、復号時のデ
コーダの動作においてエラー発生を防ぎ安全かつ確実に
動作させるとともに、不適切な動き補償に基づく画像の
乱れ等を防ぐことができる。
【図面の簡単な説明】
【図１】本発明の第１の実施例における画像処理装置の
構成を示すブロック図である。
【図２】本発明の第１の実施例におけるセキュリティ符
号化部１０００の構成を示すブロック図である。
【図３】本発明の第１の実施例におけるセキュリティ符
号化データを説明するための図である。
【図４】本発明の第１の実施例におけるビデオ符号化部
１００１の構成を示すブロック図である。
【図５】本発明の第１の実施例におけるセキュリティ復
号部１００６の構成を示すブロック図である。
【図６】本発明の第１の実施例におけるビデオ復号部１
００７の構成を示すブロック図である。
【図７】本発明の第１の実施例における復号動作の様子
を説明するための図である。
【図８】本発明の実施例における音声と動画像に対応し
たセキュリティ符号化データを説明するための図であ
る。
【図９】本発明の実施例におけるMPEG-4マルチオブジェ
クトに対応したセキュリティ符号化データを説明するた
めの図である。
【図１０】本発明の第２の実施例におけるビデオ符号化
部１００１の構成を示すブロック図である。
【図１１】本発明の第２の実施例におけるセキュリティ
情報が許可から禁止になる場合の符号化モードの変更の
様子を説明する図である。
【図１２】本発明の第２の実施例におけるセキュリティ
情報が禁止から許可になる場合の符号化モードの変更の
様子を説明する図である。
【図１３】本発明に第２の実施例における復号動作の様
子を説明するための図である。
【図１４】本発明の第２の実施例におけるセキュリティ
情報が許可から禁止になる場合の符号化モードの変更の
様子を説明する図である。
【図１５】本発明の第２の実施例におけるセキュリティ
情報が許可から禁止になる場合の符号化モードの変更の
様子を説明する図である。
【図１６】本発明に第２の実施例におけるセキュリティ
情報が禁止から許可になる場合の符号化モードの変更の
様子を説明するための図である。
【図１７】本発明の第３の実施例における画像処理装置
の構成を示すブロック図である。
【図１８】本発明の第３の実施例における符号変換部４
０２の構成を示すブロック図である。
【図１９】本発明の第４の実施例における符号化変換部
４０２の構成を示すブロック図である。
【図２０】本発明の第５の実施例における画像処理装置
の構成を示すブロック図である。
【図２１】メモリ５０１のメモリの使用、格納状況を表
す図である。
【図２２】本発明の第５の実施例における動作を示すフ
ローチャートである。
【図２３】本発明の第６の実施例における動作を示すフ
ローチャートである。
【図２４】本発明の第６の実施例における動作を示すフ
ローチャートである。
【図２５】従来例の復号の様子を説明するための図であ
る。
【図２６】従来例の復号の様子を説明するための図であ
る。
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK43 MA00 MA02 MA05 MB02 PP04 PP05 PP06 PP07 RB01 RB18 RC12 RC16 RC35 SS06 TA18 TA23 TA25 TB18 TC36 TD05

Claims (32)

    【特許請求の範囲】
  1. 【請求項１】 画像データを入力する入力手段と、 前記画像データを保護するためのセキュリティデータを
    生成する生成手段と、 複数種の符号化モードを用いて前記画像データを符号化
    する符号化手段と、 前記セキュリティデータに応じて前記符号化手段の符号
    化モードを制御する制御手段と有することを特徴とする
    画像処理装置。
  2. 【請求項２】 前記複数種の符号化モードは、少なくと
    もイントラ符号化モードとインター符号化モードとを有
    することを特徴とする請求項１記載の画像処理装置。
  3. 【請求項３】 前記インター符号化モードは、前方向予
    測符号化モードであることを特徴とする請求項２記載の
    画像処理装置。
  4. 【請求項４】 前記インター符号化モードは、双方向予
    測符号化モードであることを特徴とする請求項２又は３
    記載の画像処理装置。
  5. 【請求項５】 前記制御手段は、前記セキュリティデー
    タ生成手段により再生不許可から再生許可になった場
    合、再生許可になった直後の画像データをイントラ符号
    化するように符号化モードを制御することを特徴とする
    請求項２乃至４記載の画像処理装置。
  6. 【請求項６】 前記制御手段は、前記セキュリティデー
    タ生成手段により再生許可から再生不許可になった場
    合、再生不許可になる少なくとも直前の画像データを前
    方向予測符号化するように符号化モードを制御すること
    を特徴とする請求項４記載の画像処理装置。
  7. 【請求項７】 前記制御手段は、前記セキュリティデー
    タ生成手段により再生許可から再生不許可になった場
    合、再生不許可になる少なくとも直前の画像データをイ
    ントラ符号化するように符号化モードを制御することを
    特徴とする請求項２乃至５記載の画像処理装置。
  8. 【請求項８】 前記画像データは、動画像データである
    ことを特徴とする請求項１乃至７記載の画像処理装置。
  9. 【請求項９】 前記符号化手段は、ＭＰＥＧ−１に準拠
    した符号化処理を行うことを特徴とする請求項８記載の
    画像処理装置。
  10. 【請求項１０】 前記符号化手段は、ＭＰＥＧ−２に準
    拠した符号化処理を行うことを特徴とする請求項８記載
    の画像処理装置。
  11. 【請求項１１】 前記符号化手段は、Ｈ．２６１に準拠
    した符号化処理を行うことを特徴とする請求項８記載の
    画像処理装置。
  12. 【請求項１２】 前記符号化手段は、Ｈ．２６３に準拠
    した符号化処理を行うことを特徴とする請求項８記載の
    画像処理装置。
  13. 【請求項１３】 前記符号化手段は、１画面をＮ個（Ｎ
    は自然数）のオブジェクトに分割し、前記オブジェクト
    毎に符号化処理することを特徴とする請求項１乃至８記
    載の画像処理装置。
  14. 【請求項１４】 前記制御手段は、前記オブジェクト単
    位で符号化処理を制御することを特徴とする請求項１３
    記載の画像処理装置。
  15. 【請求項１５】 前記セキュリティデータは、少なくと
    も前記オブジェクトを識別する為の符号を含むことを特
    徴とする請求項１３又は１４記載の画像処理装置。
  16. 【請求項１６】 前記セキュリティデータは、少なくと
    も著作権を認証するための符号を含むことを特徴とする
    請求項１乃至１５記載の画像処理装置。
  17. 【請求項１７】 前記入力手段によって入力される画像
    データは、複数種の符号化モードを用いて符号化された
    画像データであることを特徴とする請求項１乃至１６記
    載の画像処理装置。
  18. 【請求項１８】 前記入力手段によって入力される画像
    データは、少なくともイントラ符号化された符号化デー
    タとインター符号化された符号化データとを含むことを
    特徴とする請求項１７記載の画像処理装置。
  19. 【請求項１９】 前記インター符号化とは、前方向予測
    符号化であることを特徴とする請求項１８記載の画像処
    理装置。
  20. 【請求項２０】 前記インター符号化は、双方向予測符
    号化であることを特徴とする請求項１８又は１９記載の
    画像処理装置。
  21. 【請求項２１】 前記符号化手段は、前記入力手段によ
    って入力された画像データを再符号化処理することを特
    徴とする請求項１７乃至２０記載の画像処理装置。
  22. 【請求項２２】 前記制御手段は、前記入力手段によっ
    て入力される画像データの符号化モードに応じて前記符
    号化手段の再符号化処理を実行するか否かを制御するこ
    とを特徴とする請求項１７乃至２１記載の画像処理装
    置。
  23. 【請求項２３】 前記制御手段は、前記セキュリティデ
    ータ生成手段により再生不許可から再生許可になった場
    合、再生許可になった直後の画像データをイントラ符号
    化するように前記符号化手段を制御することを特徴とす
    る請求項２２記載の画像処理装置。
  24. 【請求項２４】 前記制御手段は、前記セキュリティデ
    ータ生成手段により再生許可から再生不許可になった場
    合、再生不許可になる少なくとも直前の画像データを前
    方向予測符号化するように前記符号化手段を制御するこ
    とを特徴とする請求項２２又は２３記載の画像処理装
    置。
  25. 【請求項２５】 前記制御手段は、前記セキュリティデ
    ータ生成手段により再生許可から再生不許可になった場
    合、再生不許可になる少なくとも直前の画像データをイ
    ントラ符号化するように前記符号化手段を制御すること
    を特徴とする請求項２２乃至２４記載の画像処理装置。
  26. 【請求項２６】 前記入力手段によって入力される画像
    データは、１画面をＮ個（Ｎは自然数）のオブジェクト
    に分割され、前記オブジェクト毎に符号化処理された符
    号化データであることを特徴とする請求項１７乃至２５
    記載の画像処理装置。
  27. 【請求項２７】 前記入力手段によって入力される画像
    データは、Ｈ．２６１に準拠した符号化データであるこ
    とを特徴とする請求項１７乃至２５記載の画像処理装
    置。
  28. 【請求項２８】 前記入力手段によって入力される画像
    データは、Ｈ．２６３に準拠した符号化データであるこ
    とを特徴とする請求項１７乃至２５記載の画像処理装
    置。
  29. 【請求項２９】 前記入力手段によって入力される画像
    データは、ＭＰＥＧ−１に準拠した符号化データである
    ことを特徴とする請求項１７乃至２５記載の画像処理装
    置。
  30. 【請求項３０】 前記入力手段によって入力される画像
    データは、ＭＰＥＧ−２に準拠した符号化データである
    ことを特徴とする請求項１７乃至２５記載の画像処理装
    置。
  31. 【請求項３１】 画像データを入力し、 前記画像データを保護するためのセキュリティデータを
    生成し、 前記セキュリティデータに応じて符号化モードを制御
    し、 前記制御された符号化モードを用いて前記画像データを
    符号化することを特徴とする画像処理方法。
  32. 【請求項３２】 画像処理プログラムが記録されたコン
    ピュータ可読記録媒体であって、 画像データを入力する入力工程の手順コードと、 セキュリティデータを生成する生成工程の手順コード
    と、 複数種の符号化モードを用いて前記画像データを符号化
    する符号化工程の手順コードと、 前記セキュリティデータに応じて前記符号化工程の符号
    化モードを制御する制御工程の手順とを記録したことを
    特徴とする画像処理プログラムが記録されたコンピュー
    タ可読記録媒体。
JP10929399A 1998-12-18 1999-04-16 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体 Expired - Fee Related JP3976942B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP10929399A JP3976942B2 (ja) 1998-12-18 1999-04-16 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体
US09/459,859 US6965643B1 (en) 1998-12-18 1999-12-14 Image processing apparatus and method, and storage medium storing image processing program
DE1999638220 DE69938220T2 (de) 1998-12-18 1999-12-16 Vorrichtung und Verfahren zur Bildverarbeitung, und Bildverarbeitungsprogramm speicherndes Speichermedium
EP19990310134 EP1014724B1 (en) 1998-12-18 1999-12-16 Image processing apparatus and method, and storage medium storing image processing program
AT99310134T ATE387809T1 (de) 1998-12-18 1999-12-16 Vorrichtung und verfahren zur bildverarbeitung, und bildverarbeitungsprogramm speicherndes speichermedium
CNB991229959A CN1231062C (zh) 1998-12-18 1999-12-17 图像处理装置和方法
KR10-1999-0059126A KR100386104B1 (ko) 1998-12-18 1999-12-18 화상처리 장치 및 방법 및 화상처리 프로그램을 기록하는기록매체

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP10-360772 1998-12-18
JP36077298 1998-12-18
JP10929399A JP3976942B2 (ja) 1998-12-18 1999-04-16 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体

Publications (2)

Publication Number Publication Date
JP2000236553A true JP2000236553A (ja) 2000-08-29
JP3976942B2 JP3976942B2 (ja) 2007-09-19

Family

ID=26449073

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10929399A Expired - Fee Related JP3976942B2 (ja) 1998-12-18 1999-04-16 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体

Country Status (7)

Country Link
US (1) US6965643B1 (ja)
EP (1) EP1014724B1 (ja)
JP (1) JP3976942B2 (ja)
KR (1) KR100386104B1 (ja)
CN (1) CN1231062C (ja)
AT (1) ATE387809T1 (ja)
DE (1) DE69938220T2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7664182B2 (en) 2001-08-31 2010-02-16 Panasonic Corporation Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7177857B2 (en) * 2000-11-24 2007-02-13 Matsushita Electric Industrial Co., Ltd. Apparatus and method for creating distribution content
US20020077984A1 (en) * 2000-12-19 2002-06-20 Mark Ireton Enabling protected digital media to be shared between playback devices
GB0130041D0 (en) * 2001-12-14 2002-02-06 Ibm Preparing multimedia content in a distributed data processing system
FR2835386B1 (fr) 2002-01-31 2004-05-28 Daniel Lecomte Dispositif pour la diffusion securisee, l'acces conditionnel, la visualisation controlee, la copie privee et la gestion des droits de contenus audiovisuels de type mpeg-4
US7336720B2 (en) * 2002-09-27 2008-02-26 Vanguard Software Solutions, Inc. Real-time video coding/decoding
JP2006035631A (ja) * 2004-07-27 2006-02-09 Konica Minolta Business Technologies Inc 画像形成装置および画像形成システム
US8073049B2 (en) 2007-02-01 2011-12-06 Google Inc. Method of coding a video signal
US8023562B2 (en) 2007-09-07 2011-09-20 Vanguard Software Solutions, Inc. Real-time video coding/decoding
US8526488B2 (en) 2010-02-09 2013-09-03 Vanguard Software Solutions, Inc. Video sequence encoding system and algorithms
US8693551B2 (en) 2011-11-16 2014-04-08 Vanguard Software Solutions, Inc. Optimal angular intra prediction for block-based video coding
US9106922B2 (en) 2012-12-19 2015-08-11 Vanguard Software Solutions, Inc. Motion estimation engine for video encoding
US11265599B2 (en) 2019-06-11 2022-03-01 Nvidia Corporation Re-encoding predicted picture frames in live video stream applications

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5353062A (en) 1991-04-25 1994-10-04 Canon Kabushiki Kaisha Method and apparatus for decoding moving images encoded by inter-frame prediction and displaying it
KR950013093A (ko) 1993-10-19 1995-05-17 모리시타 요이찌 스크램블전송장치 및 난수발생장치
US5761223A (en) 1994-07-21 1998-06-02 Matsushita Electric Industrial Co., Ltd. Error correcting device
JPH0888618A (ja) 1994-07-21 1996-04-02 Matsushita Electric Ind Co Ltd 誤り訂正装置
JPH08149462A (ja) 1994-11-24 1996-06-07 Nec Corp 画像パケット符号化装置および復号化装置
JP2842796B2 (ja) 1994-12-06 1999-01-06 富士通株式会社 動画像の暗号化処理方法及び装置及び暗号化された動画像の復号化処理方法及び装置
US5926209A (en) * 1995-07-14 1999-07-20 Sensormatic Electronics Corporation Video camera apparatus with compression system responsive to video camera adjustment
KR0166923B1 (ko) 1995-09-18 1999-03-20 구자홍 디지탈 방송 시스템의 불법 시청 및 복사 방지방법 및 장치
JPH09116596A (ja) 1995-10-24 1997-05-02 Matsushita Electric Ind Co Ltd 移動通信用動画像データ伝送装置
TW330999B (en) 1996-03-08 1998-05-01 Matsushita Electric Ind Co Ltd Microprocessor suitable for reproducing AV data while protecting the AV data from illegal copy and image information processing system using the microprocessor
JPH1174868A (ja) 1996-09-02 1999-03-16 Toshiba Corp 情報伝送方法およびその方法が適用される情報伝送システムにおける符号化装置／復号化装置、並びに符号化・多重化装置／復号化・逆多重化装置
US5805700A (en) 1996-10-15 1998-09-08 Intel Corporation Policy based selective encryption of compressed video data
JP3817312B2 (ja) * 1996-11-29 2006-09-06 キヤノン株式会社 制御方法及び装置と撮像システム及び表示操作装置とのその方法
JP3684525B2 (ja) * 1998-02-19 2005-08-17 富士通株式会社 多画面合成方法及び多画面合成装置
CA2425741C (en) 1998-03-16 2006-05-23 Intertrust Technologies Corporation Methods and apparatus for continuous control and protection of media content
US6385772B1 (en) * 1998-04-30 2002-05-07 Texas Instruments Incorporated Monitoring system having wireless remote viewing and control
US6535919B1 (en) 1998-06-29 2003-03-18 Canon Kabushiki Kaisha Verification of image data

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7664182B2 (en) 2001-08-31 2010-02-16 Panasonic Corporation Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US8040954B2 (en) 2001-08-31 2011-10-18 Panasonic Corporation Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US8699579B2 (en) 2001-08-31 2014-04-15 Panasonic Corporation Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US9325988B2 (en) 2001-08-31 2016-04-26 Panasonic Intellectual Property Corporation Of America Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US9602844B2 (en) 2001-08-31 2017-03-21 Panasonic Intellectual Property Corporation Of America Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US9826255B2 (en) 2001-08-31 2017-11-21 Panasonic Intellectual Property Corporation Of America Picture coding method, picture decoding method and apparatuses thereof
US9986265B2 (en) 2001-08-31 2018-05-29 Panasonic Intellectual Property Corporation Of America Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US9986264B2 (en) 2001-08-31 2018-05-29 Panasonic Intellectual Property Corporation Of America Picture coding method, picture decoding method and apparatuses thereof
US10015524B2 (en) 2001-08-31 2018-07-03 Panasonic Intellectual Property Corporation Of America Picture coding and decoding apparatuses and methods performing variable length coding and decoding on a slice header stream and arithmetic coding and decoding on a slice data stream
US10405006B2 (en) 2001-08-31 2019-09-03 Panasonic Intellectual Property Corporation Of America Picture coding and decoding method and apparatuses with variable length code on a header and arithmetic decoding on a frame
US10595051B2 (en) 2001-08-31 2020-03-17 Panasonic Intellectual Property Corporation Of America Picture coding apparatus that codes on a macroblock basis by performing a signal conversion process
US10602194B2 (en) 2001-08-31 2020-03-24 Panasonic Intellectual Property Corporation Of America Picture coding apparatus that codes on a macroblock basis by performing a signal conversion process

Also Published As

Publication number Publication date
DE69938220D1 (de) 2008-04-10
KR20000048237A (ko) 2000-07-25
EP1014724A2 (en) 2000-06-28
CN1231062C (zh) 2005-12-07
ATE387809T1 (de) 2008-03-15
EP1014724B1 (en) 2008-02-27
CN1264251A (zh) 2000-08-23
EP1014724A3 (en) 2001-10-10
DE69938220T2 (de) 2009-02-19
KR100386104B1 (ko) 2003-06-02
JP3976942B2 (ja) 2007-09-19
US6965643B1 (en) 2005-11-15

Similar Documents

Publication Publication Date Title
JP2842796B2 (ja) 動画像の暗号化処理方法及び装置及び暗号化された動画像の復号化処理方法及び装置
KR100416032B1 (ko) 화상처리장치 및 화상처리방법, 그리고화상처리프로그램기억용의 기록매체
US8218949B2 (en) Video information recording device, video information recording method, and recording medium containing the video information recording program
JPH09121358A (ja) 画像符号化及び復号化装置と方法
KR20010031222A (ko) 트랜스코딩 방법 및 장치
JP3976942B2 (ja) 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体
JP4018335B2 (ja) 画像復号装置及び画像復号方法
JP4853647B2 (ja) 動画像変換方法、動画像変換装置、動画像変換システムおよびサーバ装置並びにプログラム
JP3852366B2 (ja) 符号化装置および方法、復号装置および方法、並びにプログラム
US20040103446A1 (en) Audio-video multiplexed data generating apparatus, reproducing apparatus and moving video decoding apparatus
JP4010617B2 (ja) 画像復号化装置及び画像復号化方法
JP2002199392A (ja) 映像符号化方法および装置
JPH08251582A (ja) 符号化データ編集装置
KR100626419B1 (ko) 비디오 전송에서 비트 스트림들간의 교환
JPH08140047A (ja) 画像データ記録装置
JP4217316B2 (ja) 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体
JP4193224B2 (ja) 動画像符号化装置及び方法並びに動画像復号装置及び方法
JP2914368B1 (ja) 時報に合わせた動画像信号符号化方法及び装置
KR0128878B1 (ko) 엠펙 비트 스트림 포맷을 이용하는 점프 장치 및 그 방법
JP3461280B2 (ja) 動画像編集装置および動画像編集方法
JP2000312359A (ja) 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体
JP2005051818A (ja) 画像処理装置及び方法、画像処理プログラムが記録されたコンピュータ可読記録媒体
JP2000295567A (ja) 符号化データ編集装置
JP2000197062A (ja) 暗号化機能付き画像符号化装置と暗号解読機能付き画像復号化装置
JPH06236663A (ja) 編集装置及び編集信号復号化装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040608

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050322

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070417

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070524

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070619

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070620

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100629

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110629

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120629

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120629

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130629

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees