JP5933860B2 - Movie playback device - Google Patents

Movie playback device Download PDF

Info

Publication number
JP5933860B2
JP5933860B2 JP2015555881A JP2015555881A JP5933860B2 JP 5933860 B2 JP5933860 B2 JP 5933860B2 JP 2015555881 A JP2015555881 A JP 2015555881A JP 2015555881 A JP2015555881 A JP 2015555881A JP 5933860 B2 JP5933860 B2 JP 5933860B2
Authority
JP
Japan
Prior art keywords
moving image
image data
color
target object
transparency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2015555881A
Other languages
Japanese (ja)
Other versions
JPWO2015111131A1 (en
Inventor
喬之 築谷
喬之 築谷
恭一 益冨
恭一 益冨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Application granted granted Critical
Publication of JP5933860B2 publication Critical patent/JP5933860B2/en
Publication of JPWO2015111131A1 publication Critical patent/JPWO2015111131A1/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/74—Circuits for processing colour signals for obtaining special effects
    • H04N9/76—Circuits for processing colour signals for obtaining special effects for mixing of colour signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/40—Filling a planar surface by adding surface attributes, e.g. colour or texture
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)
  • Studio Circuits (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Description

この発明は、単一動画データから複数のカラーバリエーションに対応した動画データを再生する動画再生装置に関するものである。   The present invention relates to a moving image reproducing apparatus for reproducing moving image data corresponding to a plurality of color variations from a single moving image data.

自動車や家電製品、衣服など同一形状で複数のカラーバリエーションを持つ物体が登場する動画データを作成するときに、そのカラーバリエーション全てに対して同じ内容の動画データを用意したい場合、あらかじめカラーバリエーション分だけ動画データを生成しておく必要がある。   When creating moving image data that includes objects with multiple color variations in the same shape, such as automobiles, home appliances, and clothes, if you want to prepare moving image data with the same content for all of the color variations, only the color variations in advance It is necessary to generate video data.

ところが、その場合、カラーバリエーションの数に比例してファイル容量を消費してしまうという問題や、新たにカラーバリエーションが追加された場合に、毎回動画データを生成する手間がかかってしまうという問題がある。   However, in that case, there is a problem that the file capacity is consumed in proportion to the number of color variations, and there is a problem that it takes time to generate video data every time a new color variation is added. .

これに対する解決策として、複数のカラーバリエーションに対応して、単一動画データ中の対象物体のみの色を、動画再生時に変更することが考えられる。単一の画像データから、複数の画像を生成する手法としては、例えば、特許文献１では、前景となる映像のうち３次元指示手段によって指示された部分を透明とし、背景となる映像と合成する手法が開示されている。また、特許文献２では、対象物体が背景画像上に影を落としている場合に、影を保持したまま背景画像を変更する手法が開示されている。   As a solution to this, it is conceivable to change the color of only the target object in the single moving image data when reproducing the moving image, corresponding to a plurality of color variations. As a method for generating a plurality of images from a single image data, for example, in Patent Document 1, a portion designated by a three-dimensional instruction means in a foreground image is made transparent and synthesized with a background image. A technique is disclosed. Patent Document 2 discloses a method for changing a background image while retaining the shadow when the target object casts a shadow on the background image.

特開平１１−２２４３２１号公報JP-A-11-224321 特表２００２−５２４００３号公報Special table 2002-524003 gazette

しかしながら、特許文献１は、動画データの中の対象物体に着目した合成はなされないため、対象物体の色だけを変更することはできないという課題があった。また、特許文献２は、対象物体に着目はしているが、そこから背景に落とされる影を対象としており、特許文献１と同じく、対象物体の色だけを変更することはできないという課題があった。   However, Patent Document 1 has a problem in that it is not possible to change only the color of the target object because synthesis is not performed focusing on the target object in the moving image data. Patent Document 2 focuses on the target object, but targets a shadow dropped on the background from the target object. Like Patent Document 1, there is a problem that it is not possible to change only the color of the target object. It was.

この発明は、上記のような課題を解決するためになされたものであり、動画データ中に表示される対象物体について、単一動画データから複数のカラーバリエーションに対応した動画データを再生時に生成することができる動画再生装置を提供することを目的とする。   The present invention has been made to solve the above-described problems, and generates moving image data corresponding to a plurality of color variations from a single moving image data for a target object displayed in the moving image data during reproduction. An object of the present invention is to provide a moving image reproducing apparatus that can perform the above-described operation.

この発明に係る動画再生装置は、透明度を有する対象物体と、対象物体上の陰影と光沢のうちの少なくとも一つと、背景画像とを含む動画データを格納する動画データ格納部と、動画データ格納部から動画データを取り出し、動画データの背後に、設定変更可能な色の領域を配置し、動画データと領域とを合成して、透明度に応じた領域の色を対象物体の色に設定する動画制御部とを備え、対象物体は、複数の透明度を有し、動画制御部は、設定変更可能な色の領域を複数配置し、複数の透明度各々に応じて対象物体の色を設定することを特徴とするものである。 A moving image reproducing apparatus according to the present invention includes a moving image data storage unit that stores moving image data including a target object having transparency, at least one of a shadow and a gloss on the target object, and a background image, and a moving image data storage unit Video control that takes out video data from the video, places an area of color that can be changed behind the video data, combines the video data and the area, and sets the color of the area according to the transparency as the color of the target object A target object has a plurality of transparency, and the moving image control unit arranges a plurality of color regions whose settings can be changed, and sets the color of the target object according to each of the plurality of transparency. It is what.

この発明によれば、動画データ中に表示される対象物体について、単一動画データから複数のカラーバリエーションに対応した動画データを再生時に生成することができる。   According to the present invention, it is possible to generate moving image data corresponding to a plurality of color variations from a single moving image data for a target object displayed in the moving image data.

この発明の実施の形態１に係る動画再生装置の構成図である。1 is a configuration diagram of a moving image playback device according to Embodiment 1 of the present invention. FIG. 動画データ格納部に格納される動画データの一例を示す図である。It is a figure which shows an example of the moving image data stored in a moving image data storage part. この発明の実施の形態１におけるアニメーション生成手法の概観図である。It is a general-view figure of the animation production | generation method in Embodiment 1 of this invention. この発明の実施の形態１に係る動画再生装置の動作のフローチャートである。It is a flowchart of operation | movement of the moving image reproducing apparatus which concerns on Embodiment 1 of this invention. この発明の実施の形態２に係る動画再生装置の動作のフローチャートである。It is a flowchart of operation | movement of the moving image reproducing apparatus which concerns on Embodiment 2 of this invention. この発明の実施の形態３におけるアニメーション生成手法の概観図である。It is a general-view figure of the animation production | generation method in Embodiment 3 of this invention. この発明の実施の形態３に係る動画再生装置の動作のフローチャートである。It is a flowchart of operation | movement of the moving image reproducing device which concerns on Embodiment 3 of this invention.

以下、この発明の実施の形態について添付の図面を参照しながら詳細に説明する。
実施の形態１．
図１は、この発明の実施の形態１に係る動画再生装置１０１の構成図である。
図１に示すように、動画再生装置１０１は、動画データ格納部１０２と、動画制御部１０３とを備える。Embodiments of the present invention will be described below in detail with reference to the accompanying drawings.
Embodiment 1 FIG.
FIG. 1 is a block diagram of a moving image playback apparatus 101 according to Embodiment 1 of the present invention.
As shown in FIG. 1, the moving image playback apparatus 101 includes a moving image data storage unit 102 and a moving image control unit 103.

動画データ格納部１０２は、再生する動画のもととなる動画データを格納する。なお、この実施の形態１では、動画データにおいて、対象物体２０１と対象物体上の陰影部や光沢部は単一の透明度を有する。この実施の形態１においては、例えば、対象物体２０１を透明、対象物体上の陰影と光沢のうちの少なくとも一つを半透明、背景画像２０３を不透明とする透明度を有し、対象物体２０１と、対象物体２０１上の陰影と光沢のうちの少なくとも一つと、背景画像２０３とが統合されて格納されている（図２を用いて後述する）ものとする。
動画制御部１０３は、動画データ格納部１０２から動画データを取り出し、動画データの背後に、設定変更可能な色の領域を配置し、動画データと当該領域とを合成して、透明度に応じた領域の色を対象物体２０１の色に設定し、表示装置１０４に表示する。The moving image data storage unit 102 stores moving image data that is a source of a moving image to be reproduced. In the first embodiment, in the moving image data, the target object 201 and the shaded part and the glossy part on the target object have a single transparency. In the first embodiment, for example, the target object 201 is transparent, at least one of shadow and gloss on the target object is translucent, and the background image 203 is opaque. Assume that at least one of the shadow and gloss on the target object 201 and the background image 203 are integrated and stored (described later with reference to FIG. 2).
The moving image control unit 103 takes out moving image data from the moving image data storage unit 102, arranges an area of a color whose setting can be changed behind the moving image data, combines the moving image data and the area, and an area corresponding to the transparency. Is set to the color of the target object 201 and displayed on the display device 104.

図２は、動画データ格納部１０２に格納される動画データの一例を示す図である。
なお、動画データ格納部１０２に格納される動画データは、動画を構成するフレームの集合であり、図２は、そのフレームの例である。
また、動画データ格納部１０２には、色変更の対象となる物体が一つ登場する動画であれば、あらゆる動画データを格納することができるが、ここでは、図２に示すように、対象物体２０１として直方体が一つ登場する動画データを例に説明する。FIG. 2 is a diagram illustrating an example of moving image data stored in the moving image data storage unit 102.
The moving image data stored in the moving image data storage unit 102 is a set of frames constituting the moving image, and FIG. 2 shows an example of the frames.
In addition, in the moving image data storage unit 102, any moving image data can be stored as long as one moving object appears as a color change target. Here, as shown in FIG. An example will be described with reference to 201 as moving image data in which one rectangular parallelepiped appears.

図２において、白色であらわされる直方体が対象物体２０１であり、ここでは、実際にはこの部分は透明となっている。
また、対象物体２０１の図中で、手前の頂点付近は、対象物体２０１上の陰影と光沢のうちの少なくとも一つをあらわす陰影・光沢部２０２であり、実際にはこの部分は半透明となっている。
さらに、横縞であらわされているのが背景画像２０３であり、この部分は完全な不透明である。In FIG. 2, a rectangular parallelepiped represented by white is the target object 201, and here, this portion is actually transparent.
Further, in the drawing of the target object 201, the vicinity of the front vertex is a shadow / gloss portion 202 that represents at least one of the shadow and gloss on the target object 201, and this portion is actually translucent. ing.
Further, the background image 203 is represented by horizontal stripes, and this portion is completely opaque.

動画ではなく静止画であれば、対象物体２０１と同じ輪郭で単一色のレイヤーと背景画像を背後に配置すればよいが、動画で同じ構成にしようとすると、元々の動画データの他に輪郭だけを持った動画データを別途持っておく必要が生じ、二つの動画データを同時に再生することになってしまい、動画データサイズや再生時の処理の負荷が大きくなってしまう。そこで、この発明の実施の形態１においては、このように、対象物体２０１と陰影・光沢部２０２と背景画像２０３とを一つの動画に統合することで、動画データサイズや再生時の処理の負荷が大きくなってしまうという問題を回避している。   If it is not a movie but a still image, it is sufficient to arrange a single color layer and a background image with the same outline as the target object 201, but if you try to make the same configuration with a movie, only the outline in addition to the original movie data Therefore, it becomes necessary to separately have the moving image data having “”, and the two moving image data are reproduced at the same time, thereby increasing the moving image data size and the processing load during reproduction. Therefore, in the first embodiment of the present invention, as described above, the target object 201, the shadow / gloss portion 202, and the background image 203 are integrated into one moving image, so that the moving image data size and the processing load at the time of reproduction are increased. This avoids the problem of becoming large.

次に、この発明の実施の形態１に係る動画再生装置１０１の動作について説明する。
図３は、この発明の実施の形態１におけるアニメーション生成手法の概観図である。
図４は、この発明の実施の形態１に係る動画再生装置１０１の動作のフローチャートである。
動画制御部１０３は、動画データ格納部１０２から、動画データを一つ取り出し、動画レイヤー３０１として配置する（ステップＳＴ４０１）。
動画制御部１０３は、ステップＳＴ４０１で取り出した動画データの背後に、動画レイヤー３０１と同じ大きさで、動画制御部１０３によって自由に色を変更可能な単一色の矩形３０２を配置する（ステップＳＴ４０２）。なお、図３では、分かりやすいように矩形３０２はドット模様としているが、実際には模様のない単一色で塗りつぶされた矩形である。Next, the operation of the video playback device 101 according to Embodiment 1 of the present invention will be described.
FIG. 3 is an overview diagram of the animation generation method according to Embodiment 1 of the present invention.
FIG. 4 is a flowchart of the operation of the moving image playback apparatus 101 according to Embodiment 1 of the present invention.
The moving image control unit 103 extracts one moving image data from the moving image data storage unit 102 and arranges it as the moving image layer 301 (step ST401).
The moving image control unit 103 arranges a single-color rectangle 302 having the same size as the moving image layer 301 and whose color can be freely changed by the moving image control unit 103 behind the moving image data extracted in step ST401 (step ST402). . In FIG. 3, the rectangle 302 is a dot pattern for easy understanding, but is actually a rectangle filled with a single color without a pattern.

動画制御部１０３は、動画再生時に、動画データと矩形３０２とを合成して表示装置１０４に表示する（ステップＳＴ４０３）。ステップＳＴ４０３において、動画制御部１０３が、動画データと矩形３０２とを合成した結果が、図３に示す生成結果３０３である。
生成結果３０３では、背景部分は背景画像２０３（図２参照）がそのまま反映されており、対象物体２０１部分は矩形３０２の色となっている。さらに、陰影・光沢部２０２は半透明であるため、矩形３０２の色が合成されたような見た目になっている。The moving image control unit 103 combines the moving image data and the rectangle 302 and displays them on the display device 104 during reproduction of the moving image (step ST403). In step ST <b> 403, the result of combining the moving image data and the rectangle 302 by the moving image control unit 103 is a generation result 303 illustrated in FIG. 3.
In the generation result 303, the background part reflects the background image 203 (see FIG. 2) as it is, and the target object 201 part has a color of a rectangle 302. Further, since the shade / gloss portion 202 is translucent, it looks as if the color of the rectangle 302 is synthesized.

以上のように、実施の形態１によれば、透明度を有する対象物体２０１と、対象物体２０１上の陰影と光沢のうちの少なくとも一つ（陰影・光沢部２０２）と、背景画像とを含む動画データを格納する動画データ格納部１０２と、動画データ格納部１０２から動画データを取り出し、動画データの背後に、設定変更可能な色の領域（矩形３０２）を配置し、動画データと領域とを合成して、透明度に応じた領域の色を対象物体２０１の色に設定する動画制御部１０３とを備えたので、動画データ中に表示される対象物体２０１について、動画再生時に、一つの動画データから、任意色のカラーバリエーションに対応した動画を生成、再生することができる。また、これによって、カラーバリエーションの数が増えても動画データの保存に必要なファイルサイズは増加せず、カラーバリエーションを新たに追加するときに発生する作業も非常に軽微なものとすることができる。   As described above, according to the first embodiment, a moving image including the target object 201 having transparency, at least one of the shadow and gloss on the target object 201 (shadow / gloss portion 202), and the background image. The moving image data storage unit 102 for storing the data, the moving image data is extracted from the moving image data storage unit 102, and a color changeable area (rectangle 302) is arranged behind the moving image data to combine the moving image data and the region. Since the moving image control unit 103 sets the color of the area corresponding to the transparency to the color of the target object 201, the target object 201 displayed in the moving image data is obtained from one moving image data at the time of moving image reproduction. It is possible to generate and play back a moving image corresponding to any color variation. As a result, even if the number of color variations increases, the file size required to save moving image data does not increase, and the work that occurs when adding new color variations can be made very light. .

実施の形態２．
実施の形態１では、動画レイヤー３０１には変更を加えなかったが、この実施の形態２では、動画レイヤー３０１中の陰影・光沢部２０２の色を変更する実施の形態について説明する。
動画再生装置１０１の構成については、実施の形態１において図１で説明したものと同様であるため、重複した説明を省略する。
この発明の実施の形態２に係る動画再生装置１０１の動作について説明する。
図５は、この発明の実施の形態２に係る動画再生装置１０１の動作のフローチャートである。
なお、図５のステップＳＴ４０１，４０２，４０３は、実施の形態１において、図４で説明したステップＳＴ４０１，４０２，４０３と同様であるため、重複した説明を省略し、図４と異なる動作について説明する。Embodiment 2. FIG.
In the first embodiment, the moving image layer 301 is not changed, but in the second embodiment, an embodiment in which the color of the shadow / gloss portion 202 in the moving image layer 301 is changed will be described.
Since the configuration of the moving image playback apparatus 101 is the same as that described in FIG. 1 in the first embodiment, a duplicate description is omitted.
The operation of the moving picture playback apparatus 101 according to Embodiment 2 of the present invention will be described.
FIG. 5 is a flowchart of the operation of the moving image playback apparatus 101 according to Embodiment 2 of the present invention.
Note that steps ST401, 402, and 403 in FIG. 5 are the same as steps ST401, 402, and 403 described in FIG. 4 in the first embodiment, and thus redundant description is omitted, and operations different from those in FIG. 4 are described. To do.

実施の形態１で図２を用いて説明したように、この実施の形態２でも、動画レイヤー３０１においては、対象物体２０１は完全な透明で、陰影・光沢部２０２は半透明で、背景画像２０３に関しては完全な不透明で表される透明度を有するものとする。
そこで、ステップＳＴ４０２で動画データの背後に、さらに、動画レイヤー３０１と同じ大きさで、動画制御部１０３によって自由に色を変更可能な単一色の矩形３０２を配置した後、ステップＳＴ４０３で動画レイヤー３０１と矩形３０２とを合成する直前に、動画制御部１０３は、陰影・光沢部２０２の色のみを任意に変更する（ステップＳＴ４０４）。As described with reference to FIG. 2 in the first embodiment, also in the second embodiment, in the moving image layer 301, the target object 201 is completely transparent, the shadow / gloss portion 202 is translucent, and the background image 203 With respect to the transparency expressed in complete opacity.
In step ST402, therefore, a single color rectangle 302 having the same size as the moving image layer 301 and having a color that can be freely changed by the moving image control unit 103 is arranged behind the moving image data. Immediately before combining the rectangle 302 and the rectangle 302, the moving image control unit 103 arbitrarily changes only the color of the shadow / gloss portion 202 (step ST404).

その後、動画制御部１０３は、動画レイヤー３０１と矩形３０２とを合成して表示して（ステップＳＴ４０３）、処理終了する。
このように、ステップＳＴ４０４の処理によって、完全な透明でも完全な不透明でもない部分だけ色を変更し、あたかも対象物体に対して照射されている光源の色が変わったかのような効果を与えることができる。なお、ステップＳＴ４０４の処理は、例えば、透明度が完全な透明でも完全な不透明でもないところだけ色を変えるシェーダを適用するなどして実現可能である。Thereafter, the moving image control unit 103 combines and displays the moving image layer 301 and the rectangle 302 (step ST403), and the process ends.
As described above, by the process in step ST404, the color is changed only in a portion that is neither completely transparent nor completely opaque, and it is possible to provide an effect as if the color of the light source irradiated to the target object has changed. . Note that the process of step ST404 can be realized by applying a shader that changes the color only where the transparency is neither completely transparent nor completely opaque, for example.

以上のように、実施の形態２によれば、動画制御部１０３は、動画データと設定変更可能な色の領域（矩形３０２）とを合成する前に、透明度に応じて、対象物体２０１上の陰影と光沢のうちの少なくとも一つの色を変更するようにしたので、光源色の種類が増えても動画データの保存に必要なファイルサイズは増加せず、また、光源色の種類を新たに追加するときに発生する作業も非常に軽微なものとすることができる。さらに、陰影・光沢部２０２の色を変更する際にシェーダを用いた場合、一般にシェーダはGraphics Processing Unit（GPU）によって高速に処理されるため、実施の形態１と比べて増える処理負荷は軽微ですむ。   As described above, according to the second embodiment, the moving image control unit 103 determines whether the moving image data and the setting-changeable color area (rectangle 302) are combined on the target object 201 according to the transparency. Since at least one of the shaded and glossy colors is changed, the file size required to save movie data does not increase even if the number of light source colors increases, and a new light source color type is added. The work that occurs when doing so can also be very light. Furthermore, when a shader is used when changing the color of the shadow / gloss portion 202, the shader is generally processed at high speed by the Graphics Processing Unit (GPU), so the processing load that increases compared to the first embodiment is light. Mu

実施の形態３．
実施の形態１では、矩形３０２は１色であり、その結果として対象物体２０１は１色で構成されていたが、この実施の形態３では、２色以上での塗り分けを行う実施の形態について説明する。
動画再生装置１０１の構成については、実施の形態１において図１で説明したものと同様であるため、重複した説明を省略する。Embodiment 3 FIG.
In the first embodiment, the rectangle 302 has one color, and as a result, the target object 201 is composed of one color. However, in the third embodiment, an embodiment in which coloring is performed with two or more colors is performed. explain.
Since the configuration of the moving image playback apparatus 101 is the same as that described in FIG. 1 in the first embodiment, a duplicate description is omitted.

ただし、実施の形態１では、図２を用いて説明したように、動画レイヤー３０１においては、対象物体２０１と陰影・光沢部２０２は単一の透明度を保持していたが、この実施の形態３においては、複数の透明度を保持するように動画データを拡張する。ここで、単一の透明度とは、RGBA（Red，Green，Blue，Alpha）のように一つの画素に対して透明度（Alpha）を一つ持つことを表し、複数の透明度とは、RGBA1A2（Red，Green，Blue，Alpha1，Alpha2）のように一つの画素に対して複数の透明度を持つことを表す。   However, in the first embodiment, as described with reference to FIG. 2, in the moving image layer 301, the target object 201 and the shadow / gloss portion 202 have a single transparency, but this third embodiment. In, the moving image data is expanded so as to maintain a plurality of transparency levels. Here, single transparency means having one transparency (Alpha) for one pixel like RGBA (Red, Green, Blue, Alpha), and multiple transparency means RGBA1A2 (Red , Green, Blue, Alpha1, Alpha2), and so on.

この実施の形態３に係る動画再生装置１０１では、例えば、元々の透明度の上位ビットと下位ビットに分けて複数の透明度を格納するなどして、動画データ格納部１０２には、対象物体２０１と陰影・光沢部２０２が複数の透明度を持つ動画データが格納されているものとする。
さらに、矩形３０２も複数配置し、それぞれの透明度に関連付ける（詳細については後述する）。In the moving image playback apparatus 101 according to the third embodiment, for example, a plurality of transparency levels are stored separately in upper bits and lower bits of the original transparency, and the target object 201 and shadows are stored in the moving image data storage unit 102. It is assumed that moving image data having a plurality of transparency levels is stored in the glossy part 202.
Furthermore, a plurality of rectangles 302 are also arranged and associated with each transparency (details will be described later).

この発明の実施の形態３に係る動画再生装置１０１の動作について説明する。
図６は、この発明の実施の形態３におけるアニメーション生成手法の概観図である。
図７は、この発明の実施の形態３に係る動画再生装置１０１の動作のフローチャートである。
なお、この実施の形態３では、対象物体６０１と陰影・光沢部６０２が２つの透明度を持つものとして説明する。The operation of the moving image playback apparatus 101 according to the third embodiment of the present invention will be described.
FIG. 6 is an overview diagram of an animation generation method according to Embodiment 3 of the present invention.
FIG. 7 is a flowchart of the operation of the moving image playback apparatus 101 according to Embodiment 3 of the present invention.
In the third embodiment, it is assumed that the target object 601 and the shade / gloss portion 602 have two transparency levels.

動画制御部１０３は、動画データ格納部１０２から、動画データを一つ取り出し、動画レイヤー５０１として配置する（ステップＳＴ７０１）。
動画制御部１０３は、ステップＳＴ７０１で配置した動画データの背後に、さらに、動画レイヤー５０１と同じ大きさで、動画制御部１０３によって自由に色を変更可能な単一色の矩形５０２，５０３をそれぞれ配置する（ステップＳＴ７０２）。具体的には、図６に示すように、動画レイヤー５０１に対して、色を表示する矩形５０２，５０３が配置される。The moving image control unit 103 extracts one moving image data from the moving image data storage unit 102 and arranges it as a moving image layer 501 (step ST701).
The moving image control unit 103 further arranges single-color rectangles 502 and 503 having the same size as the moving image layer 501 and the colors that can be freely changed by the moving image control unit 103 behind the moving image data arranged in step ST701. (Step ST702). Specifically, as shown in FIG. 6, rectangles 502 and 503 for displaying colors are arranged for the moving image layer 501.

なお、ここでは、図６に示す対象物体６０１の、向かって右側の面（図６の（ａ）の部分）は、矩形５０３に対応した透明度を持ち、それ以外の面（図６の（ｂ）の部分）は矩形５０２に対応した透明度を持っているものとする。また、図６に示す対象物体６０１の向かって右側の面の陰影・光沢部６０２（図６の（ｅ）の部分）と、それ以外の陰影・光沢部６０２（図６の（ｆ）の部分）は、それぞれ矩形５０２と矩形５０３とに対応する異なる透明度を持っているものとする。例えば、対象物体の画素をＲＧＢＡ１Ａ２と定義し、Ａ１（０．０〜１．０）が矩形５０２、Ａ２（０．０〜１．０）が矩形５０３に対応しているとすると、ここでは、図６（ａ）の部分は、Ａ１が０．０，Ａ２が１．０、図６（ｂ）の部分は、Ａ１が１．０，Ａ２が０．０、図６（ｅ）の部分は、Ａ１が０．２，Ａ２が０．８、図６（ｆ）の部分は、Ａ１が０．３，Ａ２が０．２の透明度を持つものとする。
また、ここで、図６では、分かりやすいように矩形５０２，５０３はドット模様としているが、実際には模様のない単一色で塗りつぶされた矩形である。Here, the right side surface (portion (a) of FIG. 6) of the target object 601 shown in FIG. 6 has transparency corresponding to the rectangle 503, and the other surface ((b) of FIG. 6). It is assumed that the portion) has transparency corresponding to the rectangle 502. Further, the shadow / gloss portion 602 (portion (e) of FIG. 6) on the right side of the target object 601 shown in FIG. 6 and the other shadow / gloss portion 602 (portion (f) of FIG. 6). ) Have different transparency levels corresponding to the rectangle 502 and the rectangle 503, respectively. For example, if the pixel of the target object is defined as RGBA1A2, and A1 (0.0 to 1.0) corresponds to the rectangle 502 and A2 (0.0 to 1.0) corresponds to the rectangle 503, here, 6 (a) shows that A1 is 0.0 and A2 is 1.0, and FIG. 6 (b) shows that A1 is 1.0, A2 is 0.0, and FIG. 6 (e) is , A1 is 0.2, A2 is 0.8, and the portion of FIG. 6 (f) has transparency of A1 of 0.3 and A2 of 0.2.
Further, in FIG. 6, the rectangles 502 and 503 are dot patterns for easy understanding, but are actually rectangles filled with a single color having no pattern.

動画制御部１０３は、動画再生時に、動画データと矩形５０２，５０３とを合成して表示装置１０４に表示する（ステップＳＴ７０３）。なお、この時、動画制御部１０３は、対象物体６０１と陰影・光沢部６０２について、それぞれの透明度に応じて配置した矩形５０２，５０３と合成する。   The moving image control unit 103 combines the moving image data and the rectangles 502 and 503 and displays them on the display device 104 when reproducing the moving image (step ST703). At this time, the moving image control unit 103 combines the target object 601 and the shadow / gloss portion 602 with the rectangles 502 and 503 arranged according to the respective transparency.

ステップＳＴ７０３において、動画制御部１０３が、動画データと矩形５０２，５０３とを合成した結果が、図６に示す生成結果５０４である。
ここで、図６（ａ）の部分は、Ａ１が０．０，Ａ２が１．０、図６（ｂ）の部分は、Ａ１が１．０，Ａ２が０．０の透明度を持つものとするので、図６（ａ）の部分にはＡ２が対応する矩形５０３の色のみが反映され、図６（ｂ）の部分にはＡ１が対応する矩形５０２の色のみが反映されることとなる。また、図６（ｅ）の部分は、Ａ１が０．２，Ａ２が０．８、図６（ｆ）の部分は、Ａ１が０．３，Ａ２が０．２の透明度を持つものとするので、図６（ｅ），（ｆ）の部分は、それぞれの透明度に応じて、矩形５０２の色と矩形５０３の色とが混ざった色が反映されることとなる。
したがって、生成結果５０４において、対象物体６０１の、向かって右の面（図６の（ｃ）の部分）だけ矩形５０３の色が反映されており、それ以外の面（図６の（ｄ）の部分）には矩形５０２の色が反映されている。さらに、対象物体６０１の陰影・光沢部６０２は、向かって右の面（図６の（ｇ）の部分）と、それ以外の面（図６の（ｈ）の部分）にそれぞれ、矩形５０３と矩形５０２が合成されたような見た目になっている。なお、背景部分は、実施の形態１同様、背景画像６０３がそのまま反映されている。In step ST703, the result of combining the moving image data and the rectangles 502 and 503 by the moving image control unit 103 is a generation result 504 illustrated in FIG.
Here, the portion of FIG. 6A has a transparency of A1 of 0.0 and A2 of 1.0, and the portion of FIG. 6B has a transparency of A1 of 1.0 and A2 of 0.0. Therefore, only the color of the rectangle 503 corresponding to A2 is reflected in the portion of FIG. 6A, and only the color of the rectangle 502 corresponding to A1 is reflected in the portion of FIG. 6B. . 6 (e), A1 is 0.2 and A2 is 0.8, and FIG. 6 (f) is transparent with A1 being 0.3 and A2 being 0.2. Therefore, in the portions of FIGS. 6E and 6F, a color in which the color of the rectangle 502 and the color of the rectangle 503 are mixed is reflected according to the respective transparency.
Therefore, in the generation result 504, the color of the rectangle 503 is reflected only on the right side (portion (c) in FIG. 6) of the target object 601, and the other side (on (d) in FIG. 6) is reflected. The color of the rectangle 502 is reflected in (part). Furthermore, the shade / gloss portion 602 of the target object 601 has a rectangular shape 503 on the right side (portion (g) in FIG. 6) and the other side (portion (h) in FIG. 6). It looks like a rectangle 502 is synthesized. Note that the background image 603 is directly reflected in the background portion as in the first embodiment.

このように、動画データのフォーマットを変更しなくても、動画データ格納部１０２が、例えば、元々の透明度の上位ビットと下位ビットに分けるなどして複数の透明度を格納し、動画制御部１０３が、それらを取り出し、シェーダ処理などによってそれらを適切な矩形５０２，５０３と合成することによって、対象物体６０１と陰影・光沢部６０２とをそれぞれ２色に塗り分ける。
なお、ここでは、対象物体６０１と陰影・光沢部６０２はそれぞれ２色であり２つの透明度を持つ場合を例に説明したが、これに限らず、２つ以上の透明度を持つようにしてもよい。また、ここでは、２つの矩形５０２，５０３が配置されることとしたが、これに限らず、矩形の数はいくつでもよい。As described above, even if the moving image data format is not changed, the moving image data storage unit 102 stores a plurality of transparency levels by dividing the original transparency into upper bits and lower bits, for example. Then, by extracting them and combining them with appropriate rectangles 502 and 503 by shader processing or the like, the target object 601 and the shading / glossy portion 602 are each painted in two colors.
Here, the case where the target object 601 and the shadow / gloss portion 602 are each of two colors and have two transparency has been described as an example, but the present invention is not limited to this, and may have two or more transparency. . Here, the two rectangles 502 and 503 are arranged. However, the present invention is not limited to this, and the number of rectangles may be any number.

また、この実施の形態３を、実施の形態２に適用することも可能である。つまり、動画制御部１０３は、複数の矩形５０２，５０３を配置し、対象物体６０１上の陰影・光沢部６０２の色を、透明度に応じてさらに任意に変更して、動画データと矩形５０２，５０３とを合成して表示するようにすることも可能である。   Further, the third embodiment can be applied to the second embodiment. That is, the moving image control unit 103 arranges a plurality of rectangles 502 and 503, and further arbitrarily changes the color of the shadow / gloss portion 602 on the target object 601 according to the transparency, thereby moving the moving image data and the rectangles 502 and 503. Can be combined and displayed.

以上のように、実施の形態３によれば、動画制御部１０３は、設定変更可能な色の領域（矩形５０２，５０３）を複数配置し、複数の透明度各々に応じて対象物体６０１の色を設定するようにしたので、動画データ中に表示される対象物体６０１について、一つの動画データから、任意色のカラーバリエーションに対応した動画を生成、再生することができることに加え、対象物体６０１を複数の色で塗り分けられることができる。さらに、複数の透明度を適用する処理をシェーダで実施した場合は一般にシェーダはGraphics Processing Unit（GPU）によって高速に処理されるため、実施の形態１と比べて増える処理負荷は軽微である。   As described above, according to the third embodiment, the moving image control unit 103 arranges a plurality of color regions (rectangles 502 and 503) whose settings can be changed, and changes the color of the target object 601 according to each of the plurality of transparency levels. Since the setting is made, for the target object 601 displayed in the video data, a video corresponding to a color variation of an arbitrary color can be generated and reproduced from a single video data, and a plurality of target objects 601 are provided. Can be painted in different colors. Furthermore, when a process that applies a plurality of transparency levels is performed by a shader, the shader is generally processed at a high speed by a graphics processing unit (GPU), so that the processing load that increases compared to the first embodiment is light.

なお、上記実施の形態１〜３においては、対象物体２０１，６０１が動画領域中のどの部分に表示されるかわからないため、動画レイヤー３０１と同じ大きさの矩形３０２，５０２，５０３を配置するものとしたが、これに限らず、動画の透明部分、または、完全な不透明でない部分、つまり、対象物体２０１，６０１を覆う部分が色づけされる大きさであればよく、形状についても、矩形３０２，５０２，５０３に限らず、任意の形状とすればよい。
また、上記実施の形態１〜３において、動画データ格納部１０２は、ＨＤＤ、ＤＶＤ、メモリなどによって構成され、動画制御部１０３は、ソフトウェアに基づくＣＰＵを用いたプログラム処理によって実行されるものである。In the first to third embodiments, since it is not known in which part of the moving image area the target objects 201 and 601 are displayed, rectangles 302, 502, and 503 having the same size as the moving image layer 301 are arranged. However, the present invention is not limited to this, and any size may be used as long as the transparent portion of the moving image or the completely non-opaque portion, that is, the portion covering the target objects 201 and 601 is colored. The shape is not limited to 502 and 503 and may be any shape.
In the first to third embodiments, the moving image data storage unit 102 includes an HDD, a DVD, a memory, and the like, and the moving image control unit 103 is executed by program processing using a CPU based on software. .

なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。   In the present invention, within the scope of the invention, any combination of the embodiments, or any modification of any component in each embodiment, or omission of any component in each embodiment is possible. .

この発明に係る動画再生装置は、動画データ中に表示される対象物体について、単一動画データから複数のカラーバリエーションに対応した動画データを再生時に生成することができることができるため、単一動画データから複数のカラーバリエーションに対応した動画データを再生する動画再生装置等に適用することができる。   The moving image reproducing apparatus according to the present invention can generate moving image data corresponding to a plurality of color variations from a single moving image data for a target object displayed in the moving image data. Therefore, the present invention can be applied to a moving image reproducing apparatus that reproduces moving image data corresponding to a plurality of color variations.

１０１ 動画再生装置、１０２ 動画データ格納部、１０３ 動画制御部、１０４ 表示装置、２０１，６０１ 対象物体、２０２，６０２ 陰影・光沢部、２０３，６０３ 背景画像、３０１，５０１ 動画レイヤー、３０２，５０２，５０３ 矩形、３０３，５０４ 生成結果。   DESCRIPTION OF SYMBOLS 101 moving image reproducing apparatus, 102 moving image data storage part, 103 moving image control part, 104 display apparatus, 201,601 target object, 202,602 shadow / gloss part, 203,603 background image, 301,501 moving image layer, 302,502, 503 Rectangle, 303, 504 Generation result.

Claims (2)

透明度を有する対象物体と、前記対象物体上の陰影と光沢のうちの少なくとも一つと、背景画像とを含む動画データを格納する動画データ格納部と、
前記動画データ格納部から前記動画データを取り出し、前記動画データの背後に、設定変更可能な色の領域を配置し、前記動画データと前記領域とを合成して、前記透明度に応じた前記領域の色を前記対象物体の色に設定する動画制御部とを備え、
前記対象物体は、複数の前記透明度を有し、
前記動画制御部は、前記設定変更可能な色の領域を複数配置し、前記複数の透明度各々に応じて前記対象物体の色を設定する
ことを特徴とする動画再生装置。 A moving image data storage unit that stores moving image data including a target object having transparency, at least one of a shadow and a gloss on the target object, and a background image;
The moving image data is extracted from the moving image data storage unit, a color changeable region is arranged behind the moving image data, the moving image data and the region are combined, and the region corresponding to the transparency e Bei a video controller for setting the color to the color of the target object,
The target object has a plurality of the transparency;
The moving image control unit arranges a plurality of color regions whose settings can be changed, and sets the color of the target object according to each of the plurality of transparency levels.
A video playback apparatus characterized by the above . 前記動画制御部は、前記動画データと前記設定変更可能な色の領域とを合成する前に、前記透明度に応じて、前記対象物体上の陰影と光沢のうちの少なくとも一つの色を変更する
ことを特徴とする請求項１記載の動画再生装置。 The moving image control unit changes at least one of shading and gloss on the target object in accordance with the transparency before combining the moving image data and the color area whose setting can be changed. The moving image reproducing device according to claim 1.
JP2015555881A 2014-01-21 2014-01-21 Movie playback device Expired - Fee Related JP5933860B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/051065 WO2015111131A1 (en) 2014-01-21 2014-01-21 Video playback device

Publications (2)

Publication Number Publication Date
JP5933860B2 true JP5933860B2 (en) 2016-06-15
JPWO2015111131A1 JPWO2015111131A1 (en) 2017-03-23

Family

ID=53680967

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015555881A Expired - Fee Related JP5933860B2 (en) 2014-01-21 2014-01-21 Movie playback device

Country Status (5)

Country Link
US (1) US9872005B2 (en)
JP (1) JP5933860B2 (en)
CN (1) CN105917383B (en)
DE (1) DE112014006224T5 (en)
WO (1) WO2015111131A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102428873B1 (en) * 2017-10-13 2022-08-02 타츠타 전선 주식회사 shielded package
CN109741421B (en) * 2019-01-23 2023-04-14 东北大学 GPU-based dynamic graph coloring method
CN110971839B (en) * 2019-11-18 2022-10-04 咪咕动漫有限公司 Video fusion method, electronic device and storage medium
CN118230172A (en) * 2024-05-08 2024-06-21 中冶建筑研究总院有限公司 Panoramic visual detection method, system and device for rust defect of steel structure metal roof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06181579A (en) * 1992-10-14 1994-06-28 Hudson Soft Co Ltd Picture processor
JPH07210142A (en) * 1994-01-19 1995-08-11 Hudson Soft Co Ltd Method for displaying picture
JP2002092633A (en) * 2000-09-20 2002-03-29 Namco Ltd Game system and information storage medium
JP2003196675A (en) * 2001-12-25 2003-07-11 Copcom Co Ltd Storage medium for storing game program readable by computer and three-dimensional stereoscopic information, and game machine capable of reading data from storage medium

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW250555B (en) 1992-09-30 1995-07-01 Hudson Kk
US5343252A (en) * 1993-04-15 1994-08-30 Ultimatte Corporation Method and apparatus for compositing video images
JPH11219446A (en) * 1998-02-03 1999-08-10 Matsushita Electric Ind Co Ltd Video/sound reproducing system
JP2975916B2 (en) 1998-02-05 1999-11-10 株式会社エイ・ティ・アール知能映像通信研究所 Video synthesis device
US6134345A (en) 1998-08-28 2000-10-17 Ultimatte Corporation Comprehensive method for removing from an image the background surrounding a selected subject
WO2010087162A1 (en) * 2009-01-27 2010-08-05 日本電気株式会社 Color image processing method, color image processing device and recording medium
JP5877973B2 (en) * 2011-08-08 2016-03-08 アイキューブド研究所株式会社 Information system, information reproduction device, information generation method, and program
TWI469815B (en) * 2013-02-08 2015-01-21 Univ Nat Taiwan Normal Simulation of natural objects to explore the game method, computer program products and systems

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06181579A (en) * 1992-10-14 1994-06-28 Hudson Soft Co Ltd Picture processor
JPH07210142A (en) * 1994-01-19 1995-08-11 Hudson Soft Co Ltd Method for displaying picture
JP2002092633A (en) * 2000-09-20 2002-03-29 Namco Ltd Game system and information storage medium
JP2003196675A (en) * 2001-12-25 2003-07-11 Copcom Co Ltd Storage medium for storing game program readable by computer and three-dimensional stereoscopic information, and game machine capable of reading data from storage medium

Also Published As

Publication number Publication date
WO2015111131A1 (en) 2015-07-30
US20170048506A1 (en) 2017-02-16
CN105917383A (en) 2016-08-31
DE112014006224T5 (en) 2016-11-03
CN105917383B (en) 2017-10-27
JPWO2015111131A1 (en) 2017-03-23
US9872005B2 (en) 2018-01-16

Similar Documents

Publication Publication Date Title
KR102294134B1 (en) Authoring tools for synthesizing hybrid slide-canvas presentations
JP5933860B2 (en) Movie playback device
BRPI0709260A2 (en) method for rendering image content, application embedded in a computer readable medium, processor for rendering image content, auxiliary image signal, and method for generating auxiliary data for displaying elements on a secondary display in the vicinity of a primary display
US8707150B2 (en) Applying effects to a video in-place in a document
CN106170821B (en) Image processing apparatus and image processing method
CN107637075B (en) Three-dimensional view processing
TWI698834B (en) Methods and devices for graphics processing
WO2009093784A1 (en) System and method for making emotion based digital storyboard
JP2011023902A (en) Image processor and image processing method
JP2019527899A (en) System and method for generating a 3D interactive environment using virtual depth
JP2017111719A (en) Video processing device, video processing method and video processing program
CN110047120A (en) A kind of animated show method and device
KR20120082712A (en) System and method for providing augmented reality service
JP2014146162A (en) Image synthesis processing method and game machine
JP2013101363A (en) Screen saver generation device and screen saver generation method
JP4513423B2 (en) Object image display control method using virtual three-dimensional coordinate polygon and image display apparatus using the same
JP7569856B2 (en) Encoding a stereo splash screen in a still image
KR20170082310A (en) Module for simplifying render layer and render pass making process in 3-dimensional graphic tool, and method thereof
JP2011022726A (en) Image processing apparatus and method
JP2007011201A (en) Image generating device and method and image display device and method
JP6082148B1 (en) Display method, program, and recording medium
KR20190043956A (en) Method and apparatus for displaying augmented reality
TW201913351A (en) Layout method and device for view component
KR20050080334A (en) Method of synthesizing a multitexture and recording medium thereof
JP2007047417A (en) Image generating device

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160405

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160502

R150 Certificate of patent or registration of utility model

Ref document number: 5933860

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees