CN101540003B - 一种通过多媒体印刷物实现多媒体录制与播放的处理方法 - Google Patents

Abstract

本发明涉及一种通过多媒体印刷物实现多媒体录制与播放的处理方法，它由多媒体的录制部分及播放部分组成的。多媒体的录制部分的处理步骤是由多媒体印刷物的制成步骤，多媒体播放值信息识别步骤及多媒体录制步骤构成。多媒体播放部分是由多媒体播放值信息识别步骤，读取多媒体数据步骤及多媒体播放步骤构成。本发明的特点是：仅仅利用多媒体录放装置点触多媒体印刷物的播放区域，就可实现多媒体的录制与播放。可在已出版的多媒体印刷物上，直接进行本人的声音、照片以及录像等的录制与播放，从而可获得生龙活现的多媒体印刷的效果。

Description

一种通过多媒体印刷物实现多媒体录制与播放的处理方法

技术领域

本发明属于信息处理领域中的一种通过多媒体印刷物实现多媒体录制与播放的处理方法。

背景技术

近年，由纸介质出版急速地进化到电子出版。但是由于纸介质具有的直观性、廉价性以及便利性的特点，因此，纸介质出版的数量虽然在减少，但纸介质出版是不会根绝的，纸介质出版必然还会长久地延续下去。将纸介质出版与电子出版相结合的技术被极大的关注，可以断定代表这一趋势的多媒体印刷技术将是下一世纪使印刷行业产生又一次革命的关键技术。

有关多媒体印刷技术人们曾经有过各种各样的构思，早在90年代，在日本就有人提出“参照声音输出装置[参照音声出力装置](特许公开8-202252)]”，“可出声音的书籍[音の出る本(特许公开9-218695)]”。上述两个专利提出在书籍上印刷任意个识别记号，将记号对应半导体存储器中预先录制的声音，当读取该记号后，可自动播放预先录制好的声音，从而实现可出声音的书籍的效果。该专利在可出声音的书籍的实现中，对最为重要的记号的形式，以及印刷的记号如何隐藏在印刷图像中等问题没有给出实质性的方法。

直到进入2000年以后，日本的研究人员发表的题为：“用于外语会话的带有声音代码的印刷品[外国語の会話に利用可能な音声コ一ド付き印刷物(特许公开2002-82601)]”。该专利提出在印刷第一种语言的文字的同时，将该文字的第二种语言的发音的声音代码，变换成被称为DotCode的类似微型的二维条码，并印刷在文字的附近，当用光学的方法读取DotCode时可将该文字的第二种语言的发音播放出来。首先，声音代码有很大的冗余，数据量大，在进行光学读取时不方便。另外作为记录声音的不规则分布的DotCode代码的印刷需占用很大的空间，使印刷画面的质量受到很大的影响。

在此之后，在日本又公开了题为：“游戏数据输入装置[グ一ムデ一タ入力装置(特许公开2005-124713)]”的专利。该发明提出在2400dpi的印刷精度下，用6*6点阵的二维条码进行排列，并以背景的形式与印刷图像重合，实现信息埋入的目的。由于6*6点阵的二维条码的尺寸只有0.5mm左右，因此，对图像的影响比传统方法要小。通过识别装置识别6*6点阵的二维条码的码值，然后通过码值读取相应的声音数据，并播放出该声音。该方法确实比较完善的提出了多媒体印刷的解决方案，但是仍然存在只有在高精度的印刷之下才可实现的问题点。

在这前后，在日本还公开了题为：“用点阵模式输入输出信息的方法[ドツトパタ一ンを用いて情報入出方法(国际公开号WO2004/084125)]”及“通过印刷点阵形成媒体表面的印刷构造，印刷方法，及其读取方法[ドツトパタ一ンを印刷形成した媒体面の印刷構造、印刷方法、及び読取方法(特许公开2007-282272)]”该发明提出用正方形的4角点阵中的一个信息点阵，与4角点阵中心构成8个不同的角度可分别记录8个数字信息即3个比特信息。同上一提案相比，该方法可以在比较低的印刷精度下实现多媒体印刷，但是，由于相对每一信息点至少需要两个以上基准点阵，因此仍然存在纪录信息的效率低，以及构成信息模组的16个4角点阵都是对称的，如何表示信息模组的方向的问题没有涉及。

到目前为止的各种提案，几乎都是从如何记录信息的角度上考虑的，然而作为在印刷图像中最重要的印刷网屏的特性却被忽视了。比如，印刷网屏的网点尺寸特性，印刷网屏的网点间隔特性，印刷网屏的网点分布特性等。致使这些方法在印刷之后不可避免的出现信息网点的随机分布现象等影响印刷质量的问题。

特别是在目前为止的各种提案中，几乎都仅仅讨论如何通过多媒体印刷物播放多媒体的问题，而如何通过多媒体印刷物录制多媒体的问题却很少有人论及。

发明内容

本发明的第一个目的是解决如何通过多媒体录放装置点击多媒体印刷物，实现同时录制多媒体及播放多媒体的问题。

本发明解决其技术问题是采取以下技术方案实现的：

该一种通过多媒体印刷物实现多媒体录制与播放的处理方法，是由多媒体的录制部分及多媒体播放部分组成的；

其特征在于：多媒体的录制部分的处理具有如下的步骤：

(1)多媒体印刷物的制成的处理步骤，在印刷图像中被划分的若干播放区域上，将可区别于其它播放区域的多媒体播放值，变换成模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码，并分别埋入到所对应的播放区域中，形成新的印刷图像，经印刷制成多媒体印刷物；

(2)多媒体播放值信息识别步骤，使用多媒体录放装置的光学读取模块读取并识别在多媒体印刷物的播放区域里，埋入的被模式识别可能的，几何学的或物理学的分布的，多比特信息记录或信息埋入代码变换的多媒体播放值信息；

(3)多媒体录制步骤，使用多媒体录放装置的多媒体录制模块，录制包括声音、视频图像、静止图像、计算机图形或多媒体控制值数据在内的至少一种多媒体数据，并按照与上述识别出的被模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码变换的多媒体播放值的对应关系制成多媒体播放数据，并存入多媒体录放装置的存储模块中；

多媒体的播放部分的处理具有如下的步骤：

(1)多媒体播放值信息识别步骤，使用多媒体录放装置的光学读取模块读取并识别被模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码变换的多媒体播放值信息；

(2)读取多媒体数据步骤，按照上述识别出的被模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码变换的多媒体播放值信息，从上述存入多媒体录放装置的存储模块中的多媒体播放数据中读取与多媒体播放值对应的多媒体数据；

(3)多媒体播放步骤，将上述存入多媒体录放装置的存储模块中的与多媒体播放值对应的多媒体数据，通过多媒体录放装置的多媒体播放模块进行播放。

而且，上述多媒体录放装置是由光学读取模块，多媒体录制模块，存储模块，多媒体播放模块组成。

而且，多媒体播放值是按照坐标值、序列值或内容值中的一种形式决定的。

而且，上述作为模式识别可能的几何学分布的多比特信息记录或信息埋入代码，是指构成点阵的分布模式是针对点阵的分布，按照不同位置的点阵分布，不同方向的点阵分布，不同的形状，不同的网点点数的点阵分布的处理手段。

而且，上述模式识别可能的物理学分布的多比特信息记录或信息埋入代码，是指构成点阵的分布模式是针对点阵的分布，按照不同的调制方式的点阵分布，不同的位相调制的点阵分布，不同的传播方向的点阵分布的处理手段。

而且，多媒体录放装置通过多媒体印刷物实现多媒体录制或播放的控制操作，是通过多媒体印刷物上，印刷的一个以上操作控制按键的图案实现的。

本发明的优点和积极效果是：

本发明仅仅利用多媒体录放装置点触多媒体印刷物的播放区域，就可实现多媒体的录制与播放。可在已出版的多媒体印刷物上，通过多媒体录放装置点击所指定的播放区域，由多媒体录放装置识别出该区域的播放值信息，再将本人的声音录制到多媒体录放装置中，并通过多媒体录放装置将录制的多媒体数据与识别出的多媒体播放值信息对应，制成多媒体播放数据，此后，如将多媒体录放装置再次点击上述印刷多媒体的播放区域，可直接将本人的声音播放出来，从而获得在印刷多媒体上直接播放本人声音等的生龙活现的多媒体印刷的效果。

附图说明

图1(a)为多媒体录制部分的处理步骤示意图。

(b)为多媒体播放部分的处理步骤示意图。

图2为将网点的点数设置为3的网屏编码示意图。

图3为通过相位调制表现物理学网屏编码的示意图。

图4为网屏编码分割后的示意图。

图5为没有考虑屏幕特性的底纹的示意图。

图6为考虑了屏幕特性的底纹的示意图。

图7为将网点数设定为3的新网屏编码的示意图。

图8为通过矩阵分布构成底纹的示意图。

图9为将网点数设定为2的新网屏编码的示意图。

图10为不同传播方向的物理学网屏编码的表现图。

图11为网点数为2的信息组代码的构成图例。

图12为将网点的点数设定为4的网屏编码的示意图。

图13为和附近的组对称分布的方法的表示图。

图14为将网点的点数设定为1的网屏编码的示意图。

图15为网点数为1的信息组代码的构成图例。

图16为分割构成网屏编码的点阵模式的信息点的图例。

图17为将多媒体播放值以坐标形式表现的示意图。

图18为将多媒体播放值以序列形式表现的示意图。

图19为将多媒体播放值以内容形式表现的示意图。

图20为多媒体印刷装置的处理流程的示意图。

图21为多媒体的形式的示意图。

图22为将印刷物数字化的方法的示意图。

图23为与数字化的印刷物对应的多媒体印刷的构成图。

图24是在多媒体印刷物上设置操作按键的示意图。

图中：

201为分布基准点  202为分布基准点  203为信息点

301为m＝0，n＝0  302为m＝-3，n＝3

303为m＝0，n＝3  304为m＝3，n＝3

305为m＝0，n＝5  306为m＝-3，n＝5  307为m＝3，n＝5

701为分布位置基准点  702为分布位置基准点  703为信息点

901为网屏网点  902为网屏网点

1001为网屏网点  1002为网屏网点

1101为网屏网点 1102为网屏网点 1103为网屏网点 1104为网屏网点

1105为网屏网点 1106为网屏网点 1107为网屏网点 1108为网屏网点

1109为网屏网点

1201为分布位置基准点  1202为分布位置基准点

1203为信息点  1204为信息点

1401为信息点  1402为网屏编码网点  1403为可以分布信息点的区域

1501为信息点 1502为点数为1的网屏编码 1503为信息点可以分布的区域

100为网屏编码的信息点  101为小的信息点  102为网格子

1701为印刷图像  1702为坐标单位  1703为播放区域

1801为印刷图像  1802为播放区域

1901为印刷图像  1902为播放区域

2101为多媒体印刷物  2102为多媒体播放区域  2103为声音数据

2104为图像数据  2105为图形数据  2106为视频数据

2107为光线的控制值数据  2108为香味、气体的控制值数据

2109为使机械运转的控制值数据

2401为多媒体印刷物  2402为多媒体播放区域

2403为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“录音”按键

2404为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“停止”按键

2405为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“播放”按键

2406为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“点读”按键

2407为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的音量“-”按键

2408为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的音量“+”按键

具体实施方式

以下结合附图对本发明实施例做进一步详述，但本发明所述的实施例是说明性的，而不是限定性的。

首先对本发明所涉及的术语进行如下的定义：

在本实施方式中，所述的“像素”是构成图像的最小单位，“网点是与构成图像的最小单位的像素所对应的网屏最小单位，“网点的点”是构成网点的最小单位。“网点的点”是由印刷设备所能印刷的最小单位“印刷点”组成的。

所述“几何学的信息埋入代码”是指其点阵模式的分布，按其不同的位置的分布，不同方向的分布，不同形状的分布，不同大小网点的点、不同数量网点的点、点的集中和分散等分布方式来记录信息的点阵模式，称为几何学的信息埋入代码。

所述“物理学的信息埋入代码”是指其点阵模式的分布，按其不同调制方式的分布，相位调制方式的分布，不同传播方向的分布，不同频率的分布，不同颜色的分布，不同的灰度的分布等分布方式来记录信息的点阵模式，称为物理学的信息埋入代码。

所述“网屏网点的灰度特性”是指使网屏的网点的灰度均一化的特性，也就是使网屏网点的印刷点数具有相同构成的特性，以及网屏网点的灰度值最小化的特性。

所述“网屏网点的大小特性”是指网屏网点的全部网点的点是以最少化的印刷点的点数构成的特性，以及网屏网点的尺寸的最小化特性。

所述“网屏网点的间隔特性”是指将网屏的网点按照一定的间隔距离排列的特性，以及网屏网点的间隔要大于网屏网点的尺寸的特性。

所述“网屏网点的排列特性”是指将网屏的网点的二维矩阵排列按照45度旋转的排列特性。

所述“信息埋入方式”是指将网屏编码按照二维矩阵形式排列从而构成底纹，将构成的底纹和印刷图像数据重叠，即可在该印刷图像的区域中埋入信息的方式。这里根据具体应用的要求分为3种方式：一种是颜色区分埋入方式，即网屏编码的颜色与印刷图像的颜色不同，例如网屏编码为黑色K版，印刷图像为C，M，Y版，由于网屏编码为独立颜色，因此即使与印刷图像完全重合，仍然可以正确识别网屏编码的码值。另一种是网屏编码优先埋入方式，即当网屏编码的某些网点和印刷图像的网点重叠时，由于网屏编码的网点具有优先性，则将印刷图像的网点向网屏代码的附近移动，这样即使网屏编码同印刷图像的网点的颜色相同，在空间上可以区分，因此可以正确识别网屏编码的码值。再一种是印刷图像网点优先埋入方式，即当网屏编码的某些网点和印刷图像的网点重叠时，由于印刷图像的网点具有优先性，则将网屏编码的网点向印刷图像的网点附近移动，同样即使网屏编码同印刷图像的网点的颜色相同，在空间上可以区分，因此可以正确识别网屏编码的码值。

所述“网屏编码”是指考虑了印刷网屏特性的具有几何学的或物理学的分布的模式识别可能的信息记录与信息埋入的代码。

所述“视觉模型”是指人的眼睛的视觉特性，包括人眼对不同颜色混合存在的视觉特性、网点尺寸的视觉特性、网点分布方向的视觉特性等，视觉模型是印刷网屏特性的理论基础，是同印刷网屏特性相吻合的。

所述“不同颜色混合存在的视觉特性”是指在印刷媒体上的一种较大面积印刷颜色附近添加另一种很小面积的颜色时，人眼对很小面积的颜色的很难辨认。

所述“网点尺寸的视觉特性”是指根据瑞利判据的计算的结果，直径在0.1mm以下的网点的尺寸或网点间隔，为肉眼不可见的网点的尺寸或网点间隔。

所述“网点分布方向的视觉特性”是指对于网点的排列，若将纵列设定为90度、横行设定为0度，其网点的排列是人眼最容易感觉到的，但若将行列旋转45度，人眼就很难感觉的特性。

所述“分布基准网点的点或网点”是指在构成网屏编码或网屏编码信息模组中，至少有一个网点或网点的点，具有网屏编码或网屏编码信息模组的位置分布基准信息、方向分布基准信息、网点大小基准信息、相位分布基准信息或传播方向分布信息中的一种以上几何学分布基准信息或物理学分布基准信息的网点或网点的点。

所述“不同调制方式的信息埋入方法”是指通过改变不同的网屏网点的大小表示印刷网屏网点的灰度的方法为调幅网屏即AM网屏。通过改变不同的网屏网点的数量表示印刷网屏网点的灰度的方法为调频网屏即FM网屏。对于同一灰度值的网屏网点，可以通过不同的调制方式记录信息，其结果网点的网屏特性不发生改变，这种信息记录与信息埋入的方式称为不同调制方式的信息记录与信息埋入方法。

根据不同调制方式构成点阵模式，也可看作由多个频率成分构成点阵模式。其点阵分布的形式是相同的是同等意思，因为AM网屏的点阵分布可视为低频率的点阵模式，FM网屏的点阵分布可视为高频率的点阵模式。

根据不同的调制方式构成点阵模式，由于AM网屏的点阵模式的网点的点是由多个小点集中分布的，所以AM网屏的网点的点的数量比较少，而点的灰度值较大。另一方面，由于FM网屏的点阵模式的网点的点是由多个小点分散分布的，所以FM网屏的网点的点的数量比较多，各点的灰度值较小。根据上述理由，根据不同调制方式构成点阵模式也可以说是根据不同数量的网点的点构成的点阵模式，或者说是根据不同灰度值的网点的点构成的点阵模式，或者说是根据网点的点的集中分布与分散分布的不同构成的点阵模式。无论什么样的说法其结果点阵模式分布的形式是完全相同的，因此都属于本发明的范围之内。

所述“标识性网屏编码”是以一定的代码形式独立存在的一种针对印刷图像进行信息埋入的代码形式。

标识性网屏编码不同于条形网屏编码及二维网屏编码，前者是独立存在的一个代码，如目前大量使用的一维条码或二维条码都属于标识性代码，只要将这一个代码识别出，就可进行一个操作。而后者是对整个图像或整页印刷品进行识别后才进行一个操作。两者在很多方面又非常接近。

下面，参照附图详细说明与本发明相关的一种通过多媒体印刷实现多媒体录制与播放的处理方法，以及信息记录与信息埋入代码构成的最佳实施状态。

首先，本发明提出的一种通过多媒体印刷实现多媒体录制与播放的处理方法，主要是通过埋入在多媒体印刷物的多媒体播放区域的表示多媒体播放值信息的包括下述的网屏编码在内的信息记录或信息埋入代码，但不局限于网屏编码，这种信息记录或信息埋入代码是指所有可以表示多媒体播放值又能印刷在印刷媒体上的代码。

图1(a)为多媒体录制部分的处理步骤示意图。如图1(a)所示，多媒体的录制部分的处理具有如下的步骤：

多媒体印刷物的制成的处理步骤S₁，页面设计者根据印刷内容在印刷图像中被划分出的若干播放区域。再使用多媒体印刷制版装置，在印刷图像中被划分出的若干播放区域上，选择下述的坐标形式的多媒体播放值，序列形式的播放值以及内容形式的播放值中的一种作为可区别于其它播放区域的多媒体播放值，再将多媒体播放值变换成模式识别可能的几何学的或物理学的分布的信息记录或信息埋入代码，并分别埋入到所对应的印刷图像的各个播放区域中，形成新的印刷图像，该新的印刷图像经多媒体印刷制版装置输出，再经包括胶印机、数码印刷机或打印机等印刷设备印刷制成多媒体印刷物。

多媒体播放值信息识别步骤S₂，将多媒体录放装置的光学读取前端点触所要录制多媒体的多媒体印刷物的某一播放区域后，多媒体录放装置的光学读取模块读取并识别在多媒体印刷物的播放区域里，埋入由模式识别可能的，几何学的或物理学的分布的，多比特信息记录或信息埋入代码变换成的多媒体播放值信息。

多媒体录制步骤S₃，使用多媒体录放装置的多媒体录制模块中的微型话筒，照相镜头，录像镜头，计算机接口或网络录制包括声音、视频图像、静止图像、计算机图形或多媒体控制值数据在内的至少一种多媒体数据，并按照与上述S₂步骤中识别出的被模式识别可能的几何学的或物理学的分布的信息记录或信息埋入代码变换的多媒体播放值的对应关系制成多媒体播放数据，并存入多媒体录放装置的存储模块中；

图1(b)为多媒体播放部分的处理步骤示意图。如图1(b)所示，多媒体的播放部分的处理具有如下的步骤：

多媒体播放值信息识别步骤b₁，同样，将多媒体录放装置的光学读取前端点触所要播放多媒体数据的多媒体印刷物的某一播放区域后，多媒体录放装置的光学读取模块读取并识别在多媒体印刷物的播放区域里，埋入由模式识别可能的几何学的或物理学的分布的信息记录或信息埋入代码变换成的多媒体播放值信息。

读取多媒体数据步骤b₂，按照上述识别出的被模式识别可能的几何学的或物理学的分布的信息记录或信息埋入代码变换的多媒体播放值信息，从上述存入多媒体录放装置的存储模块中的多媒体播放数据中读取与多媒体播放值对应的多媒体数据。

多媒体播放步骤b₃，将上述存入多媒体录放装置的存储模块中的与多媒体播放值对应的多媒体数据，通过多媒体录放装置的多媒体播放模块进行包括声音、视频图像、静止图像、计算机图形或多媒体控制值数据在内的至少一种多媒体数据的播放。

如图2所示：由于信息点203只有一个，分布基准点201、202有两个，所以仅看点数，就可以很容易的区别信息点203和分布基准点。而且从位置关系来看，两个分布基准点201、202并列排列，利用这两点间距离较远的特征，就可以轻易进行模式识别。而且将图2的a～e的点阵模式，即多比特值0～4中的任意两个代码从任一方向进行比较都不会出现类似的形状，所以很难发生识别错误。

在本实施方式中，对于图2中将网点的点数设定为3的网屏编码，可以看作为图3所示的是通过包含了二维空间相位调制的不同结果所形成的物理学分布，来记录计算机信息的。

如果将间隔T(由网屏网点以矩阵形式排布构成)的正方形标准网格的图像数据设定为{ζm，n}，那么网屏编码的相位调制方式如下所示：

【公式1】

$\mathrm{\ψm},n=\underset{i=-\∞}{\overset{\∞}{\mathrm{\Σ}}}\underset{j=-\∞}{\overset{\∞}{\mathrm{\Σ}}}{\mathrm{\ζ}}_{m-i,n-j}*\mathrm{\η}\left\{\right[i+\mathrm{\ϵ}(m,n)]*T,[j+\mathrm{\δ}(m,n)]*T\}...\left(1\right)$

在这里，通过改变ε(m，n)和δ(m，n)，实现对传播信号{ζm，n}的相位调制。

按照上面的公式(1)，将作为网屏编码的网点的点坐标设为(m，n)，将计算机信息设为ω(ω∈0，1，···，k)，那么如图3所示：301为m＝0，n＝0；302为m＝-3，n＝3；303为m＝0，n＝3；304为m＝3，n＝3；305为m＝0，n＝5；306为m＝-3，n＝5；307为m＝3，n＝5。

将图2中的大的网屏编码，如图4所示分割成几个小的网屏编码。当印刷设备精度较高时(例如：2400dpi)，选择图4左侧的大的网屏编码构成底纹就可以了。即使大的网屏编码点数较多，由于印刷设备的精度较高会使印刷的网屏编码缩小，所以对印刷画面的质量影响较小。相反，印刷设备精度较低时(例如：600dpi)，由于将图4右侧的由较大的网屏编码分割成小的网屏编码也可以构成底纹、所以网屏编码的点数会变少，尺寸也减少了，即使印刷设备的精度较低，对印刷画面的质量影响也比较小。由于小的网屏编码点数较少，所以埋入的信息量也较少，但是这种实施形式考虑了通过多个网屏编码表示一个多媒体播放值的方法。

如图5所示：作为多媒体印刷系统的一种形式，发声的书传统的方法使用二维代码时，只考虑了用尺寸极小的不可见的二维条码与印刷图像重叠。由于没有考虑印刷网屏的特性，即便使用了相同的点阵模式，相同网点大小的代码埋入相同的印刷图像来说，其埋入后的印刷图像的质量将被恶化。

如图6所示，本发明考虑到印刷网屏特性，使用可进行模式识别的几何学的或物理学的分布的网屏编码，并将其作为网屏的最小单位，按照一定间隔以矩阵形式排列后，通过均一的灰度值、网点点数的最小化(例如：3个以下或4个以下)从而构成背景底纹。这样，具有印刷网屏特性的均一灰度值，以及灰度值最小化的背景底纹和印刷图像重叠，达到多媒体播放值的信息埋入印刷图像中的目的，使印刷图像的质量不被破坏。

图6表示可以播放例如声音、视频、静止画面、图形以及多媒体控制值等数据中至少一种以上的多媒体数据的多媒体印刷物。

多媒体印刷物具有一个以上与多媒体播放值对应的多媒体数据播放区域，在这些区域中，对应于将要播放的多媒体数据的所必需的多媒体播放值(一个以上)被变换成作为具有网屏特性(即具备网屏网点的灰度特性、尺寸特性、间隔特性以及排列特性中的至少一种特性的模式识别可能的几何学的或物理学的分布的信息记录与信息埋入的代码)的网屏编码，然后将变换后的网屏编码埋入到一个以上的与将要播放的多媒体数据所对应的印刷图像的各个区域中，构成新的印刷图像，再将新的印刷图像印刷成多媒体印刷物。

换言之，多媒体印刷物是将多媒体播放值变换成网屏编码后，将网屏编码排列成底纹形式，再将底纹印刷到印刷物的表面。

图7是本发明中提出的将网屏网点的点数设为3的7进制多比特网屏编码的主要构成图例。如图7所示：将点701和702作为分布位置的基准点，将点703作为信息点。在图7中，把a网点的点分布设为多比特值“0”，b网点的点分布设为多比特值“1”，c网点的点分布设为多比特值“2”，d网点的点分布设为多比特值“3”，e网点的点分布设为多比特值“4”，f网点的点分布设为多比特值“5”，g网点的点分布设为多比特值“6”。

针对激光打印机经常发生的纸伸长等问题，图7所示的网屏编码的构成是图2中的网屏编码的进化。例如：图2的代码b和f，c和e，d和g，在印刷纸发生伸长时，信息点203的位置会稍有差异，所以发生识别错误的可能性很高，而图7所示的网屏编码的构成，是将信息点703分布在位置基准点701、702的两侧，位置基准点701、702设定在正当中，所以即使发生纸的延伸，信息点703与位置基准点701或702一同被延伸，因此不会出现识别错误。

图7所示的例子，可以将a、b、c、d、e、f、g看成是根据不同的几何学形状构成的网屏编码，也可以将代码a、b、c、d、e、f、g看成是根据信息点703的不同几何学位置构成的网屏编码、还可以将代码b和e、d和g看成是根据不同几何学方向构成的网屏编码。

图7中的信息点703是由不同的物理学相位调制的点传播信号构成的点阵模式，分布位置基准点701和702两者都是由一定相位的点传播信号构成的点阵模式。进而，代码a、b、c、d、e、f和g都可以看成是兼有一定相位的点的传播信号和相位调制的点传播信号的叠加的物理学的分布的网屏编码。

对于图7所示的兼有几何学或物理学的点分布特性和网屏特性的网屏编码来说，构成其网点的网屏特性是：即使是不同的代码值，网点的灰度值是均一的，而且网点的点数越少越好，网点的尺寸越小越好，这样在埋入印刷图像后对印刷图像的影响较小。

图8是将图7中三个点的网屏编码以网屏特性为基础，按照矩阵形式排列的，从而构成底纹的网点分布图例。如果将网点a到i两者间的每两个代码间的纵间隔设定为D，横间隔设定为C，网点的高度设定为A，网点的宽度设定为B，那么网点间的纵间隔D和横间隔C的值要大于等于网点自身的高度A和宽度B。

在图8所示的基于网屏特性的网点的矩阵式排布中，对于同一灰度的网点，网点间的间隔越大，底纹的灰度值就越小。其优点在于将底纹和印刷图像重叠时，会减小对印刷画面的影响。

考虑到网点的点数越少，网点尺寸越小，在埋入时对画面质量的影响就较小的网屏特性，图9提出了将网屏网点的点数设定为2的网屏编码。图9为通过点901和点902构成不同方向几何学分布的网屏编码。在图9中，将网点形式a设为0，网点形式b设为1，网点形式c设为2，将网点形式d作为表示方向的基准网点。和前面叙述的网屏编码不同，这里网点的点数仅有两个，基于网屏的特征可以提高埋入图像的画质，但它的缺点是信息量较少。

图9中网点的点数为2的网屏编码也可看作如图10所示的，通过点1001和1002构成的不同传播方向的物理学分布代码。在图10中，网点的形式a设为传播方向d₁、网点的形式b为传播方向d₂、网点的形式c为传播方向d₃、网点形式d为传播方向d₄。

图9中网点的点数为2的网屏编码如果仅仅看作为几何学的根据不同方向的分布记录信息的结果，要求每一网点一定要设立基准点，才能计算出各个网屏编码的代码值，而将图9中网点的点数为2的网屏编码看作为如图10所示的，通过点1001和1002构成的不同传播方向的物理学的分布代码的新颖性与进步性在于无需很多的基准点，只需要给出网点的初始点的位置，就可计算出各个网点的传播方向，从而得出各个网屏编码网点的代码值。

图11为使用本发明提出的网点的点数为2的网屏编码构成的信息模组的示意图。如图11所示：由网点1101到1109构成一组信息模组。且从网点1101到1107的7个代码是用0、1、2分别表示的独立信息代码，或循环代码，代码的组合为3⁷＝2187。网点1108和网点1109被用来表示信息埋入组的方向以及构成标识。也就是说找到网点1108和1109，就可以指定出该信息埋入组的全部信息网点，而且根据网点1108和1109的方向也可以识别出信息模组的全部网屏编码的网点方向及代码值。

本发明为了提升上述网屏编码的信息量，提出了如图12所示的将网点的点数设定为4的20进制的多比特值网屏编码。如图12所示：将点1201和1202设为分布位置基准点，将点1203和1204设为信息点。在图12中，将网点a的点分布设定为多比特值“0”，网点b的点分布为多比特值“1”，网点c的点分布为多比特值“2”，网点d的点分布为多比特值“3”、网点e的点分布为多比特值“4”，网点f的点分布为多比特值“5”，网点g的点分布为多比特值“6”，网点h的点分布为多比特值“7”，网点i的点分布为多比特值“8”，网点j的点分布为多比特值“9”，网点k的点分布为多比特值“A”，网点1的点分布为多比特值“B”，网点m的点分布为多比特值“C”，网点n的点分布为多比特值“D”，网点o的点分布为多比特值“E”，网点p的点分布为多比特值“F”，网点q的点分布为多比特值“G”，网点r的点分布为多比特值“H”，网点s的点分布为多比特值“I”，网点t的点分布为多比特值“J”。

和图7所示的三个点的网屏编码相同，图12所示的代码a、b、c、d、e、f、g、h、i、j、k、l、m、n、o、p、q、r、s、t可以看成是按照不同的几何学形状构成的网屏编码、也可以将代码a、b、c、d、e、f、g、h、i、j、k、l、m、n、o、p、q、r、s、t看成是通过信息点1203和1204的不同几何学位置构成的网屏编码，或将代码a和p，g和r，c和n，d和h，j和m，e和l，f和q，o和t，k和s看成是按照不同几何学方向构成的网屏编码。

而且，和图7所示的三个点的网屏编码相同，也可以将图12所示的代码a、b、c、d、e、f、g、h、i、j、k、l、m、n、o、p、q、r、s、t看成是由信息点1203和1204的不同的物理学相位调制点传播信号构成的点阵模式，和由分布位置基准点1201和1202两者的一定相位的点传播信号构成的点阵模式组合而成的物理学的网屏编码。

进而，和图7所示的三个点的网屏编码相同，图12所示的网屏编码也是兼有网屏特性的模式识别可能的几何学的或物理学的信息记录与信息埋入代码。换言之，是在几何学或物理学代码的基础上又添加了网屏特性的信息记录与信息埋入代码。构成网屏编码的网点的网屏特征是：即使是不同的代码，网点的灰度值也是非常均一的。而且在确保网屏编码记录信息量的基础上，利用了网点的点数越少网点的尺寸越小对印刷图像造成影响越小的特性。

图13表示将图12所示的网点的点数为四个点的网屏编码，按照印刷网屏的特性，以二维矩阵形式分布，从而构成底纹的网点的分布示意图。考虑了网屏特性的网屏编码的分布方法如图13所示，将四个网屏编码网点作为一个信息代码，即作为一个信息模组。使四个点的网屏编码的网点大小和图7所示的三个点的网屏编码的大小相同，将两个网点间的间隔全部统一，并且使二个网点间的间隔大于自身网点的尺寸。

为了做到将网屏编码旋转360度也能进行模式识别，对于由四个网屏编码网点构成的信息模组，将其中一个网屏编码的网点旋转90度，就可以表现信息模组的方向和四个网屏编码网点模组之间各个网点的构成形式。进而可以将附近的信息组如图13所示，按照与其对称的四个方向分布。这样分布的优点是，附近的四个网屏编码的网点值相同且一定，在进行模式识别时如果检出附近三个以上的代码值，就可以判定识别结果正确，可以得到代码纠错的效果。

作为图7或图12所示的网屏编码构成方法的其他形式，本发明基于网点的点数越少，网点的尺寸越小，埋入印刷图像的结果，对印刷图像影像越小的特性，提出了如图14所示的，在信息模组内部共同使用或兼用图7或图12所示的分布基准点，构成网点的点数为1的9进制多比特的网屏编码的方法。

如图14所示，将1401设定为信息点，1402为网点的点数为1的9进制多比特网屏编码，1403为可以分布信息点1401的区域。信息点1401可以通过不同的几何学位置的分布记述信息。例如：在图14中，将网点a的点分布为多比特值“0”，网点b的点分布为多比特值“1”，网点c的点分布为多比特值“2”，网点d的点分布为多比特值“3”，网点e的点分布为多比特值“4”，网点f的点分布为多比特值“5”，网点g的点分布为多比特值“6”，网点h的点分布为多比特值“7”，网点i的点分布为多比特值“8”。

参考图14的例子，通过将信息点分布到不同的位置，也可以构成网点的点数为1的16进制以上或32进制以上的多比特的网屏编码。

和图7以及图12所示的网屏编码相同，可以将图14所示的代码a、b、c、d、e、f、g、h、i看成是由信息点1401的不同相位调制的点传播信号构成的物理学的点阵模式的网屏编码。

图15表示的是根据印刷网屏的特性，将多个图14所示的网点的点数为1的9进制多比特的网屏编码作为一个信息模组，并按照二维矩阵形式排列从而构成底纹的网点分布图例。将1501设定为信息点，1502为点数为1的网屏编码。

对于考虑了网屏特性的网屏编码的分布方法，如图15所示：将a、b、c、d、e、f、g、h、i、j、k、l、m、n、o、p，16个网屏编码网点作为一个信息代码，即一个信息模组。信息点的大小为两个印刷点的大小。点数为1的网屏编码的网点尺寸；高度H和宽度w同样可设定在6个印刷点以上。每二个网点间的间隔Iw和Ih，同样将横间隔Iw或纵间隔Ih设定在6个印刷点大小之上。实际上印刷网屏网点的间隔特性中的网点间隔是指两个网点的中心的间隔。

图15的1503是指在一个网屏网点的点构成的网屏编码中，信息点1501可以分布的区域。如图15所示：网点a、b、c、d全部将信息点分布在正中央。a、b、c、d的网点是表示信息模组方向的网点。使用网点a、b、c、d可以识别信息模组的方向。同时，将网点a、b、c、d作为具有纵方向信息点位置基准信息的网点。

将图15所示的网点e、i、m作为具有横方向信息点的位置基准信息的网点。网点e、i、m的正中央全部空出，可以将信息点排布到两侧的任何一个网格中。

根据具有纵方向信息点基准信息的网点a、b、c、d的位置和具有横方向信息点位置基准信息的网点e、i、m的位置，可以识别网点f、g、h、j、k、l、n、o、p的多比特码值。

为了区别具有横方向信息点位置基准信息的网点e、i以及m的分布，不能同时空出网点f、j、n，g、k、o和h、l、p的中间位置。

具有纵方向信息点位置基准信息的网点a、b、c、d和具有横方向信息点位置基准信息的网点e、i、m的其他作用是可以表示网屏编码的位值。在附近埋入具有相同代码值的网屏编码时，会形成循环代码值，所以如果检出纵方向的位置信息网点a、b、c、d和横方向的位置基准信息网点e、i、m、就可以判定此信息组的代码值。换言之，信息模组是循环代码，如果检出任意四行和任意四列的网屏编码的网点，就可以确定信息模组的代码值。

由于信息模组是循环代码，信息模组与其四个方向的任意方向上的附近四列或四行的网屏编码构成的代码值相同，所以在模式识别时，如果检出附近两个以上的信息组代码值，就可以判定识别结果是否正确，可以起到代码纠错的作用。

图16是由网点的点的分割构成网屏编码点阵模式的示意图。为了进一步考虑了印刷网屏特性的网点灰度最小化特性及网点尺寸最小化特性，可以如图16所示，将图16所示的网屏编码的信息点100分割成两个小的信息点101。由于变成的两个分散的信息点101，其大小虽然只为一个印刷点的大小，但按照抽样理论，信息点101仍然可以进行模式识别的。网格子102是可以分布信息点101的区域，H163为两个信息点101间的间隔。

同样，对于上面提出的网屏编码的点阵模式，为使底纹的灰度值更低，可以根据图16的方法，将网屏网点的点进行分割，从而形成新的点阵模组。网点分割的另一种方法是，将一个网屏编码的网点分成两个网点，分成两个网点后的网点的点的尺寸是前者网点的点的尺寸的一半。其优点不仅是使底纹的灰度值降低，还可以形成两组网屏编码的识别结果的检验功能，以及作为播放值以坐标法方式出现时的信息量扩大的功能。

如图17所示，把与多媒体数据播放数据所对应的印刷区域的坐标值作为多媒体播放值的坐标形式的多媒体播放值。在图17中，1701为印刷图像，1702为坐标单位，1703为播放区域。例如图17所示，对于印刷图像可以抽出鸡、兔子、鸟、马、羊以及狗6个区域。例如，鸡的多媒体播放值(x，y)为x₁≤x≤x₂、y₁≤y≤y₂。其他的兔子、鸟等区域的多媒体播放值可以依此类推。

接下来，图18将多媒体播放值按照被播放的多媒体数据所对应的区域的顺序排列进行定义。如图18所示，1801为印刷图像，1802为播放区域。例如，图18中鸡的区域的多媒体播放值为1，兔区域的多媒体播放值为2。其他的鸟和马等区域的多媒体播放值可以依此类推。

图19将多媒体播放值按照被播放的多媒体数据所对应的区域的内容进行定义。在图19中，1901为印刷图像，1902为播放区域。例如图19所示，鸡的区域的多媒体播放值为鸡的代码，兔区域的多媒体播放值为兔代码。其他的鸟和马等区域的多媒体播放值依此类推。

下面，对与图1所示的多媒体印刷系统有关的主要多媒体印刷编辑装置的实施状态进行详细说明。

多媒体印刷制版装置是由：将印刷图像及声音、视频、静止画面等多媒体信息进行输入的输入部分；将多媒体播放值变换成为具有网屏网点的灰度特性，网屏网点的尺寸特性，网屏网点的间隔特性以及网屏网点的排列特性中的至少一种特性的模式识别可能的几何学的或物理学的分布的信息记录与信息埋入代码的网屏编码后，埋入到由上述输入的印刷图像中与多媒体播放数据所对应的至少一个区域中，从而做成新印刷图像的编辑部分；为了做成多媒体印刷物，将新印刷图像输出，以及为了能从多媒体印刷物中播放多媒体数据，需要将多媒体播放数据进行输出的输出部分组成。

多媒体印刷物是由上述的多媒体印刷制版装置输出的新印刷图像印刷而成的。

多媒体播放装置，输入上述的多媒体印刷制版装置输出的多媒体播放数据。

多媒体印刷系统包含了：具有上面所说的输入部分、编辑部分以及输出部分的多媒体印刷编辑装置；为了能从多媒体印刷物上播放多媒体数据，而印刷上了埋入播放值信息的多媒体印刷物；为了能从多媒体印刷物上播放多媒体数据的多媒体播放装置。

下面，参照图20对具体的处理流程进行说明。

在输入部分中进行步骤S1到步骤S3的处理。根据输入步骤S1，输入印刷图像和多媒体数据。这里，印刷图像的输入方法可以从存储器或硬盘等电子数据记录装置中直接读取，也可以从打印机等设备的驱动程序中通过虚拟打印的技术直接取出印刷图像。

印刷图像的种类包括文档、图像、图形和向量图像等。

如图21所示，设多媒体印刷物2101中具有若干多媒体播放区域2102，则多媒体数据的形式包含：声音数据2103，图像数据2104，图形数据2105，视频数据2106，改变光线的控制值数据2107，改变香味、气体的控制值数据2108和使机械运转的控制值数据2109等的电子数据形式。由于上述改变光线的控制值数据2107，改变香味、气体的控制值数据2108和使机械运转的控制值数据2109，可以作为基本的多媒体控制数据形式进行输入，所以也可以对应其他种类的多媒体数据。

播放区域的抽出步骤S2，对输入的印刷图像，抽出想要播放多媒体数据的各个图像的区域。播放区域的抽出方式由印刷图像的形式和多媒体播放值的形式而定。

多媒体播放值的形式是序列形式或区域内容的形式时，(1)对应普通图像形式的印刷图像时，只要抽出图像的轮廓即可；(2)对应向量图像形式的印刷图像时，只要抽出向量图像的轮廓即可；(3)对应多个向量图像形式的印刷图像时，只要将多个向量图像合为一体，抽出多个向量图像的合体后的轮廓即可。

多媒体播放值为图像区域的坐标形式时，无论印刷图像的形式是普通图像的形式还是向量的形式，求出该坐标的范围即可。

根据多媒体播放值的计算步骤S3，决定在前面的步骤中抽出的各区域的多媒体播放值的形式。多媒体播放值有坐标形式、序列形式以及内容形式三种。

例如，如果将多媒体播放值设定为坐标形式，该区域的坐标范围x和y的就是多媒体播放值；如果多媒体播放值为序列形式，那么该区域的顺序编号就是多媒体播放值；如果多媒体播放值为内容形式，那么该区域的内容代码值就是多媒体播放值。

具有网屏特性和模式识别可能的信息记录与信息埋入代码，也可以说成是具有网屏特性的光学读取可能的信息记录与信息埋入代码。也就是说可进行模式识别的信息埋入代码和可进行光学读取的信息埋入代码意思是相同的。

所述具有网屏特性的模式识别可能的信息记录与信息埋入代码，是指可以在印刷媒体上记述信息的几何学的或物理学的点阵模式上，同时又附加了网屏特性，从而又具有信息埋入代码的功能。考虑了网屏特性的几何学的或物理学的点阵模式同传统的点阵模式相比，具有信息记录与信息埋入两个优点，所以具有网屏特性的模式识别可能的信息记录与信息埋入代码与传统的只按照不同位置，不同方向和形状等分布的几何学点阵模式相比具有很大的进步性。

进而在本步骤中，对于作为具有网屏特性的模式识别可能的信息埋入代码的网屏编码，根据网屏网点的灰度特性，将其全部网点进行灰度值的均一化。遵循网屏网点的尺寸特性，构成网屏编码的网点的点数，可以根据多媒体播放值所需的信息量选择为1点、2点、3点或4点，所以可使网点最小化。

根据信息埋入步骤S5，将前面变换了的网屏编码排列成矩阵形式。对具有相同灰度的各网点使用网点的间隔越大整个网屏的灰度值越低的网屏特性。考虑到实际应用的限制，各网点的间隔设定为该网点尺寸的数倍，例如1～3倍之间。在埋入更多信息量时，也可以减小各网点的间隔。

将网屏编码按照矩阵排布时，一般的可以将纵列设定为90度，将横行设定为0度，考虑到人的视觉模型，可将分布的行列旋转45度。

由于网屏网点的尺寸特性实际上和人的视觉模型的网点尺寸特性是一致的，所以也可以说满足网屏编码的网点尺寸特性就是满足了人的视觉模型所得出的网点尺寸特性。

对于网屏编码的矩阵式分布，一般来说，将网屏编码设置为黑白颜色时，构成的底纹的颜色为黑色。对于由C、M、Y、K四个版组成的彩色印刷图像，印刷图像不使用黑色K，其黑色部分由C、M、Y三个颜色来表现黑色，将网屏编码的底纹作为黑色K版。

如果将网屏编码作为彩色信息埋入时，以视觉模型为基础，根据网屏编码附近的颜色，决定在步骤S5中构成的底纹的各网屏编码的颜色。例如附近的颜色为白色时，网屏编码的颜色为黄色；附近的颜色为黑色时，网屏编码的颜色为白色等。

将网屏编码作为彩色信息埋入的优点是可以减小对印刷图像的影响。

对于印刷媒体上不需要多媒体播放的区域，为了使全部底纹处于均衡性，可考虑在这些区域埋入多媒体播放值以外的网屏编码，或不在其中埋入网屏编码。

根据作成新印刷图像的步骤S6，在前面输入的印刷图像中埋入已变换成网屏编码的多媒体播放值的信息，从而作成新的印刷图像。

作为信息埋入的方法，将网屏编码按照二维矩阵的形式分布，并形成底纹，将底纹和印刷图像重叠从而达到信息埋入的目的。在与印刷图像重叠后，当网屏编码网点分布的地方有印刷图像的网点时，考虑将印刷图像的网点向网屏编码的网点附近移动，或者将网屏编码的网点向印刷图像的网点附近移动。

在输出部分中将进行步骤S7到步骤S8的处理：

在作成播放数据的步骤S7中，将制作出想要播放的多媒体数据与多媒体播放值所对应的多媒体播放数据。

在输出步骤S8中，将上述作成的新印刷图像作为普通印刷机的制版数据输出，或者可以直接使用打印机或普通印刷机印刷多媒体印刷物。

上述制作出的将要播放的多媒体数据与多媒体播放值所对应的多媒体播放数据，通过多媒体播放装置的接口和通信网络等传送给多媒体播放装置的存储器，或者通过存储卡输入到多媒体播放装置中。

接下来，对多媒体播放装置的详细处理内容进行说明。

本实施形态的多媒体播放装置是指：可以通过点击多媒体印刷物的多媒体播放区域，播放包括声音、视频、静止图像、图形以及多媒体控制数据中至少一种多媒体数据的多媒体播放装置。

多媒体播放装置具备输入多媒体播放数据的功能，保存多媒体播放数据的功能，识别在多媒体印刷物中一个以上的区域中埋入的网屏编码的功能，根据识别出的网屏编码播放出相应的多媒体数据的功能。这里，多媒体播放数据是指由将要播放的多媒体数据及与其多媒体播放值所对应的关系所构成的多媒体数据库。

所述网屏编码，是针对多媒体印刷物中与各个多媒体数据对应的一个以上的区域，为能播放包括声音、视频、静止图像、图形以及多媒体控制值数据中的至少一种多媒体数据所对应的一个以上多媒体播放值，变换成具有网屏网点的灰度特性、网屏网点的尺寸特性，网屏网点的间隔特性以及网屏网点的排列特性中至少一种网屏特性的模式识别可能的几何学的或物理学的信息记录与信息埋入代码。

从多媒体印刷制版装置向多媒体播放装置输入多媒体播放数据时，可以通过多媒体印刷制版装置和多媒体播放装置的接口输入，通过存储卡输入，通过通信网络等输入。

在产业利用上的可能性：

根据本发明的多媒体印刷系统，可以将传统的纸媒体出版和电子媒体出版结合起来，可在印刷行业中展开新的商机。使用上述提出的多媒体播放装置，在语言学教材和音乐资料等上轻轻点触就可以发出声音。而且在商品说明书或讲演稿等纸介质资料上使用多媒体播放装置，轻轻点触就可以在此处播放出与其相关的详细视频和动画等多媒体。

下面介绍通过多媒体印刷物录制或播放多媒体的实际例子。

图22是多媒体印刷物的作成例子。如图22所示，将普通印刷图像输入到上述的多媒体印刷制版装置中，在多媒体印刷制版装置上，选择上述给出的坐标形式，序列形式以及内容形式中的一种作为多媒体播放值，并埋入到上述输入后的印刷图像的相应播放区域中，形成新的印刷图像。将新的印刷图像输出，印刷或打印从而作成数字化的多媒体印刷物(a)。

例如，对于图12中提出的网屏编码(代码长为20)，如图13所示：将附近的四个网点组成信息模组，作为一个代码值，来表示一个多媒体播放值。此时，多媒体播放值的数值为20⁴＝160,000，并且对于A4纸来说，坐标的最大值为X＝23、Y＝33，所以可以作出200页以上的出版物。

图23是通过多媒体印刷物实现多媒体录制与播放的实际例子。上述经过数字化处理后出版的多媒体印刷物(a)，如图23所示：第一个步骤是S₁，用多媒体录放装置(b)点触多媒体印刷物(a)的将要录制多媒体的某一个播放区域，多媒体录放装置(b)识别出该区域的多媒体播放值。第二个步骤是S₂，通过多媒体录放装置(b)所设置的微型话筒，影像传感器模组，计算机接口或网络接口录制包括声音、视频、静止图像、图形以及多媒体控制数据中至少一种多媒体数据。利用该数据同第一个步骤S₁中得到的多媒体播放值所形成的对应关系制成多媒体播放数据，并保存在多媒体录放装置(b)的存储模块中。第三个步骤是S₃，再用多媒体录放装置(b)点触多媒体印刷物(a)的在第一个步骤S₁所点触的那个播放区域，多媒体录放装置(b)就可将在第二个步骤S₂所录制的多媒体数据播放出。

图24是在多媒体印刷物上设置操作按键的示意图。如图24所示，2401为多媒体印刷物，2402为多媒体播放区域，2403为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“录音”按键，2404为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“停止”按键，2405为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“播放”按键，2406为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的“点读”按键，2407为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的音量“-”按键，2408为在多媒体印刷物上的所定区域内通过埋入操作控制代码的方法设置的音量“+”按键。类似该方法还可指定其他的操作控制按键。

具体操作例是：多媒体录放装置在多媒体印刷物2401上点触“录音”操作控制按键的区域2403，然后再点触所要添加多媒体的播放区域2402，多媒体录放装置识别出播放区域2402的播放值后，发出“嘀”的提示声音，说明已将多媒体播放值识别出，此时可立即对着多媒体录放装置的微型话筒录音，或对着影像模组照像或录像等。录音完成后，多媒体录放装置在多媒体印刷物2401上点触“停止”操作控制按键的区域2404，录音操作停止，录音过程完成。

多媒体录放装置在多媒体印刷物2401上点触“播放”操作控制按键的区域2405，然后再点触已添加多媒体的播放区域2402，上述录制的多媒体数据就可播放出。

多媒体录放装置在多媒体印刷物2401上点触“点读”操作控制按键的区域2406，然后再点触已添加多媒体的播放区域2402，播放区域在出版时所配置的多媒体数据就可播放出。该功能主要用于在外语教学时，教科书的发音与自己的发音的对比等。

多媒体录放装置在多媒体印刷物2401上点触“-”操作控制按键的区域2407，可调整播放声音减小。

多媒体录放装置在多媒体印刷物2401上点触“-”操作控制按键的区域2408，可调整播放声音增大。

以上操作只是一个例子，模仿上述操作还可设计各种各样的操作，不论哪一种操作方式，只要是在印刷介质上，实现多媒体的录制或播放的控制操作，都属于本发明的范围之内。

Claims (6)

1.一种通过多媒体印刷物实现多媒体录制与播放的处理方法，包括多媒体的录制部分及多媒体播放部分；其特征在于：多媒体的录制部分的处理具有如下的步骤：

(1)多媒体印刷物的制成步骤，在印刷图像中被划分的若干播放区域上，将可区别于其它播放区域的多媒体播放值，变换成模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码，并分别埋入到所对应的播放区域中，形成新的印刷图像，经印刷制成多媒体印刷物；

(2)多媒体播放值信息识别步骤，使用多媒体录放装置的光学读取模块读取并识别在多媒体印刷物的播放区域里，埋入的被模式识别可能的，几何学的或物理学的分布的，多比特信息记录或信息埋入代码变换的多媒体播放值信息；

(3)多媒体录制步骤，使用多媒体录放装置的多媒体录制模块，录制包括声音、视频图像、静止图像、计算机图形或多媒体控制值数据在内的至少一种多媒体数据，并按照与上述识别出的被模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码变换的多媒体播放值的对应关系制成多媒体播放数据，并存入多媒体录放装置的存储模块中；

多媒体的播放部分的处理具有如下的步骤：

(1)多媒体播放值信息识别步骤，使用多媒体录放装置的光学读取模块读取并识别被模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码变换的多媒体播放值信息；

(2)读取多媒体数据步骤，按照上述识别出的被模式识别可能的几何学的或物理学的分布的多比特信息记录或信息埋入代码变换的多媒体播放值信息，从上述存入多媒体录放装置的存储模块中的多媒体播放数据中读取与多媒体播放值对应的多媒体数据；

(3)多媒体播放步骤，将上述存入多媒体录放装置的存储模块中的与多媒体播放值对应的多媒体数据，通过多媒体录放装置的多媒体播放模块进行播放。

2.根据权利要求1所述的一种通过多媒体印刷物实现多媒体录制与播放的处理方法，其特征在于：上述多媒体录放装置是由光学读取模块，多媒体录制模块，存储模块，多媒体播放模块组成。

3.根据权利要求1所述的一种通过多媒体印刷物实现多媒体录制与播放的处理方法，其特征在于：多媒体播放值是按照坐标值，序列值或内容值中的一种形式决定的。

4.根据权利要求1所述的一种通过多媒体印刷物实现多媒体录制与播放的处理方法，其特征在于：上述作为模式识别可能的几何学分布的多比特信息记录或信息埋入代码，是指构成点阵的分布模式是针对点阵的分布，按照不同的位置的点阵分布，不同的方向的点阵分布，不同的形状，不同网点的大小，不同的网点的点数的至少一种形式的点阵分布的处理的手段。

5.根据权利要求1所述的一种通过多媒体印刷物实现多媒体录制与播放的处理方法，其特征在于：上述模式识别可能的物理学分布的多比特信息记录或信息埋入代码，是指构成点阵的分布模式是针对点阵的分布，按照不同的调制方式的点阵分布，不同的位相调制的点阵分布，不同的传播方向的至少一种形式的点阵分布的处理手段。

6.根据权利要求1所述的一种通过多媒体印刷物实现多媒体录制与播放的处理方法，其特征在于：多媒体录放装置通过多媒体印刷物实现多媒体录制或播放的控制操作，是通过多媒体印刷物上，印刷的一个以上操作控制按键的图案实现的。