CN107040797A - 用于处理图像的装置和方法 - Google Patents

用于处理图像的装置和方法 Download PDF

Info

Publication number
CN107040797A
CN107040797A CN201610848239.3A CN201610848239A CN107040797A CN 107040797 A CN107040797 A CN 107040797A CN 201610848239 A CN201610848239 A CN 201610848239A CN 107040797 A CN107040797 A CN 107040797A
Authority
CN
China
Prior art keywords
image
encryption
original image
picture frame
field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610848239.3A
Other languages
English (en)
Other versions
CN107040797B (zh
Inventor
H-G.文
李男淑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107040797A publication Critical patent/CN107040797A/zh
Application granted granted Critical
Publication of CN107040797B publication Critical patent/CN107040797B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8352—Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving video stream encryption
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving video stream encryption
    • H04N21/23476—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving video stream encryption by partially encrypting, e.g. encrypting the ending portion of a movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4405—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video stream decryption
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4405—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video stream decryption
    • H04N21/44055—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video stream decryption by partially decrypting, e.g. decrypting a video stream that has been partially encrypted
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4408—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video stream encryption, e.g. re-encrypting a decrypted video stream for redistribution in a home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream

Abstract

提供了支持加密和解密的多媒体装置处理图像的装置和方法。该装置包括：获得原始图像的拇指甲图像，并使用第一加密方案来加密该原始图像。生成加密的图像帧，使得该加密的图像帧包括在其中记录获得的拇指甲图像的第一图像字段和其中记录加密的原始图像的第二图像字段之间的、其中记录标志信息的身份字段。该标志信息指示加密的图像帧是否包括该第二图像字段。

Description

用于处理图像的装置和方法
技术领域
本公开涉及用于在支持加密和解密的多媒体装置中处理图像的装置和方法。
背景技术
最近，已一般按照与通信服务合并的视频通信服务的形式来提供广播服务。视频通信服务基于在能够进行快速信息处理的多媒体装置上提供高速信息传递的宽带网络。
支持视频通信服务的多媒体装置由于图像处理而消耗大量功率。特别是，要处理的图像的分辨率可以是确定显示操作中的多媒体装置的功耗的主要因素。例如，在便携式多媒体装置(其后，称为“便携式终端”)中，显示操作期间的功耗可与要处理的图像的分辨率成比例地增加。
图像的分辨率的增加可引起其中要传递关于要处理的图像的信息的链路上的带宽的增加。例如，一个多媒体装置向云服务器传递多媒体数据所消耗的带宽可与目标多媒体的类型、分辨率等成比例增加。在另一示例中，当一个多媒体装置通过网络向另一多媒体装置传递多媒体数据时，要使用的带宽可与确定要传递的多媒体数据的尺寸的类型、分辨率等成比例增加。
关于这些原因，大多数多媒体装置使用各种编码和解码技术以降低多媒体数据的信息量。所述编码和解码技术允许诸如存储器的记录介质的容量和传送介质的带宽的有效使用。
已对于多媒体的类型开发了支持多媒体数据的编码和解码的编解码器，以改进编码效率。例如，用于静止图像的编解码器可包括联合图象专家组(JPEG)、JPEG 2000、无损JPEG、便携式网络图形(PNG)、画面运动浏览(PMB)等，并且用于活动图像的编解码器可包括运动JPEG、活动图像专家组(MPEG)-1、MPEG-2、MPEG-4、H.263、H.264、高效率视频编码(HEVC)等。用于音频的编解码器可包括MPEG-1层I、MPEG-1层II、MPEG-1层III、先进音频编码(AAC)、高效率(HE)-AAC、自由无损音频编解码器(FLAC)等。用于语音的编解码器可包括G.711、G.718、自适应多速率(AMR)、AMR-宽带(WB)等。
即使对于相同类型媒体，多媒体装置仍可通过考虑编码效率来使用不同编解码器。例如，第一多媒体装置可使用JPEG作为用于静止图像的编解码器，并且第二多媒体装置可使用PNG作为用于静止图像的编解码器。
作为另一问题，多媒体装置需要具有用于再现的和消耗的多媒体数据的保护方案。例如，多媒体装置不得不能够加密所产生的多媒体数据或解密所加密的多媒体数据用于消耗。
一般来说，在多媒体装置中，编码和解码以及加密和解密可能不容易彼此兼容。为了维持编解码器兼容性，不得不在加密之前的级别，即值级别(value level)，处理加密和解密。例如，当加密所编码的多媒体数据时，多媒体装置对编码的多媒体数据进行熵解码，对熵解码的多媒体数据进行加密，并然后对加密的多媒体数据进行熵编码。另一方面，当对加密的多媒体数据进行解码时，多媒体装置对加密的多媒体数据进行熵解码，对熵解码的多媒体数据进行解密，并然后对解密的多媒体数据进行熵编码。
当多媒体数据是静止图像或活动图像时，多媒体装置可提供低分辨率图像。低分辨率图像可以是拇指甲图像。多媒体装置可使用拇指甲图像来标识多媒体数据。
低分辨率图像可由个人计算机(PC)、智能电话、云服务器等基于对应策略通过使用静止图像或活动图像信息来生成。由此，当加密多媒体数据时，也可以加密低分辨率图像。在该情况下，另一多媒体装置对低分辨率图像的标识可受到局限。
为了解决该问题，需要执行复杂过程。例如，不得不解密所加密的图像，并且不得不从解密的图像生成低分辨率图像。然而，即使对于按照该方式生成的低分辨率图像，仍需要用于与加密的原始图像形成组织(organic)关系的方案。
以上信息被呈现为背景信息仅为了帮助本公开的理解。关于以上的任一个是否可应用为关于本公开的现有技术，还没有做出确定，并且没有做出断言。
发明内容
本公开的方面应解决至少上述问题和/或缺点，并提供至少下述优点。因此，本公开的一个方面是提供可在多媒体装置中支持编码和解码以及加密和解密之间的兼容性的图像处理装置和方法。
本公开的另一方面是提供这样的图像处理装置和方法，通过所述装置和方法，可容易地标识低分辨率图像，而无需支持加密和解密的多媒体装置中的解密。
本公开的另一方面是提供这样的图像处理装置和方法，其中执行图像的加密和解密，以使能低分辨率图像的标识，而无需多媒体装置中的加密和解密。
本公开的另一方面是提供这样的图像处理装置和方法，其基于加密配置多媒体帧，以促进低分辨率图像的标识，而无需多媒体装置中的解密。
本公开的另一方面是提供这样的图像处理装置和方法，其在多媒体装置中通过使用低分辨率图像，而允许云服务器中存储的原始图像的标识。
本公开的另一方面是提供能够通过共享低分辨率图像来标识云服务器中存储的原始图像的多媒体装置、以及支持该多媒体装置的方法。
根据本公开的一个方面，提供了一种由多媒体装置处理图像的方法。该方法包括：获得原始图像的拇指甲图像，使用第一加密方案来加密该原始图像，和生成加密的图像帧，使得该加密的图像帧包括在其中记录获得的拇指甲图像的第一图像字段和其中记录加密的原始图像的第二图像字段之间的、其中记录标志信息的身份字段，其中该标志信息指示加密的图像帧是否包括该第二图像字段。
根据本公开的另一方面，提供了一种用于处理图像的装置。该装置包括：输入接口；图像处理器，被配置为获得该输入接口所提供的图像帧中包括的原始图像的拇指甲图像，使用第一加密方案来加密该原始图像，和生成加密的图像帧，使得该加密的图像帧包括在其中记录获得的拇指甲图像的第一图像字段和其中记录加密的原始图像的第二图像字段之间的、其中记录标志信息的身份字段；和输出接口，被配置为输出该图像处理器所生成的加密的图像帧，其中该标志信息指示加密的图像帧是否包括该第二图像字段。
根据结合附图公开了本公开的各个实施例的以下详细描述，本公开的其他方面、优点和显著特征对于本领域技术人员将变得清楚。
附图说明
根据结合附图进行的以下描述，本公开的某些实施例的以上和其他方面、特征和优点将更清楚，其中：
图1是根据本公开各个实施例的多媒体装置中针对原始图像执行编码的图像处理装置的框图；
图2是根据本公开各个实施例的用于在图像处理装置中配置加密的图像帧的图像处理的概念框图；
图3图示了根据本公开各个实施例的加密的图像帧的结构的示例；
图4图示了根据本公开各个实施例的加密的图像帧的结构的另一示例；
图5A到5C图示了根据本公开各个实施例的向通过使用联合图像专家组(JPEG)编码原始图像的多媒体装置施加图像帧和加密的图像帧的示例；
图6图示了根据本公开各个实施例的用于在图像处理装置中处理原始图像的过程；
图7是图示了根据本公开各个实施例的用于在图像处理装置中执行加密的控制流的流程图；
图8是图示了根据本公开各个实施例的用于在图像处理装置中执行解密的控制流的流程图；
图9是图示了根据本公开各个实施例的用于内容数据处理的信号处理过程的示例的概念图；和
图10是图示了根据本公开各个实施例的用于内容数据处理的信号处理过程的另一示例的概念图。
贯穿这些图，相同的附图标记将被理解为表示相同部分、组件和结构。
具体实施方式
提供参考附图的以下描述以帮助权利要求及其等效所限定的本公开的各个实施例的全面理解。其包括各个特定细节以帮助该理解，但是这些应被看作仅是示范性的。因此，本领域技术人员将认识到能在不脱离本公开的范围和精神的情况下进行这里描述的各个实施例的各个改变和变型。另外，为了清楚和简明，可省略公知功能和构造的描述。
以下描述和权利要求中使用的术语和单词不限于文献(bibliographical)意义，并且可仅由发明人使用以使能本公开的清楚和一致的理解。因此，本领域技术人员应清楚的是，提供本公开的各个实施例的以下描述仅用于解释目的，而不是为了限制如所附权利要求及其等效所限定的本公开的目的。
应理解单数形式“a”、“an”和“the”包括复数指代，除非上下文按照别的方式清楚规定。由此，例如，指代“组件表面”包括指代这样的表面的一个或多个。
在本公开中，诸如“具有”、“可具有”、“包括”或“可包括”的表述指示对应特性(例如诸如数值、功能、操作或组件的元素)的存在，并且不排除附加特性的存在。
在本公开中，诸如“A或B”、“A或/和B的至少一个”或“A或/和B的一个或多个”可包括一起列出的项目的所有可能组合。例如，“A或B”、“A和B的至少一个”或“A或B的至少一个”可指示以下全部(1)包括至少一个A、(2)包括至少一个B、或(3)包括至少一个A和至少一个B两者。
各个实施例中使用的诸如“第一”、“第二”、“主要”或“次要”的表述可代表各个元素，而不管顺序和/或重要性，并且不限制对应元素。可使用这些表述用于区分一个元素与另一元素。例如，第一用户装置和第二用户装置可代表不同用户装置，而不管顺序或重要性。例如，第一元素可被称为第二元素，而不背离本公开的范围，并且类似地，第二元素可被称为第一元素。
当描述元素(例如第一元素)“可操作或可通信地耦接”到或“连接”到另一元素(例如第二元素)时，该元素能直接连接到所述另一元素，或者能通过第三元素连接到所述另一元素。然而，当描述元素(例如第一元素)“直接连接”到或“直接耦接”到另一元素(例如第二元素)时，这意味着在该元素和所述另一元素之间不存在居间元素(例如第三元素)。
本公开中使用的表述“配置为(或设置)”可根据情形由例如“适于”、“具有能力”、“设计为”、“适配为”、“使得”或“能够”替换。术语“配置为(或设置)”并非总是仅意味着通过硬件“具体设计为”。作为选择，在一些情形中，表述“设备配置为”可意味着设备“能”连同另一设备或组件一起操作。例如，短语“处理器配置(或设置)为执行A、B和C”可以是能通过运行在用于执行对应操作的排他处理器(诸如嵌入式处理器)处或存储装置处存储的至少一个软件程序、来执行对应操作的通用目的处理器(诸如中央处理单元(CPU)或应用处理器(AP))。
本公开中定义的术语被使用仅用于描述特定实施例，并且可以不具有限制其他各个实施例的范围的意图。当在本公开的描述和所附权利要求中使用时，单数形式可包括多个形式，除非其被显式不同地表示。这里使用的包括技术术语和科学术语的全部术语可具有与本领域技术人员一般理解的含义相同的含义。可分析字典中定义的一般使用的术语具有与相关技术的上下文中的含义相同的含义或相似的含义，并且不被分析为理想或过分正式的含义，除非进行了显式定义。在一些情况下，本公开中定义的术语不能被分析为排除当前各个实施例。
根据本公开各个实施例的电子装置可以是包括通信功能的装置。例如，电子装置可包括智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书(e-book)阅读器、桌面PC、膝上PC、上网本计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)、活动图像专家组阶段1或阶段2(MPEG-1或MPEG-2)音频层3(MP3)播放器、移动医疗设备、相机、和可穿戴装置(例如，智能眼镜、头戴式装置(HMD)、电子衣服、电子手镯、电子项链、配件、电子香烟、智能镜子、或智能手表)中的至少一个。
根据本公开的各个实施例，该电子装置可以是智能家用电器。该智能家用电器可以包括例如电视(TV)、数字视频盘(DVD)播放器、音频设备、冰箱、空调、真空吸尘器、烤炉、微波炉、洗衣机、空气净化器、机顶盒、家庭自动控制板、安全控制板、TV盒(例如，三星HomeSyncTM、苹果TVTM、或谷歌TVTM)、游戏控制台(例如，XboxTM或PlayStationTM)、电子字典、电子钥匙、摄像放像机、和电子相框中的至少一个。
根据本公开的实施例，该电子装置可包括各种医疗装置(例如，各种便携式医疗测量系统，例如血糖测量装置、心率测量装置、血压测量装置、或体温测量装置、磁共振血管造影(MRA)、磁共振成像(MRI)、计算机断层照相(CT)、成像装置、或超声装置)、导航系统、全球定位系统(GPS)接收机、事件数据记录仪(EDR)、飞行数据记录仪(FDR)、车辆资讯娱乐装置、用于船只的电子装置(例如，用于船只的导航系统和陀螺仪罗盘)、航空电子设备(avionics)、安全装置、车头单元、工业或家庭机器人、自动柜员机(ATM)、销售点(POS)、物联网(例如，电灯泡、各种传感器、电表或煤气表、洒水装置、火警报警器、恒温器、街灯、烤箱、锻炼机、热水箱、加热器、锅炉等)中的至少一个。
根据本公开的各个实施例，该电子装置可包括家具或房屋/结构的一部分、电子白板、电子签名接收装置、投影仪、和各种测量仪器(例如，水、电、煤气、或电波测量装置)。根据本公开的各个实施例的电子装置可以是上面列出的装置之一或者其组合。根据本公开的各个实施例的电子装置可以是挠性装置。本领域技术人员将清楚的是，根据本公开的各个实施例的电子装置不限于上面列出的装置，并且根据技术发展，可包括新的电子装置。
在本公开中要提出的各个实施例中，图像可指代静止图像和活动图像两者。经受诸如加密等的图像处理之前的静止图像或活动图像将被称为“原始图像”。为了标识或发现原始图像而从原始图像获得的拇指甲图像将被称为“低分辨率图像”。可通过从原始图像提取特定区域中的图像、从原始图像的元信息生成相关图像、改变原始图像的尺寸、或使得原始图像模糊，来生成低分辨率图像，以允许用户标识原始图像。
可通过预定编码方案来编码原始图像，并且可通过使用与预定编码方案对应的解码方案来将编码后图像解码为原始图像。用于编码和解码的编解码器是用于在存储器的有限储存区域中有效记录数据的代表性技术。已根据数据的不同类型开发了编解码器，以改进编码效率。
在本公开中要提出的各个实施例中，原始图像可通过预定加密方案保护。加密的原始图像可以通过与预定加密方案对应的解密方案来解密。低分辨率图像也可通过预定加密方案保护。加密的低分辨率图像可以通过与预定加密方案对应的解密方案来解密。例如，为了低分辨率图像的解密，可选择要加密的参数，或者可选择要加密的参数的特定比特。在该情况下，可对选择的参数或选择的参数的比特执行低分辨率图像的加密。
在本公开中要提出的各个实施例中，提出了这样的方案，其中原始图像被提供为具有预定格式的图像帧，并且多媒体装置将该图像帧重新配置为加密的图像帧，以促进与原始图像对应的低分辨率图像的兼容性。作为一个方案，可配置加密的图像帧，其中该图像帧中包括的编码后原始图像被加密并排列在身份信息之后，并且编码后原始图像所生成的低分辨率图像被排列在身份信息之前。在该情况下，多媒体装置可容易地从加密的图像帧解码低分辨率图像。由于加密的图像帧中包括的身份信息，所以多媒体装置可识别不再存在要解码的数据。
在加密的图像帧中的身份信息之后排列的编码的原始图像的数目并非必须限于一。例如，当在身份信息之后排列多个编码的原始图像时，可添加与多个编码的原始图像的每一个对应的多个图像字段。在身份信息之前排列的低分辨率图像的数目可以并非必须限于一。例如，可以添加与多个低分辨率图像的每一个对应的多个图像字段。
当将多个编码的原始图像排列在身份信息之后时，可在编码的原始图像之间添加身份信息。可使用添加的身份信息来区分在身份信息之前排列的编码的原始图像与在身份信息之后排列的编码的原始图像。
此外，在加密的图像帧中，在身份信息之后排列的编码的原始图像的数目可以并非必须等于在身份信息之前排列的低分辨率图像的数目。例如，一个编码的原始图像可被排列在身份信息之后，并且多个低分辨率图像可被排列在身份信息之前。另一方面，多个编码的原始图像可被排列在身份信息之后，并且一个低分辨率图像可被排列在身份信息之前。
加密的图像帧中包括的身份信息也可以基于编码的原始图像的数目和/或低分辨率图像的数目为单一或多个。
在加密的图像帧中，排列在身份信息之后的编码的原始图像可基于排列在身份信息之前的低分辨率图像被调整大小。例如，与和低分辨率图像重叠的区域对应的数据可从编码的原始图像去除，并且可在身份信息之后仅排列与编码的原始图像的剩余区域对应的数据。
在本公开中要提出的各个实施例中，提出了这样的方案，其中多媒体装置向云服务器传递基于通过根据预定编码方案编码而生成的图像帧、所重新配置的编码的图像帧，并在其中存储于图像帧中包括的原始图像对应的低分辨率图像。在该情况下，可在降低多媒体装置中存储的信息量的同时，使用低分辨率图像来找到原始图像。编码的图像帧中包括的原始图像可以不被加密。如果编码的图像帧包括未加密的原始图像，则云服务器可加密并存储编码的图像帧中包括的原始图像。此外，云服务器可生成与编码的图像帧中包括的原始图像对应的低分辨率图像，并将该生成的低分辨率图像传递到多媒体装置。为此，编码的图像帧中包括的原始图像可以并非必须是未加密的。即，即使当编码的图像帧包括加密的原始图像时，云服务器仍可能不具有任何困难地生成低分辨率图像并向多媒体装置传送生成的低分辨率图像。
下面，将参考附图来详细描述要提出的各个实施例。
图1是根据本公开各个实施例的多媒体装置中针对原始图像执行编码的图像处理装置的框图。
参考图1，图像处理装置可包括输入接口110、图像处理器120、和输出接口130。输入接口110接收原始图像用于加密，并将接收的原始图像传递到图像处理器120。
根据本公开的实施例，原始图像可被包括在图像帧的有效载荷中并且可输入到输入接口110。图像帧的有效载荷中包括的原始图像可通过预定图像编码方案编码。在该情况下，图像帧的结构可根据用来编码原始图像的图像编码方案来确定。例如，如果图像编码方案是JPEG，则图像帧可具有JPEG比特流结构。
图像处理器120通过使用原始图像来配置加密的图像帧。
根据本公开的实施例，图像处理器120提取从输入接口110输入的图像帧的有效载荷中记录的原始图像。如果提取的原始图像已通过预定编码方案编码，则图像处理器120可解码所编码的原始图像。图像处理器120可使用图像帧的报头信息，来解码所编码的原始图像。
图像处理器120生成与原始图像对应的低分辨率图像。例如，图像处理器120可从原始图像的整个区域选择特定区域，提取与选择的区域对应的图像，并基于提取的图像生成低分辨率图像。该特定区域可通过指示原始图像的特性的区域(即，促进原始图像的标识的区域)来设置。图像处理器120通过使用原始图像的元信息来生成相关图像，并使用生成的相关图像作为低分辨率图像。当使用元信息来生成相关图像时，可包括信息以促进原始图像的标识。
此外，图像处理器120降低原始图像的尺寸，并通过使用尺寸降低的原始图像来生成低分辨率图像、或者通过对原始图像执行诸如模糊的处理来生成用户可识别的图像，并使用生成的图像作为低分辨率图像。
图像处理器120加密原始图像并生成加密的原始图像。图像处理器120配置包括生成的低分辨率图像和生成的加密的原始图像的加密的图像帧。低分辨率图像可被加密以配置传送帧。在该情况下，用于加密低分辨率图像的加密方案可不同于用于加密原始图像的加密方案。例如，用于加密低分辨率图像的加密方案的加密级别可低于用于加密原始图像的加密方案的加密级别。
根据本公开的实施例，图像处理器120基于低分辨率图像选择要加密的参数，并加密所选择的参数。图像处理器120还可以基于低分辨率图像选择要加密的参数，选择所选择的参数的特定比特，并加密所选择的特定比特。
根据本公开的实施例，加密的图像帧可包括第一图像字段、身份字段、和第二图像字段。图像处理器120在第一图像字段中记录低分辨率图像，在第二图像字段中记录加密的原始图像，并在身份字段中记录标志信息。该标志信息是指示加密的图像帧是否包括第二图像字段的信息。
根据本公开的实施例，图像处理器120记录低分辨率图像来代替在图像帧的有效载荷中记录的原始图像，使用在指示图像帧的结束的字段中记录的身份信息作为标志信息，并在标志信息之后添加其中记录加密的原始图像的第二图像字段，由此配置加密的图像帧。指示图像帧的结束的身份信息可对应于用来编码原始图像的编码方案来定义。
根据本公开的实施例，形成加密的图像帧的第一图像字段可包括一个记录区域或多个记录区域。例如，第一图像字段并非必须包括一个低分辨率图像。例如，多个低分辨率图像可依次记录在第一图像字段中。在该情况下，第一图像字段中记录的多个低分辨率图像可通过预置信息(比特值)来区分。
根据本公开的实施例，形成加密的图像帧的第二图像字段可具有一个记录区域或多个记录区域。例如，第二图像字段并非必须包括一个编码的原始图像。多个编码的原始图像可依次记录在第二图像字段中。在该情况下，第二图像字段中记录的多个编码的原始图像可通过预置信息(比特值)来区分。预置信息可被布置在编码的原始图像之间或者可在预先约定的(pre-agreed)位置处一次(at a time)添加。
根据本公开的实施例，第二图像字段中布置的编码的原始图像的数目可以并非必须等于在第一图像字段的前面布置的低分辨率图像的数目。例如，一个编码的原始图像可被布置在第二图像字段中，并且多个低分辨率图像可被布置在第一图像字段中。另一方面，多个编码的原始图像可被布置在第二图像字段中，并且一个低分辨率图像可被布置在第一图像字段中。
根据本公开的实施例，第二图像字段中布置的编码的原始图像可基于第一图像字段中布置的低分辨率图像而调整大小。例如，与和低分辨率图像重叠的区域对应的数据可从编码的原始图像去除，并且可在第二图像字段中仅记录与编码的原始图像的剩余区域对应的数据。
图像处理器120可添加在身份字段与第二图像字段之间的额外信息字段，以配置加密的图像帧。在额外信息字段中，可记录用于加密的原始图像的解密所使用的信息。
输出接口130向目标输出图像处理器120所生成的加密的图像帧。目标可对应于用于加密的图像帧的处理方案来确定。例如，当在输出接口130中记录加密的图像帧时，输出接口130可向内部存储器输出加密的图像帧。在另一示例中，当将加密的图像帧输出到外部装置(例如，云服务器)时，输出接口130可向发射机输出加密的图像帧。
图像处理器120在存储器(未示出)中存储低分辨率图像以对应于图像标识信息。可定义该图像标识信息，以使得低分辨率图像与通过加密的图像帧向外部装置(云服务器)传送的加密的原始图像匹配。图像标识信息可被记录在加密的图像帧的指定字段中。
根据本公开的实施例，图像处理器120根据外部请求在显示器(未示出)上显示存储器中存储的低分辨率图像之中的一个或多个低分辨率图像。
根据本公开的实施例，图像处理器120通过输出接口130向外部装置(云服务器)发送对于拇指甲图像的请求，并响应于该请求从外部装置接收低分辨率图像。图像处理器120在显示器(未示出)上显示从外部装置接收的低分辨率图像。
一旦接收到用于提供与显示的低分辨率图像对应的原始图像的请求，图像处理器120就通过使用对应于显示的低分辨率图像存储的图像标识信息，来向外部装置(云服务器)发送对于加密的原始图像的请求。一旦通过输入接口110接收到加密的原始图像，图像处理器120就对接收的加密的原始图像进行解密。图像处理器120在显示器(未示出)上显示解密的原始图像。
图2是根据本公开各个实施例的在图像处理装置中配置加密的图像帧的图像处理的概念框图。
参考图2，多媒体装置在操作210从原始图像生成低分辨率图像。该低分辨率图像可以是拇指甲图像的示例。多媒体装置基于原始图像的策略生成拇指甲图像。例如，可通过针对原始图像执行调整大小、量化电平调整、和修剪(cropping)，来生成拇指甲图像。还可以使用与用来生成低分辨率图像所使用的方法相同的方法，来生成拇指甲图像。
拇指甲图像可基于预置方案来加密。例如，关于拇指甲图像，可选择并加密要加密的参数，或者可选择和加密要加密的参数的特定比特。
多媒体装置在操作220通过使用预定加密方案来加密原始图像，并输出通过加密所加密的原始图像。例如，如果已通过使用原始图像的特定区域中的图像而生成了低分辨率图像，则多媒体装置可加密除了特定区域中的图像之外的、原始图像的剩余区域中的图像。
多媒体装置可提供用于加密的原始图像的解密所使用的额外信息。例如，多媒体装置可提供关于用于加密所使用的秘钥(加密秘钥)和加密方案的信息作为额外信息，或者可提供用于基于提供的加密秘钥和加密方案的解密所使用的信息作为额外信息。如果原始图像的加密是可选择性应用的，则额外信息可进一步包括指示是否已加密了原始图像的信息。
多媒体装置在操作230使用所生成的至少一个低分辨率图像和所加密的至少一个原始图像，来配置加密的图像帧。例如，加密的图像帧可包括报头和有效载荷。有效载荷可包括至少一个低分辨率图像和至少一个加密的原始图像。有效载荷可包括指示其中包括至少一个加密的原始图像的标志。有效载荷中记录标志的位置可在其中记录加密的原始图像的位置之前。即，在有效载荷中，其中记录至少一个低分辨率图像的字段(例如，假的有效载荷)、其中记录标志的字段、和其中记录至少一个加密的原始图像的字段可按照该顺序依次排列。
如果提供与加密对应的额外信息，则加密的图像帧的有效载荷可包括其中要记录所提供的额外信息的字段。例如，其中记录额外信息的字段可被排列在其中记录标志的字段和其中记录所加密的原始图像的字段之间。
多媒体装置可在加密的图像帧的报头中记录用于低分辨率图像的信息。加密的图像帧的报头可以是“假报头”。在该情况下，多媒体装置可向加密的图像帧的报头添加额外报头字段。多媒体装置在额外报头字段中记录用于至少一个加密的原始图像的信息。多媒体装置加密要在额外报头字段中记录的用于至少一个加密的原始图像的信息。在该情况下，额外报头字段可以是“加密的报头”。
图3图示了根据本公开各个实施例的加密的图像帧的结构的示例。
参考图3，加密的图像帧可包括报头310和有效载荷320。在报头310中，可记录关于加密的图像帧的信息。在报头310中，可记录关于在有效载荷320中记录的数据的信息。在有效载荷320中，可记录至少一个低分辨率图像和至少一个加密的原始图像。
根据本公开的实施例，有效载荷320可包括第一图像字段322、身份字段324、和第二图像字段326。在第一图像字段322中，可记录至少一个低分辨率图像。第一图像字段322中记录的至少一个低分辨率图像可使用预定加密方案来加密。在第二图像字段326中，可记录至少一个原始图像。第二图像字段326中记录的至少一个原始图像可使用预定加密方案来加密。
用于加密低分辨率图像的加密方案可不同于用于加密原始图像的加密方案。例如，用于加密低分辨率图像的加密方案的加密级别可低于用于加密原始图像的加密方案的加密级别。
标志信息可被记录在身份字段324中。标志信息指示加密的图像帧是否包括第二图像字段326。可使用标志信息来指示是否已加密了第二图像字段326中包括的原始图像。
图4图示了根据本公开各个实施例的加密的图像帧的结构的另一示例。
参考图4，图4中示出的加密的图像帧的结构具有在图3中示出的加密的图像帧的结构中的有效载荷420中的额外字段426。即，加密的图像帧的有效载荷420可包括第一图像字段422、身份字段424、额外字段426、和第二图像字段428。在额外字段428中，记录诸如关于用于加密所使用的秘钥(加密秘钥)、加密方案等的信息的额外信息。如果原始图像的加密是可选择性应用的，则额外信息可进一步包括指示是否已加密了原始图像的信息。
在加密的图像帧的报头410中，除了用于加密的图像帧的信息之外，可记录在第二图像字段428中记录的用于加密的原始图像的信息。
根据本公开的实施例，在加密的图像帧的报头410中，除了用于加密的图像帧的信息之外，可进一步记录在第一图像字段422中记录的用于低分辨率图像的信息。在该情况下，有效载荷420可进一步包括额外报头字段(未示出)。在额外报头字段中，可记录第二图像字段428中记录的用于加密的原始图像的信息。例如，用于加密的原始图像的信息可使用预定加密方案来加密，并添加到额外报头字段。
图5A到5C图示了根据本公开各个实施例的当向通过使用JPEG编码原始图像的多媒体装置施加提出的各个实施例时的、图像帧和加密的图像帧的示例。
参考图5A到5C，当使用JPEG作为编码方案来编码原始图像时生成的图像帧可包括图5A中示出的图像开始(SOI)字段、有效载荷、和图像结束(EOI)字段。
在SOI字段中，记录指示原始图像的开始的标志信息。在报头中，可记录诸如作为编码方案的JPEG、图像尺寸、量化表格、霍夫曼表格等的信息。在有效载荷中，记录实际编码的原始图像。在EOI字段中，记录指示原始图像的结束的标志信息。
根据本公开的实施例，图像处理装置生成的加密的图像帧可包括图5B中示出的SOI字段、报头、拇指甲字段、EOI字段、和加密的有效载荷。
根据本公开的实施例，对图5A中示出的图像帧的有效载荷中记录的编码的原始图像进行解码，并从解码的原始图像获得拇指甲图像。可从编码的原始图像直接获得拇指甲图像。获得的拇指甲图像被记录在图5A中示出的图像帧的有效载荷(图5B中示出的加密的图像帧的拇指甲字段)中。在拇指甲图像的记录之后的剩余空间可被使用用于其他目的，或者可被零填充。在该情况下，图像处理装置可在没有特殊困难的情况下获得图5B中示出的加密的图像帧的拇指甲字段中记录的拇指甲图像。
可使用5A中示出的图像帧的EOI字段中记录的信息作为特定标志信息。可使用该特定标志信息，以指示加密的有效载荷被添加在EOI字段之后。在加密的有效载荷中，可记录通过使用预定加密方案加密原始图像所获得的加密的原始图像。
在该情况下，图像处理装置通过标识EOI字段中记录的信息，来识别已使用预定加密方案加密了在EOI字段之后的字段中记录的原始图像。
编解码器识别在特定信号(例如，EOI字段中记录的信息)之后不存在信息，并且不执行解码。由此，当图像处理装置解码图5B中示出的加密的图像帧时，图像处理装置可仅解码拇指甲图像。
通过使用这样的特性，在EOI字段和加密的有效载荷之间添加额外信息字段，以配置图5B的加密的图像帧。在额外信息字段中，可记录关于加密或未加密、用于加密的秘钥(加密秘钥)、加密方案等的额外信息。
图6图示了根据本公开各个实施例的用于在图像处理装置中处理原始图像的过程。
参考图6，图像处理装置在操作610通过使用预定编码方案来编码包括十六个图像块的原始图像，并使用编码的原始图像来配置图像帧。可使用SOI、报头、有效载荷、和EOI来配置图像帧。
图像处理装置在操作620生成用于拇指甲的低分辨率图像，并通过使用先进加密标准(AES)方法等针对编码的原始图像执行加密。例如，可通过从原始图像的十六个图像块的每一个提取一些图像，来生成低分辨率图像。
图像处理装置在操作630在图像帧的报头和EOI之间记录生成的低分辨率图像，并在EOI之后记录加密的原始图像，由此配置加密的图像帧。
图像处理装置在操作640通过使用预定加密方案来加密在加密的图像帧中记录的低分辨率图像。用来加密低分辨率图像的加密方案可以不同于用来加密编码的原始图像的加密方案。该示例与上面公开的示例相同。
图7是图示了根据本公开各个实施例的用于在图像处理装置中执行加密的控制流的流程图。
参考图7，图像处理装置在操作710接收图像帧。图像帧可以由支持预定编码方案的编码器生成。由此，图像帧可包括编码的原始图像。可通过被应用来编码原始图像的编码方案，来定义图像帧的结构。
图像处理装置在操作720分析至少一个接收的图像帧的有效载荷，并在操作730通过使用基于分析结果选择的加密方案，来加密有效载荷中的原始图像。可选择AES方法作为该加密方案。
图像处理装置在操作740生成与一个原始图像或多个原始图像的每一个对应的低分辨率图像(其是拇指甲图像)。图像处理装置在操作750配置包括至少一个加密的原始图像和至少一个低分辨率图像的加密图像帧。可通过使用所述至少一个加密的原始图像和所述至少一个低分辨率图像重新配置图像帧，来生成加密的图像帧。
图像处理装置生成用于原始图像的加密所使用的、关于加密和未加密、加密秘钥、加密方案等的额外信息，并使用生成的额外信息用于原始图像的加密。在该情况下，假的有效载荷在加密的图像帧中定义，并且低分辨率图像可被记录在定义的假的有效载荷中。
图8是图示了根据本公开各个实施例的用于在图像处理装置中执行解密的控制流的流程图。
参考图8，图像处理装置在操作810分析加密的图像帧中包括的标志信息(例如，EOI)，并基于分析结果来识别加密的图像帧的加密的有效载荷的位置。
图像处理装置在操作820通过使用所识别的加密的有效载荷的位置，来解密在加密的图像帧的加密的有效载荷中记录的至少一个加密的原始图像。图像处理装置从加密的图像帧的额外字段中记录的额外信息或额外报头信息获得用于解密至少一个加密的原始图像所使用的信息。为了解密所述至少一个加密的原始图像，可使用AES方法。
例如，图像处理装置可提取加密的图像帧中包括的额外信息，并基于提取的额外信息来解密在加密的图像帧的加密的有效载荷中记录的至少一个加密的原始图像。
图像处理装置在操作830基于解码原始图像所要使用的解码方案，来配置图像帧。
在本公开中，用于标识内容的信息被存储在多媒体装置中，并且实际加密的大尺寸信息被存储在云服务器中，由此改进用户的使用便利性，降低多媒体装置的存储尺寸，并降低网络的使用量。
图9是图示了根据本公开各个实施例的用于内容数据处理的信号处理过程的示例的概念图。即，在图9中，假设以下场景，其中多媒体装置生成低分辨率图像，通过使用生成的低分辨率图像搜索云服务器中存储的内容(例如，原始图像)，并基于该搜索从云服务器获得期望的内容数据。为了便利，将在假设多媒体装置和云服务器之间交换的内容是与静止图像或活动图像对应的原始图像的情况下，进行以下描述。
参考图9，多媒体装置在操作9-1被提供与加密目标对应的一个图像帧或多个图像帧，生成与提供的图像帧或多个图像帧中包括的原始图像对应的至少一个低分辨率图像，并在存储器中存储生成的至少一个低分辨率图像。在以下描述中，假设使用一个原始图像或一个低分辨率图像生成加密的图像帧。然而，相同描述可应用到其中使用多个原始图像和/或多个低分辨率图像生成加密的图像帧的情况。
其中存储低分辨率图像的存储器可位于多媒体装置内部或多媒体装置可访问的外部地点中。图像帧中包括的原始图像可使用预定编码方案来编码。不局限性地应用该编码方案。例如，可在没有附加改变的情况下应用用于编码静止图像或活动图像的任何编码方案。然而，多媒体装置可考虑已被用来生成低分辨率图像的编码方案。
多媒体装置在操作9-2通过使用具有预先约定的格式的传送帧来向云服务器传送图像帧中包括的原始图像。例如，该传送帧可以是通过重新配置图像帧获得的加密的图像帧。上面已描述了用于加密的图像帧的重新配置。在该情况下，可选择性应用针对传送帧中包括的原始图像的加密。如果还没有加密传送帧中包括的原始图像，则已接收到传送帧的云服务器在操作9-2-1加密传送帧中包括的原始图像。
多媒体装置并非必须包括与传送帧中的原始图像对应地生成的低分辨率图像。如果传送帧中包括低分辨率图像，则低分辨率图像需要具有考虑兼容性的结构，如同上面提出的加密的图像帧那样。在该情况下，传送帧中包括的低分辨率图像可与其他多媒体装置共享。
多媒体装置在操作9-3显示存储的低分辨率图像，并基于显示的低分辨率图像而提供可显示原始图像的搜索。例如，多媒体装置可响应于来自用户的请求，依次显示存储的低分辨率图像，并监视用户是否选择所显示的低分辨率图像。还没有加密低分辨率图像，使得多媒体装置可以不解密低分辨率图像来显示低分辨率图像。
一旦接收到对于与显示的低分辨率图像对应的原始图像的请求，多媒体装置就在操作9-4向云服务器发送对于原始图像的请求。例如，当发送对于原始图像的请求时，多媒体装置可向云服务器提供用于标识原始图像的信息。为此，当存储低分辨率图像时，多媒体装置向低分辨率图像分配身份信息，并向云服务器提供所分配的身份信息。当将原始图像传送到云服务器时，可以一起提供身份信息。根据实施例，云服务器通过使用上面提出的加密的图像帧，来向多媒体装置传送原始图像。
云服务器在操作9-5响应于来自多媒体装置的请求读取存储的原始图像，并将读取的原始图像传送到多媒体装置。存储的原始图像已被加密，使得云服务器在操作9-4-1解密所加密的原始图像。
一旦从云服务器接收到原始图像，多媒体装置就在操作9-6通过显示部件显示所接收的原始图像。为此，多媒体装置基于预定解密方案来解密原始图像。多媒体装置还可以在解密之后通过使用预定编解码器来解码原始图像。
如上面阐述的，多媒体装置可节省记录空间，因为并非必须存储所有原始图像，并且可通过使用低分辨率图像而容易地搜索原始图像。
图10是图示了根据本公开各个实施例的用于内容数据处理的信号处理过程的另一示例的概念图。即，在图10中，假设这样的场景，其中云服务器向多媒体装置提供由从多媒体装置提供的原始内容生成的低分辨率图像。为了便利，将在假设多媒体装置和云服务器之间交换的内容是与静止图像或活动图像对应的原始图像的情况下，进行以下描述。
参考图10，多媒体装置在操作10-1被提供有图像帧，并通过使用具有预先约定的格式的传送帧将图像帧中包括的原始图像传送到云服务器。例如，传送帧可以是通过重新配置图像帧获得的加密的图像帧。上面已描述了对于加密的图像帧的重新配置。在该情况下，可选择性地应用传送帧中包括的原始图像的加密。如果还没有加密传送帧中包括的原始图像，则已接收到传送帧的云服务器可加密传送帧中包括的原始图像。
云服务器在操作10-2生成与从多媒体装置传送的传送帧中包括的原始图像对应的低分辨率图像，并在存储器中存储生成的低分辨率图像。图像帧中包括的原始图像可通过预定编码方案来编码。在该情况下，不局限性地应用编码方案。即，可在没有附加改变的情况下应用用于编码静止图像或活动图像的任何编码方案。然而，多媒体装置可考虑已被用来生成低分辨率图像的编码方案。
云服务器在操作10-3向多媒体装置传送生成的低分辨率图像。云服务器可强制传送低分辨率图像，也可以响应于来自多媒体装置的请求传送低分辨率图像。云服务器向多媒体装置传送的低分辨率图像可以不被加密，使得低分辨率图像可与各个多媒体装置共享。然而，如果低分辨率图像使用预定编码方案，则期望与该多媒体装置共享低分辨率图像的另一多媒体装置需要包括与该编码方案对应的编解码器。
多媒体装置在操作10-4在存储器中存储从云服务器提供的低分辨率图像。要存储低分辨率图像的存储器可位于多媒体装置内部或多媒体装置可访问的外部地点中。图像帧中包括的原始图像可使用预定编码方案来编码。不局限性地应用该编码方案。例如，可在没有附加改变的情况下应用用于编码静止图像或活动图像的任何编码方案。
多媒体装置在操作10-5显示存储的低分辨率图像，并基于显示的低分辨率图像而提供可显示原始图像的搜索。例如，多媒体装置可响应于来自用户的请求而依次显示存储的低分辨率图像，并监视用户是否选择所显示的低分辨率图像。还没有加密低分辨率图像，使得多媒体装置可以不解密低分辨率图像来显示低分辨率图像。
一旦接收到对于与显示的低分辨率图像对应的原始图像的请求，多媒体装置就在操作10-6向云服务器发送对于原始图像的请求。例如，当发送对于原始图像的请求时，多媒体装置可向云服务器提供用于标识原始图像的信息。为此，当存储低分辨率图像时，多媒体装置向低分辨率图像分配身份信息，并向云服务器提供所分配的身份信息。当将原始图像传送到云服务器时，可以一起提供身份信息。
云服务器在操作10-7响应于来自多媒体装置的请求读取存储的原始图像，并将读取的原始图像传送到多媒体装置。如果存储的原始图像已被加密，则云服务器可解密所加密的原始图像。
一旦从云服务器接收到原始图像，多媒体装置就在操作10-8通过显示部件显示所接收的原始图像。为此，多媒体装置基于预定解密方案来解密原始图像。多媒体装置还可以在解密之后通过使用预定编解码器来解码原始图像。
如上所述，多媒体装置可节省记录空间，因为并非必须存储所有原始图像，并且可通过使用低分辨率图像而容易地搜索原始图像。
例如，在上述本公开的各个实施例中，已在其中加密的图像帧包括一个低分辨率图像(拇指甲图像)和一个原始图像的情况中进行了描述。然而，如上面提及的，这里提出的各个实施例不限于其中加密的图像帧包括一个低分辨率图像和一个原始图像的情况。即，加密的图像帧可包括一个低分辨率图像和多个原始图像，或者可包括多个低分辨率图像和一个原始图像。加密的图像帧还可以包括多个低分辨率图像和多个原始图像。
从以上描述清楚的是，根据本公开的各个实施例，多媒体装置可容易地标识图像，并且还可以通过使用云服务器中存储的低分辨率图像来保护其中存储的原始图像。按照该方式，可节省多媒体装置的储存空间，并且可降低图像处理所生成的功耗。
这里公开的实施例已被提供用于公开的技术内容的描述和理解，并且不意欲限制本公开的范围。所以，应解释的是，本公开的范围包括基于本公开的技术精神的任何改变或其他各个实施例。
尽管已参考其各个实施例示出和描述了本公开，但是本领域技术人员将理解的是，可在这里进行形式和细节的各个改变，而不脱离所附权利要求及其等效所限定的本公开的精神和范围。

Claims (15)

1.一种由多媒体装置处理图像的方法，该方法包括：
获得原始图像的拇指甲图像；
使用第一加密方案来加密该原始图像；和
生成加密的图像帧，使得该加密的图像帧包括在其中记录获得的拇指甲图像的第一图像字段和其中记录加密的原始图像的第二图像字段之间的、其中记录标志信息的身份字段，
其中该标志信息指示加密的图像帧是否包括该第二图像字段。
2.根据权利要求1的方法，其中所述加密的图像帧的生成包括：
通过添加生成的拇指甲图像、代替在编码的图像帧的有效载荷中记录的原始图像，来配置该第一图像字段；
将其中记录指示图像帧的结束的身份信息的字段配置为该身份字段；和
在其中记录身份信息的字段之后添加其中记录加密的原始图像的第二图像字段，以生成加密的图像帧，
其中从基于预定图像编码方案生成的图像帧的有效载荷提取原始图像，并且对应于用来编码原始图像的图像编码方案来定义该身份信息。
3.根据权利要求1的方法，其中所述加密的图像帧的生成包括：在该身份字段与该第二图像字段之间添加额外字段，并在该额外字段中记录用于解密加密的原始图像所使用的信息。
4.根据权利要求1的方法，进一步包括：
向云服务器传送所生成的加密的图像帧；
存储获得的拇指甲图像以对应于图像身份信息；
如果选择了存储的拇指甲图像，则显示选择的拇指甲图像；
一旦接收到对于与显示的拇指甲图像对应的原始图像的请求，就通过使用与显示的拇指甲图像对应地存储的图像身份信息，从云服务器接收加密的原始图像；
解密所接收的加密的原始图像；和
显示所解密的原始图像，
其中该图像身份信息被定义为匹配所获得的拇指甲图像与通过加密的图像帧向云服务器传送的加密的原始图像。
5.根据权利要求1的方法，其中所述加密的图像帧的生成包括：
通过使用第二加密方案来加密要在该第一图像字段中记录的拇指甲图像，
其中该第二加密方案不同于该第一加密方案，并且该第二加密方案的加密级别低于该第一加密方案的加密级别。
6.根据权利要求1的方法，进一步包括：
向云服务器传送所生成的加密的图像帧；
存储获得的拇指甲图像以对应于图像身份信息；
向云服务器发送对于拇指甲图像的请求；
显示从云服务器提供的拇指甲图像；
如果接收到对于与显示的拇指甲图像对应的原始图像的请求，就向云服务器发送对于与显示的拇指甲图像对应的原始图像的请求；
解密从云服务器提供的加密的原始图像；
显示所解密的原始图像，
其中该图像身份信息被定义为匹配所获得的拇指甲图像与通过加密的图像帧向云服务器传送的加密的原始图像。
7.根据权利要求1的方法，其中所述原始图像的加密包括：
从原始图像去除与拇指甲图像重叠的图像；和
通过使用第一加密方案，来加密已从其去除了重叠图像的原始图像。
8.一种用于处理图像的装置，该装置包括：
输入接口；
图像处理器，被配置为
获得该输入接口所提供的图像帧中包括的原始图像的拇指甲图像，
使用第一加密方案来加密该原始图像，和
生成加密的图像帧，使得该加密的图像帧包括在其中记录获得的拇指甲图像的第一图像字段和其中记录加密的原始图像的第二图像字段之间的、其中记录标志信息的身份字段；和
输出接口，被配置为输出该图像处理器所生成的加密的图像帧，
其中该标志信息指示加密的图像帧是否包括该第二图像字段。
9.根据权利要求8的装置，其中该图像处理器被进一步配置为：
通过添加生成的拇指甲图像、代替在图像帧的有效载荷中记录的原始图像，来配置该第一图像字段；
将其中记录指示图像帧的结束的身份信息的字段配置为该身份字段；和
在其中记录身份信息的字段之后添加其中记录加密的原始图像的第二图像字段，以生成加密的图像帧，
其中该原始图像使用预定图像编码方案编码、并记录在图像帧的有效载荷中，并且该身份信息对应于用来编码原始图像的图像编码方案来定义。
10.根据权利要求8的装置，其中该图像处理器被进一步配置为：
在该身份字段与该第二图像字段之间添加额外字段；和
在该额外字段中记录用于解密加密的原始图像所使用的信息。
11.根据权利要求8的装置，进一步包括：
发射机，配置为向云服务器传送所生成的加密的图像帧；和
存储器，配置为存储获得的拇指甲图像以对应于图像身份信息，
其中该图像身份信息被定义为匹配所获得的拇指甲图像与通过加密的图像帧向云服务器传送的加密的原始图像。
12.根据权利要求11的装置，其中该图像处理器被进一步配置为：
如果选择了存储器中存储的拇指甲图像，则显示选择的拇指甲图像；
一旦接收到对于与显示的拇指甲图像对应的原始图像的请求，就通过使用与显示的拇指甲图像对应地在存储器中存储的图像身份信息，从云服务器接收加密的原始图像；
解密所接收的加密的原始图像；和
通过显示器显示所解密的原始图像。
13.根据权利要求8的装置，其中该图像处理器被进一步配置为通过使用第二加密方案来加密要在该第一图像字段中记录的拇指甲图像，和
其中该第二加密方案不同于该第一加密方案，并且该第二加密方案的加密级别低于该第一加密方案的加密级别。
14.根据权利要求11的装置，其中该图像处理器被进一步配置为：
向云服务器发送对于拇指甲图像的请求；
通过显示器显示从云服务器提供的拇指甲图像；
如果接收到对于与显示的拇指甲图像对应的原始图像的请求，则从云服务器接收与显示的拇指甲图像对应的原始图像；
解密从云服务器提供的加密的原始图像；和
通过显示器显示所解密的原始图像。
15.根据权利要求8的装置，其中该图像处理器被进一步配置为：
从原始图像去除与拇指甲图像重叠的图像；
通过使用第一加密方案，来加密已从其去除了重叠图像的原始图像；和
在该第二图像字段中记录加密的原始图像。
CN201610848239.3A 2015-09-25 2016-09-23 用于处理图像的装置和方法 Active CN107040797B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150136192A KR102444044B1 (ko) 2015-09-25 2015-09-25 이미지 처리장치 및 방법
KR10-2015-0136192 2015-09-25

Publications (2)

Publication Number Publication Date
CN107040797A true CN107040797A (zh) 2017-08-11
CN107040797B CN107040797B (zh) 2021-02-26

Family

ID=56883525

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610848239.3A Active CN107040797B (zh) 2015-09-25 2016-09-23 用于处理图像的装置和方法

Country Status (5)

Country Link
US (1) US10390106B2 (zh)
EP (2) EP3148198A1 (zh)
JP (1) JP6843462B2 (zh)
KR (1) KR102444044B1 (zh)
CN (1) CN107040797B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10491963B1 (en) * 2016-06-28 2019-11-26 Amazon Technologies, Inc. Use video codecs to deliver images
JP7229647B2 (ja) 2017-06-16 2023-02-28 ソニーセミコンダクタソリューションズ株式会社 信号処理装置および方法、並びにプログラム
US11570354B2 (en) * 2018-10-08 2023-01-31 Google Llc Display assistant device having a monitoring mode and an assistant mode
KR20200094525A (ko) 2019-01-30 2020-08-07 삼성전자주식회사 서로 연관된 복수의 데이터를 포함하는 하나의 파일을 처리하는 전자 장치
GB2588083A (en) * 2019-08-27 2021-04-21 Alesa Services Ltd Imagery acquisition method and apparatus
CN111277865A (zh) * 2020-01-17 2020-06-12 深圳市春盛海科技有限公司 影像实时加密的方法及装置

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030086568A1 (en) * 2001-10-09 2003-05-08 Sony Corporation Video information recording apparatus and method, video information reproducing apparatus and method, recording medium, and program
JP2003187093A (ja) * 2001-12-21 2003-07-04 Canon Inc 情報処理装置、撮影装置、サービス提供システム、サービス提供方法、記憶媒体、及びプログラム
CN101038772A (zh) * 2006-03-13 2007-09-19 株式会社东芝 用于记录内容的设备和方法
JP2007304200A (ja) * 2006-05-09 2007-11-22 Canon Inc 画像処理装置及びその情報配信方法、並びに制御プログラム
US20070269187A1 (en) * 2006-05-19 2007-11-22 Sony Corporation Recording apparatus, recording method, recording program, recording/reproducing apparatus, recording/reproducing method, recording/reproducing program, editing apparatus, editing method, and editing program
US20080031446A1 (en) * 2006-08-04 2008-02-07 Canon Kabushiki Kaisha Information processing apparatus, data processing apparatus, and methods thereof
CN102819716A (zh) * 2012-07-20 2012-12-12 腾讯科技（深圳）有限公司 一种加密图片、解密图片的方法、装置及系统
CN102883039A (zh) * 2012-07-30 2013-01-16 成都西可科技有限公司 手机多媒体私密日记加密方法
CN103581683A (zh) * 2013-10-18 2014-02-12 宁波海韦斯智能技术有限公司 Jpeg图像加密传输方法
CN103582889A (zh) * 2011-06-06 2014-02-12 松下电器产业株式会社 内容数据再生方法及缩略图图像生成方法
EP2584800B1 (en) * 2011-09-20 2014-11-05 LG Electronics Inc. Digital system and method of processing service data thereof
US20150035999A1 (en) * 2013-08-05 2015-02-05 Nvidia Corporation Method for sharing digital photos securely

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5213687B2 (ja) * 2008-12-19 2013-06-19 キヤノン株式会社 画像処理装置及びその制御方法
US11462314B2 (en) * 2009-10-14 2022-10-04 Trice Imaging, Inc. Systems and devices for encrypting, converting and interacting with medical images
WO2016147066A1 (en) * 2015-03-19 2016-09-22 Yuga Computing Solutions Inc. Method and apparatus for image privacy protection

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030086568A1 (en) * 2001-10-09 2003-05-08 Sony Corporation Video information recording apparatus and method, video information reproducing apparatus and method, recording medium, and program
JP2003187093A (ja) * 2001-12-21 2003-07-04 Canon Inc 情報処理装置、撮影装置、サービス提供システム、サービス提供方法、記憶媒体、及びプログラム
CN101038772A (zh) * 2006-03-13 2007-09-19 株式会社东芝 用于记录内容的设备和方法
JP2007304200A (ja) * 2006-05-09 2007-11-22 Canon Inc 画像処理装置及びその情報配信方法、並びに制御プログラム
US20070269187A1 (en) * 2006-05-19 2007-11-22 Sony Corporation Recording apparatus, recording method, recording program, recording/reproducing apparatus, recording/reproducing method, recording/reproducing program, editing apparatus, editing method, and editing program
US20080031446A1 (en) * 2006-08-04 2008-02-07 Canon Kabushiki Kaisha Information processing apparatus, data processing apparatus, and methods thereof
CN103582889A (zh) * 2011-06-06 2014-02-12 松下电器产业株式会社 内容数据再生方法及缩略图图像生成方法
EP2584800B1 (en) * 2011-09-20 2014-11-05 LG Electronics Inc. Digital system and method of processing service data thereof
CN102819716A (zh) * 2012-07-20 2012-12-12 腾讯科技（深圳）有限公司 一种加密图片、解密图片的方法、装置及系统
CN102883039A (zh) * 2012-07-30 2013-01-16 成都西可科技有限公司 手机多媒体私密日记加密方法
US20150035999A1 (en) * 2013-08-05 2015-02-05 Nvidia Corporation Method for sharing digital photos securely
CN103581683A (zh) * 2013-10-18 2014-02-12 宁波海韦斯智能技术有限公司 Jpeg图像加密传输方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HTTP://WWW.360DOC.COM/CONTENT/11/0731/10/7414215_136889677.SHTML: "Jpeg文件的格式和解码", 《360个人图书馆》 *

Also Published As

Publication number Publication date
JP2017068255A (ja) 2017-04-06
US10390106B2 (en) 2019-08-20
KR102444044B1 (ko) 2022-09-19
CN107040797B (zh) 2021-02-26
JP6843462B2 (ja) 2021-03-17
EP3148198A1 (en) 2017-03-29
KR20170037088A (ko) 2017-04-04
EP3691279A1 (en) 2020-08-05
US20170094372A1 (en) 2017-03-30

Similar Documents

Publication Publication Date Title
CN107040797A (zh) 用于处理图像的装置和方法
US11310033B2 (en) System and method for operating pseudorandom generators
US9729828B2 (en) Data structure of multimedia file format, encrypting method and device thereof, and decrypting method and device thereof
WO2006115156A1 (ja) 監視カメラシステム、撮影装置および映像表示装置
US20160171639A1 (en) Chaotic watermarking for a digital image
CN107147942A (zh) 通过hdmi传输显示管理元数据
CN102567448B (zh) 用于关联注解和图像的终端
KR20150064655A (ko) 컨텐츠 보안 방법 및 컨텐츠 보안 기능을 제공하는 전자장치
EP1418703A1 (en) Apparatus and method for generating data for detecting false alteration of encrypted data during processing
Pizzolante et al. A secure low complexity approach for compression and transmission of 3-D medical images
CN107690636A (zh) 电子设备、信息提供系统及其信息提供方法
KR20230023626A (ko) 정보 처리 장치 및 방법
US20060218622A1 (en) Home network system
Zhang et al. Design and arm-based implementation of bitstream-oriented chaotic encryption scheme for h. 264/avc video
US11849249B2 (en) File generation device, file generation method, file reproduction device, file reproduction method, and program
CN110062941A (zh) 消息发送系统、通信终端、服务器装置、消息发送方法以及程序
US20230006818A1 (en) File processing device and file processing method
CN107736029A (zh) 对多媒体数据进行编码的方法和设备以及对多媒体数据进行解码的方法和设备
WO2022156236A1 (zh) 获取密接人员信息方法、装置、服务器和存储介质
US11134307B2 (en) Image processing apparatus and control method thereof
Malaguti et al. Toward compressed 3D descriptors
EP3422347A1 (en) Information processing device, display device, information recording medium, information processing method and program
CN105049806A (zh) 嵌入式视频监控系统的设计方法
JP2006332903A (ja) 鍵取得機器、鍵提供機器、鍵交換システム及び鍵交換方法
CN109873685A (zh) 电子设备和用于控制电子设备以进行联合传输的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant