CN116266881A - 图像处理设备及其控制方法和存储介质 - Google Patents
图像处理设备及其控制方法和存储介质 Download PDFInfo
- Publication number
- CN116266881A CN116266881A CN202211613542.7A CN202211613542A CN116266881A CN 116266881 A CN116266881 A CN 116266881A CN 202211613542 A CN202211613542 A CN 202211613542A CN 116266881 A CN116266881 A CN 116266881A
- Authority
- CN
- China
- Prior art keywords
- image
- inference
- file
- processing apparatus
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 136
- 238000000034 method Methods 0.000 title claims abstract description 88
- 230000008569 process Effects 0.000 claims abstract description 62
- 238000001514 detection method Methods 0.000 claims abstract description 19
- 230000005540 biological transmission Effects 0.000 claims description 34
- 238000003384 imaging method Methods 0.000 claims description 9
- 238000006073 displacement reaction Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 23
- 238000012549 training Methods 0.000 description 14
- 238000004458 analytical method Methods 0.000 description 13
- 230000000875 corresponding effect Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 238000011161 development Methods 0.000 description 5
- 241001465754 Metazoa Species 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 230000006837 decompression Effects 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 210000002569 neuron Anatomy 0.000 description 4
- 230000004888 barrier function Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 241000282472 Canis lupus familiaris Species 0.000 description 2
- 241000282326 Felis catus Species 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 101150053844 APP1 gene Proteins 0.000 description 1
- 101100189105 Homo sapiens PABPC4 gene Proteins 0.000 description 1
- WHXSMMKQMYFTQS-UHFFFAOYSA-N Lithium Chemical compound [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- 229910005580 NiCd Inorganic materials 0.000 description 1
- 229910005813 NiMH Inorganic materials 0.000 description 1
- 102100039424 Polyadenylate-binding protein 4 Human genes 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/04—Inference or reasoning models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Evolutionary Computation (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Geometry (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本公开涉及图像处理设备及其控制方法和存储介质。该图像处理设备包括:检测单元,其被配置为从图像中检测被摄体;处理单元,其被配置为通过进行推断处理来对检测到的被摄体进行分类;生成单元,其被配置为生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及存储单元,其被配置为将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
Description
技术领域
本发明涉及处理使用数字照相机等拍摄的图像的图像处理设备、该图像处理设备的控制方法以及非暂时性计算机可读存储介质。
背景技术
近年来,诸如深度学习等的人工智能(AI)技术开始用于各种技术领域中。例如,用于从所拍摄图像中检测人脸的功能通常安装在数字照相机等中。然而,日本特开2015-99559公开了一种技术,其中检测对象不限于人,并且准确地检测诸如狗和猫等的动物以识别被摄体。
另一方面,随着被摄体检测技术的进步和可检测的信息重要性的随后增加,作为检测对象输入的图像和从其检测的结果现在作为可以在后续工作流程中以各种方式使用的信息已经变得重要。例如,使用AI技术等从图像估计的各种类型的信息现在在各种领域(诸如机器人自动化和自主汽车驾驶等)中作为输入数据起到非常重要的作用。
然而,日本特开2015-99559没有公开用于管理从输入图像检测到的信息的任何方法。
鉴于此,本发明提供一种用于管理从输入图像检测到的信息的方法,特别是一种用于管理图像中的被摄体的估计结果的方法。
发明内容
实施例的一个方面涉及一种图像处理设备,包括:检测单元,其被配置为从图像中检测被摄体;处理单元,其被配置为通过进行推断处理来对检测到的被摄体进行分类;生成单元,其被配置为生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及存储单元,其被配置为将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
实施例的另一方面涉及一种图像处理设备的控制方法,所述控制方法包括:检测步骤,用于从图像中检测被摄体;处理步骤,用于通过进行推断处理来对检测到的被摄体进行分类;生成步骤,用于生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及存储步骤,用于将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
实施例的另一方面涉及一种非暂时性计算机可读存储介质,其存储一个或多于一个程序,所述一个或多于一个程序包括指令,所述指令在由图像处理设备的处理器执行时使所述图像处理设备用作:检测单元,其被配置为从图像中检测被摄体;处理单元,其被配置为通过进行推断处理来对检测到的被摄体进行分类;生成单元,其被配置为生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及存储单元,其被配置为将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
通过示例性实施例(参考附图)的以下描述,本发明其他特征将变得明显。
附图说明
图1A是示出实施例中的系统的示意性配置的框图。
图1B是示出根据实施例的外部显示设备102的示意性配置的框图。
图2是示出根据实施例的摄像处理的一个示例的流程图。
图3是示出根据实施例的回放处理的一个示例的流程图。
图4A是示出根据实施例的图像文件的数据配置的一个示例的图。
图4B是示出根据实施例的图像文件的数据配置的另一示例的图。
图4C是示出根据实施例的管理文件的数据配置的一个示例的图。
图5是示出根据实施例的图像发送处理的一个示例的流程图。
具体实施方式
在下文中,将参考附图详细描述实施例。注意,以下实施例不旨在限制所要求保护的发明的范围。在实施例中描述了多个特征,但是不对需要所有这样的特征的发明进行限制,并且可以适当地组合多个这样的特征。此外,在附图中,相同的附图标记被赋予相同或相似的配置,并且省略其冗余的描述。
此外,虽然作为摄像设备的数字照相机将在下面的描述中被描述为使用推断模型进行被摄体分类的图像处理设备的一个示例实现,但是图像处理设备不限于被体现为数字照相机。在本实施例中,图像处理设备可以是读取记录在记录介质中的图像并在显示装置上显示图像的任何图像处理设备,并且可以例如是移动电话、智能电话、平板PC或个人计算机等。此外,“图像处理设备”是可以用于指代根据实施例的数字照相机等的名称的一个示例,并且根据实施例的数字照相机等也可以被称为“信息处理设备”、“图像输出设备”、“图像显示设备”、“图像记录设备”等。
图1A是示出根据实施例的包括数字照相机100的系统的配置示例的框图。在本实施例中,通过将数字照相机100可通信地连接到外部设备101和外部显示设备102中的各个来形成系统。数字照相机100是如上所述的图像处理设备,并且外部设备101是管理根据本实施例的推断模型的设备。外部显示设备102是用于显示由数字照相机100管理的图像文件的外部设备,并且可以使用例如个人计算机、平板终端或智能电话等来实现。
下面将描述数字照相机100的配置。首先,挡板10是覆盖包括摄像透镜11的数字照相机100的摄像单元并由此防止摄像单元被污染或损坏的保护构件,并且挡板10的操作由挡板控制单元43控制。摄像透镜11在图像传感器13的摄像面上形成光学图像。快门12具有光圈功能。图像传感器13例如由CCD、CMOS传感器等构成,并且将由摄像透镜11通过快门12形成在摄像面上的光学图像转换为电信号。
A/D转换器15将从图像传感器13输出的模拟图像信号转换为数字图像信号。通过A/D转换器15的转换获得的数字图像信号作为所谓的原始图像数据被写入存储器25。另外,基于在摄像期间获得的信息生成与各个原始图像数据相对应的显像参数,并且将显像参数写入存储器25。显像参数由用于以JPEG格式等记录的图像处理中使用的各种类型的参数构成,包括曝光设置、白平衡、颜色空间和对比度等。时序生成器14由存储器控制单元22和系统控制单元50A控制,并且向图像传感器13、A/D转换器15和D/A转换器21提供时钟和控制信号。
图像处理单元20对来自A/D转换器15或存储器控制单元22的数据执行各种类型的图像处理,诸如预定像素插值处理、颜色转换处理、校正处理和调整大小处理。此外,图像处理单元20使用所拍摄的图像数据执行预定的图像处理和计算处理,并向系统控制单元50A提供所获得的计算结果。系统控制单元50A通过基于所提供的计算结果控制曝光控制单元40和焦点控制单元41来实现自动调焦(AF)处理、自动曝光(AE)处理和预闪光(EF)处理。
此外,图像处理单元20使用所拍摄的图像数据执行预定的计算处理,并基于获得的计算结果执行自动白平衡(AWB)处理。此外,图像处理单元20读取存储在存储器25中的图像数据,并且执行压缩或解压缩处理,诸如JPEG、MPEG-4AVC或高效视频编码(HEVC)格式的压缩或解压缩处理、或者对未压缩的原始数据的无损压缩。然后,图像处理单元20将处理后的图像数据写入存储器25。
此外,图像处理单元20使用所拍摄的图像数据执行预定的计算处理,并对各种类型的图像数据进行编辑处理。具体地,图像处理单元20可以进行通过将图像数据周围的不必要部分设置为非显示部分来调整所显示的图像区域和大小的裁剪处理以及通过放大和缩小图像数据、画面显示元素等来改变大小的调整大小处理。此外,图像处理单元20可以进行原始显像,其中使经受了压缩或解压缩处理(诸如对未压缩原始数据的无损压缩等)的数据另外经受图像处理(诸如颜色转换等),然后将其转换为JPEG格式以创建图像数据。另外,图像处理单元20可以进行运动图像切出处理,其中切出诸如MPEG-4等的运动图像格式的指定帧,将其转换为JPEG格式并存储。
此外,图像处理单元20进行在显示图像数据上叠加要在显示单元23上显示的诸如任意定义的字符和菜单等的在屏显示(OSD)的处理。此外,图像处理单元20进行被摄体检测处理,其中输入图像数据或在摄像期间从图像传感器13等获得的被摄体距离信息等用于检测图像数据中存在的被摄体并检测被摄体的被摄体区域。可以获得的检测信息包括被摄体的区域(包括被摄体在图像中的位置和大小)、被摄体的倾斜度、被摄体的概率等。
存储器控制单元22控制A/D转换器15、时序生成器14、图像处理单元20、图像显示存储器24、D/A转换器21和存储器25。由A/D转换器15生成的原始图像数据经由图像处理单元20和存储器控制单元22或直接经由存储器控制单元22写入图像显示存储器24或存储器25。写入到图像显示存储器24的显示图像数据经由D/A转换器21显示在由TFT LCD等构成的显示单元23上。用于显示实时图像的电子取景器功能可以通过使用显示单元23依次显示所拍摄的图像数据来实现。存储器25设置有用于存储预定数量的静止图像或预定持续时间的运动图像的足够存储量,并存储所拍摄的静止图像和运动图像。此外,存储器25还可以用作系统控制单元50A的工作区域。
曝光控制单元40控制具有光圈功能的快门12。此外,曝光控制单元40还具有与闪光灯44协作实现的闪光调节功能。焦点控制单元41基于来自系统控制单元50A的指令,通过驱动摄像透镜11中包括的未示出的调焦透镜来调节焦点。变焦控制单元42通过驱动摄像透镜11中包括的未示出的变焦透镜来控制变焦。闪光灯44具有AF辅助光投射功能和闪光调节功能。
系统控制单元50A控制整个数字照相机100。非易失性存储器51是电可擦除和可记录的非易失性存储器,并且例如使用EEPROM等。注意,在非易失性存储器51中不仅记录有用于执行根据本实施例的处理的一个或多于一个程序,而且记录有地图信息等。
当快门按钮60被操作一半时,快门开关61(SW1)接通,并且提供指令以开始诸如AF处理、AE处理、AWB处理和EF处理等的操作。当快门按钮60已经被完全操作时,快门开关62(SW2)接通,并且提供指令以开始包括曝光处理、显像处理和记录处理的一系列摄像操作。在曝光处理中,从图像传感器13读取的信号经由A/D转换器15和存储器控制单元22被写入存储器25作为原始图像数据。在显像处理中,写入存储器25的原始图像数据通过利用由图像处理单元20和存储器控制单元22进行的计算来显像,并且被写入存储器25作为图像数据。在记录处理中,图像数据从存储器25读取并由图像处理单元20压缩,并且压缩的图像数据存储在存储器25中,然后经由卡控制器90写入外部记录介质91。
操作单元63包括诸如各种类型的按钮和触摸面板等的操作构件。例如,操作单元63包括电源按钮、菜单按钮、用于在摄像模式、回放模式和其他特殊摄像模式之间切换的模式开关、箭头键、设置按钮、宏按钮和多画面回放分页按钮。例如,操作单元63还包括闪光设置按钮、单次拍摄/连续拍摄/自拍切换按钮、菜单移位+(加)按钮、菜单移位-(减)按钮、摄像图像质量选择按钮、曝光校正按钮、日期/时间设置按钮等。
在图像数据被记录在外部记录介质91中时,基于在摄像期间获得的信息,元数据生成和分析单元70生成被添加到图像数据的符合可交换图像文件格式(Exif)标准等的各种类型的元数据。Exif标准是定义图像文件的数据格式的标准,并且具体地,是定义用于将指示摄像条件、设置等的各种类型的信息(元数据)添加到由数字照相机100生成的图像数据并将图像数据和信息(元数据)一起存储为文件的数据格式的标准。此外,当读取记录在外部记录介质91中的图像数据时,元数据生成和分析单元70分析附加到图像数据的元数据。元数据的示例包括例如在摄像期间应用的摄像设置信息、与图像数据有关的图像数据信息、包括在图像数据中的被摄体的特征信息等。此外,当记录运动图像数据时,元数据生成和分析单元70还可以针对各帧来生成并附加元数据。
电源80由诸如碱性电池或锂电池等的一次电池、诸如NiCd电池、NiMH电池或Li电池等的二次电池、或者AC适配器等构成。电源控制单元81将从电源80供给的电力供给至数字照相机100的部件。卡控制器90进行向作为存储卡等的外部记录介质91发送数据和从外部记录介质91接收数据。外部记录介质91例如由存储卡构成,并且记录由数字照相机100拍摄的图像(静止图像、运动图像)。
推断引擎73A使用在推断模型记录单元72A中记录的推断模型来对经由系统控制单元50A输入到其中的图像数据进行推断。作为推断模型,可以使用经由通信单元71A从外部(例如,外部设备101)输入并记录在推断模型记录单元72A中的推断模型或者通过使用训练单元74A进行重新训练而获得的推断模型。注意,如果从外部更新推断模型并且通过使用训练单元74A重新训练来更新推断模型,则更新的推断模型的管理版本被保持在推断模型记录单元72A等中,使得可以识别各个推断模型。此外,推断引擎73A具有神经网络设计73a。
在神经网络设计73a中,中间层(神经元)布置在输入层和输出层之间。图像数据从系统控制单元50A输入到输入层。若干层神经元被布置为中间层。神经元层的数量从设计的角度适当地设置,并且各层中的神经元的数量也从设计的角度适当地设置。基于在推断模型记录单元72A中记录的推断模型对中间层进行加权。与输入到输入层的图像数据相对应的注释信息被输出到输出层。
在本实施例中,设想了推断包括在图像中的被摄体的分类的推断模型。作为推断模型,已经由外部设备101等通过深度学习生成的推断模型,其中各种被摄体的图像数据及其分类结果(例如,诸如“狗”和“猫”等的动物分类,诸如“人”、“动物”、“植物”和“建筑物”等的被摄体分类等)被用作训练数据。然而,由于推断引擎73A可以从外部设备101等更新,因此在应对其他各种推断模型时将没有问题。
训练单元74A在从系统控制单元50A等接收到请求时重新训练推断模型。训练单元74A包括用于记录与要输入到推断引擎73A的训练数据有关的信息的训练数据记录单元74a。训练单元74A可以使用记录在训练数据记录单元74a中的训练数据来重新训练推断引擎73A,并且使用推断模型记录单元72A来更新推断引擎73A。
通信单元71A包括用于进行发送和接收的通信电路。具体地,通信电路可以进行诸如Wi-Fi或蓝牙(注册商标)通信等的无线通信,或者可以进行诸如以太网或USB通信等的有线通信。通信单元71A可以与外部设备101的通信单元71B和外部显示设备102的通信单元71C通信。通信单元71A用作以下通信单元,该通信单元不仅相对于系统控制单元50A、系统控制单元50B和系统控制单元50C发送和接收附加有由推断引擎73A创建的注释信息的图像文件,而且还相对于系统控制单元50A、系统控制单元50B和系统控制单元50C发送和接收诸如推断模型和训练数据等的各种类型的信息。此外,通信单元71A可以基于外部设备101和外部显示设备102是否与数字照相机100相关来对发送的信息施加限制。
外部设备101包括训练单元74B、推断引擎73B、推断模型记录单元72B、系统控制单元50B和通信单元71B。可替代地,外部设备101可以是不具有这样的组件的设备。训练单元74B在从外部(例如,推断引擎73B或系统控制单元50B等)接收到请求时创建推断模型。推断模型记录单元72B记录从数字照相机100发送的推断模型和由训练单元74B创建的推断模型。
图1B示出外部显示设备102的详细配置的示例。外部显示设备102包括图像处理单元20C、存储器控制单元22C、显示单元23C、图像显示存储器24C、存储器25C、非易失性存储器51C、操作单元62C、通信单元71C、元数据分析单元75、电源80C和电源控制单元81C。外部显示设备102可以经由通信单元71C从数字照相机100接收图像文件等,并且在显示单元23C上显示由系统控制单元50C接收的图像文件等。
接着,将参考图2描述本实施例中的数字照相机100的摄像处理。例如,根据该流程图的处理可以通过系统控制单元50A执行相应的(存储在非易失性存储器51等中的)程序并控制数字照相机100的功能块来实现。
当使用包括在操作单元63中的模式开关提供指示摄像模式的指令时,开始处理。在步骤S201中,检查是否已经通过用户按下快门按钮60并因此接通快门开关61和62(SW1和SW2)而提供了拍摄静止图像的指令,并且如果已经提供了拍摄静止图像的指令,则处理前进到步骤S202。
在步骤S202中进行摄像处理。在摄像处理中,使用焦点控制单元41和曝光控制单元40进行自动调焦(AF)处理和自动曝光(AE)处理,然后将经由A/D转换器15从图像传感器13输出的图像信号存储在存储器25中。此外,创建图像数据,其中根据用户设置使用图像处理单元20中包括的压缩处理来将存储在存储器25中的图像信号以JPEG或MPEG-4HEVC格式进行压缩。
在步骤S203中,由图像处理单元20对存储在存储器25中的图像信号进行被摄体检测处理,并且获取包括在图像中的被摄体的检测信息。
在步骤S204中,将在步骤S202中创建的图像数据和在步骤S203中获取的被摄体检测信息作为图像文件记录在外部记录介质91中。这里记录的图像文件以如图4A所示的格式记录。本实施例中记录的图像文件400由至少存储符合Exif标准的元数据的区域和存储压缩图像数据406的图像数据区域构成。例如,如果已经从用户提供了以JPEG格式进行记录的指令,则以JPEG格式记录图像文件400,并且将Exif数据401记录在APP1标记等中。此外,如果已经从用户提供了以高效图像文件格式(HEIF)格式进行记录的指令,则以HEIF文件格式记录图像文件400,并且将Exif数据401记录在元数据盒等中。此外,如果已经提供了以RAW格式进行记录的指令,则类似地将Exif数据401记录在诸如元数据盒等的预定区域中。
使用元数据生成和分析单元70,将在步骤S203中获取的被摄体检测信息存储在包括在Exif数据401中的MakerNote 404中。数字照相机100的制造商(或供应商,下文中相同)可以以其自身特有的记录格式记录MakerNote 404,并且因为其内部规范和格式没有在Exif标准等中公开,所以仅制造商自身可以理解MakerNote 404的内容。此外,MakerNote404是仅可以与供应商生产的真实软件(例如,安装到个人计算机、平板终端或智能电话的应用,或者可从这些终端访问的web服务等)一起使用的区域。MakerNote 404包括注释信息405。此外,被摄体检测信息被记录在注释信息403中,注释信息403被记录在注释链接信息存储标签402中包括的注释信息偏移所指示的位置中。记录在注释信息403中的被摄体检测信息被用作作为稍后描述的推断处理中的输入数据而输入到推断引擎73A的注释信息。在图4A所示的示例中,仅画面内的被摄体的坐标区域被记录在注释信息403中。然而,也可以包括除此之外的信息。
在步骤S205中,检查是否可以执行使用推断引擎73A的推断处理。例如,在诸如当推断引擎73A当前正在对其他图像执行处理时、或者当通过操作快门按钮60并且快门开关62(SW2)因此保持开启来提供以连续拍摄模式进行摄像的指令时(在这种情况下,摄像处理将优先于推断处理)等的情况下,不能执行推断处理。如果不能执行推断处理,则处理前进到步骤S209,并且如果可以执行推断处理,则处理前进到步骤S206。
在步骤S206中,对图像文件400进行使用推断引擎73A的推断处理。在本实施例中,图像文件400作为输入被输入到推断引擎73A。根据图像文件400中所包括的注释信息403和图像数据406来指定包括在图像数据中的被摄体区域,并且输出包括在被摄体区域中的被摄体的分类结果,作为使用推断引擎73A对各个被摄体区域进行推断的结果。当进行推断时,除了推断结果之外,还可以输出与推断处理有关的信息,诸如日志和与在推断期间进行的操作有关的调试信息等。
在步骤S207中,根据预定准则将被摄体分类结果(即,在步骤S206中获取的推断结果)分类为第一推断结果和作为除第一推断结果之外的推断结果的第二推断结果,将第一推断结果记录在图像文件中,并且处理前进到步骤S208。图4B示出在各个被摄体的代表性推断结果已经作为第一推断结果记录在图4A中的图像文件400中之后获得的图像文件410。使用元数据生成和分析单元70,在图像文件410中,代表性被摄体的代表性推断结果被记录在注释信息411中,并且包括主被摄体的各个被摄体的代表性推断结果被记录在MakerNote404中的注释信息412中。
这里,例如,作为上述预定准则,可以采用以下准则之一:推断结果是否具有最高可靠性;以及推断结果是否是针对主被摄体的。在下文中,将具体描述预定准则的细节。
首先,关于可靠性,图像处理单元20可以至少部分地基于包括以下项的多个摄像条件其中至少之一来判断推断结果的可靠性:被摄体区域的大小;被摄体区域的模糊;被摄体区域是否被其他被摄体区域隐藏或被部分地切断;以及当拍摄被摄像时的曝光和亮度。例如,可靠性可以分别具有100的最大值和0的最小值。具体地,如果被摄体区域是在适合于被摄体分类的摄像条件下拍摄的图像(例如,如果被摄体区域是在没有任何模糊并且没有被其他被摄体隐藏或被切断的情况下以适当的曝光和亮度拍摄的图像),则推断结果的可靠性将是高的。另一方面,如果被摄体区域是在不适合于被摄体分类的摄像条件下拍摄的图像(例如,如果被摄体区域是在模糊状态下拍摄的图像或者被其他被摄体隐藏或切断,或者是在背光条件下或在非常黑暗的环境中拍摄的图像),则推断结果的可靠性将是低的。
接着,关于主被摄体,主被摄体和除主被摄体之外的被摄体可以基于以下各项其中至少之一从图像数据中检测到的被摄体确定:图像数据中的被摄体区域的大小,图像数据中的被摄体的特定部分的大小;以及相对于图像中心位置的位移量。具体地,可以将与图像数据中的最大被摄体区域相对应的被摄体、诸如面部等的特定部分的大小在图像数据中最大的被摄体、或者相对于图像数据中的中心位置的位移量最小的被摄体(或者换言之最接近中心位置的被摄体)确定为主被摄体。此外,在由数字照相机100的用户指定的区域内检测到的被摄体可以被确定为主被摄体。
在图4B所示的示例中,从图像数据406中检测到至少包括被摄体A和B的多个被摄体,并且在被摄体中,被摄体A被确定为主被摄体,并且被摄体A的代表性推断结果被记录在注释信息411中。此外,从图像数据406检测到的多个被摄体中的各个被摄体的代表性推断结果被记录在MakerNote 404中。以这种方式,构成技术诀窍和资产的推断处理结果可以按照如下应对:虽然在可以在制造商之间共享的区域中保存一些信息(其描述格式已经在Exif标准等中公开),但是大多数信息(其描述格式没有在Exif标准等中公开)可以在制造商特有的区域中被保持和保护。
接着,在步骤S208中,未被分类为第一推断结果的推断结果(即,第二推断结果)被记录在管理文件中,该管理文件是外部记录介质91中与图像文件不同的文件。如果当前推断模型的管理版本、调试信息等被保持在推断模型记录单元72A中,则这样的信息被作为推断模型管理信息记录在管理文件中。虽然图像文件针对各个图像被配置为独立文件,但是管理文件可以被配置为使得与多个图像文件有关的信息被包括在一个文件中。
由于管理文件不是每次生成图像数据406时创建的文件类型,因此可以预先在外部记录介质91中创建管理文件,并且每次创建图像文件时可以向管理文件添加与图像文件相对应的信息。这样做,可以针对使用数字照相机100的各用户独立地创建管理文件。
此外,可以以制造商特有的记录格式记录管理文件,并且可以创建管理文件,使得其内容因为其内部规范和格式没有在DCF标准、Exif标准等中公开而只能由制造商自身理解。另外,管理文件可以被配置为使得管理文件可以仅与由制造商生产的预定真实软件(例如,安装到个人计算机、平板终端或智能电话的应用,或者可从这些终端访问的web服务等)一起使用(可以由该预定真实软件参考)。
在随后的步骤S209中,一旦通过使用包括在正被操作的操作单元63中的模式开关从用户提供完成摄像的指令,或者作为使用包括在操作单元63中的电源按钮关闭电源的结果,结束摄像处理。
图4A至4C是示出根据本实施例的图像文件和管理文件的数据配置的示例的图。图4A示出了在步骤S204中将在步骤S202中创建的图像数据和在步骤S203中获取的被摄体检测信息作为图像文件记录在外部记录介质91中的情况下的图像文件的配置的一个示例。图4B示出了在一些推断结果已经被记录在图4A中的图像文件400中之后获得的图像文件410的配置的一个示例。图4C示出了记录有推断结果、推断模型管理信息等的管理文件420的配置的一个示例。
在图4B中,使用元数据生成和分析单元70,主被摄体的代表性推断结果与被摄体的位置坐标相关联,并被记录在图像文件410中的注释信息411中。由于注释信息411以Exif标准中定义的格式记录,因此可以与数字照相机100的制造商无关地使用注释信息411。此外,作为MakerNote 404中的注释信息412,将主被摄体和其他被摄体的代表性推断结果以各自与被摄体的位置坐标相关联的方式记录。在本实施例中,记录在图像文件410中的推断结果统称为第一推断结果。
图4C所示的管理文件420针对n个图像文件(其中n是1或2或更大的自然数)单独存储多个管理信息421A至421N。这里,管理信息421A指示与图4B所示的图像文件410相对应的管理信息。虽然与其他条管理信息(即,管理信息421B等)相对应的图像文件也以类似的格式存在,但是在图4B中省略了这样的图像文件。多个管理信息421A至421N中记录有用于指定相应图像文件410的多个图像信息422A至422N。例如,图像文件编号、摄像日期和时间、图像格式等可以包括在图像信息422中,并且可以基于这些信息中的图像文件编号来指定相应的图像文件410。此外,图4C示出了如下的情况作为一个示例,其中在该情况下,在注释信息423A至423N中的各注释信息中,针对各个被摄体以与各个被摄体的位置坐标相关联的方式记录包括记录在图像文件410中的第一推断结果的所有推断结果。此外,推断模型管理信息424也记录在各管理信息421中。
在本实施例中,描述了如下示例,其中注释信息411、412和423各自由位置坐标和推断结果的组合构成。然而,只要作为推断模型的推断结果输出的结果可以记录在注释信息中就足够了。例如,输出结果可以直接记录在注释信息中,并且这样做时的记录格式或形式不受限制;即,输出结果可以以文本形式或二进制形式等记录。
以这种方式,图像数据406和多个推断结果中的一些推断结果(例如,多个推断结果中的代表性推断结果)被记录在图像文件410中。因此,一旦记录完成,图像数据406和推断结果就可以有效地相关并容易地管理,并且不必单独管理。此外,可以通过仅在其中记录代表性推断结果来简化用于生成图像文件410的处理,并且还可以减小文件大小。此外,作为管理推断模型的制造商所使用的特有数据的推断模型管理信息424可以与推断结果相关联,并且通过不向公众广泛开放并且记录在未公开的管理文件420中来安全地管理。
在以上描述中,代表性推断结果被记录在图像文件中,并且所有推断结果被记录在管理文件中。然而,在采用推断结果是否针对主被摄体作为预定准则的情况下,可以将针对主被摄体的所有推断结果记录在图像文件中,并且可以将针对所有被摄体的所有推断结果记录在管理文件中。在这种情况下,在图像文件中,主被摄体的代表性推断结果被记录在注释信息411中并且主被摄体的所有推断结果被记录在注释信息412中,这就足够了。根据推断结果是否具有最高可靠性来确定这种情况下的代表性推断结果就足够了。
此外,在图像文件中的注释信息412和管理文件中的注释信息423中,可以仅在其中记录与注释信息411和注释信息412的差异,而不是在其中记录所有推断结果。另外,不基于推断结果的可靠性、推断结果是否针对主被摄体等来进行判断,而可以采用推断结果中的预定项作为代表性推断结果。例如,可以预先确定为代表性推断结果是指示被摄体是否是人、被摄体是否是动物等的信息,并且其他推断结果是诸如被摄体的个人姓名、性别和年龄等的信息。
接着,将参考图3描述根据该实施例的数字照相机100的回放处理。例如,根据该流程图的处理可以通过系统控制单元50A执行(存储在非易失性存储器51等中的)相应的程序并控制数字照相机100的功能块来实现。
在数字照相机100中,当使用包括在操作单元63中的模式开关提供指示回放模式的指令时,开始用于观看记录在外部记录介质91中的图像数据的回放处理。一旦开始回放处理,在步骤S301中,指定要回放的一个图像文件,并经由卡控制器90将其从外部记录介质91加载到存储器25。
在步骤S302中,由图像处理单元20根据记录格式使加载到存储器25的图像文件经受解压缩处理、调整大小处理等,并将其转换为显示图像数据,并且将显示图像数据记录在图像显示存储器24中并由显示单元23显示。
在步骤S303中,元数据生成和分析单元70检查当前正在回放的图像文件的推断结果是否已经记录在管理文件420中。如果已经记录了推断结果,则处理前进到步骤S304,并且如果还没有记录推断结果,则处理前进到步骤S307。在步骤S304中,如果用户通过使用包括在操作单元63中的操作构件提供用以显示已经记录在图像文件中的推断结果的指令,则处理前进到步骤S305。否则,处理前进到步骤S310。
在步骤S305中,元数据生成和分析单元70分析管理文件420,从多个管理信息421中指定当前正在回放的图像文件的管理信息,并获取注释信息423,此后处理前进到步骤S306。在步骤S306中,元数据生成和分析单元70从注释信息423提取与推断结果有关的信息,并且使用图像处理单元20显示所提取的信息,以叠加在当前正在回放的图像数据上。例如,通过与指示注释信息423中描述的各个被摄体的坐标区域的框一起显示用于指示通过对坐标区域内的被摄体进行分类而获得的推断结果的字符串,来以用户可以看到的方式显示与图像数据相关联的推断结果。然后,处理前进到步骤S310。
在步骤S307中,进行与步骤S206中的处理类似的处理,并且处理前进到步骤S308。类似于步骤S207,在步骤S308中,被摄体分类结果(即,步骤S307中获取的推断结果)被分类为第一推断结果以及作为除了第一推断结果之外的推断结果的第二推断结果,第一推断结果被记录在图像文件410中,并且处理前进到步骤S309。类似于步骤S208,在步骤S309中,第二推断结果(即,未被分类为第一推断结果的推断结果)、图像信息、推断模型管理信息等被记录在作为与图像文件410不同的文件的管理文件420中。这里,第一推断结果也被记录在管理文件中。然后,处理继续到步骤S310。
在步骤S310中,如果使用包括在操作单元63中的操作构件提供了回放其他图像的指令,则处理返回到步骤S301,并且对由该指令指示的回放图像重复上述处理。另一方面,如果没有提供回放其他图像的指令,则在步骤S311中判断是否已经提供了终止回放处理的指令,并且处理返回到步骤S303,并且如果没有提供终止回放处理的指令,则重复上述处理,而如果提供终止回放处理的指令,则终止回放处理。
在本实施例中,通过在图像文件410中仅记录第一推断结果(即,代表性推断结果),减少了元数据生成和分析单元70进行的用以显示推断结果的处理,并且可以提高处理速度。如果需要详细的推断结果,则可以使用管理文件420。由于多个图像文件的管理信息421被记录在管理文件420中,因此元数据生成和分析单元70可以通过分析一个管理文件420来一次获取和使用多个图像文件的推断结果。
接着,将参考图5描述本实施例中的数字照相机100的发送处理。这里,将以按上述图像文件410的格式记录发送之前的图像文件并且还记录管理文件420的情况为例来提供描述。
当使用包括在操作单元63中的操作构件提供发送指令时,开始图5的流程图中所示的发送处理。可以按照如下提供发送指令:作为选择一个或多于一个图像文件作为对象的结果开始发送;预先进行设置,使得当拍摄图像时进行自动发送,以及通过图像文件的生成来触发发送。这里,将以按诸如上述图4B中的图像文件410的格式记录发送之前的图像文件并且按诸如上述图4C中的管理文件420的格式记录管理文件的情况为例来提供描述。例如,根据图5中的流程图的处理可以通过系统控制单元50A执行(存储在非易失性存储器51等中的)相应的程序并控制数字照相机100的功能块来实现。
在图5中,在步骤S501中,经由数字照相机100的通信单元71A向外部显示设备102进行对系统信息的请求,并且外部显示设备102经由通信单元71C将系统信息从系统控制单元50C发送到数字照相机100。因此,数字照相机100可以获取外部显示设备102的系统信息。然后,处理前进到步骤S502。
在步骤S502中,系统控制单元50A确定向外部显示设备102的发送的方法。发送方法的具体示例包括诸如Wi-Fi或蓝牙(注册商标)发送等的无线发送、经由以太网线缆或USB线缆的有线发送、使用诸如SD卡等的可移除介质的发送等。作为用于确定要使用的发送方法的方法,如果多种发送方法可供使用,则可以使用由用户使用包括在操作单元63中的操作构件所设置的发送方法,或者可以根据外部设备101和数字照相机100之间的连接状态来确定要使用的发送方法。如果只有一个发送方法可供使用,则可以将该发送方法确定为要使用的发送方法。
在随后的步骤S503中,系统控制单元50A根据在步骤S501中获取的外部显示设备102的系统信息来判断外部显示设备102是否可以使用管理文件420。如上所述,由于管理文件420以制造商特有的并且在Exif标准等中未公开的描述格式记录,因此可以仅使用特定应用或web服务来参考管理文件420。这里,假设外部显示设备102是平板终端,并且由数字照相机100的制造商提供的应用或与制造商提供的应用兼容的应用安装在平板终端中。在这种情况下,使用该应用连接数字照相机100和外部显示设备102,并且从外部显示设备102提供的系统信息包括指示已经安装了该应用的信息。由于可以通过使用应用来参考管理文件420,因此如果已经在外部显示设备102中安装了应用,则可以确定为外部显示设备102可以使用(参考)管理文件420。
除了上述之外,可以基于当从数字照相机100向外部显示设备102发送预定通信命令(例如,制造商特有的通信命令)时是否返回响应来进行外部显示设备102是否能够使用管理文件420的判断。此外,基于接收到的系统信息,可以基于与用户登记是否已经完成或费用是否已经支付等有关的信息来进行判断。关于用户登记,可以判断为只有当进行了与数字照相机100的用户信息的比较并且存在与用户信息的匹配时,外部显示设备102才可以使用管理文件420。这对于在诸如当第三方使用由制造商提供的应用等访问数字照相机100以恶意使用数字照相机100的情况下保护管理文件420是有益的。
如果判断为外部显示设备102可以使用管理文件420,则处理前进到步骤S504,并且执行管理文件420的发送处理。另一方面,如果外部显示设备102不能使用管理文件420,则跳过该发送处理,并且处理前进到步骤S505。
在随后的步骤S504中,系统控制单元50A使用在步骤S502中确定的用于向外部显示设备102发送的方法,经由通信单元71A进行对象管理文件的发送处理,然后处理前进到步骤S505。外部显示设备102可以通过以与步骤S305中的方式类似的方式使用元数据分析单元75分析从通信单元71C接收的管理文件来在显示单元23C上显示推断结果。在步骤S505中,使用在步骤S502中确定的发送方法进行一个或多于一个对象图像文件的发送处理,并且处理终止。
以这种方式,根据上述发送处理,通过仅将管理文件发送到特定的发送目的地,可以防止技术诀窍和资产(花费大量金钱来创建的数据)泄漏到未指定的发送目的地。
其他实施例
注意,本发明可以应用于由多个装置(例如,主计算机、接口装置、扫描仪、摄像机等)构成的系统或由单个装置构成的设备(例如,复印机、传真机等)。
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参考示例性实施例描述了本发明,但是应当理解,本发明不限于所公开的示例性实施例。所附权利要求的范围应被赋予最广泛的解释,以涵盖所有这些修改和等效结构及功能。
Claims (21)
1.一种图像处理设备,包括:
检测单元,其被配置为从图像中检测被摄体;
处理单元,其被配置为通过进行推断处理来对检测到的被摄体进行分类;
生成单元,其被配置为生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及
存储单元,其被配置为将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
2.根据权利要求1所述的图像处理设备,其中,所述第一推断结果是通过所述推断处理所获得的推断结果中的预定推断结果,并且所述第二推断结果是通过所述推断处理所获得的推断结果中除所述第一推断结果之外的推断结果。
3.根据权利要求2所述的图像处理设备,其中,所述第一推断结果是从通过所述推断处理获得的推断结果中根据预定准则所选择的推断结果,并且所述第二推断结果是通过所述推断处理所获得的推断结果中除所述第一推断结果之外的推断结果。
4.根据权利要求1至3中任一项所述的图像处理设备,其中,
所述第一推断结果以预定标准中定义的格式记录在所述图像文件中,以及
所述管理文件是以所述图像处理设备的制造商特有的记录格式所记录的文件。
5.根据权利要求1至3中任一项所述的图像处理设备,其中,所述管理信息还包括与所述处理单元用于所述推断处理的推断模型有关的信息。
6.根据权利要求3所述的图像处理设备,其中,所述预定准则是推断结果具有最高可靠性。
7.根据权利要求6所述的图像处理设备,其中,
所述可靠性是至少部分地基于进行所述推断处理的图像中的被摄体的摄像条件所确定的,以及
作为在适合于对被摄体进行分类的摄像条件下所拍摄的图像的被摄体被确定为具有更高的可靠性。
8.根据权利要求7所述的图像处理设备,其中,所述摄像条件包括以下项至少之一:所述被摄体的被摄体区域的大小、所述被摄体的模糊、所述被摄体是否被其他被摄体隐藏、所述被摄体是否被切断、以及摄像期间的曝光和亮度。
9.根据权利要求3和权利要求6至8中任一项所述的图像处理设备,其中,所述预定准则是推断结果是针对检测到的被摄体中的主被摄体的推断处理的推断结果。
10.根据权利要求9所述的图像处理设备,其中,基于以下项至少之一从检测到的被摄体中确定所述主被摄体:所述被摄体区域在所述图像中的大小、所述被摄体的特定部分在所述图像中的大小、以及所述被摄体相对于所述图像的中心位置的位移量。
11.根据权利要求9所述的图像处理设备,其中,所述主被摄体是在所述图像中的指定区域内检测到的被摄体。
12.根据权利要求9所述的图像处理设备,其中,
所述图像文件:
将所述主被摄体的第一推断结果保持在符合以预定标准定义的格式的数据区域中;以及
将检测到的被摄体中除所述主被摄体之外的被摄体的第一推断结果保持在符合所述图像处理设备的制造商特有的格式的数据区域中。
13.根据权利要求1至3和权利要求6至8中任一项所述的图像处理设备,其中,所述管理信息还包括所述第一推断结果。
14.根据权利要求1至3和权利要求6至8中任一项所述的图像处理设备,其中,所述管理文件包括分别与多个图像文件相关联的管理信息。
15.根据权利要求1至3和权利要求6至8中任一项所述的图像处理设备,还包括:
判断单元,其被配置为判断连接到所述图像处理设备的外部显示设备是否能够使用所述管理文件;以及
发送单元,其被配置为将所述图像文件发送到所述外部显示设备,
其中,在所述判断单元判断为所述外部显示设备能够使用所述管理文件的情况下,所述发送单元将所述图像文件和所述管理文件发送到所述外部显示设备,以及
在所述判断单元判断为所述外部显示设备不能使用所述管理文件的情况下,所述发送单元仅将所述图像文件发送到所述外部显示设备。
16.根据权利要求15所述的图像处理设备,其中,在所述外部显示设备使用能够用于参考所述管理文件的预定软件的情况下,所述判断单元判断为所述外部显示设备能够使用所述管理文件。
17.根据权利要求15所述的图像处理设备,其中,在所述外部显示设备返回对预定命令的响应的情况下,所述判断单元判断为所述外部显示设备能够使用所述管理文件。
18.根据权利要求15所述的图像处理设备,其中,在已经在所述外部显示设备上进行了预定的用户登记的情况下,所述判断单元判断为所述外部显示设备能够使用所述管理文件。
19.根据权利要求1至3和权利要求6至8中任一项所述的图像处理设备,还包括摄像单元,所述摄像单元被配置为拍摄所述图像。
20.一种图像处理设备的控制方法,所述控制方法包括:
检测步骤,用于从图像中检测被摄体;
处理步骤,用于通过进行推断处理来对检测到的被摄体进行分类;
生成步骤,用于生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及
存储步骤,用于将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
21.一种非暂时性计算机可读存储介质,其存储一个或多于一个程序,所述一个或多于一个程序包括指令,所述指令在由图像处理设备的处理器执行时使所述图像处理设备用作:
检测单元,其被配置为从图像中检测被摄体;
处理单元,其被配置为通过进行推断处理来对检测到的被摄体进行分类;
生成单元,其被配置为生成包括所述图像的图像数据和所述推断处理的第一推断结果的图像文件,并且将所述图像文件记录在记录介质中;以及
存储单元,其被配置为将包括用于指定所述图像文件的信息和所述推断处理的第二推断结果的管理信息存储在与所述图像文件不同且记录在所述记录介质内的管理文件中。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021-204438 | 2021-12-16 | ||
JP2021204438A JP2023089743A (ja) | 2021-12-16 | 2021-12-16 | 画像処置装置とその制御方法、撮像装置、及び、プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116266881A true CN116266881A (zh) | 2023-06-20 |
Family
ID=84363785
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211613542.7A Pending CN116266881A (zh) | 2021-12-16 | 2022-12-15 | 图像处理设备及其控制方法和存储介质 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230196708A1 (zh) |
EP (1) | EP4198925A1 (zh) |
JP (1) | JP2023089743A (zh) |
KR (1) | KR20230091782A (zh) |
CN (1) | CN116266881A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2024172190A (ja) | 2023-05-31 | 2024-12-12 | トヨタ自動車株式会社 | 蓄電セル |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006293783A (ja) * | 2005-04-12 | 2006-10-26 | Fuji Photo Film Co Ltd | 画像処理装置及び画像処理プログラム |
JP4904108B2 (ja) * | 2006-07-25 | 2012-03-28 | 富士フイルム株式会社 | 撮影装置及び画像表示制御方法 |
JP6351240B2 (ja) | 2013-11-20 | 2018-07-04 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US20200242154A1 (en) * | 2019-01-24 | 2020-07-30 | Olympus Corporation | Image file generating device and image file generating method |
JP7263053B2 (ja) * | 2019-02-28 | 2023-04-24 | キヤノン株式会社 | 撮像装置、画像処理装置、それらの制御方法、プログラム |
-
2021
- 2021-12-16 JP JP2021204438A patent/JP2023089743A/ja active Pending
-
2022
- 2022-11-28 EP EP22209911.1A patent/EP4198925A1/en active Pending
- 2022-12-01 KR KR1020220165312A patent/KR20230091782A/ko active Pending
- 2022-12-06 US US18/062,135 patent/US20230196708A1/en active Pending
- 2022-12-15 CN CN202211613542.7A patent/CN116266881A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230196708A1 (en) | 2023-06-22 |
KR20230091782A (ko) | 2023-06-23 |
JP2023089743A (ja) | 2023-06-28 |
EP4198925A1 (en) | 2023-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2294813B1 (en) | Data receiving apparatus, data transmitting apparatus, method for controlling the same and program | |
US8411152B2 (en) | File management apparatus and control method thereof | |
US20100214420A1 (en) | Image processing apparatus, method of controlling the same, and storage medium | |
US7904463B2 (en) | Information display apparatus and method | |
EP4198925A1 (en) | Image processing apparatus and method for controlling the same, and computer program | |
JP2011077654A (ja) | 撮像装置、その制御方法、及びプログラム | |
JP5755347B2 (ja) | 通信制御装置、その制御方法、プログラム、記録媒体 | |
US20230360368A1 (en) | Image processing apparatus and method, and image capturing apparatus | |
JP5213602B2 (ja) | 撮像装置、その制御方法、プログラム | |
JP4906685B2 (ja) | 撮像装置、その制御方法及びプログラム | |
US20230385245A1 (en) | Image processing apparatus capable of efficiently converting image file, control method therefor, and storage medium | |
US8301012B2 (en) | Image reproducing apparatus for reproducing images recorded in accordance with different rules and control method therefor | |
JP5911300B2 (ja) | 撮像装置及びその制御方法 | |
US12307795B2 (en) | Image processing apparatus, image processing method, image capturing apparatus, and storage medium | |
US20230196508A1 (en) | Image processing apparatus, image capturing apparatus, image processing method, and storage medium | |
BR102022024431A2 (pt) | Aparelho de processamento de imagem, método para controlar o mesmo e meio de armazenamento legível por computador não transitório | |
JP2023118057A (ja) | 画像処置装置及び画像処理方法、撮像装置、プログラム、記憶媒体 | |
US20230388533A1 (en) | Image processing apparatus capable of converting image file such that all annotation information can be used, control method therefor, and storage medium | |
JP2024012965A (ja) | 画像処理装置及びその制御方法並びにプログラム | |
JP4902512B2 (ja) | 撮像装置及びその制御方法及びプログラム | |
JP2007058208A (ja) | 撮像装置及びその制御方法、コンピュータプログラム及び記憶媒体 | |
JP4721417B2 (ja) | 撮像装置およびその制御方法 | |
JP4574504B2 (ja) | 撮像装置及びその制御方法 | |
JP5484545B2 (ja) | 撮像装置、その制御方法、プログラム | |
JP5587351B2 (ja) | 撮像装置及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |