CN110493517A - 图像捕获装置的辅助拍摄方法和图像捕获装置 - Google Patents

图像捕获装置的辅助拍摄方法和图像捕获装置 Download PDF

Info

Publication number
CN110493517A
CN110493517A CN201910748732.1A CN201910748732A CN110493517A CN 110493517 A CN110493517 A CN 110493517A CN 201910748732 A CN201910748732 A CN 201910748732A CN 110493517 A CN110493517 A CN 110493517A
Authority
CN
China
Prior art keywords
photo
shooting
user
information
souvenir
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910748732.1A
Other languages
English (en)
Inventor
李钧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Guangzhou Mobile R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Guangzhou Mobile R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Guangzhou Mobile R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Guangzhou Mobile R&D Center
Priority to CN201910748732.1A priority Critical patent/CN110493517A/zh
Publication of CN110493517A publication Critical patent/CN110493517A/zh
Priority to PCT/KR2020/010610 priority patent/WO2021029648A1/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/538—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/685—Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3253—Position information, e.g. geographical position at time of capture, GPS data

Abstract

提供了一种图像捕获装置的辅助拍摄方法和图像捕获装置。所述辅助拍摄方法包括：获取用户进行当前拍摄的场景信息；根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片；根据所述关联照片的获取结果提供操作指示。

Description

图像捕获装置的辅助拍摄方法和图像捕获装置
技术领域
本发明涉及一种图像捕获装置的辅助拍摄方法和图像捕获装置，更具体地，涉及一种图像捕获装置通过历史拍摄的照片提供拍摄提示的辅助拍摄方法和图像捕获装置。
背景技术
随着技术的发展，用户对图像捕获装置的需求逐步增多。当用户使用图像捕获装置时，存在拍摄纪念照的需求。例如，用户期望每隔一年或每隔一段时间在同一地点、以同一背景(例如，建筑物或风景)和/或以相同的姿势等拍摄纪念照，以展示家庭成员的变化，这对用户来说极具纪念意义。然而，在缺乏辅助的情况下，由于图像捕获装置所在的位置和角度以及被拍摄者所在的位置和姿势等原因，容易导致新拍摄的纪念照与原有的纪念照相比背景重合度和/或姿势重合度不好。
因此，可通过图像捕获装置历史拍摄的照片来提供拍摄提示，使得新拍摄的照片和历史拍摄的照片相比背景重合度和/或姿势重合度更高。
发明内容
提出本发明可至少解决上述缺点并提供下述优点。
本发明的一方面在于提供可拍摄出与历史拍摄的照片高度重合的照片的辅助拍摄方法和图像捕获装置。
根据本发明的一方面，提供了一种图像捕获装置的辅助拍摄方法，包括：获取用户进行当前拍摄的场景信息；根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片；根据所述关联照片的获取结果提供操作指示。
优选地，所述场景信息包括进行当前拍摄的位置信息、画面信息、日期信息和拍摄时用户的语音信息中的至少一个。
优选地，所述关联照片来自以下至少之一：本地存储的照片、图像捕获装置连接的云相册中的照片或与图像捕获装置关联的其他装置中存储的照片。
优选地，当有关联照片时，根据所述关联照片为用户进行当前拍摄提供相应的拍摄提示；当没有关联照片时，提示用户直接进行当前拍摄并将当前拍摄的照片作为模板照片或提示用户直接进行当前拍摄并从当前拍摄的多个照片中选择至少一张照片作为模板照片。
优选地，所述日期信息包括当前拍摄的日期为节日和/或纪念日的信息，所述画面信息为当前拍摄时图像捕获装置识别到的预览画面，所述拍摄时用户的语音信息包括当前拍摄的意图为拍摄纪念照的语音信息。
优选地，所述关联照片包括以下至少之一：与用户进行当前拍摄的所述场景信息中的位置信息在一定范围内相匹配的照片、与所述场景信息中的画面信息在一定程度上相匹配的照片、与所述场景信息中的日期信息匹配的照片或与识别到的拍摄时用户的语音信息相匹配的照片、通过人工智能算法识别出的照片。
优选地，根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片的步骤包括：响应于所述场景信息满足以下多个触发条件中的至少一个触发条件，获取所述关联照片：存在在当前拍摄位置处的预定范围内的历史拍摄的照片、当前拍摄的位置处于与图像捕获装置连接的服务器中标记的著名景点的预定范围内、当前拍摄的日期属于节日和/或纪念日、存在包括进行当前拍摄的景物的历史拍摄的照片、当前拍摄的人物被标记为纪念照成员、当前拍摄的人物中被标记为纪念照成员的数量超过预定数量、图像捕获装置识别到的预览画面是纪念照的概率超过预定值、用户进行拍摄时的语音信息中包括拍摄纪念照的意图。
优选地，根据所述关联照片为用户进行当前拍摄提供相应的拍摄提示的步骤包括：在当前拍摄的预览画面中显示包括所述关联照片的缩略图的列表；响应于用户从所述列表中选择一张照片，根据所选择的照片提供拍摄提示。
优选地，在用户根据拍摄提示拍摄照片后，为拍摄的照片添加标注信息。
优选地，在用户根据拍摄提示拍摄照片后，提示用户将拍摄的照片标记为模板照片。
优选地，在用户根据拍摄提示拍摄照片后，在预览画面上显示拍摄的照片与所选择的照片的重合度。
优选地，在用户根据拍摄提示拍摄照片后，提示用户设置用于每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
优选地，在用户根据拍摄提示拍摄照片后，将拍摄的照片和所选择的照片合成为对比照片。
优选地，当没有关联照片时，为拍摄的模板照片添加标注信息和/或设置用于提示用户每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
优选地，响应于所述场景信息满足所述至少一个触发条件，获取所述关联照片的步骤包括：响应于所述场景信息满足所述至少一个触发条件，在当前拍摄的预览画面上显示纪念照图标；响应于用户点击纪念照图标，获取所述关联照片。
优选地，图像捕获装置识别到的预览画面是纪念照的概率的步骤包括：通过统计方式或人工智能算法识别出预览画面是纪念照的概率。
优选地，打开或关闭所述多个触发条件中的至少一个触发条件。
优选地，在当前拍摄的预览画面中显示包括所述关联照片的缩略图的列表的步骤包括：当所述关联照片中存在模板照片时，在所述列表中将模板照片的缩略图排列在所述关联照片中的非模板照片的缩略图的前面；当所述关联照片中不存在模板照片时，确定所述关联照片的数量，并当所述关联照片的数量不超过预定值时显示包括所有的所述关联照片的缩略图的列表，以及当所述关联照片的数量超过预定值时提示用户拍摄一张照片作为样图，并将拍摄的样图与所述关联照片中的每张照片进行匹配，优先显示匹配度高的所述关联照片的缩略图。
优选地，所述响应于用户从所述列表中选择一张照片，根据所选择的照片提供拍摄提示的步骤包括：获取所选择的照片的特征内容，将所述特征内容的轮廓和/或关于所述特征内容的文字信息重叠显示在预览画面。
优选地，通过拍摄信息获取所述预定时间间隔。
优选地，所述著名景点包括用户对同一位置的历史拍摄的照片进行纪念照标记的数量达到一定阈值时的地点、数据库默认标记的地点、热门旅游景点中的至少一个。
优选地，在预览画面上显示纪念照图标的步骤包括：在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息。
优选地，为拍摄的照片添加标注信息的步骤包括：根据所选择的照片的拍摄信息和拍摄的照片的拍摄信息的差异为拍摄的照片添加标注信息。
优选地，如果所述关联照片中包括模板照片，则响应于用户选择将拍摄的照片标记为模板照片，将原有的模板照片设置为非模板照片。
优选地，通过人工智能算法识别出预览画面是纪念照的概率的步骤包括使用神经网络模型识别预览画面是纪念照的概率。
优选地，将拍摄的照片和所选择的照片合成为对比照片的步骤包括在合成的对比照片中添加分别与拍摄的照片和所选择的照片相应的拍摄信息。
优选地，所述拍摄信息包括：拍摄的照片的位置信息、拍摄的照片的日期信息、拍摄的照片的日期是否属于节日或纪念日的信息、拍摄的照片中的景物信息、拍摄的照片中的人物信息、拍摄的照片中的活动内容信息、所选择的照片的备注信息、所选择的照片的标题信息中的至少一个。
优选地，所述差异包括拍摄时间的差异、拍摄位置的差异、拍摄的人物的数量和/或动作的差异、拍摄的景物的差异中的至少一个。
优选地，所述神经网络模型通过一组被标记为纪念照的照片和一组未被标记为纪念照的照片进行迭代训练得出。
根据本发明的另一方面，提供了一种图像捕获装置，包括：显示器；处理器，被配置为：获取用户进行当前拍摄的场景信息；根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片；根据所述关联照片的获取结果提供操作指示。
优选地，所述场景信息包括进行当前拍摄的位置信息、画面信息、日期信息和拍摄时用户的语音信息中的至少一个。
优选地，所述关联照片来自以下至少之一：本地存储的照片、图像捕获装置连接的云相册中的照片或与图像捕获装置关联的其他装置中存储的照片。
优选地，处理器还被配置为：当有关联照片时，根据所述关联照片为用户进行当前拍摄提供相应的拍摄提示；当没有关联照片时，提示用户直接进行当前拍摄并将当前拍摄的照片作为模板照片或提示用户直接进行当前拍摄并从当前拍摄的多个照片中选择至少一张照片作为模板照片。
优选地，所述日期信息包括当前拍摄的日期为节日和/或纪念日的信息，所述画面信息为当前拍摄时图像捕获装置识别到的预览画面，所述拍摄时用户的语音信息包括当前拍摄的意图为拍摄纪念照的语音信息。
优选地，所述关联照片包括以下至少之一：与用户进行当前拍摄的所述场景信息中的位置信息在一定范围内相匹配的照片、与所述场景信息中的画面信息在一定程度上相匹配的照片、与所述场景信息中的日期信息匹配的照片或与识别到的拍摄时用户的语音信息相匹配的照片、通过人工智能算法识别出的照片。
优选地，处理器还被配置为：响应于所述场景信息满足以下多个触发条件中的至少一个触发条件，获取所述关联照片：存在在当前拍摄位置处的预定范围内的历史拍摄的照片、当前拍摄的位置处于与图像捕获装置连接的服务器中标记的著名景点的预定范围内、当前拍摄的日期属于节日和/或纪念日、存在包括进行当前拍摄的景物的历史拍摄的照片、当前拍摄的人物被标记为纪念照成员、当前拍摄的人物中被标记为纪念照成员的数量超过预定数量、图像捕获装置识别到的预览画面是纪念照的概率超过预定值、用户进行拍摄时的语音信息中包括拍摄纪念照的意图。
优选地，处理器还被配置为：在当前拍摄的预览画面中显示包括所述关联照片的缩略图的列表；响应于用户从所述列表中选择一张照片，根据所选择的照片提供拍摄提示。
优选地，处理器还被配置为：在用户根据拍摄提示拍摄照片后，为拍摄的照片添加标注信息。
优选地，处理器还被配置为：在用户根据拍摄提示拍摄照片后，提示用户将拍摄的照片标记为模板照片。
优选地，处理器还被配置为：在用户根据拍摄提示拍摄照片后，在预览画面上显示拍摄的照片与所选择的照片的重合度。
优选地，处理器还被配置为：在用户根据拍摄提示拍摄照片后，提示用户设置用于每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
优选地，处理器还被配置为：在用户根据拍摄提示拍摄照片后，将拍摄的照片和所选择的照片合成为对比照片。
优选地，处理器还被配置为：当没有关联照片时，为拍摄的模板照片添加标注信息和/或设置用于提示用户每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
优选地，处理器还被配置为：响应于所述场景信息满足所述至少一个触发条件，在当前拍摄的预览画面上显示纪念照图标；响应于用户点击纪念照图标，获取所述关联照片。
优选地，处理器还被配置为：通过统计方式或人工智能算法识别出预览画面是纪念照的概率。
优选地，处理器还被配置为：打开或关闭所述多个触发条件中的至少一个触发条件。
优选地，处理器还被配置为：当所述关联照片中存在模板照片时，在所述列表中将模板照片的缩略图排列在所述关联照片中的非模板照片的缩略图的前面；当所述关联照片中不存在模板照片时，确定所述关联照片的数量，并当所述关联照片的数量不超过预定值时显示包括所有的所述关联照片的缩略图的列表，以及当所述关联照片的数量超过预定值时提示用户拍摄一张照片作为样图，并将拍摄的样图与所述关联照片中的每张照片进行匹配，优先显示匹配度高的所述关联照片的缩略图。
优选地，处理器还被配置为：获取所选择的照片的特征内容，将所述特征内容的轮廓和/或关于所述特征内容的文字信息重叠显示在预览画面。
优选地，处理器还被配置为：通过拍摄信息获取所述预定时间间隔。
优选地，所述著名景点包括用户对同一位置的历史拍摄的照片进行纪念照标记的数量达到一定阈值时的地点、数据库默认标记的地点、热门旅游景点中的至少一个。
优选地，处理器还被配置为：在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息。
优选地，处理器还被配置为：根据所选择的照片的拍摄信息和拍摄的照片的拍摄信息的差异为拍摄的照片添加标注信息。
优选地，处理器还被配置为：如果所述关联照片中包括模板照片，则响应于用户选择将拍摄的照片标记为模板照片，将原有的模板照片设置为非模板照片。
优选地，处理器还被配置为：使用神经网络模型识别预览画面是纪念照的概率。
优选地，处理器还被配置为：在合成的对比照片中添加分别与拍摄的照片和所选择的照片相应的拍摄信息。所述拍摄信息包括：拍摄的照片的位置信息、拍摄的照片的日期信息、拍摄的照片的日期是否属于节日或纪念日的信息、拍摄的照片中的景物信息、拍摄的照片中的人物信息、拍摄的照片中的活动内容信息、所选择的照片的备注信息、所选择的照片的标题信息中的至少一个。
优选地，所述差异包括拍摄时间的差异、拍摄位置的差异、拍摄的人物的数量和/或动作的差异、拍摄的景物的差异中的至少一个。
优选地，所述神经网络模型通过一组被标记为纪念照的照片和一组未被标记为纪念照的照片进行迭代训练得出。
根据本发明的另一方面，提供了一种计算机可读存储介质，存储有程序，被配置为：所述程序包括执行上述任意一项所述的辅助拍摄方法的代码。
根据本发明的另一方面，提供了一种计算机，包括存储有计算机程序的可读介质，被配置为：所述计算机程序包括执行上述任意一项所述的辅助拍摄方法的代码。
通过上述辅助拍摄方法和图像捕获装置，可拍摄出与历史拍摄的照片高度重合的照片。
附图说明
通过下面结合示例性地示出实施例的附图进行的描述，本发明的实施例的上述和其他目的和特点将会变得更加清楚，其中：
图1是根据本发明的实施例的辅助拍摄方法的流程图；
图2示出了根据本发明的实施例的纪念照图标的设置界面；
图3a到图3h是根据本发明的实施例的图像捕获装置进行辅助拍摄的示意图；
图4是根据本发明的实施例的图像捕获装置的框图。
具体实施方式
现将详细参照本发明的实施例，所述实施例的示例在附图中示出，其中，相同的标号始终指示相同的部件。以下将通过参照附图来说明所述实施例，以便解释本发明。
用户在使用图像捕获装置拍摄纪念照时，在没有提示的情况下，凭借肉眼观看历史拍摄的照片中人物、背景与当前正在拍摄的人物背景的区别，往往无法得到与历史拍摄的照片高度相似的纪念照。在本发明中，提出了一种通过历史拍摄的照片提供拍摄提示使得用户能够拍摄出与历史拍摄的照片高度相似的纪念照的辅助拍摄方法和图像捕获装置。
图1是根据本发明的实施例的辅助拍摄方法的流程图。
在步骤101，获取用户进行当前拍摄的场景信息。
根据本发明的实施例，当用户使用图像捕获装置准备进行拍摄时，可获取当前进行的拍摄的场景信息。这里，图像捕获装置可以是专门用于拍摄的相机，也可以是诸如智能手机等具有摄像头的设备。以下以具有触摸屏的智能终端设备(智能手机)作为示例来进行说明，但是本领域的技术人员可以容易地理解，根据本申请的实施例的辅助拍摄方法可应用于其他具有图像捕获功能的设备。根据本发明的实施例，场景信息可包括进行当前拍摄的位置信息、画面信息、日期信息和拍摄时用户的语音信息中的至少一个，其中，日期信息包括当前拍摄的日期为节日和/或纪念日的信息，画面信息为当前拍摄时图像捕获装置识别到的预览画面，拍摄时用户的语音信息包括当前拍摄的意图为拍摄纪念照的语音信息。例如，获取的当前拍摄的场景信息为“南京市玄武区巷1号玄武湖公园(118.76，32.04)”，或者获取的场景信息为“2018年3月10日，结婚纪念日”等。应理解，以上关于场景信息的举例仅是示例，任何与拍摄的场景相关的信息可包括在根据本申请实施例的场景信息之中。
具体地，图像捕获装置可通过读取当前的GPS位置获取当前进行的拍摄的位置信息，可通过读取当前的日期获取当前进行的拍摄的日期信息，并判断当前的进行拍摄的日期是否属于图像捕获装置中的日历中定义或图像捕获装置连接的服务器中定义的节日或用户预先在图像捕获装置中设置的纪念日。此外，图像捕获装置还可通过当前进行的拍摄的预览画面获取当前进行的拍摄的景物信息和人物信息。此外，图像捕获装置还可通过图像捕获装置中设置的麦克风获取用户在进行拍摄时的语音信息。
在步骤102，根据场景信息从用户历史拍摄的照片中获取与场景信息相关联的关联照片。
根据本发明的实施例，根据获取的场景信息从用户历史拍摄的照片中获取关联照片，其中，用户历史拍摄的照片一般存储在本地内存中、与图像捕获装置连接的云相册中或者与图像捕获装置关联的其他存储装置中，则获取与场景信息相关联的关联照片也来自于本地存储的照片、图像捕获装置连接的云相册中的照片或者与图像捕获装置关联的其他装置中存储的照片。具体地，可响应于场景信息满足以下多个触发条件中的至少一个触发条件，获取关联照片，触发条件可包括：存在在当前拍摄位置处的预定范围内的历史拍摄的照片、当前拍摄的位置处于与图像捕获装置连接的服务器中标记的著名景点的预定范围内、当前拍摄的日期属于节日和/或纪念日、存在包括进行当前拍摄的景物的历史拍摄的照片、当前拍摄的人物被标记为纪念照成员、当前拍摄的人物中被标记为纪念照成员的数量超过预定数量、图像捕获装置识别到的预览画面是纪念照的概率超过预定值、用户进行拍摄时的语音信息中包括拍摄纪念照的意图。应理解，根据本发明的实施例的图像捕获装置可通过本地和/或远程协助的方式来确定是否满足触发条件。例如，可通过启动图像捕获装置中的进程、运行在图像捕获装置上的人工智能(AI)系统或者通过图像捕获装置连接的服务器来判断是否满足触发条件。这里，关联照片包括与用户进行当前拍摄的场景信息中的位置信息在一定范围内相匹配的照片、与场景信息中的画面信息在一定程度上相匹配的照片、与场景信息中的日期信息匹配的照片或者与识别到的拍摄时用户的语音信息相匹配的照片以及通过人工智能算法识别出的照片。
根据本发明的实施例，可响应于场景信息满足上述多个触发条件中的至少一个触发条件，在当前进行的拍摄的预览画面上显示纪念照图标，并响应于用户点击纪念照图标，获取关联照片。根据本发明的实施例，在显示纪念照图标时，可在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息，例如“点击进入纪念照模式”或者“纪念照模式，点击查看可用模板”等。如果在显示纪念照图标后的预定时间(例如，5秒)内用户没有点击纪念照图标，则可停止显示纪念照图标，或者一直显示纪念照图标直至场景信息不满足触发条件之后才消失(即，停止显示的纪念照图标)。根据本发明的实施例，停止显示的纪念照图标将会在本次拍摄中的场景信息重新满足触发条件时被显示，或者直到下次开启相机进行新的拍摄时，重新根据触发条件被满足来显示纪念照图标。例如，当进行拍摄的图像捕获装置位于位置A处时，如果图像捕获装置中存在在位置A的预定范围内的历史拍摄的照片，则确定满足触发条件，其中，用户可在图像捕获装置中对满足触发条件的预定范围进行设置(例如，设定预定范围为20米)。此外，如果在与图像捕获装置连接的服务器云端，用户对一些著名景点的位置进行了标记，或者用户在拍摄照片时将位置信息上报到服务器，且该上报的位置信息被标记为著名景点的数量达到一定值时，服务器可将该位置标记为“著名景点”，或者系统默认设定的一些著名景点以及系统可智能识别得出的一些著名景点，其中，系统默认设定的著名景点可存储在本地数据库中，系统智能识别出的著名景点为众所周知的景点，例如故宫、长城、青城山等。在这种情况下，如果位置A处于服务器中标记的著名景点(例如，故宫)周围，则满足触发条件。此外，如果当前进行拍摄的日期属于节日(例如，中秋节)或用户预先在图像捕获装置中设置的纪念日(例如，结婚纪念日)，则确定满足触发条件。此外，若当前进行拍摄的图像捕获装置的预览画面中包括建筑物和/或风景(例如，天安门)时，如果图像捕获装置中存在历史拍摄的包括预览画面中的景物的照片，例如，一年前拍摄的包括天安门的照片，则确定满足触发条件。此外，例如，图像捕获装置可在捕获图像时开启线程，使得每隔1秒通过使用例如卷积神经网络算法对预览画面的位图进行目标检测分类，当检测到预览画面中有正面人脸时，确定满足触发条件。此外，例如，如果用户已经预先为图像捕获装置中历史拍摄的照片中存在的人物进行过编辑，标记了“纪念照成员”的标签，则在用户进行拍摄时，图像捕获装置的人脸识别系统可采用人脸识别算法识别预览画面中的人脸，当识别出预览画面中出现的纪念照成员的数量超过例如3个时，确定满足触发条件。此外，例如，图像捕获装置可通过统计方式或AI系统识别出预览画面是纪念照的概率。例如，图像捕获装置可将预览画面中的人物服饰与历史拍摄的照片中的人物的服饰进行比较，当相似程度达到预定值时，确定预览画面是纪念照，并确定满足触发条件。应理解，上述关于满足触发条件的举例仅是示例性举例，本发明可采用的满足触发条件的事例不限于此。
根据本发明的实施例，AI系统可使用一组被标记为纪念照的照片和一组未被标记为纪念照的照片进行神经网络迭代训练，并使用训练好的神经网络识别预览画面是纪念照的概率。首先，选取训练样本。选取的训练样本包括两组训练照片，一组为纪念照，另一组为非纪念照的其他照片，其中，纪念照通常是包括一个或多个正/侧面人物在前景且背景为一些标志性建筑物或识别度较高的自然风光等照片，非纪念照的其他照片通常为静物、无人的风景、动物、美食等照片。然后，对选取的训练样本进行包括尺寸调整、噪声消除、归一化等的数据预处理，并对两组照片分别标记“纪念照”和“非纪念照”的标签。将上述数据预处理后的图片数据作为输入，对应标记的标签作为输出，基于深度学习框架下对神经网络进行迭代训练以构建神经网络模型。当训练好一个神经网络后，不需要用户手动调整或设置参数，只需要将照片作为神经网络的输入，便能输出将该照片识别为纪念照的概率。在这种情况下，当识别出预览画面是纪念照的概率超过预定值时，确定满足触发条件。这里，常见的深度学习框架有TensorFlow、Caffe、Theano、Keras、PyTorch和MXNet等，深度学习框架通常被应用于计算机视觉、语音识别、自然语言处理与生物信息学等领域。构建神经网络模型可采用卷积神经网络(Convolutional Neural Networks,CNN)、循环神经网络(RecurrentNeural Networks，RNN)和长短期记忆网络(Long Short Term Mermory network，LSTM)等。
根据本发明的实施例，如果图像捕获装置的语音识别系统识别出用户进行拍摄时的语音中包括拍摄纪念照的意图，例如，用户说“帮我拍摄纪念照”，则确定满足触发条件。可选地，用户说“这里风景好美”，“去年我们也是在这里拍的”，“每年都要在这里拍”等，则语音识别系统可询问用户是否需要拍摄纪念照，如果用户回答“是”，则确定满足触发条件。
根据本发明的实施例，用户可打开或关闭上述多个触发条件中的至少一个触发条件。图2示出了根据本发明的实施例的纪念照图标的设置界面。如图2所示，相机设置界面可显示纪念照图标的设置项，用户可在该界面设置是否显示纪念照图标，即，设置是否需要提供拍摄提示。当用户设置关闭时，在使用图像捕获装置拍摄照片时，不显示纪念照图标，即，不提供拍摄提示。当用户设置开启时，将根据图1所示的方法提供拍摄提示。用户可点击纪念照图标的设置项，从而进入纪念照图标的设置界面，在纪念照图标的设置界面，用户可设置各个触发条件的开启和关闭。当用户设置关闭特定的触发条件时，即使该触发条件被满足，也不显示纪念照图标，从而也不在该触发条件被满足的情况下获取关联照片。
返回参照图1，在步骤103，根据关联照片的获取结果提供操作指示。
根据本发明的实施例，可在当前进行的拍摄的预览画面中显示包括关联照片的缩略图的列表，响应于用户从列表中选择一张照片，根据所选择的照片提供拍摄提示，或者系统默认选择一张照片，根据系统默认选择的照片提供拍摄提示。
根据本发明的实施例，确定关联照片中是否存在模板照片，并当关联照片中存在模板照片时，在列表中将模板照片的缩略图排列在关联照片中的非模板照片的缩略图的前面。当关联照片中不存在模板照片时，确定关联照片的数量，并当关联照片的数量不超过预定值时显示包括所有的关联照片的缩略图的列表，以及当关联照片的数量超过预定值时提示用户拍摄一张照片作为样图，并将拍摄的样图与关联照片中的每张照片进行匹配，优先显示匹配度高的关联照片的缩略图，或者直接将当前获取的预览画面的信息与关联照片的信息进行匹配搜索以得出匹配度高的关联照片，并优先显示匹配度高的关联照片的缩略图。用户可从显示的多个关联照片的缩略图中任意选择一张关联照片作为模板照片。例如，如果关联照片中包括模板照片，则在列表中，模板照片可显示在非模板照片的前面，并且模板照片上可带有角标标识等，以便与非模板照片进行区分。如果关联照片中包括多个不同背景的多张照片，为了便于用户选择，可通过特征点提取和匹配的方法(例如，ORB、SIFT、直方图等算法)判别出属于同一背景的照片，并仅显示同一背景的多张照片中的一张照片。如果同一背景的多张照片中存在模板照片，则仅显示模板照片，如果同一背景的多张照片中不存在模板照片，则可通过照片优劣的判别方法，挑选出最优的一张予以显示。又例如，如果关联照片的数量超过10张，在预览画面上的列表中无法显示全部的关联照片，则提示用户拍摄一张照片作为样图，在拍摄完成后，在图像捕获装置的后台开启一个进程以进行“以图搜图”。例如，先在关联照片中搜索具有与样图的位置附近的位置的照片，得到当前位置附近历史拍摄的照片的集合，再通过特征点提取方法(例如，ORB、SIFT、直方图等算法)对样图和集合中的所有照片进行特征点提取，得到特征点描述子，在提取特征点完成后，可通过匹配算法(例如，k邻近分类算法)将样图的特征点描述子与集合中的每张照片中的特征点描述子进行匹配，匹配成功的特征点的个数越多，两张照片的相似度越高。根据样图与集合中每张照片的成功匹配的特征点的数量从高到低在列表中排列集合中的照片。然而，由于不同季节拍摄的照片中存在景物的差异，例如，颜色、树木修剪情况的差异等。在这种情况下，可通过特征点匹配算法对灰度图进行判别，从而忽略颜色的差异。同时，为了提高匹配效率，可对照片的缩略图进行匹配，以忽略少量的内容改变。此外，还可以直接将当前获取的预览画面的信息与关联照片信息进行匹配搜索以得出匹配度高的关联照片，并优先显示匹配度高的关联照片的缩略图。以上描述仅是示例性的，本发明不限于此。
根据本发明的实施例，在用户从列表中选择一张照片后，可获取所选择的照片的特征内容，将特征内容的轮廓和/或关于特征内容的文字信息重叠显示在预览画面上，从而用户可根据重叠显示的轮廓或文字信息拍摄照片。例如，图像捕获装置可通过现有的图像处理方法提取轮廓，如先对照片进行灰度处理，再利用图像梯度算法提取边缘。图像捕获装置可将所选择的照片的背景轮廓、人物动作轮廓等以类似水印的形式叠加显示在预览画面中，也可在预览画面中重叠显示文字以标注每个人物的位置等。从而，用户可根据背景轮廓来调整相机的位置和角度，根据动作轮廓调整被拍摄的人的动作、根据文字调节被拍摄的人的站位等，进而拍摄与所选择的照片重合度较高的照片。
根据本发明的实施例，在用户根据拍摄提示拍摄照片后，可为拍摄的照片添加标注信息。这里，可根据所选择的照片的拍摄信息和拍摄的照片的拍摄信息的差异为拍摄的照片添加标注信息，其中，拍摄信息包括拍摄的照片的位置信息、拍摄的照片的日期信息、拍摄的照片的日期是否属于节日或纪念日的信息、拍摄的照片中的景物信息、拍摄的照片中的人物信息、拍摄的照片中的活动内容信息、所选择的照片的备注信息、所选择的照片的标题信息中的至少一个，拍摄的差异可以是所选择的照片的拍摄时间和拍摄的照片的拍摄时间的差异、拍摄位置的差异、拍摄景物的差异、拍摄的人物的数量和/或动作差异等。例如，如果用户选择图像捕获装置中存储的2年前拍摄的备注为结婚一周年纪念照的照片提供拍摄提示，并根据拍摄提示拍摄的新的照片，则可根据拍摄时间的差异，为新拍摄的照片添加标注信息“结婚三周年纪念照”。根据本发明的实施例，标注信息可以是照片的标题信息、备注信息，或添加在照片上的说明信息。
根据本发明的实施例，在用户根据拍摄提示拍摄照片后，可将拍摄的照片和所选择的照片合成为对比照片，并且，可在合成的对比照片中添加分别与拍摄的照片和所选择的照片相应的拍摄信息。例如，可将用户选择的2年前拍摄的备注为第一年结婚纪念照的照片和根据第一年结婚纪念照拍摄的第三年结婚纪念照合成为一张照片，其中，合成的照片中左侧为第一年结婚纪念照，右侧有第三年结婚纪念照。此外，可分别在合成的照片中的第一年结婚纪念照和第三年结婚纪念照的下方添加拍摄年份或者拍摄位置等拍摄信息。然而，上述示例仅是示例性的，本发明不限于此。
根据本发明的实施例，在用户根据拍摄提示拍摄照片后，可提示用户将拍摄的照片标记为模板照片，如果关联照片中包括模板照片，则响应于用户将拍摄的照片设置为模板照片，将原有的模板照片设置为非模板照片。在用户根据拍摄提示拍摄照片后，可在预览画面上显示拍摄的照片与所选择的照片的重合度。例如，在拍摄照片后，可提取新拍摄的照片中的背景轮廓、人物动作轮廓等，并计算新旧照片中相应的轮廓的重合度，并在预览画面上显示计算出的重合度。在用户根据拍摄提示拍摄照片后，也可提示用户设置用于每隔预定时间间隔询问用户是否拍摄纪念照的提醒。例如，在用户根据拍摄提示拍摄了纪念照之后，可在预览画面上显示“是否设置每隔一年拍摄该背景下的纪念照？”的提示信息，这里，可根据备注信息、前述拍摄纪念照的时间间隔、时间信息等来设置预定时间间隔，如将备注信息为“结婚纪念”的照片的预定时间间隔设置为1年，将标题信息为“季度活动”的照片的预定时间间隔设置为3个月，将备注信息为“圣诞节”的照片的预定时间间隔设置为1年，或者将健身管理照片设置为按月提醒或者按周提醒等。应理解，上述示例仅是示例性的，本发明不限于此。
根据本发明的实施例，如果在步骤102没有获取到关联照片，则无法为当前的拍摄提供拍摄提示。在这种情况下，提示用户直接进行当前拍摄并将当前拍摄的照片作为模板照片或提示用户直接进行当前拍摄并从当前拍摄的多个照片中选择至少一张照片作为模板照片。此外，也可为拍摄的模板照片添加标注信息和/或设置用于提示用户每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
根据上述辅助拍摄方法，可根据历史拍摄的照片提供拍摄提示，使得用户可拍摄出与历史拍摄的照片具有高重合度的照片。
图3(a)到图3(h)是根据本发明的实施例的图像捕获装置进行辅助拍摄的示意图。
如图3(a)所示，响应于当前进行的拍摄的场景信息满足至少一个触发条件，在当前进行的拍摄的预览画面上显示如图3(a)中的屏幕上的方块所示的纪念照图标，同时以弹窗的形式在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息。除如图3(a)所示的以弹窗的形式显示指示信息以外，还可以以浮动消息、文字、图标、语音等方式显示指示信息，且显示的指示信息在一定时间(例如，2秒)后会消失。此外，纪念照图标可根据预览画面中的画面的不同而不同。例如，如果预览画面中的画面是风景，则纪念照图标可显示为表示风景的图标，替代图3(a)中的方块。如果预览画面中的画面是花草，则纪念照图标可显示为表示花草的图标。如果预览画面中的画面是建筑，则纪念照图标可显示为表示建筑的图标。以上描述仅是示例性的，本发明不限于此。
根据本发明的实施例，响应于用户在预定时间(例如，5秒)内点击纪念照图标，获取与场景信息相关联的关联照片，并显示包括关联照片的缩略图的列表，如图3(b)和图3(c)中所示，列表被垂直显示在预览画面的左侧，此外，列表还可以垂直显示在预览画面的右侧，或水平显示在预览画面的上方或下方等。如图3(b)中所示，如果关联照片中存在模板照片，则在列表中将模板照片排列在非模板照片的前面，非模板照片上带有角标标识，以与非模板照片进行区分。如图3(c)所示，如果关联场景中不存在模板照片，并且关联照片过多，例如，备选的纪念照大于10张，则可提示用户拍摄一样照片作为样图，以在关联照片中搜索与样图相似的照片，并在搜索后按照样图与关联照片中每张装配的相似度从高到低在列表中排列关联照片的缩略图。此外，如果关联照片的小于等于10张，则可按照构图、色彩等优劣进行排序并在列表中显示。可选地，也可在列表中优先显示由AI系统识别为纪念照的照片。
根据本发明的实施例，如图3(d)所示，响应于用户从列表中选择一张照片，可将所选择的照片的背景轮廓以水印的形式显示在预览画面上，从而用户可根据水印调整相机的位置和角度，以使将要拍摄的背景与水印高度重合。在用户根据背景轮廓的水印拍摄完照片后，可将新拍摄的照片与所选择的照片进行对比，计算出两张照片的重合度，并在预览画面上显示重合度，具体如图3(e)中所示。此外，如图3(f)所示，在用户根据背景轮廓的水印拍摄完照片后，可在预览画面上提示用户将拍摄的照片设置为模板照片，除了可以以弹窗的形式提示用户设置目标照片外，还可以以浮动消息、文字、图标、语音等方式显示提示用户，本发明不限于此。此外，用户还可在相册中浏览照片时将照片设置为模板照片，例如图3(g)所示，用户可通过点击图片右上角的菜单图标将照片设置为模板照片。
根据本发明的实施例，当点击如图3(a)中所示的纪念照图标时，如果没有获取到关联照片，则可提示用户在用户拍摄照片后将拍摄的照片设置为模板照片，例如图3(h)中所示，若点击如图3(a)中所示的纪念照图标时，未获取已有模板或者相同地点照片(即，关联照片)，则可提示用户在用户拍摄照片后将拍摄的照片设置为模板照片。
图4是根据本发明的实施例的图像捕获装置的框图。
参照图4，图像捕获装置400可包括镜头组件410、闪光灯420、图像传感器430、图像稳定器440、存储器450(例如，缓冲存储器)、显示器460和/或处理器470。这里，图像捕获装置400可以是专门用于拍摄的相机，也可以是诸如智能手机等具有摄像头的设备。以下以具有触摸屏的智能终端设备(智能手机)作为示例来进行说明，但是本领域的技术人员可以容易地理解，根据本申请的实施例的辅助拍摄方法可应用于其他具有图像捕获功能的设备。
镜头组件410可采集从将被拍摄图像的物体发出或反射的光。镜头组件410可包括一个或多个透镜。根据实施例，图像捕获装置400可包括多个镜头组件410。在这种情况下，图像捕获装置400可形成例如双相机、360度相机或球形相机。多个镜头组件410中的一些镜头组件410可具有相同的镜头属性(例如，视角、焦距、自动对焦、f数或光学变焦)，或者至少一个镜头组件可具有与另外的镜头组件的镜头属性不同的一个或多个镜头属性。镜头组件410可包括例如广角镜头或长焦镜头。
闪光灯420可发光，其中，发出的光用于增强从物体反射的光。根据实施例，闪光灯420可包括一个或多个发光二极管(LED)(例如，红绿蓝色(RGB)LED、白色LED、红外(IR)LED或紫外(UV)LED)或氙灯。图像传感器430可通过将从物体发出或反射并经由镜头组件410透射的光转换为电信号来获取与物体相应的图像。根据实施例，图像传感器430可包括从具有不同属性的多个图像传感器中选择的一个图像传感器(例如，RGB传感器、黑白(BW)传感器、IR传感器或UV传感器)、具有相同属性的多个图像传感器或具有不同属性的多个图像传感器。可使用例如电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器来实现包括在图像传感器430中的每个图像传感器。
图像稳定器440可沿特定方向移动图像传感器430或包括在镜头组件410中的至少一个透镜，或者响应于图像捕获装置400的移动来控制图像传感器430的可操作属性(例如，调整读出时序)。这样，允许补偿由于正被捕捉的图像的移动而产生的负面效果(例如，图像模糊)的至少一部分。根据实施例，图像稳定器440可使用布置在图像捕获装置400之内或之外的陀螺仪传感器(未示出)或加速度传感器(未示出)来感测图像捕获装置400的这样的移动。根据实施例，可将图像稳定器440实现为例如光学图像稳定器。
存储器450可至少暂时地存储经由图像传感器430获取的图像的至少一部分以用于后续的图像处理任务。例如，如果快速捕捉了多个图像或者由于快门时滞而导致图像捕捉延迟，则可将获取的原始图像(例如，拜耳图案图像、高分辨率图像)存储在存储器450中，并且可经由显示器460来预览其相应的副本图像(例如，低分辨率图像)。然后，如果满足了指定的条件(例如，通过用户的输入或系统命令)，则可由例如处理器470来获取和处理存储在存储器450中的原始图像的至少一部分。
显示器460可在图像捕获装置400进行拍摄时显示拍摄的预览画面。此外，显示器460还可根据用户的操作显示各种用户界面，例如，相册的用户界面、设置图像捕获装置的用户界面等。
处理器470可对经由图像传感器430获取的图像或存储在存储器450中的图像执行一个或多个图像处理。其中，一个或多个图像处理可包括例如深度图生成、三维(3D)建模、全景图生成、特征点提取、图像合成或图像补偿(例如，降噪、分辨率调整、亮度调整、模糊、锐化或柔化)。另外或可选地，处理器470可对包括在图像捕获装置400中的部件中的至少一个部件(例如，图像传感器430)执行控制(例如，曝光时间控制或读出时序控制)。可将由处理器470处理的图像存储回存储器450以用于进一步处理，或者可将该图像提供给在图像捕获装置400之外的外部部件。
处理器470还可控制图像捕获装置400执行辅助拍摄方法。
具体地，处理器470可获取用户当前进行的拍摄的场景信息。
根据本发明的实施例，当用户使用图像捕获装置400准备进行拍摄时，处理器470可获取当前进行的拍摄的场景信息。根据本发明的实施例，获取的场景信息包括当前进行的拍摄的位置信息、当前进行的拍摄的日期信息、当前进行的拍摄的日期是否属于节日或纪念日的信息、当前进行的拍摄的景物信息、当前进行拍摄的人物信息、用户进行拍摄时的语音信息中的至少一个。应理解，以上关于场景信息的举例仅是示例，任何与拍摄的场景相关的信息可包括在根据本申请实施例的场景信息之中。
具体地，处理器470可通过读取当前的GPS位置获取当前进行的拍摄的位置信息，可通过读取当前的日期获取当前进行的拍摄的日期信息，并判断当前的进行拍摄的日期是否属于图像捕获装置400中的日历中定义或图像捕获装置400连接的服务器中定义的节日或用户预先在图像捕获装置400中设置的纪念日。此外，处理器470还可通过当前进行的拍摄的预览画面获取当前进行的拍摄的景物信息和人物信息。此外，处理器470还可通过图像捕获装置400中设置的麦克风获取用户在进行拍摄时的语音信息。
处理器470可根据场景信息从用户历史拍摄的照片中获取与场景信息相关联的关联照片。
根据本发明的实施例，处理器470可根据场景信息从图像捕获装置400本地存储的照片、图像捕获装置400连接的云相册中的照片或与图像捕获装置400关联的其他装置中存储的照片中获取历史拍摄的与场景信息相关联的关联照片。
根据本发明的实施例，处理器470可响应于场景信息满足以下多个触发条件中的至少一个触发条件，获取关联照片。例如，触发条件可包括：存在在当前进行拍摄的位置周围的预定范围内历史拍摄的照片、当前进行的拍摄的位置处于与图像捕获装置400连接的服务器中标记的著名景点周围、当前进行拍摄的日期属于节日或纪念日、存在包括当前进行的拍摄的景物的历史拍摄的照片、当前进行的拍摄的人物是被标记被纪念照成员、当前进行的拍摄的人物中被标记为纪念照成员的数量超过预定数量、处理器470识别出预览画面是纪念照的概率超过预定值、用户进行拍摄时的语音包括拍摄纪念照的意图。应理解，根据本发明的实施例的图像捕获装置400可通过本地和/或远程协助的方式来确定是否满足触发条件。例如，处理器470可通过启动图像捕获装置400中的进程、运行在图像捕获装置400上的人工智能(AI)系统或者通过图像捕获装置400连接的服务器来判断是否满足触发条件。
根据本发明的实施例，处理器470可响应于场景信息满足上述多个触发条件中的至少一个触发条件，在当前进行的拍摄的预览画面上显示纪念照图标，并响应于用户点击纪念照图标，获取关联照片。根据本发明的实施例，在显示纪念照图标时，可在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息。如果在开始纪念照图标后的预定时间(例如，5秒)内用户没有点击纪念照图标，则停止显示纪念照图标，并在用户完成拍摄(即，退出相机应用)前，不再显示纪念照图标，即，不提供拍摄提示，直到下次开启相机进行拍摄，重新根据触发条件被满足来显示纪念照图标。
例如，当进行拍摄的图像捕获装置400位于位置A处时，如果图像捕获装置400中存在在位置A周围的预定范围内历史拍摄的照片，则确定满足触发条件。根据本发明的实施例，用户可在图像捕获装置400中设置满足触发条件的预定范围，例如，20米。此外，例如，如果在与图像捕获装置400连接的服务器云端，对一些著名景点的位置进行了标记，或用户在拍摄照片时将位置信息上报到服务器，当一个位置被标记为著名景点的数量达到一定值时，服务器可将该位置标记为“著名景点”。在这种情况下，如果位置A处于服务器中标注的著名景点(例如，故宫)周围，则确定满足触发条件。此外，例如，如果当前进行拍摄的日期属于节日(例如，中秋节)或用户预先在图像捕获装置400中设置的纪念日(例如，结婚纪念日)，则确定满足触发条件。此外，例如，当当前进行拍摄的图像捕获装置400的预览画面中包括建筑物和/或风景(例如，天安门)时，如果图像捕获装置400中存在历史拍摄的包括预览画面中的景物的照片，例如，一年前拍摄的包括天安门的照片，则确定满足触发条件。
此外，例如，处理器470可在捕获图像时开启线程，使得每隔1秒通过使用例如卷积神经网络算法对预览画面的位图进行目标检测分类，当检测到预览画面中有正面人脸时，确定满足触发条件。此外，例如，如果用户已经预先为图像捕获装置400中历史拍摄的照片中存在的人物进行过编辑，标记了“纪念照成员”的标签，则在用户进行拍摄时，图像捕获装置400的人脸识别系统可采用人脸识别算法识别预览画面中的人脸，当识别出预览画面中出现的纪念照成员的数量超过3个时，确定满足触发条件。此外，例如，处理器470可通过统计方式或AI系统识别出预览画面是纪念照的概率。例如，处理器470可将预览画面中的人物服饰与历史拍摄的照片中的人物的服饰进行比较，当相似程度达到预定值时，确定预览画面是纪念照，并确定满足触发条件。
此外，根据本发明的实施例，AI系统可使用一组被标记为纪念照的照片和一组未被标记为纪念照的照片进行神经网络迭代训练，使用训练好的神经网络识别预览画面是纪念照的概率。例如，可预先准备两组训练照片，一组是纪念照，例如，纪念照可以是包括人物，并且背景为一些标志性建筑物或识别度较高的植物、风景等的照片，另一组是非纪念照的其他照片，例如，静物、无人的风景照片等。为两组照片分别标记“纪念照”和“非纪念照”的标签，作为期望的输出，然后对神经网络进行迭代训练，训练好的网络可用于识别一张照片是纪念照的概率。当训练好一个网络后，不需要用户手动调整或设置参数，只需要将照片作为神经网络的输入，输出将该照片识别为纪念照的概率。在这种情况下，当识别出预览画面是纪念照的概率超过预定值时，确定满足触发条件。
此外，例如，如果图像捕获装置400的语音识别系统识别出用户进行拍摄时的语音中包括拍摄纪念照的意图，例如，用户说“帮我拍摄纪念照”，则确定满足触发条件。可选地，用户说“这里风景好美”，“去年我们也是在这里拍的”，“每年都要在这里拍”等，则语音识别系统可询问用户是否需要拍摄纪念照，如果用户回答“是”，则确定满足触发条件。
根据本发明的实施例，处理器470可打开或关闭上述多个触发条件中的至少一个触发条件。
处理器470可根据关联照片为当前的拍摄提供拍摄提示。
根据本发明的实施例，处理器470可在当前进行的拍摄的预览画面中显示包括关联照片的缩略图的列表，响应于用户从列表中选择一张照片，根据所选择的照片提供拍摄提示。
根据本发明的实施例，处理器470可确定关联照片中是否存在模板照片；响应于关联照片中存在模板照片，在列表中将模板照片的缩略图排列在关联照片中的非模板照片的缩略图的前面；响应于关联照片中不存在模板照片，确定关联照片的数量；响应于关联照片的数量不超过预定数量，显示列表；响应于关联照片的数量超过预定数量，提示用户拍摄一张照片作为样图，在用户拍摄样图后，将样图与关联照片中的每张照片进行匹配，按照样图与关联照片中的每张照片匹配的相似度从高到低在列表中排列关联照片的缩略图。
例如，如果关联照片中包括模板照片，则处理器470可在列表中将模板照片显示在非模板照片的前面，并且模板照片上可带有角标标识等，以便与非模板照片进行区分。如果关联照片中包括多个不同背景的多张照片，为了便于用户选择，处理器470可通过特征点提取和匹配的方法(例如，ORB、SIFT、直方图等算法)判别出属于同一背景的照片，并仅显示同一背景的多张照片中的一张照片。例如，如果同一背景的多张照片中存在模板照片，则仅显示模板照片，如果同一背景的多张照片中不存在模板照片，则可通过照片优劣的判别方法，挑选出最优的一张予以显示。
例如，如果关联照片的数量超过10张，在预览画面上的列表中无法显示全部的关联照片，则处理器470可提示用户拍摄一张照片作为样图，在拍摄完成后，处理器470可在图像捕获装置400的后台开启一个进程以进行“以图搜图”。例如，先在关联照片中搜索具有与样图的位置附近的位置的照片，得到当前位置附近历史拍摄的照片的集合，再通过特征点提取方法(例如，ORB、SIFT、直方图等算法)对样图和集合中的所有照片进行特征点提取，得到特征点描述子，在提取特征点完成后，通过匹配算法(例如，k邻近分类算法)将样图的特征点描述子与集合中的每张照片中的特征点描述子进行匹配，匹配成功的特征点的个数越多，两张照片的相似度越高。处理器470可根据样图与集合中每张照片的成功匹配的特征点的数量从高到低在列表中排列集合中的照片。然而，由于不同季节拍摄的照片中存在景物的差异，例如，颜色、树木修剪情况的差异等。在这种情况下，处理器470可通过特征点匹配算法对灰度图进行判别，从而忽略颜色的差异。同时，为了提高匹配效率，处理器470可对照片的缩略图进行匹配，以忽略少量的内容改变。
根据本发明的实施例，在用户从列表中选择一张照片后，处理器470可获取所选择的照片的特征内容，将特征内容的轮廓和/或关于特征内容的文字信息重叠显示在预览画面上，从而用户可根据重叠显示的轮廓或文字信息拍摄照片。
例如，处理器470可通过现有的图像处理方法提取轮廓，例如，处理器470可先对照片进行灰度处理，再利用图像梯度算法提取边缘。处理器470可将所选择的照片的背景轮廓、人物动作轮廓等以类似水印的形式叠加显示在预览画面中，和/或可在预览画面中重叠显示文字以标注每个人物的位置等。从而，用户可根据背景轮廓调整相机的位置和角度，根据动作轮廓调整被拍摄的人的动作、根据文字调节被拍摄的人的站位等，进而拍摄与所选择的照片重合度较高的照片。
根据本发明的实施例，在用户根据拍摄提示拍摄照片后，处理器470可为拍摄的照片添加标注信息。
根据本发明的实施例，处理器470可根据所选择的照片的拍摄信息和拍摄的照片的拍摄信息的差异为拍摄的照片添加标注信息。拍摄信息可包括：拍摄的照片的位置信息、拍摄的照片的日期信息、拍摄的照片的日期是否属于节日或纪念日的信息、拍摄的照片中的景物信息、拍摄的照片中的人物信息、拍摄的照片中的活动内容信息、所选择的照片的备注信息、所选择的照片的标题信息中的至少一个。差异可以是所选择的照片的拍摄时间和拍摄的照片的拍摄时间的差异、拍摄位置的差异、拍摄的人物的数量、拍摄的人物的动作的差异等。例如，如果用户选择图像捕获装置400中存储的2年前拍摄的备注为第一年结婚纪念照的照片提供拍摄提示，并根据拍摄提示拍摄的新的照片，则处理器470可根据拍摄时间的差异，为新拍摄的照片添加标注信息“第三年结婚纪念照”。根据本发明的实施例，标注信息可以是照片的标题信息、备注信息或添加在照片上的说明信息。
根据本发明的实施例，在用户根据拍摄提示拍摄照片后，处理器470可将拍摄的照片和所选择的照片合成为对比照片。并且，处理器470可在合成的对比照片中添加分别与拍摄的照片和所选择的照片相应的拍摄信息。例如，处理器470可将用户选择的2年前拍摄的备注被第一年结婚纪念照的照片和根据第一年结婚纪念照拍摄的第三年结婚纪念照合成为一张照片，合成的照片中左侧为第一年结婚纪念照，右侧有第三年结婚纪念照，并可分别在合成的照片中的第一年结婚纪念照和第三年结婚纪念照的下方添加拍摄年份，例如，2016年和2018年。然而，上述示例仅是示例性的，本发明不限于此。
根据本发明的实施例，在用户根据拍摄提示拍摄照片后，处理器470可提示用户将拍摄的照片标记为模板照片，如果关联照片中包括模板照片，则响应于用户将拍摄的照片设置为模板照片，将原有的模板照片设置为非模板照片。此外，在用户根据拍摄提示拍摄照片后，处理器470可在预览画面上显示拍摄的照片与所选择的照片的重合度。例如，在拍摄照片后，可提取新拍摄的照片中的背景轮廓、人物动作轮廓等，并计算新旧照片中相应的轮廓的重合度，并在预览画面上显示计算出的重合度。在用户根据拍摄提示拍摄照片后，处理器470可提示用户设置用于每隔预定时间间隔询问用户是否拍摄纪念照的提醒。例如，在用户根据拍摄提示拍摄了纪念照之后，可在预览画面上显示提示“是否设置每隔一年拍摄该背景下的纪念照？”。
此外，根据本发明的实施例，如果处理器470没有获取到关联照片，则无法为当前的拍摄提供拍摄提示。在这种情况下，提示用户直接进行当前拍摄并将当前拍摄的照片作为模板照片或提示用户直接进行当前拍摄并从当前拍摄的多个照片中选择至少一张照片作为模板照片。此外，也可为拍摄的模板照片添加标注信息和/或设置用于提示用户每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
根据上述图像捕获装置，可根据历史拍摄的照片提供拍摄提示，使得用户可拍摄出与历史拍摄的照片具有高重合度的照片。
根据本发明的实施例还提供一种存储有计算机程序的计算机可读存储介质，该计算机可读存储介质存储有当被处理器执行时使得处理器执行如上所述的辅助拍摄方法的计算机程序。该计算机可读存储介质是可存储由计算机系统读出的数据的任意数据存储装置。计算机可读存储介质的示例包括：只读存储器、随机存取存储器、只读光盘、磁带、软盘、光数据存储装置和载波(诸如经有线或无线传输路径通过互联网的数据传输)。
根据本发明的实施例还提供一种计算装置。该计算装置包括处理器和存储器，存储器用于存储计算机程序，计算机程序被处理器执行使得处理器执行如上所述的辅助拍摄方法的计算机程序。
虽然已示出和描述了本发明的一些示例性实施例，但本领域技术人员应该理解，在不脱离由权利要求及其等同物限定其范围的本发明的原理和精神的情况下，可以对这些实施例进行修改。

Claims (14)

1.一种图像捕获装置的辅助拍摄方法，包括：
获取用户进行当前拍摄的场景信息；
根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片；
根据所述关联照片的获取结果提供操作指示。
2.如权利要求1所述的辅助拍摄方法，其中，所述场景信息包括进行当前拍摄的位置信息、画面信息、日期信息和拍摄时用户的语音信息中的至少一个；
和/或，
所述关联照片来自以下至少之一：本地存储的照片、图像捕获装置连接的云相册中的照片或与图像捕获装置关联的其他装置中存储的照片；
和/或，
当有关联照片时，根据所述关联照片为用户进行当前拍摄提供相应的拍摄提示；
和/或，
当没有关联照片时，提示用户直接进行当前拍摄并将当前拍摄的照片作为模板照片或提示用户直接进行当前拍摄并从当前拍摄的多个照片中选择至少一张照片作为模板照片。
3.如权利要求2所述的辅助拍摄方法，其中，所述日期信息包括当前拍摄的日期为节日和/或纪念日的信息，所述画面信息为当前拍摄时图像捕获装置识别到的预览画面，所述拍摄时用户的语音信息包括当前拍摄的意图为拍摄纪念照的语音信息；
和/或，
所述关联照片包括以下至少之一：与用户进行当前拍摄的所述场景信息中的位置信息在一定范围内相匹配的照片、与所述场景信息中的画面信息在一定程度上相匹配的照片、与所述场景信息中的日期信息匹配的照片或与识别到的拍摄时用户的语音信息相匹配的照片、通过人工智能算法识别出的照片；
和/或，
其中，根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片的步骤包括：
响应于所述场景信息满足以下多个触发条件中的至少一个触发条件，获取所述关联照片：存在在当前拍摄位置处的预定范围内的历史拍摄的照片、当前拍摄的位置处于与图像捕获装置连接的服务器中标记的著名景点的预定范围内、当前拍摄的日期属于节日和/或纪念日、存在包括进行当前拍摄的景物的历史拍摄的照片、当前拍摄的人物被标记为纪念照成员、当前拍摄的人物中被标记为纪念照成员的数量超过预定数量、图像捕获装置识别到的预览画面是纪念照的概率超过预定值、用户进行拍摄时的语音信息中包括拍摄纪念照的意图；
和/或，
其中，根据所述关联照片为用户进行当前拍摄提供相应的拍摄提示的步骤包括：在当前拍摄的预览画面中显示包括所述关联照片的缩略图的列表；响应于用户从所述列表中选择一张照片，根据所选择的照片提供拍摄提示；
和/或，
在用户根据拍摄提示拍摄照片后，为拍摄的照片添加标注信息；
和/或，
在用户根据拍摄提示拍摄照片后，提示用户将拍摄的照片标记为模板照片；
和/或，
在用户根据拍摄提示拍摄照片后，在预览画面上显示拍摄的照片与所选择的照片的重合度；
和/或，
在用户根据拍摄提示拍摄照片后，提示用户设置用于每隔预定时间间隔询问用户是否拍摄纪念照的提醒；
和/或，
在用户根据拍摄提示拍摄照片后，将拍摄的照片和所选择的照片合成为对比照片；
和/或，
当没有关联照片时，为拍摄的模板照片添加标注信息和/或设置用于提示用户每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
4.如权利要求3所述的辅助拍摄方法，其中，响应于所述场景信息满足所述至少一个触发条件，获取所述关联照片的步骤包括：
响应于所述场景信息满足所述至少一个触发条件，在当前拍摄的预览画面上显示纪念照图标；响应于用户点击纪念照图标，获取所述关联照片；
和/或，
图像捕获装置识别到的预览画面是纪念照的概率的步骤包括：通过统计方式或人工智能算法识别出预览画面是纪念照的概率；
和/或，
打开或关闭所述多个触发条件中的至少一个触发条件；
和/或，
在当前拍摄的预览画面中显示包括所述关联照片的缩略图的列表的步骤包括：
当所述关联照片中存在模板照片时，在所述列表中将模板照片的缩略图排列在所述关联照片中的非模板照片的缩略图的前面；当所述关联照片中不存在模板照片时，确定所述关联照片的数量，并当所述关联照片的数量不超过预定值时显示包括所有的所述关联照片的缩略图的列表，以及当所述关联照片的数量超过预定值时提示用户拍摄一张照片作为样图，并将拍摄的样图与所述关联照片中的每张照片进行匹配，优先显示匹配度高的所述关联照片的缩略图；
和/或，
所述响应于用户从所述列表中选择一张照片，根据所选择的照片提供拍摄提示的步骤包括：获取所选择的照片的特征内容，将所述特征内容的轮廓和/或关于所述特征内容的文字信息重叠显示在预览画面；
和/或，
通过拍摄信息获取所述预定时间间隔。
5.如权利要求4所述的辅助拍摄方法，其中，所述著名景点包括用户对同一位置的历史拍摄的照片进行纪念照标记的数量达到一定阈值时的地点、数据库默认标记的地点、热门旅游景点中的至少一个；
和/或，
其中，在预览画面上显示纪念照图标的步骤包括：在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息；
和/或，
其中，为拍摄的照片添加标注信息的步骤包括：根据所选择的照片的拍摄信息和拍摄的照片的拍摄信息的差异为拍摄的照片添加标注信息；
和/或，
如果所述关联照片中包括模板照片，则响应于用户选择将拍摄的照片标记为模板照片，将原有的模板照片设置为非模板照片；
和/或，
其中，通过人工智能算法识别出预览画面是纪念照的概率的步骤包括使用神经网络模型识别预览画面是纪念照的概率；
和/或，
其中，将拍摄的照片和所选择的照片合成为对比照片的步骤包括在合成的对比照片中添加分别与拍摄的照片和所选择的照片相应的拍摄信息。
6.如权利要求5所述的辅助拍摄方法，其中，所述拍摄信息包括：拍摄的照片的位置信息、拍摄的照片的日期信息、拍摄的照片的日期是否属于节日或纪念日的信息、拍摄的照片中的景物信息、拍摄的照片中的人物信息、拍摄的照片中的活动内容信息、所选择的照片的备注信息、所选择的照片的标题信息中的至少一个；
和/或，
其中，所述差异包括拍摄时间的差异、拍摄位置的差异、拍摄的人物的数量和/或动作的差异、拍摄的景物的差异中的至少一个；
和/或，
其中，所述神经网络模型通过一组被标记为纪念照的照片和一组未被标记为纪念照的照片进行迭代训练得出。
7.一种图像捕获装置，包括：
显示器；
处理器，被配置为：
获取用户进行当前拍摄的场景信息；
根据所述场景信息从用户历史拍摄的照片中获取与所述场景信息相关联的关联照片；
根据所述关联照片的获取结果提供操作指示。
8.如权利要求7所述的图像捕获装置，其中，所述场景信息包括进行当前拍摄的位置信息、画面信息、日期信息和拍摄时用户的语音信息中的至少一个；
和/或，
所述关联照片来自以下至少之一：本地存储的照片、图像捕获装置连接的云相册中的照片或与图像捕获装置关联的其他装置中存储的照片；
和/或，
其中，处理器还被配置为：当有关联照片时，根据所述关联照片为用户进行当前拍摄提供相应的拍摄提示；
和/或
其中，处理器还被配置为：当没有关联照片时，提示用户直接进行当前拍摄并将当前拍摄的照片作为模板照片或提示用户直接进行当前拍摄并从当前拍摄的多个照片中选择至少一张照片作为模板照片。
9.如权利要求8所述的图像捕获装置，其中，所述日期信息包括当前拍摄的日期为节日和/或纪念日的信息，所述画面信息为当前拍摄时图像捕获装置识别到的预览画面，所述拍摄时用户的语音信息包括当前拍摄的意图为拍摄纪念照的语音信息；
和/或，
所述关联照片包括以下至少之一：与用户进行当前拍摄的所述场景信息中的位置信息在一定范围内相匹配的照片、与所述场景信息中的画面信息在一定程度上相匹配的照片、与所述场景信息中的日期信息匹配的照片或与识别到的拍摄时用户的语音信息相匹配的照片、通过人工智能算法识别出的照片；
和/或，
其中，处理器还被配置为：响应于所述场景信息满足以下多个触发条件中的至少一个触发条件，获取所述关联照片：存在在当前拍摄位置处的预定范围内的历史拍摄的照片、当前拍摄的位置处于与图像捕获装置连接的服务器中标记的著名景点的预定范围内、当前拍摄的日期属于节日和/或纪念日、存在包括进行当前拍摄的景物的历史拍摄的照片、当前拍摄的人物被标记为纪念照成员、当前拍摄的人物中被标记为纪念照成员的数量超过预定数量、图像捕获装置识别到的预览画面是纪念照的概率超过预定值、用户进行拍摄时的语音信息中包括拍摄纪念照的意图；
和/或，
其中，处理器还被配置为：在当前拍摄的预览画面中显示包括所述关联照片的缩略图的列表；响应于用户从所述列表中选择一张照片，根据所选择的照片提供拍摄提示；
和/或，
其中，处理器还被配置为：在用户根据拍摄提示拍摄照片后，为拍摄的照片添加标注信息；
和/或，
其中，处理器还被配置为：在用户根据拍摄提示拍摄照片后，提示用户将拍摄的照片标记为模板照片；
和/或，
其中，处理器还被配置为：在用户根据拍摄提示拍摄照片后，在预览画面上显示拍摄的照片与所选择的照片的重合度；
和/或，
其中，处理器还被配置为：在用户根据拍摄提示拍摄照片后，提示用户设置用于每隔预定时间间隔询问用户是否拍摄纪念照的提醒；
和/或，
其中，处理器还被配置为：在用户根据拍摄提示拍摄照片后，将拍摄的照片和所选择的照片合成为对比照片；
和/或，
其中，处理器还被配置为：当没有关联照片时，为拍摄的模板照片添加标注信息和/或设置用于提示用户每隔预定时间间隔询问用户是否拍摄纪念照的提醒。
10.如权利要求9所述的图像捕获装置，其中，处理器还被配置为：响应于所述场景信息满足所述至少一个触发条件，在当前拍摄的预览画面上显示纪念照图标；响应于用户点击纪念照图标，获取所述关联照片；
和/或，
其中，处理器还被配置为：通过统计方式或人工智能算法识别出预览画面是纪念照的概率；
和/或，
其中，处理器还被配置为：打开或关闭所述多个触发条件中的至少一个触发条件；
和/或，
其中，处理器还被配置为：当所述关联照片中存在模板照片时，在所述列表中将模板照片的缩略图排列在所述关联照片中的非模板照片的缩略图的前面；当所述关联照片中不存在模板照片时，确定所述关联照片的数量，并当所述关联照片的数量不超过预定值时显示包括所有的所述关联照片的缩略图的列表，以及当所述关联照片的数量超过预定值时提示用户拍摄一张照片作为样图，并将拍摄的样图与所述关联照片中的每张照片进行匹配，优先显示匹配度高的所述关联照片的缩略图；
和/或，
其中，处理器还被配置为：获取所选择的照片的特征内容，将所述特征内容的轮廓和/或关于所述特征内容的文字信息重叠显示在预览画面；
和/或，
通过拍摄信息获取所述预定时间间隔。
11.如权利要求10所述的图像捕获装置，其中，所述著名景点包括用户对同一位置的历史拍摄的照片进行纪念照标记的数量达到一定阈值时的地点、数据库默认标记的地点、热门旅游景点中的至少一个；
和/或，
其中，处理器还被配置为：在纪念照图标的周围显示用于提示用户进入纪念照模式的指示信息；
和/或，
其中，处理器还被配置为：根据所选择的照片的拍摄信息和拍摄的照片的拍摄信息的差异为拍摄的照片添加标注信息；
和/或，
其中，处理器还被配置为：如果所述关联照片中包括模板照片，则响应于用户选择将拍摄的照片标记为模板照片，将原有的模板照片设置为非模板照片；
和/或，
其中，处理器还被配置为：使用神经网络模型识别预览画面是纪念照的概率；
和/或，
其中，处理器还被配置为：在合成的对比照片中添加分别与拍摄的照片和所选择的照片相应的拍摄信息。
12.如权利要求11所述的图像捕获装置，其中，所述拍摄信息包括：拍摄的照片的位置信息、拍摄的照片的日期信息、拍摄的照片的日期是否属于节日或纪念日的信息、拍摄的照片中的景物信息、拍摄的照片中的人物信息、拍摄的照片中的活动内容信息、所选择的照片的备注信息、所选择的照片的标题信息中的至少一个；
和/或，
其中，所述差异包括拍摄时间的差异、拍摄位置的差异、拍摄的人物的数量和/或动作的差异、拍摄的景物的差异中的至少一个；
和/或，
其中，所述神经网络模型通过一组被标记为纪念照的照片和一组未被标记为纪念照的照片进行迭代训练得出。
13.一种计算机可读存储介质，存储有程序，被配置为：所述程序包括执行如权利要求1-6中任意一项所述的辅助拍摄方法的代码。
14.一种计算机，包括存储有计算机程序的可读介质，被配置为：所述计算机程序包括执行如权利要求1-6中任意一项所述的辅助拍摄方法的代码。
CN201910748732.1A 2019-08-14 2019-08-14 图像捕获装置的辅助拍摄方法和图像捕获装置 Pending CN110493517A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910748732.1A CN110493517A (zh) 2019-08-14 2019-08-14 图像捕获装置的辅助拍摄方法和图像捕获装置
PCT/KR2020/010610 WO2021029648A1 (en) 2019-08-14 2020-08-11 Image capturing apparatus and auxiliary photographing method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910748732.1A CN110493517A (zh) 2019-08-14 2019-08-14 图像捕获装置的辅助拍摄方法和图像捕获装置

Publications (1)

Publication Number Publication Date
CN110493517A true CN110493517A (zh) 2019-11-22

Family

ID=68550922

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910748732.1A Pending CN110493517A (zh) 2019-08-14 2019-08-14 图像捕获装置的辅助拍摄方法和图像捕获装置

Country Status (2)

Country Link
CN (1) CN110493517A (zh)
WO (1) WO2021029648A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083411A (zh) * 2019-12-30 2020-04-28 武汉邮电科学研究院有限公司 一种基于exif信息进行时空影像记录的方法及系统
CN111355899A (zh) * 2020-02-23 2020-06-30 中国科学院西安光学精密机械研究所 一种太空全景成像系统及成像方法
CN111405180A (zh) * 2020-03-18 2020-07-10 惠州Tcl移动通信有限公司 拍照方法、装置、存储介质及移动终端
CN112333468A (zh) * 2020-09-28 2021-02-05 影石创新科技股份有限公司 图像处理方法、装置、设备及存储介质
EP4009619A1 (en) * 2020-12-04 2022-06-08 Shopify Inc. System and method for generating recommendations during image capture of a product
CN115442511A (zh) * 2021-06-04 2022-12-06 Oppo广东移动通信有限公司 照片拍摄方法、装置、终端及存储介质
WO2023016334A1 (zh) * 2021-08-12 2023-02-16 华为技术有限公司 信息查询及展示方法、装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113038001A (zh) * 2021-02-26 2021-06-25 维沃移动通信有限公司 显示方法、装置及电子设备
CN113055594A (zh) * 2021-03-11 2021-06-29 百度在线网络技术（北京）有限公司 图像的获取方法和装置
CN113194255A (zh) * 2021-04-29 2021-07-30 南京维沃软件技术有限公司 拍摄方法、装置和电子设备
CN113486838A (zh) * 2021-07-19 2021-10-08 歌尔光学科技有限公司 事件提醒方法、头戴式显示设备及存储介质
CN116684723B (zh) * 2023-08-03 2023-11-03 广州方图科技有限公司 自助拍照设备的拍摄方法、装置、电子设备及存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103209292A (zh) * 2012-09-26 2013-07-17 顾红波 一种获取稳定成像的智能拍照系统和方法
CN103763454A (zh) * 2014-01-03 2014-04-30 深圳市欧珀通信软件有限公司 一种移动终端的摄像方法、装置及移动终端
CN103929597A (zh) * 2014-04-30 2014-07-16 杭州摩图科技有限公司 一种辅助拍摄的方法及其装置
CN104135609A (zh) * 2014-06-27 2014-11-05 小米科技有限责任公司 辅助拍照方法、装置及终端
CN105072335A (zh) * 2015-07-29 2015-11-18 广东欧珀移动通信有限公司 一种拍照方法及用户终端
CN105809618A (zh) * 2014-12-31 2016-07-27 华为终端（东莞）有限公司 一种图片处理方法及装置
CN107229625A (zh) * 2016-03-23 2017-10-03 北京搜狗科技发展有限公司 一种拍摄处理方法和装置、一种用于拍摄处理的装置
CN107835365A (zh) * 2017-11-03 2018-03-23 上海爱优威软件开发有限公司 辅助拍摄方法及系统
CN108174103A (zh) * 2018-01-23 2018-06-15 维沃移动通信有限公司 一种拍摄提示方法及移动终端
CN108600609A (zh) * 2018-03-19 2018-09-28 维沃移动通信有限公司 辅助拍照的方法及装置
CN108668072A (zh) * 2018-03-26 2018-10-16 广东欧珀移动通信有限公司 移动终端、拍照方法及相关产品

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110047613A (ko) * 2009-10-30 2011-05-09 삼성전자주식회사 촬영가이드 모드를 제공하는 방법 및 장치
JP5601513B2 (ja) * 2010-08-12 2014-10-08 カシオ計算機株式会社 画像表示装置及びプログラム
KR101552407B1 (ko) * 2013-12-31 2015-09-10 홍익대학교 산학협력단 동일 장소에서의 시간을 초월한 동반 촬영 시스템 및 방법
KR20180058461A (ko) * 2016-11-24 2018-06-01 장근호 위치 정보를 기반으로 하는 사진 검색 및 촬영 시스템, 및 이를 이용한 사진 검색 및 촬영 방법
KR102438201B1 (ko) * 2017-12-01 2022-08-30 삼성전자주식회사 사진 촬영과 관련된 추천 정보를 제공하는 방법 및 시스템

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103209292A (zh) * 2012-09-26 2013-07-17 顾红波 一种获取稳定成像的智能拍照系统和方法
CN103763454A (zh) * 2014-01-03 2014-04-30 深圳市欧珀通信软件有限公司 一种移动终端的摄像方法、装置及移动终端
CN103929597A (zh) * 2014-04-30 2014-07-16 杭州摩图科技有限公司 一种辅助拍摄的方法及其装置
CN104135609A (zh) * 2014-06-27 2014-11-05 小米科技有限责任公司 辅助拍照方法、装置及终端
CN105809618A (zh) * 2014-12-31 2016-07-27 华为终端（东莞）有限公司 一种图片处理方法及装置
CN105072335A (zh) * 2015-07-29 2015-11-18 广东欧珀移动通信有限公司 一种拍照方法及用户终端
CN107229625A (zh) * 2016-03-23 2017-10-03 北京搜狗科技发展有限公司 一种拍摄处理方法和装置、一种用于拍摄处理的装置
CN107835365A (zh) * 2017-11-03 2018-03-23 上海爱优威软件开发有限公司 辅助拍摄方法及系统
CN108174103A (zh) * 2018-01-23 2018-06-15 维沃移动通信有限公司 一种拍摄提示方法及移动终端
CN108600609A (zh) * 2018-03-19 2018-09-28 维沃移动通信有限公司 辅助拍照的方法及装置
CN108668072A (zh) * 2018-03-26 2018-10-16 广东欧珀移动通信有限公司 移动终端、拍照方法及相关产品

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083411A (zh) * 2019-12-30 2020-04-28 武汉邮电科学研究院有限公司 一种基于exif信息进行时空影像记录的方法及系统
CN111355899A (zh) * 2020-02-23 2020-06-30 中国科学院西安光学精密机械研究所 一种太空全景成像系统及成像方法
CN111355899B (zh) * 2020-02-23 2021-03-19 中国科学院西安光学精密机械研究所 一种太空全景成像系统及成像方法
CN111405180A (zh) * 2020-03-18 2020-07-10 惠州Tcl移动通信有限公司 拍照方法、装置、存储介质及移动终端
CN112333468A (zh) * 2020-09-28 2021-02-05 影石创新科技股份有限公司 图像处理方法、装置、设备及存储介质
EP4009619A1 (en) * 2020-12-04 2022-06-08 Shopify Inc. System and method for generating recommendations during image capture of a product
US11967105B2 (en) 2020-12-04 2024-04-23 Shopify Inc. System and method for generating recommendations during image capture of a product
CN115442511A (zh) * 2021-06-04 2022-12-06 Oppo广东移动通信有限公司 照片拍摄方法、装置、终端及存储介质
WO2022253045A1 (zh) * 2021-06-04 2022-12-08 Oppo广东移动通信有限公司 照片拍摄方法、装置、终端及存储介质
WO2023016334A1 (zh) * 2021-08-12 2023-02-16 华为技术有限公司 信息查询及展示方法、装置

Also Published As

Publication number Publication date
WO2021029648A1 (en) 2021-02-18

Similar Documents

Publication Publication Date Title
CN110493517A (zh) 图像捕获装置的辅助拍摄方法和图像捕获装置
KR102631309B1 (ko) 사진 촬영과 관련된 추천 정보를 제공하는 방법 및 시스템
US11765321B2 (en) Intelligent video surveillance system and method
EP3579145A1 (en) Method and device for image processing, computer readable storage medium, and electronic device
CN102047652B (zh) 摄像装置、集成电路及摄像方法
WO2019127395A1 (zh) 一种无人机拍照方法、图像处理方法和装置
WO2020134528A1 (zh) 目标检测方法及相关产品
KR20090087670A (ko) 촬영 정보 자동 추출 시스템 및 방법
US11657085B1 (en) Optical devices and apparatuses for capturing, structuring, and using interlinked multi-directional still pictures and/or multi-directional motion pictures
US9727802B2 (en) Automatic, computer-based detection of triangular compositions in digital photographic images
WO2022227393A1 (zh) 图像拍摄方法及装置、电子设备和计算机可读存储介质
US9558428B1 (en) Inductive image editing based on learned stylistic preferences
CN108182746A (zh) 控制系统、方法和装置
CN112702521A (zh) 图像拍摄方法及装置、电子设备、计算机可读存储介质
TW202203085A (zh) 自動相機指導和設置調整
US11200650B1 (en) Dynamic image re-timing
CN110348366B (zh) 一种自动化最优人脸搜索方法及装置
CN110581950B (zh) 相机、选择相机设置的系统和方法
CN107948618A (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
JP6410427B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN110047115B (zh) 星辰图像拍摄方法、装置、计算机设备和存储介质
JPH10124655A (ja) デジタルアルバムの作成装置及びデジタルアルバム装置
CN106200915B (zh) 一种增强现实中目标对象的识别方法、装置及移动终端
JP2019191933A (ja) 学習装置、撮像装置、画像処理装置、および学習方法
CN113992837A (zh) 基于对象尺寸的自动聚焦方法以及数字图像采集装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191122