CN106233283A - 图像处理装置、通信系统以及通信方法和摄像装置 - Google Patents
图像处理装置、通信系统以及通信方法和摄像装置 Download PDFInfo
- Publication number
- CN106233283A CN106233283A CN201580019736.6A CN201580019736A CN106233283A CN 106233283 A CN106233283 A CN 106233283A CN 201580019736 A CN201580019736 A CN 201580019736A CN 106233283 A CN106233283 A CN 106233283A
- Authority
- CN
- China
- Prior art keywords
- image
- guidance information
- word message
- information
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/532—Query formulation, e.g. graphical querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/94—Hardware or software architectures specially adapted for image or video understanding
- G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/634—Warning indications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Library & Information Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Computational Linguistics (AREA)
- Studio Devices (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
图像处理装置(100)具有:图像取得部(102),其取得图像;图像识别部(104),其从由图像取得部(102)取得的图像中识别能够取得文字信息的特征信息;文字信息取得部(106),其从由图像识别部识别出的特征信息中取得文字信息;以及通信部(108),其向从文字信息中检索引导信息的引导信息检索装置(200)进行由文字信息取得部(106)取得的文字信息的通信。
Description
技术领域
本发明涉及图像处理装置、通信系统以及通信方法和摄像装置
背景技术
近年来,在移动电话或数字照相机这样的设备中提出有具有图像的识别功能的设备。例如,在日本特开2002-176509号公报中提出有能够从通过拍摄获得的图像中读取条形码的便携型信息读取装置。此外,在日本特开2008-152569号公报中提出有能够读取二维码的代码读取装置。
近年来,提出有具有用于引导用户的摄影操作等的引导功能的摄像装置。例如,在日本特开2001-66684号公报中提出的摄像装置预先将摄像装置的操作按钮的功能存储在存储部中,在由用户操作了帮助按钮的情况下,向用户提示各个操作按钮的功能作为引导信息。
发明内容
通过图像的识别,能够获得在图像中拍到的对象物的各种特征信息。如果知晓对象物的特征信息,则可认为通过使用该特征信息,能够获得引导信息等对象物的进一步的信息。但是,为了通过图像处理装置获得这样的对象物的进一步的信息,需要预先将与对象物相关的足够的信息存储在图像处理装置的存储部中。在该情况下,需要在图像处理装置上搭载大容量的存储部。此外,在采用如使服务器等图像处理装置以外的外部装置进行图像的进一步的信息的取得的结构的情况下,需要向外部装置进行图像的通信。由于进行该图像的通信,通信时间容易增加。
本发明是鉴于上述情况而完成的,其目的在于提供一种能够抑制装置的大型化和通信时间的增加,并使用图像的识别结果来获得对象物的进一步的信息的图像处理装置以及使用这样的图像处理装置的通信系统和通信方法。此外,本发明的目的在于提供一种能够以不给用户的摄影操作带来影响的方式向用户提示有用的引导信息的摄像装置。
用于解决课题的手段
本发明的第1方式的图像处理装置具有:图像取得部,其取得图像;图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;文字信息取得部,其从由所述图像识别部识别出的特征信息中取得文字信息;以及通信部,其向引导信息检索装置进行由所述文字信息取得部取得的文字信息的通信,所述引导信息检索装置从文字信息中检索引导信息。
本发明的第2方式的图像处理装置具有:图像取得部,其取得图像;图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;以及通信部,其向引导信息检索装置进行由所述图像识别部识别出的特征信息的通信,所述引导信息检索装置从特征信息中取得文字信息并检索引导信息。
本发明的第3方式的通信系统具有图像处理装置和引导信息检索装置,所述图像处理装置具有:图像取得部,其取得图像;图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;文字信息取得部,其从由所述图像识别部识别出的特征信息中取得文字信息;以及图像处理装置侧通信部,其发送由所述文字信息取得部取得的文字信息,所述引导信息检索装置具有:引导信息检索装置侧通信部,其接收从所述图像处理装置侧通信部通信的文字信息;检索部,其从所述接收到的文字信息中检索引导信息;以及提示部,其向用户提示所述检索出的引导信息。
本发明的第4方式的通信系统具有图像处理装置和引导信息检索装置,所述图像处理装置具有:图像取得部,其取得图像;图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;以及图像处理装置侧通信部,其发送由所述图像识别部取得的特征信息,所述引导信息检索装置具有:引导信息检索装置侧通信部,其接收从所述图像处理装置侧通信部通信的特征信息;文字信息取得部,其从所述接收到的特征信息中取得文字信息;检索部,其从所述取得的文字信息中检索引导信息;以及提示部,其向用户提示所述检索出的引导信息。
本发明的第5方式的通信方法具有以下步骤:取得图像;从所述取得的图像中识别能够取得文字信息的特征信息;从所述识别出的特征信息中取得文字信息;向引导信息检索装置进行所述取得的文字信息的通信,所述引导信息检索装置从文字信息中检索引导信息;所述引导信息检索装置从所述通信的文字信息中检索引导信息;以及向用户提示由所述引导信息检索装置检索出的引导信息。
本发明的第6方式的通信方法具有以下步骤:取得图像;从所述取得的图像中识别能够取得文字信息的特征信息;向引导信息检索装置进行所述识别出的特征信息的通信,所述引导信息检索装置从特征信息中取得文字信息并检索引导信息;从所述通信的特征信息中取得文字信息;所述引导信息检索装置从所述取得的文字信息中检索引导信息;以及向用户提示由所述引导信息检索装置检索出的引导信息。
本发明的第7方式的摄像装置具有:摄像部,其拍摄对象物来取得所述对象物涉及的图像;切换部,其对拍摄模式和引导信息检索模式进行切换,在拍摄模式下,将由所述摄像部取得的图像用于记录,在引导信息检索模式下,将由所述摄像部取得的图像用于引导信息的检索;记录部,其在所述拍摄模式下记录由所述摄像部取得的图像;图像识别部,其在所述引导信息检索模式下从由所述摄像部取得的图像中识别特征信息;以及检索部,其从所述识别出的特征信息中检索所述引导信息。
附图说明
图1是包含本发明的第1实施方式的图像处理装置的通信系统的功能框图。
图2是示出第1实施方式的图像处理装置和引导信息检索装置的应用例即通信系统的结构的图。
图3A是示出通信系统的动作的概要的第1图。
图3B是示出通信系统的动作的概要的第2图。
图3C是示出通信系统的动作的概要的第3图。
图3D是示出通信系统的动作的概要的第4图。
图4是示出第1实施方式中的摄像装置的控制的流程图。
图5是示出第1实施方式中的便携终端的控制的流程图。
图6A是示出第1实施方式的变形例2的摄像装置的外观的图。
图6B是示出第1实施方式的变形例2的便携终端的外观的图。
图6C是示出经由附件安装了摄像装置的便携终端的图。
图7是示出第1实施方式的变形例2的摄像装置的控制的流程图。
图8A是示出第1实施方式的变形例2的便携装置的控制的流程图的第1图。
图8B是示出第1实施方式的变形例2的便携装置的控制的流程图的第2图。
图9是包含本发明的第2实施方式的图像处理装置的通信系统的功能框图。
图10是示出第2实施方式的图像处理装置和引导信息检索装置的应用例即通信系统的结构的图。
图11是本发明的第3实施方式的摄像装置的功能框图。
图12是示出包含作为第3实施方式的摄像装置的应用例的摄像装置的通信系统的结构的图。
图13A是示出摄像装置的动作的概要的第1图。
图13B是示出摄像装置的动作的概要的第2图。
图13C是示出摄像装置的动作的概要的第3图。
图14是示出摄像装置的控制的流程图。
图15是示出引导信息检索的处理的流程图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
[第1实施方式]
首先,对本发明的第1实施方式进行说明。图1是包含本发明的第1实施方式的图像处理装置的通信系统的功能框图。图像处理装置100具有:图像取得部102、图像识别部104、文字信息取得部106和通信部108。该图像处理装置100构成为与引导信息检索装置200进行通信。
图像取得部102取得图像。该图像取得部102取得例如通过摄像部的拍摄获得的图像。此外,图像取得部102可以构成为取得从图像处理装置100的外部的设备输入的图像。
图像识别部104识别由图像取得部102输入的图像。这里的“识别”是获得如能够由文字信息取得部106取得文字信息的特征信息的处理。例如,该识别包含识别图像内的对象物的形状或颜色或运动等的处理、和识别图像内的文字的处理等。近年来,面部检测的技术等得到发展,还已知有应用了该技术的宠物检测等。而且,可以具有在手势识别中使用的人体的器官检测,当存在成为被摄体的动植物的器官形状或整体形状、衣服或配件的形状识别等时,能够应对较多的场景。可以使用到对象物的距离信息或大小信息。由此,即使是类似的形状,虫的种类的确定也能够变得准确。有时成为能够根据运动是快还是慢来判定对象物的特征的有力信息。鸟等通过振翅方式(振翅周期等)来确定类别。此外,根据振翅特有的形状或摄影时的仰角或与地面和水面的位置关系,可以转换为“飞”或“跑”或“游泳”这样的动作的单词。此外,该识别包含对取得图像时的到对象物的距离、取得图像的位置、取得图像的时刻等能够进行数值化的信息进行识别的处理。文字信息取得部106使用由图像识别部104识别出的结果和后述的图像数据库(图像辞典)3102,取得文字信息。例如,图像识别部104能够根据从对象物的图像获得的颜色或特征或大小、或摄影时的相关信息,检索成为候选的单词。例如,检测花瓣的形状的特征,如果颜色是粉色,则即使无法识别至是“樱花”,也能够根据图像的特征进行图像辞典检索,检索“粉色”、“花”这样的文本信息,或者也使用计时部320的日期时刻信息,转换为“4月”、“春”这样的文字,或者使用对象物的画面内的大小或距离信息,进行向“一个花的尺寸是2.5cm”这样的文本信息的转换。如果进行了这样的识别,则文字信息取得部106能够根据对象物的识别结果,取得对象物的名称等文字信息。另外,由于对象物还有时是广告牌或海报或书刊或杂志、CD或LP,所以如文字这样,可以并用光学文字识别(OCR:optical character recognition)的技术(通过从活字的文件的图像来与包含所需的识别模式的模板进行比较,发现匹配)。当假定了发送目的地处的图像检索的技术,并发送全部图像时,特别是,当想要发送用于判定上述运动的动态图像时,通信的负荷会增大。因此,这里,在网络上等开发了各种方法,建立了较多的技术,以能够享受各种检索结果的文本检索为前提来提高检索性,并且,以文字概括图像,容易进行用户的确认,并且,减少待发送的数据量,并能够以迅速且容易、便利的使用方便性获得引导信息。面部检测或OCR的技术被芯片化、且被小型化、高速化,在拍摄时检测出这样的部分更能够概括出面部的运动、或基于面部与人体器官的关系的姿势、运动模式、或文字的变化等的判定。“图像的特征信息”是图像的识别模式、表示由此检测出的物品的信号、其数量或大小、进一步检测出的物品的颜色或运动等。可以包含用于检索表情、姿势或运动的特征变化信息、或者能够换而称作特征信息的变化的信息。特别是,由于能够根据装置的运动和图像的运动来判定正确的对象物的运动方式,所以如果不是本方式,则无法准确判定正在摇晃的花的摇晃周期等。
通信部108与引导信息检索装置200进行通信。例如,通信部108将由文字信息取得部106取得的文字信息发送到引导信息检索装置200。此外,通信部108接收由引导信息检索装置200检索出的信息。该文字信息是将图像的识别转换为人类使用的语言的单词后得到的,可以是颜色或形状本身,也可以是还包含运动等概括为如“快速飞的虫”这样的单词串,也可以是“快速”、“飞”、“虫”这样的单词的罗列。如上所述,该“快速”这样的单词也能够仅根据图像的运动与装置的运动的差异来进行正确的判定。如果能够在后述的“动态图像辞典”中将图像(特征)的时间变化与单词对应起来,则能够实现这样的运动的判定。这时的运动的判定优选为通过减去或者消除装置、设备的运动而进行了校正、考虑后的图像的时间变化。这里的图像可以换而称作对象物图像的特征信息的时间变化。
引导信息检索装置200具有:存储部202、检索部204、提示部206和通信部208。
存储部202将文字信息与各种信息关联起来存储。与文字信息相关联的各种信息是向用户引导拍摄例如对象物时的摄影方法的引导信息。
检索部204从存储部202检索与由通信部208接收到的文字信息对应的信息。另外,检索部204可以构成为也从除了存储部202以外取得信息。例如,检索部204可以将由通信部208接收到的文字信息用作检索关键词,通过检索网站等中的检索来取得信息。
提示部206向用户提示由检索部204检索出的信息。该提示通过例如显示来执行。
通信部208与图像处理装置100进行通信。例如,通信部208接收从图像处理装置100发送的文字信息。此外,通信部208根据需要将由检索部204检索出的信息发送到图像处理装置100。
图2是示出图1所示的图像处理装置100和引导信息检索装置200的应用例即通信系统的结构的图。图2所示的通信系统具有:摄像装置300、便携终端400和服务器500。摄像装置300和便携终端400构成为相互通信。此外,便携终端400和服务器500构成为相互通信。
摄像装置300具有作为图像处理装置100的功能,并具有:控制部302、摄像部304、显示部306、目镜显示部308、记录部310、操作部312、触摸面板314、姿势检测部316、位置检测部318、计时部320和通信部322。摄像装置300是例如数字照相机或智能手机这样的具有拍摄功能的各种设备。
控制部302由例如CPU或ASIC构成。控制部302进行影像装置300的各个部的控制。该控制部302具有:图1所示的图像处理装置100的图像取得部102、图像识别部104和文字信息取得部106。此外,控制部302具有:摄像控制部3023、图像处理部3024、显示控制部3025和通信控制部3026。摄像控制部3023控制摄像部304的拍摄动作。图像处理部3024对于由摄像部304取得的图像实施显示或记录所需的图像处理。该图像处理包含白平衡校正、灰度校正、颜色校正等与画质相关的校正、尺寸调整处理、压缩处理、解压缩处理等。显示控制部3025控制各种图像向显示部306的显示。通信控制部3026进行经由通信部322来进行摄像装置300与外部设备之间的通信时的控制。摄像装置300利用通信控制部3026,以自由通信的方式与便携终端400连接。
摄像部304拍摄被摄体并取得与被摄体相关的图像(图像数据)。该摄像部304具有:摄影镜头3041、摄像元件3042和模拟/数字(AD)转换部3043。摄影镜头3041使来自被摄体的光束会聚到摄像元件3042上。摄像元件3042具有受光面。在受光面上配置有像素。像素例如是光电二极管,输出与入射光的光量相应的电信号(图像信号)。A/D转换部3043将由摄像元件3042获得的模拟的图像信号转换为数字的图像信号(图像数据)。
显示部306是例如液晶显示器或有机EL显示器,且设置于例如摄像装置300的背面。该显示部306根据各种图像数据来显示图像。目镜显示部308是例如液晶显示器或有机EL显示器,且是设置于例如摄像装置300的背面的目视型的显示部。与显示部306同样,该目镜显示部308根据各种图像数据来显示图像。在显示部306或者目镜显示部308的显示中使用的图像数据是通过摄像部304的拍摄而获得的图像数据或记录在记录部310中的图像数据。
记录部310是例如闪存,将图像数据等记录为文件。在记录部310中构建了连接目的地数据库(DB)3101和图像数据库(DB)3102。此外,记录部310的记录区域的一部分是设备种类信息记录部3103。连接目的地数据库3101是存储了与成为摄像装置300的通信对象的设备(便携终端400)进行通信所需的地址信息等的数据库。图像数据库3102是存储了图像识别部104的图像识别所需的各种对象物的特征量数据等的数据库。设备种类信息记录部3103是用于记录与摄像装置300相关的设备种类信息的记录区域,该摄像装置300拍摄了成为取得摄像装置300的设备种类名称的信息、摄影镜头3041的特性信息(焦距等)这样的引导信息的对象的图像。另外,记录部310可以内置于摄像装置300中,也可以相对于摄像装置300自由装卸。
操作部312是用于供用户进行摄像装置300的操作的机械式的操作部件。例如包含释放按钮和电源按钮作为操作部312。释放按钮是用于供用户指示摄影动作的执行的按钮。电源开关是用于供用户指示摄像装置300的电源的接通或断开的开关。
触摸面板314形成在例如显示部306的显示画面上,检测用户的触摸操作。控制部302进行与由触摸面板314检测出的触摸操作相应的处理。例如,代替释放按钮而使用了触摸面板314。此外,触摸面板314用于供用户指定显示在显示部306的显示画面上的图像的特定部分。
姿势检测部316是例如3轴加速度传感器或陀螺仪传感器,检测摄像装置300的姿势或运动。能够利用姿势检测部316,输出装置的仰角信息。此外,还能够判定在高的位置开的花和在低的位置开的花的不同,还能够在如上所述地飞的物体或天体等的判定中使用。此外,为了准确识别对象物的运动而需要校正设备的运动部分并进行判定,为此,这样的传感器也非常重要。位置检测部318利用例如GPS,检测摄像装置300的当前位置。由此,还能够进行地方或高山部、山间部、森林部、田园部、城市部、海边、湖沼或河川的附近这样的分类。这样的分类成为对于动植物的类别判定等中的有效的单词提取极其有效的信息。另外,可以设为能够由位置检测部318检测摄像装置300的方位。在作为对天体等重要的信息,在海边进行拍摄的情况下,也能够灵活运用于提取是正在看海还是正在看陆地这样的信息。特别是对于地图上的特定点(地标)的确定是必须的。计时部320取得当前时刻(包括日期时刻)。当然,结合位置信息,成为季节等信息。在天体的情况下,这成为与方位密切相关的关系。这样的信息全部成为图像确定用的单词或文本信息导出用的重要的辅助信息。如例示了这些信息的、改读作“山间部”、“飞”、“春天”这样的文本的也是在图像数据库3102中准备的辞典。通信部322与通信部108对应,依照通信控制部3026的控制来与便携终端400进行通信。通信部322是例如无线LAN接口。通信部322可以是USB等有线接口。
便携终端400具有作为引导信息检索装置200的功能,并具有:控制部402、记录部404、显示部406、触摸面板408、通信部401和通信部412。便携终端400是智能手机等具有信息的提示功能的各种设备。图2的便携终端400不具有摄像部,但是可以具有摄像部。
控制部402由例如CPU构成。该控制部402进行便携终端400的各个部的控制。该控制部402具有图1所示的引导信息检索装置200的检索部204。该检索部204从图像辞典(图像数据库3102)提取和检索从图像获得的特征信息或与上述辅助信息对应的文本、文字或单词等。检索是结合从对应表获得的结果的技术,但是也可以进行从目的地的地域信息和日期信息中导出季节等的特定运算,并提取。此外,控制部402具有通信控制部4022。通信控制部4022进行与摄像装置300或者服务器500的通信时的控制。
记录部404例如是硬盘。在该记录部404中构建了作为存储部202的引导信息数据库(DB)4041。引导信息数据库4041是用于引导信息的检索的数据库。将引导信息与各种文字信息对应起来。这可以是所谓集体智慧的世界,有时在网络服务即Q&A网站、博客等SNS中写入有各种技术诀窍(know-how)。可以记录这些信息,也可以重新网络检索此处写入的建议并显示或者再现。可以通过文字进行显示,也可以是声音再现。
作为提示部206发挥作用的显示部406是例如液晶显示器或有机EL显示器。该显示部406根据各种图像数据来显示图像。触摸面板408形成在显示部406的显示画面上,检测用户的触摸操作。控制部402进行与由触摸面板408检测出的触摸操作相应的处理。
通信部401依照通信控制部4022的控制,与摄像装置300进行通信。通信部412依照通信控制部4022的控制,与服务器500进行通信。通信部401例如是无线LAN接口。此外,通信部412例如是移动电话线路。
服务器500具有:控制部502、记录部504和通信部506。
控制部502由例如CPU构成,进行服务器500的各个部的控制。该控制部502具有通信控制部5021。通信控制部5021进行与便携终端400的通信时的控制。记录部504例如是硬盘。在该记录部504中存储有由检索部204检索的各种信息。通信部506依照通信控制部5021的控制,与便携终端400进行通信。
以下,说明本实施方式的通信系统的动作。假设用户带着摄像装置300和便携终端400。在该状态下,用户为了拍摄被摄体(在图中为花),如图3A所示,将摄像装置300朝向被摄体。这里,假设用户想要拍摄樱花。
这时,摄像装置300的图像识别部104从经由摄像部304获得的图像提取被摄体等的特征信息。特征信息例如是被摄体的形状、颜色、从摄像装置300到被摄体的距离等能够进行文字信息化的各种信息。能够根据距离或画面内的大小来估计对象物的大小,由于也一起检索这样的信息,不会发生如弄错扶桑和樱花的状况。特征信息不限于从图像取得。例如,在由位置检测部318取得了位置信息,或者由计时部320取得了当前时刻的情况下,可以将这些当前位置信息和当前时刻信息作为特征信息。在特征信息的提取以后,图像识别部104将提取出的特征信息发送到文字信息取得部106。文字信息取得部106从由图像识别部104识别出的各种特征信息中取得文字信息。例如,在图3B的例子中,提取表示被摄体的名称的文字信息即“花”、表示被摄体的颜色的文字信息即“桃红色”。此外,还提取表示背景的文字信息即“蓝天”等。此外,如果是如距离信息这样的被数值化后的信息,则将该数值提取为文字信息。此外,可以从装置的仰角信息中提取和检索表示是较高的树的花的文字。
在取得文字信息以后,通信控制部3026利用通信部322,将由文字信息取得部106取得的文字信息发送到便携终端400。这时,通信控制部3026可以将在设备种类信息记录部3103中记录的设备种类信息也作为文字信息发送到便携终端400。
在从摄像装置300取得文字信息后,如图3C所示,便携终端400的检索部204将从摄像装置300取得的文字信息作为检索关键词,从引导信息数据库4041中检索引导信息。例如,如果被摄体的名称是“花”且摄像装置300的设备种类名称是“XX-Z”,则检索部204利于“由‘XX-Z’拍摄‘花’”、“桃红色”等检索关键词进行检索。如上所述,检索部204可以通过与服务器500的通信,在网络上进行检索。
在引导信息的检索结束后,如图3D所示,便携终端400的控制部402使显示部406显示所检索出的引导信息。由此,作为引导信息,用户能够得知使用了设备种类“XX-Z”的花的拍摄方法。在本实施方式中,摄像装置300仅是取得用于进行引导信息的检索的文字信息并发送到便携终端400,不进行引导信息的检索。而且,摄像装置300仅是发送文字信息。因此,摄像装置300中的通信的负荷变小很多。
以下,说明本实施方式的通信系统的动作的详细内容。图4是示出了便携终端300的控制的流程图。依照预先记录在控制部302中的程序进行图4的处理。
在图4中,控制部302判定电源开关是否接通(步骤S101)。在步骤S101中判定为电源开关未接通的情况下,控制部302使摄像装置300转移到待机状态。在待机状态下,仅执行步骤S101的判定等摄像装置300中所需的最小限的功能。
在步骤S101中判定为电源开关已接通的情况下,控制部302判定摄像装置300的动作模式是否是拍摄模式(步骤S102)。拍摄模式是用于拍摄记录用的图像的动作模式。另外,摄像装置300的动作模式通过例如用户对操作部312的操作或触摸面板314的操作来确定。在步骤S102中判定为摄像装置300的动作模式不是拍摄模式的情况下,控制部302进行与拍摄模式以外的动作模式对应的处理。拍摄模式以外的动作模式是例如再现模式。省略再现模式的详细说明。
在步骤S102中判定为摄像装置300的动作模式是拍摄模式的情况下,控制部302进行实时取景图像显示(步骤S103)。实时取景图像显示是以下动作:使显示部306实时地显示通过摄像部304的连续动作而获得的图像。在实时取景图像显示时,控制部302利于图像取得部102取得在实时取景图像显示中由摄像部304获得的图像。并且,控制部302利用图像识别部104,从由图像取得部102取得的图像中提取特征信息(步骤S104)。
接着,控制部302判定用户是否请求了引导信息(步骤S105)。例如,在通过用户对操作部312的操作或触摸面板314的操作而请求了引导信息的情况下,判定为用户请求了引导信息。在步骤S105中判定为用户未请求引导信息的情况下,控制部302跳过步骤S106~S109的处理。另一方面,在步骤S105中判定为用户请求了引导信息的情况下,控制部302利用文字信息取得部106,从由图像识别部104提取出的特征信息取得文字信息(步骤S106)。然后,控制部302判定是否已取得文字信息(步骤S107)。在步骤S107中判定为未能取得文字信息的情况下,控制部302向用户进行未能够取得文字信息、即无法取得引导信息的消息的警告(步骤S108)。使用例如显示或声音来进行警告。在警告以后,控制部302使处理返回到步骤S110。
在步骤S107中判定为已取得文字信息的情况下,控制部302利用通信控制部3026,将由文字信息取得部106取得的文字信息发送到便携终端400(步骤S109)。当然,还考虑如仅发送图像信息中的颜色或形状或大小或距离分布等能够转换为文字的信息,并将图像信息本身作为辅助信息发送的应用。在该情况下,图像信息可以仅是轮廓,或者仅是颜色分布。还可以通过文字信息发送辅助获得的时刻、地点、温度、湿度、气压、方位或斜率等。例如,如果从温度信息转换为“炎热时”,将仰角信息转换为“天空很高”等而进行发送,则各种文本检索、站内检索、自然语言检索变得容易。拍摄模式等的文本化也很重要,如果根据模式名称或摄影参数,利于文字发送“微距拍摄”、“广角拍摄”等,则信息量增加,能够进行信息的范围收窄,容易检索相同的摄影方法下的摄影结果等。
在步骤S105中判定为用户未请求引导信息的情况下,在步骤S108或者S109以后,控制部302判定是否存在用户的摄影操作(步骤S110)。摄影操作是例如用户对释放按钮的按压操作或使用了触摸面板314的触摸释放操作。在步骤S110中判定为不存在用户的摄影操作的情况下,控制部302将处理返回到步骤S101。
在步骤S110中判定为存在用户的摄影操作的情况下,控制部302进行摄影动作(步骤S111)。摄影动作是对摄像部304进行控制来取得记录用的图像数据的动作。在摄影动作的执行以后,控制部302利用图像处理部3024,对通过摄影动作获得的图像数据进行图像处理。并且,控制部302将图像处理以后的图像数据记录在记录部310中(步骤S112)。然后,控制部302将处理返回到步骤S101。
图5是示出了便携终端400的控制的流程图。依照预先记录在控制部402中的程序进行图5的处理。
在图5中,控制部402判定是否使电源接通(步骤S201)。在步骤S201中判定为未使电源接通的情况下,控制部402使便携终端400转移到待机状态。在待机状态下,仅执行步骤S201的判定等的便携终端400中所需的最小限的功能。
在步骤S201中判定为使电源接通的情况下,控制部402使便携终端400的电源接通。并且,控制部402判定是否在与摄像装置300通信中(步骤S202)。在步骤S202中判定为未在与摄像装置300通信中的情况下,控制部402进行与除了与摄像装置300的通信模式以外的动作模式相应的处理。省略除了通信模式以外的动作模式的详细说明。
在步骤S202中判定为在与摄像装置300通信中的情况下,控制部402判定是否从摄像装置300接收到了文字信息(步骤S203)。在步骤S203中判定为未接收到文字信息的情况下,控制部402将处理返回到步骤S201。
在步骤S203中判定为接收到文字信息的情况下,控制部402利用检索部204,进行使用了接收到的文字信息的引导信息的检索(步骤S204)。如上所述,引导信息不仅来自引导信息数据库4041,还能够在服务器500的站点上进行检索而得到。在引导信息的检索以后,控制部402判定是否检索到了引导信息(步骤S205)。在步骤S205中判定为未能进行引导信息的检索的情况下,控制部402进行未能取得引导信息的消息的警告(步骤S206)。使用例如显示或声音来进行警告。在警告以后,控制部402将处理转移到步骤S201。
在步骤S205中判定为已检索出引导信息的情况下,控制部402例如图3D那样使显示部406显示所检索出的引导信息(步骤S207)。该引导信息可以是摄影时、观察时的建议,不局限于在摄影、观察时获得的对象物的名称或解说,还可以是告知位于其对面的物体,或者告知历史的背景,或者引导与艺术作品的关系。除了由便携终端400显示以外,可以能够由摄像装置300显示,还可以在周边存在相关设备的情况或者远程存在相关设备的情况下,以在该处进行显示的方式通过无线传输。例如,如果在以下系统中使用,则有时也对会议等有用:在设置于工作场所的大型监视器上,与在出差目的地拍摄到的图像一起,将与此时拍摄到的图像相关的信息关联起来进行显示的系统。将在婚礼场所的拍摄时拍摄到的新娘的花束的花是什么花投影在投影仪上。
在显示引导信息以后,控制部402判定是否结束引导信息的显示(步骤S208)。例如,在通过用户对触摸面板408的操作而请求了引导信息的显示的结束的情况下,判定为结束引导信息的显示。在步骤S208中判定为未结束引导信息的显示的情况下,控制部402使处理返回到步骤S207并继续进行引导信息的显示。在步骤S208中判定为结束引导信息的显示的情况下,控制部402将处理返回到步骤S201。
如以上所说明那样,根据本发明的实施方式,能够使用图像的识别结果来取得引导信息。这里,在本实施方式中,由引导信息检索装置200取得引导信息。因此,无需预先将用于取得引导信息的信息存储在图像处理装置100中。此外,在图像处理装置100中产生的通信仅是向便携终端400发送文字信息时的通信。因此,能够减轻图像处理装置100中的通信的负荷。
接着,说明本实施方式的变形例。
[变形例1]
在上述的实施方式中,使作为引导信息检索装置200的便携终端400的显示部406显示引导信息。与此相对,虽然产生与作为图像处理装置100的摄像装置300的通信,但是,也可以使摄像装置300的显示部306或者目镜显示部308显示由便携终端400取得的引导信息。特别是,在使目镜显示部308显示引导信息的情况下,被显示的引导信息不受外部光的影响。因此,用户能够在清晰的状态下观察引导信息。
[变形例2]
图3A~图3C是用户分别带着摄像装置300和便携终端400的例子。与此相对,也可以如图6A~图6C所示,使用摄像装置300和便携终端400。
图6A示出变形例2的摄像装置300的外观。图6A所示的摄像装置300是“更换镜头状”的摄像装置。在更换镜头状的壳体的内部设有图2所示的摄像装置300的各个处理块。另外,在更换镜头状的摄像装置300的情况下,无需设置图2所示的全部处理块。例如,可以不具有(也可以具有)显示部306、目镜显示部308、触摸面板314、姿势检测部316、位置检测部318、计时部320。另一方面,图6B示出便携终端400的外观。变形例2的便携终端400例如是智能手机,具有与图2所示的便携终端400相同的结构。
如图6C所示,变形例2的摄像装置300经由附件600而装配于便携终端400。在这样的结构中,将由摄像装置300拍摄的图像发送到便携终端400。即,摄像装置300和便携终端如1台数字照相机那样进行动作。
图7是示出了变形例2的摄像装置300的控制的流程图。依照预先记录在控制部302中的程序进行图7的处理。
在图7中,控制部302判定电源是否接通(步骤S301)。在例如摄像装置300中设有电源开关的情况下,判定电源开关是否接通。在步骤S301中判定为电源未接通的情况下,控制部302使摄像装置300转移到待机状态。
在步骤S301中判定为电源已接通的情况下,控制部302利用通信控制部3026,将实时取景图像发送到便携终端400(步骤S302)。另外,此时,控制部302利用图像取得部102取得由摄像部304获得的实时取景图像。并且,控制部302利用图像识别部104,从由图像取得部102取得的图像提取特征信息(步骤S303)。
接着,控制部302判定用户是否请求了引导信息(步骤S304)。例如,在接收到来自便携终端400的引导请求的情况下,判定为用户请求了引导信息。在步骤S304中判定为用户未请求引导信息的情况下,控制部302跳过步骤S305~S308的处理。另一方面,在步骤S304中判定为用户请求了引导信息的情况下,控制部302利用文字信息取得部106,从由图像识别部104提取的特征信息中取得文字信息(步骤S305)。然后,控制部302判定是否已取得文字信息(步骤S306)。在步骤S306中判定为未能取得文字信息的情况下,控制部302利用通信控制部3026,将表示未能取得文字信息的消息的警告信息发送到便携终端400(步骤S307)。在警告信息的发送以后,控制部402将处理转移到步骤S309。文字信息的取得并没有那么困难,作为季节的信息,可以从进行拍摄的时刻转换为“春”或者“初夏”,也能够立即转换为“清晨”、“傍晚”这样的文字。可以仅是“黄色”这样的颜色,或者可以为仅是“圆的”这样的形状。也能够将“明亮”或者“正在运动”等称作通过拍摄而简单获得的信息。多数时候在摄影时还能够获得距离信息,而且,这样的经时变化等也可以是图像信息。这类的文字或文本的提取或检索如在图1的说明中所述。即,该识别不仅包含识别在图像中包含的对象物图像的颜色及其分布、对象物图像的轮廓或对比度变化等的所谓图像特征点的坐标信息等的处理,还包含识别取得图像时的到对象物的距离、取得图像的位置、取得图像的时刻等能够进行数值化的信息的处理。文字信息取得部106使用由图像识别部104识别的结果和后述的图像数据库(图像辞典)3102来取得文字信息,但是,图像识别部104不仅能够检索从对象物的图像获得的颜色或特征或大小,还能够从在摄影时获得的相关信息(辅助信息)中检索成为候选的单词。例如,检测花瓣的形状的特征,如果颜色是粉色,则即使无法识别至是“樱花”,也能够根据图像的特征进行图像辞典检索,检索“粉色”、“花”这样的文本信息,或者能够根据通过动态图像获得的运动的频率,提取“摇摇晃晃”或者“剧烈”这样的修饰运动的语言。而且,还使用计时部320的日期时刻信息,转换为“4月”、“春”这样的文字,或者使用对象物的画面内的大小或距离信息,能够转换为“一个花的尺寸为2.5cm”这样的文本信息。如果进行了这样的识别,则文字信息取得部106能够根据对象物的识别结果,从专用的数据库中检索对象物的名称等文字信息,或者能够组合若干个信息来通过特定的流程进行运算或者提取或者取得。这样的辞典可以是“图像识别部”或“文字信息取得部”的一部分,也可以与它们协作来发挥效果。
在步骤S306中判定为已取得文字信息的情况下,控制部302利用通信控制部3026,将由文字信息取得部106取得的文字信息发送到便携终端400(步骤S308)。
在步骤S304中判定为用户未请求引导信息的情况下,在步骤S307或者S308以后,控制部302判定是否存在来自便携终端400的摄影指示(步骤S309)。在步骤S309中判定为不存在摄影指示的情况下,控制部302将处理返回到步骤S301。
在步骤S309中判定为存在摄影指示的情况下,控制部302进行摄影动作(步骤S310)。在摄影动作的执行以后,控制部302利用图像处理部3024,对通过摄影动作获得的图像数据进行图像处理。并且,控制部302利用通信控制部3026,将图像处理后的图像数据发送到便携终端400(步骤S311)。以后,控制部302将处理返回到步骤S301。
图8A和图8B是示出了变形例2的便携终端400的控制的流程图。依照预先记录在控制部402中的程序进行图8A和图8B的处理。
在图8A中,控制部402判定是否使电源接通(步骤S401)。在步骤S401中判定为未使电源接通的情况下,控制部402使便携终端400转移到待机状态。
在步骤S401中判定为使电源接通的情况下,控制部402使便携终端400的电源接通。并且,控制部402判定便携终端400的动作模式是否是拍摄模式(步骤S402)。动作模式的设定通过例如用户对触摸面板408的操作来进行。在步骤S402中判定为动作模式不是拍摄模式的情况下,控制部402进行与拍摄模式以外的动作模式相应的处理。省略拍摄模式以外的动作模式的详细说明。
在步骤S402中判定为动作模式是拍摄模式的情况下,控制部402判定是否在与摄像装置300通信中(步骤S403)。在步骤S403中判定为未在与摄像装置300通信中的情况下,控制部402向用户警告便携终端400与摄像装置300未在通信中(步骤S404)。然后,控制部402将处理返回到步骤S401。
在步骤S403中判定为在与摄像装置300通信中的情况下,控制部402判定是否从摄像装置300接收到实时取景图像(步骤S405)。在步骤S405中判定为未接收到实时取景图像的情况下,控制部402将处理返回到步骤S401。在步骤S405中判定为接收到实时取景图像的情况下,控制部402使显示部406显示所接收到的实时取景图像(步骤S406)。
接着,控制部402判定用户是否请求了引导信息(步骤S407)。例如,在通过用户对触摸面板408的操作而请求了引导信息的情况下,判定为用户请求了引导信息。在步骤S407中判定为用户未请求引导信息的情况下,控制部402跳过步骤S408~S414的处理。另一方面,在步骤S407中判定为用户请求了引导信息的情况下,控制部402利用通信控制部4022,向摄像装置300发送引导请求(步骤S408)。
在引导请求的发送以后,控制部402判定是否从摄像装置300接收到文字信息(步骤S409)。在步骤S409中判定为未接收到文字信息的情况下,控制部402判定是否从摄像装置300接收到警告信息(步骤S410)。在步骤S410中判定为未接收到警告信息的情况下,控制部402将处理返回到步骤S409并等待文字信息的接收。在步骤S410中判定为接收到警告信息的情况下,控制部402向用户警告未能取得引导信息的消息(步骤S411)。使用例如显示或声音来进行警告。在警告以后,控制部402使处理转移到步骤S415。
在步骤S409中判定为接收到文字信息的情况下,控制部402利用检索部204,进行使用接收到的文字信息的引导信息的检索(步骤S412)。步骤S412的引导信息的检索与步骤S204的引导信息的检索同样进行。在引导信息的检索以后,控制部402判定是否检索到引导信息(步骤S413)。在步骤S413中判定为未检索到引导信息的情况下,控制部402使处理转移到步骤S411并进行警告。
在步骤S413中判定为已检索到引导信息的情况下,控制部402例如图3D那样使显示部406显示所检索出的引导信息(步骤S414)。
在步骤S407中判定为用户未请求引导信息的情况下,在步骤S411或者S414以后,控制部402判定是否存在用户的摄影操作(步骤S415)。摄影操作例如是由用户进行的使用了触摸面板408的触摸释放操作。在步骤S415中判定为不存在用户的摄影操作的情况下,控制部402将处理返回到步骤S401。
在步骤S415中判定为存在用户的摄影操作的情况下,控制部302利用通信控制部4022,向摄像装置300发送摄影指示(步骤S416)。在摄影指示的发送以后,控制部402判定是否从摄像装置300接收到图像数据(步骤S417)。控制部402反复进行步骤S417的判定,直到在步骤S417中判定为从摄像装置300接收到图像数据为止。在规定时间期间未能接收到图像数据的情况下,处理可以转移到步骤S401。
在步骤S417中判定为从摄像装置300接收到图像的情况下,控制部402将接收到的图像数据记录在记录部404中(步骤S418)。然后,控制部402将处理返回到步骤S401。
即使是如上所说明的变形例2的结构,也能够获得与上述实施方式相同的效果。此外,摄像装置300与便携终端400相比,能够提高摄像元件和摄影镜头的设计的自由度。因此,能够设置比便携终端400更高功能的摄像部。通过设置高功能的摄像部,摄像装置300能够拍摄比便携终端400更高画质的图像。此外,通过向便携终端400发送这样的高画质的图像,能够使便携终端400的显示部406显示高画质的实时取景图像,或者使记录部404记录高画质的图像。
[第2实施方式]
接着,说明本发明的第2实施方式。图9是包含本发明的第2实施方式的图像处理装置的通信系统的功能框图。图10是示出图9所示的图像处理装置100和引导信息检索装置200的应用例即通信系统的结构的图。关于图9和图10,仅说明与第1实施方式不同的部分。如图9和图10所示,在第2实施方式中,将文字信息取得部106设置于引导信息检索装置200(便携终端400)。其他与图1相同。在这样的结构中,第2实施方式的图像处理装置100进行图像识别部104中的对象物的识别。并且,引导信息检索装置200进行文字信息的取得和引导信息的检索。
在如以上所说明的本实施方式中,也能够使用图像的识别结果来取得引导信息。此外,图像处理装置100产生的通信仅是向引导信息检索装置200发送特征信息时的通信。因此,能够减轻图像处理装置100中的通信的负荷。
另外,可以将在第2实施方式中说明的结构与第1实施方式的变形例1和变形例2的结构组合起来。
在上述的实施方式中强调说明了作为图像处理装置的侧面,但是上述实施方式的技术也可以作为图像显示装置、检查装置、警告装置,应用于除了消费者用途以外的例如产业用设备或医疗用设备的领域。文本库中的检索时的信息量的丰富化、或信息的收窄信息能够提高显示或检查或警告时的精度。即使不全部入手智能手机等便携通信终端,也能够采用不知不觉发送来辅助信息这样的规格。在无法很好地进行检查的情况等下,可以根据图像或根据摄影时的信息判定失败检查图像等,判定为“失败”等并进行发送,这样的应用是在本申请的技术覆盖的范围内,如果取出终端,或者显示用于防止失败的建议,则很方便。
[第3实施方式]
接着,说明本发明的第3实施方式。图11是本发明的第3实施方式的摄像装置的功能框图。摄像装置700具有:摄像部702、切换部704、记录部706、图像识别部708、检索部710和提示部712。
摄像部702拍摄对象物,取得对象物涉及的图像。切换部704通过切换摄像装置700的动作模式,切换由摄像部702取得的图像的用途。摄像装置700具有拍摄模式和引导信息检索模式,作为动作模式。在拍摄模式下,通过用户的摄影操作,取得记录用的图像。切换部704在拍摄模式下将由摄像部702获得的图像输入到记录部706,以便能够记录由摄像部702获得的图像。另一方面,在引导信息检索模式下,检索引导信息,向用户提示所检索出的引导信息。切换部704在引导信息检索模式下将由摄像部702获得的图像输入到图像识别部708,以便能够进行引导信息的检索。
记录部706记录在拍摄模式时从切换部704输入的图像。
图像识别部708识别在引导信息检索模式时由切换部704输入的图像。例如,该识别包含识别图像内的对象物的形状或颜色等的处理、和识别图像内的文字的处理、运动的特征等。此外,该识别包含对取得图像时的到对象物的距离、取得图像的位置、取得图像的时刻等能够进行数值化的信息进行识别的处理。
检索部710使用图像识别部708的识别结果来检索引导信息。引导信息是向用户引导拍摄例如由图像识别部708识别的对象物时的摄影方法的引导信息。此外,该引导信息可以是摄影时、观察时的建议,不局限于在摄影、观察时获得的对象物的名称或解说,也可以是告知位于其对面的物体,或者告知历史的背景,或者引导与艺术作品的关系。
提示部712向用户提示由检索部710检索出的信息。该提示例如通过显示来执行。
图12是示出包含作为图11所示的摄像装置的应用例的摄像装置的通信系统的结构的图。如图12所示,通信系统具有:摄像装置300、便携终端400和服务器500。摄像装置300和便携终端400构成为相互通信。此外,便携终端400和服务器500构成为相互通信。
摄像装置300具有作为摄像装置700的功能,并具有:控制部302、摄像部304、显示部306、目镜显示部308、记录部310、操作部312、触摸面板314、姿势检测部316、位置检测部318、计时部320和通信部322。摄像装置300是例如数字照相机或智能手机这样的具有拍摄功能的各种设备。以下,仅说明与图2不同的部分。
控制部302由例如CPU或ASIC构成。控制部302进行摄像装置300的各个部的控制。该控制部302具有:图11所示的摄像装置700的切换部704、图像识别部708和检索部710。此外,控制部302具有:摄像控制部3023、图像处理部3024、显示控制部3025和通信控制部3026。
记录部310是例如闪存,将图像数据等记录为文件。在记录部310中构建了连接目的地数据库(DB)3101、图像数据库(DB)3102和引导信息数据库(DB)3104。此外,记录部310的记录区域的一部分是操作按钮数据记录部3105。连接目的地数据库3101是存储了与成为摄像装置300的通信对象的设备(便携终端400)进行通信所需的地址信息等的数据库。图像数据库3102是存储了图像识别部708的图像识别所需的各种对象物的特征量数据等的数据库。引导信息数据库3104是用于引导信息的检索的数据库。引导信息数据库3104包含静态图像辞典和动态图像辞典。静态图像辞典是将静态图像涉及的特征信息和引导信息对应起来进行存储的辞典。静态图像涉及的特征信息是不伴随有时间变化的信息。该不伴随有时间变化的信息是指例如在各个拍摄时刻获得的对象物的形状这样的信息。动态图像辞典是将动态图像涉及的特征信息和引导信息对应起来进行存储的辞典。动态图像涉及的特征信息是伴随有时间变化的信息。该伴随有时间变化的特征是指例如跨越多个拍摄时刻的对象物的形状的变化这样的信息。或者,可以将“伴随有时间变化的特征”换而称作对象物图像的特征信息的时间变化。作为据此检索出的文字信息、单词,可以是形容词或副词,设想的动态图像辞典可以是将对象物图像的位置的时间变化或频率等与“摇摇晃晃”或“哆哆嗦嗦”等拟态词关联起来的辞典。当然,图像的摇晃方式可以根据是对象物整体还是一部分,是垂直方向还是水平方向,来变更文字信息。操作按钮数据记录部3105是用于记录使显示部306显示例如图标所需的图标数据的记录区域,该图标用于供用户能够视觉辨认触摸面板314的软件按钮。另外,记录部310可以内置于摄像装置300中,也可以相对于摄像装置300自由装卸。
便携终端400具有:控制部402、记录部404、显示部406、触摸面板408、通信部401和通信部412。便携终端400是智能手机等各种设备。图12的便携终端400不具有摄像部,但是也可以具有摄像部。
控制部402由例如CPU构成。该控制部402进行便携终端400的各个部的控制。该控制部402具有:检索部4021和通信控制部4022。检索部4021具有与图11所示的检索部710相同的功能。即,检索部4021使用从摄像装置300发送来的信息来检索引导信息。检索部4021还能够从服务器500检索引导信息。通信控制部4022进行与摄像装置300或者服务器500的通信时的控制。
服务器500具有:控制部502、记录部504和通信部506。
以下,说明本实施方式的通信系统的动作。假设用户带着摄像装置300。在该状态下,用户为了拍摄对象物(在图中为花),如图13A所示,将摄像装置300朝向对象物。这里,假设用户想要拍摄樱花。
在本实施方式中,在例如摄像装置300的电源接通后,如图13B所示,在显示部306上显示至少2个图标。图标包含:摄影按钮306a和引导信息检索按钮306b。用户选择任意一个图标。例如,在选择了摄影按钮306a的情况下,执行拍摄。此外,在选择了引导信息检索按钮306b的情况下,执行引导信息的检索。在本实施方式中,引导信息的检索使用静态图像涉及的特征信息和动态图像涉及的特征信息来进行。另外,在用户带着便携终端400的情况下,引导信息的检索也能够通过便携终端400来进行。
在引导信息的检索中,如图13C所示,显示检索持续中图标306c。通过观察检索持续中图标306c,用户识别出当前处于引导信息的检索中。此外,在引导信息的检索中,还显示清除按钮306d。在由用户选择了清除按钮306d的情况下,清除存储了动态图像涉及的特征信息的履历信息。
在引导信息的检索中,向用户进行为了容易检索引导信息所需的建议。用户依照该建议来操作摄像装置300。并且,在引导信息的检索的结果为检索已成功的情况下,将被检索出的引导信息显示在显示部306上。此外,在检索失败的情况下,进行如图13C所示的未能检索显示306e。
这样,与摄影动作等独立地进行本实施方式的引导信息的检索。因此,能够减轻引导信息的检索涉及的摄像装置300的负荷。此外,在未选择引导信息检索按钮306b而是选择了摄影按钮306a的情况下,不经过引导信息的检索而进行摄影动作。在该情况下,也可减轻摄像装置300的负荷。此外,在摄影中不显示用户不需要的信息,也不会使用户感到麻烦。
以下说明本实施方式的摄像装置的动作的详细内容。图14是示出了便携终端300的控制的流程图。依照预先记录在控制部302中的程序进行图14的处理。
在图14中,控制部302判定电源开关是否接通(步骤S501)。在步骤S501中判定为电源开关未接通的情况下,控制部302使摄像装置300转移到待机状态。在待机状态下,仅执行步骤S501的判定等的摄像装置300中所需的最小限的功能。
在步骤S501中判定为电源开关已接通的情况下,控制部302判定摄像装置300的动作模式是否是拍摄模式(步骤S502)。拍摄模式是用于拍摄记录用的图像的动作模式。另外,摄像装置300的动作模式通过例如用户对操作部312的操作或触摸面板314的操作来确定。在步骤S502中判定为摄像装置300的动作模式不是拍摄模式的情况下,控制部302进行与拍摄模式以外的动作模式对应的处理。拍摄模式以外的动作模式是例如再现模式。省略再现模式的详细说明。
在步骤S502中判定为摄像装置300的动作模式是拍摄模式的情况下,控制部302进行实时取景图像显示(步骤S503)。实时取景图像显示是以下动作:使显示部306实时地显示通过摄像部304的连续动作而获得的图像。另外,实时取景图像显示可以在目镜显示部308中进行。在实时取景图像显示以后,控制部302使操作按钮重叠显示在实时取景图像上(步骤S504)。操作按钮包含摄影按钮306a和引导信息检索按钮306b。
在操作按钮的显示以后,控制部302判定是否由用户选择了引导信息检索按钮306b(步骤S505)。在步骤S505中判定为未选择引导信息检索按钮306b的情况下,控制部302使处理转移到步骤S507。在步骤S505中判定为选择了引导信息检索按钮306b的情况下,控制部302开始引导信息检索的处理(步骤S506)。之后将说明引导信息检索的详细内容。
在步骤S505中判定为未选择引导信息检索按钮306b的情况下或者在引导信息检索以后,控制部302判定是否存在用户的摄影操作(步骤S507)。摄影操作是例如用户对释放按钮的按压操作、使用了触摸面板314的触摸释放操作、摄影按钮306a的选择操作。在步骤S507中判定为不存在用户的摄影操作的情况下,控制部302将处理返回到步骤S501。
在步骤S507中判定为存在用户的摄影操作的情况下,控制部302进行摄影动作(步骤S508)。摄影动作是对摄像部304进行控制来取得记录用的图像数据的动作。在摄影动作的执行以后,控制部302利用图像处理部3024,对通过摄影动作获得的图像数据进行图像处理。并且,控制部302将图像处理后的图像数据记录在记录部310中(步骤S509)。以后,控制部302将处理返回到步骤S501。
图15是示出引导信息检索的处理的流程图。在图15中,控制部302判定是否处于引导信息检索所需的图像(判定图像)的取得中(步骤S601)。在步骤S601中判定为已经开始了判定图像的取得的情况下,控制部302使处理转移到步骤S603。在步骤S601中判定为未开始判定图像的取得的情况下,控制部302开始由摄像部304进行的反复的拍摄(步骤S602)。将通过反复拍摄而获得的图像数据作为判定图像取入到控制部302中。
在步骤S601中判定为已经开始判定图像的取得的情况下或者在步骤S602以后,控制部302对判定图像的颜色和亮度是否是适合引导信息的检索的条件进行判定(步骤S603)。颜色的条件是指,例如能够判别判定图像的颜色。此外,亮度的条件是指,例如判定图像的亮度超过了能够检测判定图像内的对象物的形状的规定值。在步骤S603中判定为判定图像的颜色和亮度是适合引导信息的检索的条件的情况下,控制部302使处理转移到步骤S605。在步骤S603中判定为判定图像的颜色和亮度不是适合引导信息的检索的条件的情况下,控制部302向用户警告以调整判定图像的颜色和亮度(步骤S604)。该警告通过例如显示部606的显示来进行。用户接受警告并操作摄像装置300。例如,用户调整光圈、快门速度、摄像元件的感光度。由此,调整判定图像的亮度。
在步骤S603中判定为判定图像的颜色和亮度是适合引导信息的检索的条件的情况下或者在步骤S604以后,控制部302对判定图像的焦点状态是否是适合引导信息的检索的条件进行判定(步骤S605)。焦点状态的条件是指,焦点对准了判定图像中的对象物。在步骤S605中判定为判定图像的焦点状态是适合引导信息的检索的条件的情况下,控制部302使处理转移到步骤S607。在步骤S605中判定为判定图像的焦点状态不是适合引导信息的检索的条件的情况下,控制部302向用户进行警告以调整判定图像的焦点状态(步骤S606)。该警告通过例如显示部306的显示来进行。用户接受警告并操作摄像装置300。例如,用户使用手动对焦将焦点对准特定的对象物。
在步骤S605中判定为判定图像的焦点状态是适合引导信息的检索的条件的情况下或者在步骤S606以后,控制部302通过将为了实时取景图像显示而获得的当前帧的图像的信息与在引导信息数据库3104中存储的静态图像辞典进行比较,来检索引导信息(步骤S607)。例如,根据对象物的形状、颜色、或从摄像装置300到对象物的距离、当前时刻、当前位置这样的静态图像涉及的特征信息,从引导信息数据库3104中检索与这些特征信息对应的引导信息。另外,引导信息的检索可以由便携终端400进行。此外,引导信息的检索也可以使用服务器500来进行。
在步骤S607以后,控制部302判定使用了静态图像辞典的检索是否成功(步骤S608)。在步骤S608中判定为使用了静态图像辞典的检索已成功的情况下,控制部302使显示部306显示所检索出的引导信息(步骤S609)。然后,控制部302结束图15的处理。另外,在检索到多个引导信息的情况下,可以由用户从中选择期望的引导信息。
在步骤S608中判定为使用了静态图像辞典的检索未成功的情况下,控制部302通过将截止到为了实时取景图像显示而获得的多帧以前为止的图像的信息与在引导信息数据库3104中存储的动态图像辞典(可以换而称作示出了图像变化与单词的关系且将对象物图像的特征信息的时间变化与单词关联起来的数据库。)进行比较,来检索引导信息(步骤S610)。例如,根据对象物的形状或者颜色的变化的履历、从摄像装置300到对象物的距离的变化的履历、时间变化的履历、当前位置的变化的履历这样的动态图像涉及的特征信息,从引导信息数据库3104中检索与这些特征信息对应的引导信息。可以将在动态图像辞典中被转换为文字信息的“伴随有时间变化的图像的特征”换而称作对象物图像的特征信息的时间变化。作为据此检索出的文字信息、单词,可以是形容词或副词,设想的动态图像辞典可以是将对象物图像的位置的时间变化或频率等与“摇摇晃晃”或“哆哆嗦嗦”等拟态词关联起来的辞典。当然,图像的摇晃方式可以根据是对象物整体还是一部分,是垂直方向还是水平方向,来变更文字信息。另外,引导信息的检索可以由便携终端400进行。此外,引导信息的检索也可以使用服务器500来进行。
在步骤S610以后,控制部302判定使用了动态图像辞典的检索是否成功(步骤S611)。在步骤S611中判定为使用了动态图像辞典的检索已成功的情况下,控制部302使显示部606显示所检索出的引导信息(步骤S612)。然后,控制部302结束图15的处理。另外,在检索到多个引导信息的情况下,可以由用户从中选择期望的引导信息。
在步骤S611中判定为使用了动态图像辞典的检索未成功的情况下,控制部302显示如图13C所示的检索持续中图标306c和清除按钮306d(步骤S613)。接着,控制部302判定是否由用户选择了清除按钮306d(步骤S614)。在步骤S614中判定为未选择清除按钮306d的情况下,控制部302使处理转移到步骤S616。在步骤S614中选择了清除按钮306d的情况下,控制部302清除履历信息(步骤S615)。另外,在选择了清除按钮306d的情况下,可以结束图15的处理。
在步骤S614中判定为未选择清除按钮306d的情况下或者在步骤S615以后,控制部302判定是否经过了规定时间(例如1分钟)(步骤S616)。在步骤S616中判定为未经过规定时间的情况下,控制部302将处理返回到步骤S601。在步骤S616中判定为经过了规定时间的情况下,控制部302进行如图13C所示的未能检索显示306e(步骤S617)。然后,结束图15的处理。
如以上所说明那样,根据本实施方式,通过设置引导信息的检索专用的引导信息检索模式,将摄像装置300的处理的大部分分配到引导信息的检索中,由此能够减轻引导信息的检索涉及的摄像装置300的负荷。此外,由于在引导信息检索模式下,仅进行引导信息的检索,所以在适合引导信息检索的条件(颜色、亮度、焦点)下进行引导信息的检索。此外,如果用户不需要引导信息,则能够直接进行摄影操作。因此,用户能够专心于摄影操作。
另外,如图6A-图6C所示,本实施方式的摄像装置300可以与便携终端400协作使用。在该情况下,使便携终端400的显示部406进行实时取景图像显示。因此,上述操作按钮也显示在便携终端400的显示部406上。用户利用触摸面板408来选择摄影按钮306a或者引导信息检索按钮306b。在选择了摄影按钮306a的情况下,从便携终端400向摄像装置300指示摄影动作的执行。另一方面,在选择了引导信息检索按钮306b的情况下,由摄像装置300和便携终端400进行图15所示的引导信息检索的处理。例如,便携终端400的显示部406进行图15中的警告显示。另一方面,由摄像装置300进行引导信息的检索用的反复拍摄。
在这样的变形例中,也能够获得与上述的实施方式相同的效果。此外,摄像装置300与便携终端400相比,能够提高摄像元件和摄影镜头的设计的自由度。因此,能够设置比便携终端400更高功能的摄像部。通过设置高功能的摄像部,摄像装置300能够拍摄比便携终端400更高画质的图像。此外,通过向便携终端400发送这样的高画质的图像,能够使便携终端400的显示部406显示高画质的实时取景图像,或者使记录部404记录高画质的图像。而且,通过利用高画质的图像来检索引导信息,还能够提高引导信息的检索的精度。而且,还能够进行便携终端400对引导信息的检索。
此外,本实施方式的技术作为图像显示装置、检查装置、警告装置,还能够应用于消费者用途以外的例如产业用设备或医疗用设备的领域。
Claims (15)
1.一种图像处理装置,其具有:
图像取得部,其取得图像;
图像识别部,其识别由所述图像取得部取得的图像特征信息;
文字信息取得部,其从由所述图像识别部识别出的特征信息中取得文字信息;以及
通信部,其向引导信息检索装置进行由所述文字信息取得部取得的文字信息的通信,所述引导信息检索装置从文字信息中检索引导信息。
2.根据权利要求1所述的图像处理装置,其中,
所述文字信息取得部为了从所述特征信息的时间变化中取得文字信息,包含将运动特征和所述文字信息关联起来的动态图像辞典。
3.一种图像处理装置,其具有:
图像取得部,其取得图像;
图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;以及
通信部,其向引导信息检索装置进行由所述图像识别部识别出的特征信息的通信,所述引导信息检索装置从特征信息中取得文字信息并检索引导信息。
4.根据权利要求1所述的图像处理装置,其中,
能够取得所述文字信息的信息包含所述图像内的对象物的形状、颜色、到所述对象物的距离信息。
5.根据权利要求4所述的图像处理装置,其中,
该图像处理装置还具有设备种类信息记录部,该设备种类信息记录部记录取得所述图像的摄像装置的设备种类信息,
所述通信部还向所述引导信息检索装置进行所述设备种类信息的通信。
6.根据权利要求3所述的图像处理装置,其中,
所述图像识别部为了从所述特征信息的时间变化中取得文字信息,包含将运动特征和所述文字信息关联起来的动态图像辞典。
7.根据权利要求5或6所述的图像处理装置,其中,
该图像处理装置还具有:
位置检测部,其检测取得所述图像的位置;以及
计时部,其检测取得所述图像的时刻,
所述图像识别部还识别所述位置和时刻作为所述特征信息。
8.一种通信系统,其具有图像处理装置和引导信息检索装置,
所述图像处理装置具有:
图像取得部,其取得图像;
图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;
文字信息取得部,其从由所述图像识别部识别出的特征信息中取得文字信息;以及
图像处理装置侧通信部,其发送由所述文字信息取得部取得的文字信息,
所述引导信息检索装置具有:
引导信息检索装置侧通信部,其接收从所述图像处理装置侧通信部通信的文字信息;
检索部,其从所述接收到的文字信息中检索引导信息;以及
提示部,其向用户提示所述检索出的引导信息。
9.一种通信系统,其具有图像处理装置和引导信息检索装置,
所述图像处理装置具有:
图像取得部,其取得图像;
图像识别部,其从由所述图像取得部取得的图像中识别能够取得文字信息的特征信息;以及
图像处理装置侧通信部,其发送由所述图像识别部取得的特征信息,
所述引导信息检索装置具有:
引导信息检索装置侧通信部,其接收从所述图像处理装置侧通信部通信的特征信息;
文字信息取得部,其从所述接收到的特征信息中取得文字信息;
检索部,其从所述取得的文字信息中检索引导信息;以及
提示部,其向用户提示所述检索出的引导信息。
10.一种通信方法,其具有以下步骤:
取得图像;
从所述取得的图像中识别能够取得文字信息的特征信息;
从所述识别出的特征信息中取得文字信息;
向引导信息检索装置进行所述取得的文字信息的通信,所述引导信息检索装置从文字信息中检索引导信息;
所述引导信息检索装置从所述通信的文字信息中检索引导信息;以及
向用户提示由所述引导信息检索装置检索出的引导信息。
11.一种通信方法,其具有以下步骤:
取得图像;
从所述取得的图像中识别能够取得文字信息的特征信息;
向引导信息检索装置进行所述识别出的特征信息的通信,所述引导信息检索装置从特征信息中取得文字信息并检索引导信息;
从所述通信的特征信息中取得文字信息;
所述引导信息检索装置从所述取得的文字信息中检索引导信息;以及
向用户提示由所述引导信息检索装置检索出的引导信息。
12.一种摄像装置,其具有:
摄像部,其拍摄对象物来取得与所述对象物相关的图像;
切换部,其对拍摄模式和引导信息检索模式进行切换,在拍摄模式下,将由所述摄像部取得的图像用于记录,在引导信息检索模式下,将由所述摄像部取得的图像用于引导信息的检索;
记录部,其在所述拍摄模式下记录由所述摄像部取得的图像;
图像识别部,其在所述引导信息检索模式下从由所述摄像部取得的图像中识别特征信息;以及
检索部,其从所述识别出的特征信息中检索所述引导信息。
13.根据权利要求12所述的摄像装置,其特征在于,
所述切换部通过用户操作对所述拍摄模式和所述引导信息检索模式进行切换。
14.根据权利要求13所述的摄像装置,其特征在于,
所述用户操作是触摸面板上的操作。
15.根据权利要求12~14中的任意一项所述的摄像装置,其特征在于,
在将由所述摄像部获得的图像的颜色、亮度、焦点状态作为适合所述引导信息的检索的条件以后进行所述引导信息的检索。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014083861A JP2015204037A (ja) | 2014-04-15 | 2014-04-15 | 画像処理装置、通信システム及び通信方法 |
JP2014-083861 | 2014-04-15 | ||
JP2014-094827 | 2014-05-01 | ||
JP2014094827A JP6370598B2 (ja) | 2014-05-01 | 2014-05-01 | 撮像装置 |
PCT/JP2015/060984 WO2015159775A1 (ja) | 2014-04-15 | 2015-04-08 | 画像処理装置、通信システム及び通信方法並びに撮像装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106233283A true CN106233283A (zh) | 2016-12-14 |
Family
ID=54323986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580019736.6A Pending CN106233283A (zh) | 2014-04-15 | 2015-04-08 | 图像处理装置、通信系统以及通信方法和摄像装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10133932B2 (zh) |
CN (1) | CN106233283A (zh) |
WO (1) | WO2015159775A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107391668A (zh) * | 2017-07-20 | 2017-11-24 | 深圳大普微电子科技有限公司 | 一种图片文字搜寻系统及方法 |
WO2018171047A1 (zh) * | 2017-03-21 | 2018-09-27 | 华为技术有限公司 | 一种拍摄引导方法、设备及系统 |
CN109521835A (zh) * | 2017-09-20 | 2019-03-26 | 富士施乐株式会社 | 信息处理设备、信息处理系统和信息处理方法 |
CN111226289A (zh) * | 2017-10-27 | 2020-06-02 | 八乐梦床业株式会社 | 动态图像记录系统 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102618900B1 (ko) | 2019-01-08 | 2023-12-29 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
US11916591B2 (en) * | 2021-10-18 | 2024-02-27 | Saudi Arabian Oil Company | Systems and methods for securely exchanging data between computer systems using free space optical communications |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101990068A (zh) * | 2009-07-31 | 2011-03-23 | 卡西欧计算机株式会社 | 图像处理装置及方法 |
WO2013089042A1 (ja) * | 2011-12-16 | 2013-06-20 | 日本電気株式会社 | 情報処理システム、情報処理方法、情報処理装置およびその制御方法と制御プログラム、通信端末およびその制御方法と制御プログラム |
WO2013115203A1 (ja) * | 2012-01-30 | 2013-08-08 | 日本電気株式会社 | 情報処理システム、情報処理方法、情報処理装置およびその制御方法と制御プログラム、通信端末およびその制御方法と制御プログラム |
WO2013118535A1 (ja) * | 2012-02-06 | 2013-08-15 | ソニー株式会社 | 撮像制御装置、画像処理装置、撮像制御方法及び画像処理方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3435175B2 (ja) * | 1992-09-03 | 2003-08-11 | 株式会社日立製作所 | 手話学習装置 |
JPH11252427A (ja) | 1998-03-02 | 1999-09-17 | Fuji Photo Film Co Ltd | タッチパネル操作式カメラ |
JP2001066684A (ja) | 1999-08-24 | 2001-03-16 | Olympus Optical Co Ltd | カメラ |
JP2001197340A (ja) | 2000-01-12 | 2001-07-19 | Ricoh Co Ltd | デジタルカメラ |
JP2002176509A (ja) | 2000-12-06 | 2002-06-21 | Tohoku Ricoh Co Ltd | 携帯型情報読取装置 |
JP2002222200A (ja) * | 2001-01-26 | 2002-08-09 | Mitsubishi Electric Corp | 取扱説明書提供装置および取扱説明書提供方法 |
JP5138210B2 (ja) | 2006-12-18 | 2013-02-06 | シャープ株式会社 | 符号読み取り装置、符号読み取り装置の制御プログラム、符号読み取り装置の制御プログラムを記録した記録媒体 |
JP4928350B2 (ja) * | 2007-05-17 | 2012-05-09 | オリンパス株式会社 | 撮影システム |
JP5007631B2 (ja) | 2007-08-31 | 2012-08-22 | 株式会社ニコン | 電子カメラ |
KR101303948B1 (ko) * | 2010-08-13 | 2013-09-05 | 주식회사 팬택 | 비가시 객체에 대한 증강 현실 정보 제공 장치 및 방법 |
JP5749570B2 (ja) * | 2011-05-27 | 2015-07-15 | 株式会社東芝 | 情報提供装置、情報提供装置のプログラム、及び情報提供システム |
JP5875304B2 (ja) * | 2011-09-08 | 2016-03-02 | キヤノン株式会社 | 電子ファイル表示システム |
JP2013128251A (ja) | 2011-12-19 | 2013-06-27 | Nikon Corp | 撮像装置およびプログラム |
-
2015
- 2015-04-08 WO PCT/JP2015/060984 patent/WO2015159775A1/ja active Application Filing
- 2015-04-08 CN CN201580019736.6A patent/CN106233283A/zh active Pending
-
2016
- 2016-10-14 US US15/293,820 patent/US10133932B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101990068A (zh) * | 2009-07-31 | 2011-03-23 | 卡西欧计算机株式会社 | 图像处理装置及方法 |
WO2013089042A1 (ja) * | 2011-12-16 | 2013-06-20 | 日本電気株式会社 | 情報処理システム、情報処理方法、情報処理装置およびその制御方法と制御プログラム、通信端末およびその制御方法と制御プログラム |
WO2013115203A1 (ja) * | 2012-01-30 | 2013-08-08 | 日本電気株式会社 | 情報処理システム、情報処理方法、情報処理装置およびその制御方法と制御プログラム、通信端末およびその制御方法と制御プログラム |
WO2013118535A1 (ja) * | 2012-02-06 | 2013-08-15 | ソニー株式会社 | 撮像制御装置、画像処理装置、撮像制御方法及び画像処理方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018171047A1 (zh) * | 2017-03-21 | 2018-09-27 | 华为技术有限公司 | 一种拍摄引导方法、设备及系统 |
US10893137B2 (en) | 2017-03-21 | 2021-01-12 | Huawei Technologies Co., Ltd. | Photography guiding method, device, and system |
CN107391668A (zh) * | 2017-07-20 | 2017-11-24 | 深圳大普微电子科技有限公司 | 一种图片文字搜寻系统及方法 |
CN109521835A (zh) * | 2017-09-20 | 2019-03-26 | 富士施乐株式会社 | 信息处理设备、信息处理系统和信息处理方法 |
CN109521835B (zh) * | 2017-09-20 | 2024-03-22 | 富士胶片商业创新有限公司 | 信息处理设备、信息处理系统和信息处理方法 |
CN111226289A (zh) * | 2017-10-27 | 2020-06-02 | 八乐梦床业株式会社 | 动态图像记录系统 |
CN111226289B (zh) * | 2017-10-27 | 2023-09-26 | 八乐梦床业株式会社 | 动态图像记录系统 |
Also Published As
Publication number | Publication date |
---|---|
US20170032190A1 (en) | 2017-02-02 |
WO2015159775A1 (ja) | 2015-10-22 |
US10133932B2 (en) | 2018-11-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10057485B2 (en) | Imaging apparatus and methods for generating a guide display using imaging height posture information | |
CN106233283A (zh) | 图像处理装置、通信系统以及通信方法和摄像装置 | |
CN102763404B (zh) | 摄影装置、信息取得系统及程序 | |
US8599251B2 (en) | Camera | |
CN105027553B (zh) | 图像处理装置、图像处理方法以及存储图像处理程序的存储介质 | |
CN101262561B (zh) | 成像设备及其控制方法 | |
KR20080026003A (ko) | 물리적인 상대 위치에 기반한 사진상의 ⅰd 태깅 장치 및방법 | |
KR20120083486A (ko) | 화상 처리 장치, 화상 처리 방법, 및, 기록 매체 | |
JP2009059042A (ja) | 画像取扱装置、画像取扱方法および画像取扱のためのプログラム | |
US10588008B2 (en) | Control apparatus, control system, and method for controlling control apparatus | |
CN105991926A (zh) | 操作电子装置的方法以及电子装置 | |
US20230336671A1 (en) | Imaging apparatus | |
JP6323548B2 (ja) | 撮影補助システム、撮像装置、情報処理装置、撮影補助プログラム及び撮影補助方法 | |
JP2002077805A (ja) | 撮影メモ機能付きカメラ | |
JP4603569B2 (ja) | 画像処理装置およびプログラム | |
JP6958795B1 (ja) | 情報処理方法、コンピュータプログラム及び情報処理装置 | |
JP2014175733A (ja) | 画像再生装置および画像再生プログラム | |
CN114071005B (zh) | 一种对象检测方法、电子设备和计算机可读存储介质 | |
JP4742927B2 (ja) | 電子カメラ | |
JP7333027B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2010187119A (ja) | 撮像装置および撮像装置用プログラム | |
JP2007288409A (ja) | 画像データ分類機能を備えた撮像装置およびプログラム | |
JP2010183565A (ja) | 撮像装置、画像検索装置およびプログラム | |
JP2003242150A (ja) | 情報処理装置 | |
JP2011186081A (ja) | 表示制御装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20161214 |