KR101592981B1 - Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same - Google Patents

Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same Download PDF

Info

Publication number
KR101592981B1
KR101592981B1 KR1020140012154A KR20140012154A KR101592981B1 KR 101592981 B1 KR101592981 B1 KR 101592981B1 KR 1020140012154 A KR1020140012154 A KR 1020140012154A KR 20140012154 A KR20140012154 A KR 20140012154A KR 101592981 B1 KR101592981 B1 KR 101592981B1
Authority
KR
South Korea
Prior art keywords
image
image file
voice
unit
tagging
Prior art date
Application number
KR1020140012154A
Other languages
Korean (ko)
Other versions
KR20150092390A (en
Inventor
이혁
황해연
Original Assignee
주식회사 엠앤엘솔루션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엠앤엘솔루션 filed Critical 주식회사 엠앤엘솔루션
Priority to KR1020140012154A priority Critical patent/KR101592981B1/en
Publication of KR20150092390A publication Critical patent/KR20150092390A/en
Application granted granted Critical
Publication of KR101592981B1 publication Critical patent/KR101592981B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/686Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title or artist information, time, location or usage information, user ratings
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers

Abstract

본 발명에 따른 음성기반 이미지 파일 태깅 장치는, 마이크와 카메라와 메모리와 통신부를 포함하는 휴대용 통신 단말기에 탑재되는 음성기반 이미지 파일 태깅장치로서, 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하는 음성 처리부와 카메라에서 출력되는 영상신호를 프레임 단위로 신호 처리하여 출력하는 영상신호 처리부와 영상신호 처리부에서 출력되는 프레임 단위의 원 영상 이미지를 캡쳐하여 이미지 파일을 생성하고 음성 처리부에서 처리된 상기 이미지에 대한 설명데이터를 이미지 파일 내에 삽입하는 이미지 태깅부와 이미지에 대한 설명데이터가 삽입된 이미지 파일을 압축하여 메모리에 저장하는 정지영상 저장부와 메모리로부터 이미지 파일을 독출하여 통신부를 통해 이미지 공유 서비스 서버로 전송하는 영상파일 전송부를 포함한다.The apparatus for tagging a voice-based image file according to the present invention is a voice-based image file tagging apparatus mounted on a portable communication terminal including a microphone, a camera, a memory and a communication unit, An image signal processing unit for signal processing and outputting a video signal outputted from the processing unit and the camera, and an image signal processing unit for capturing an original video image by frame unit output from the video signal processing unit to generate an image file, An image tagging unit for inserting descriptive data into the image file and a still image storage unit for compressing the image file into which the descriptive data of the image is inserted and storing the compressed image file in the memory, and the image file is read from the memory and transmitted to the image sharing service server through the communication unit Image file And a transmission unit.

Description

음성기반 이미지 파일 태깅장치 및 그를 이용한 클라우드 서비스 기반 이미지 파일 검색방법{Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same}[0001] The present invention relates to a voice-based image file tagging apparatus and a cloud service-based image file searching method using the same.

본 발명은 음성기반 이미지 파일 태깅장치 및 그를 이용한 클라우드 서비스 기반 이미지 파일 검색방법에 관한 것으로, 보다 상세하게는 카메라로 촬영한 이미지에 대한 설명데이터를 이미지 파일의 표준포맷규격에 맞춰 저장 및 이미지 공유 서비스 서버로 전송하고, 또한 사용자가 확실한 키워드를 입력하지 못했더라도 사용자가 원하는 이미지를 정확하게 검색하여 제공할 수 있는 음성기반 이미지 파일 태깅장치 및 그를 이용한 클라우드 서비스 기반 이미지 파일 검색방법에 관한 것이다.
The present invention relates to a voice-based image file tagging apparatus and a cloud service-based image file searching method using the apparatus. More particularly, the present invention relates to a voice-based image file tagging apparatus for storing descriptive data of an image photographed by a camera, The present invention also relates to a voice-based image file tagging apparatus and a cloud service-based image file searching method using the same, which are capable of accurately searching and providing an image desired by a user even when a user can not input a definite keyword.

사진, 도면 등과 같은 이미지 정보를 갖는 이미지 파일은 다양한 포맷(즉, 데이터 구조)과 확장자를 가지며, 이러한 이미지 파일은 이미지 정보뿐만 아니라, 사용자 정보 또는 이미지와 관련된 부가 정보를 포함하기도 한다. 그러나 종래의 이미지 파일에 추가되는 부가 정보는 사용자 정보 내지는 이미지 메타 정보에 국한되어 있다.
An image file having image information such as photographs, drawings, and the like has various formats (i.e., data structures) and extensions, and the image file includes not only image information but also user information or additional information related to the image. However, the additional information added to the conventional image file is limited to user information or image meta information.

한국공개특허 제10-2013-0094401호는 이미지 파일의 종류(JPEG, PNG, GIF 등)에 상관없이 이미지 파일 내에 애니메이션 데이터를 추가 및 저장하고 이를 활용할 수 있는 방법에 대하여 기재되어 있다. 한국공개특허 제10-2013-0078376호는 촬상된 이미지 데이터에 위치정보와 함께 추가정보를 입력하여 저장한 후 그 저장된 이미지와 추가정보를 목적지 이메일주소로 전송하고 그 전송받은 단말기에서 전용뷰어를 통해 그 전송받은 이미지와 추가정보를 동시에 표시하는 영상물의 이미지에 텍스트정보를 결합하여 전송하는 기술이 기재되어 있다.
Korean Patent Laid-Open No. 10-2013-0094401 discloses a method of adding, storing, and utilizing animation data in an image file regardless of the type of image file (JPEG, PNG, GIF, etc.). Korean Patent Laid-Open Publication No. 10-2013-0078376 discloses a method of inputting and storing additional information together with location information in captured image data, transmitting the stored image and the additional information to a destination e-mail address, And combining the text information with an image of a video image that simultaneously displays the transmitted image and the additional information, and transmits the combined information.

그러나, 선행문헌들은 사용자가 사진을 촬영하고 사용자로 하여금 이미지에 대한 설명데이터를 쉽게 입력할 수 있고, 또한 이미지 저장공간 및 데이터 전송량을 줄일 수 있고, 사용자가 확실한 키워드를 입력하지 못했더라도 사용자가 원하는 이미지를 정확하게 검색하여 제공할 수 있는 기술은 기재되어 있지 않다.
However, the precedent documents can be used to make it easier for a user to take a picture and easily input description data for an image, reduce image storage space and data transmission amount, and even if a user fails to input a definite keyword, There is no description of a technology that can accurately search and provide images.

한편, 일반적으로 사람들은 국내 또는 해외 여행을 하다면서 카메라 또는 카메라가 장착된 스마트폰, 태블릿 PC를 이용하여 사진을 촬영하게 된다. 그런데, 이러한 사진들을 분류하여 저장하지 않으면 나중에 정리하기도 힘들고, 소중한 장소들에 대하여 정확히 기억 하기도 힘든 상황에 처하게 된다. 또한, 이미지 파일들은 저장공간을 많이 차지함으로 저장공간 확보를 위해 사용자는 오래된 사진들을 저장공간에서 삭제하거나 다른 곳에 저장해야 하는데, 이러한 작업 역시 사용자가 일일히 사진을 확인하면서 해야 함으로 번거롭고 시간이 많이 소요되는 문제점이 있다.
On the other hand, people usually take pictures while using their domestic or overseas trips by using a smartphone or a tablet PC equipped with a camera or a camera. However, if these photographs are not classified and stored, it will be difficult to organize them later, and it will be difficult to memorize precious places precisely. In addition, since the image files occupy a large amount of storage space, in order to secure the storage space, the user has to delete the old photographs from the storage space or store them in another place. This operation is cumbersome and time consuming because the user must check the pictures one by one .

한국공개특허 제10-2013-0094401호(공개일 2013.08.26)Korean Patent Laid-Open No. 10-2013-0094401 (Publication date 2013.08.26) 한국공개특허 제10-2013-0078376호(공개일 2013.07.10)Korean Patent Publication No. 10-2013-0078376 (Publication date 2013.07.10)

본 발명은 상기와 같은 종래의 문제점을 해소하기 위해 제안된 것으로, 본 발명의 목적은 카메라로 촬영한 이미지에 대한 설명데이터를 이미지 파일의 표준포맷규격에 맞춰 저장 및 미리 지정된 외부 서버로 전송함으로서, 이미지 저장공간 및 데이터 전송량을 줄일 수 있는 음성기반 이미지 파일 태깅장치를 제공하는 것을 목적으로 한다.
SUMMARY OF THE INVENTION The present invention has been made in order to solve the conventional problems as described above, and it is an object of the present invention to provide an image processing apparatus and method, in which description data of an image taken by a camera is stored according to a standard format standard of an image file, It is an object of the present invention to provide a voice-based image file tagging apparatus capable of reducing image storage space and data transmission amount.

본 발명의 다른 목적은 자동으로 오래된 사진들부터 미리 지정된 외부 서버로 전송하고 메모리에서 삭제하는 음성기반 이미지 파일 태깅장치를 제공하는 것을 목적으로 한다.
It is another object of the present invention to provide a voice-based image file tagging apparatus that automatically transfers old photographs to a predetermined external server and deletes them from the memory.

본 발명의 다른 목적은 사용자가 확실한 키워드를 입력하지 못했더라도 사용자가 원하는 이미지를 정확하게 검색하여 제공할 수 있는 클라우드 서비스 기반 이미지 파일 검색방법을 제공하는 것을 목적으로 한다.
It is another object of the present invention to provide a cloud service-based image file searching method that can accurately search and provide an image desired by a user even if a user fails to input a certain keyword.

상기와 같은 목적을 달성하기 위하여 본 발명에 따른 음성기반 이미지 파일 태깅 장치는 마이크와 카메라와 메모리와 통신부를 포함하는 휴대용 통신 단말기에 탑재되는 음성기반 이미지 파일 태깅장치로서, 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하는 음성 처리부와, 카메라에서 출력되는 영상신호를 프레임 단위로 신호 처리하여 출력하는 영상신호 처리부와, 영상신호 처리부에서 출력되는 프레임 단위의 원 영상 이미지를 캡쳐하여 이미지 파일을 생성하고 음성 처리부에서 처리된 이미지에 대한 설명데이터를 이미지 파일 내에 삽입하되 이미지에 대한 설명데이터가 삽입될 이미지 파일의 특정 필드의 표준포맷규격 크기보다 큰 경우 이미지에 대한 설명데이터 중 일부만을 이미지 파일 내에 삽입하는 이미지 태깅부와, 이미지에 대한 설명데이터가 삽입된 이미지 파일을 압축하여 메모리에 저장하는 정지영상 저장부와, 메모리로부터 이미지 파일을 독출하여 통신부를 통해 미리 지정된 외부 서버로 전송하는 영상파일 전송부를 포함한다.
In order to achieve the above object, a voice-based image file tagging apparatus according to the present invention is a voice-based image file tagging apparatus mounted on a portable communication terminal including a microphone, a camera, a memory and a communication unit, An image signal processing unit for signal processing and outputting a video signal outputted from the camera on a frame basis, an image signal generation unit for generating an image file by capturing an original video image of a frame unit output from the video signal processing unit, If the description data of the image is larger than the standard format specification size of the specific field of the image file to be inserted, only part of the description data of the image is inserted into the image file An image tagging unit, A still image storage unit for storing the image file in which the explanatory data is inserted and storing the compressed image file in a memory, and an image file transmission unit for reading the image file from the memory and transmitting the read image file to an external server predetermined through a communication unit.

상기 음성 처리부는 음절 복원 규칙에 따라 복원 문자열을 생성하는 것을 특징으로 한다. 영상파일 전송부는 메모리에 저장된 이미지 파일들 중 시간적으로 가장 오래된 이미지 파일들을 미리 지정된 외부 서버로 전송하고 메모리에서 삭제하는 것을 특징으로 한다.
And the voice processing unit generates a restoration character string according to a syllable restoration rule. The image file transfer unit transfers the oldest image files of the image files stored in the memory to the predetermined external server and deletes the oldest image files from the memory.

본 발명의 다른 양상에 따른 클라우드 서비스 기반 이미지 공유 서비스 서버에서 실행되는 이미지 파일 검색방법은, 휴대용 통신 단말기로부터 이미지에 대한 설명데이터가 삽입된 이미지 파일을 입력받아 저장하는 단계와, 상기 이미지 파일에서 이미지에 대한 설명데이터를 검출하는 단계와, 상기 이미지에 대한 설명데이터에 대해 형태소 분석을 수행하여 상기 이미지에 대한 설명데이터에 포함된 단어를 획득하는 단계와, 상기 획득한 단어와 연관관계를 갖는 복수개의 단어를 연관모델 데이터베이스에서 검색하는 단계와, 상기 이미지에 대한 설명데이터에 포함된 단어와 상기 검색한 연관된 단어를 이미지 파일에 대한 색인정보로 저장하는 단계와, According to another aspect of the present invention, there is provided an image file searching method executed in a cloud service based image sharing service server, comprising: receiving and storing an image file in which description data of an image is inserted from a portable communication terminal; A step of performing morphological analysis on the descriptive data of the image to obtain a word included in the descriptive data of the image; and a step of extracting a plurality of Storing a word included in the description data for the image and the searched related word as index information for the image file;

네트워크로 연결된 휴대용 통신 단말기로부터 검색 키워드를 포함하는 이미지 검색요청정보가 입력되면, 상기 검색 키워드와 동일 또는 검색 키워드를 포함하는 단어 또는 상기 검색 키워드와 연관된 단어를 상기 인덱스 데이터베이스로부터 검색하고, 검색된 단어에 해당하는 이미지 파일을 이미지 데이터베이스에서 읽어들이는 단계와, 이미지 데이터베이스에서 읽어들인 이미지 파일을 휴대용 통신 단말기로 전송하는 단계를 포함한다.
When the image search request information including the search keyword is input from the portable communication terminal connected to the network, a word including the search keyword or a word associated with the search keyword is searched from the index database, Reading the corresponding image file from the image database, and transmitting the image file read from the image database to the portable communication terminal.

본 발명의 음성기반 이미지 파일 태깅장치 및 그를 이용한 클라우드 서비스 기반 이미지 파일 검색방법에 따르면 다음과 같은 장점이 있다. The voice-based image file tagging apparatus and the cloud service-based image file search method using the same according to the present invention have the following advantages.

첫째, 카메라에서 출력되는 영상신호로부터 이미지 표준포맷(JPG, GIF, PNG, BMP 등) 규격으로 이미지 파일을 생성하고 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하여 이미지 파일에 삽입하도록 구현됨으로써, 사용자로 하여금 이미지에 대한 설명데이터를 쉽게 입력할 수 있도록 하는 장점이 있다.First, an image file is generated from a video signal output from a camera in an image standard format (JPG, GIF, PNG, BMP, etc.), and a user voice signal input through a microphone is converted into text and inserted into an image file, There is an advantage that a user can easily input description data about an image.

둘째, 카메라로 촬영한 이미지에 대한 설명데이터를 이미지 표준포맷(JPG, GIF, PNG, BMP 등) 규격을 위배하지 않는 범위(256B 이내)에서 저장 및 이미지 공유 서비스 서버로 전송하도록 구현됨으로써, 장치의 이미지 저장공간 및 데이터 전송량을 줄일 수 있는 효과가 있다. Second, the description data of the image photographed by the camera is transmitted to the storage and image sharing service server in a range (within 256B) that does not violate the image standard format (JPG, GIF, PNG, BMP, etc.) The image storage space and the data transmission amount can be reduced.

셋째, 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하면서 음절 복원 규칙에 따라 문자열을 복원, 예를 들어,‘목쩍찌’는‘목적지’,‘부사느로’는‘부산으로’정확히 복원하도록 구현됨으로써, 이미지 공유 서비스 서버의 키워드 검색 정확도를 높일 수 있다. Third, the user voice signal inputted through the microphone is converted into text and the string is restored according to the syllable restoration rule. For example, 'pinch' is correctly restored to 'destination' and ' Thus, the keyword search accuracy of the image sharing service server can be improved.

넷째, 음성기반 이미지 파일 태깅 장치는 오래된 이미지 파일들을 저장공간에서 외부 서버에 저장하고 해당 이미지들을 삭제함으로써, 메모리의 저장공간을 자동으로 조절할 수 있고 사용자가 일일히 사진을 확인하면서 이미지 파일을 정리해야했던 번거로움을 해소해 준다. Fourth, the voice-based image file tagging device can store old image files in an external server in the storage space and delete the images, so that the storage space of the memory can be automatically adjusted and the user can organize the image files while checking the pictures It solves the hassle that was.

다섯째, 이미지에 대한 설명데이터에 대해 형태소 분석을 수행하여 이미지에 대한 설명데이터에 포함된 단어뿐만 아니라, 단어에 대한 연관 분석을 수행하여 얻은 연관된 단어를 이미지 파일에 대한 색인정보로 저장하도록 구현됨으로써, 이미지 공유 서비스 서버는 사용자가 확실한 검색 키워드를 입력하지 못했더라도 사용자가 원하는 이미지를 정확하게 검색하여 제공할 수 있다.
Fifth, the morphological analysis is performed on the descriptive data of the image, so that not only the words included in the descriptive data of the image but also the related words obtained by performing the association analysis on the words are stored as the index information for the image file, The image sharing service server can accurately search and provide an image desired by the user even if the user fails to input a definite search keyword.

도 1은 본 발명에 따른 전체 시스템을 도시한다.
도 2 는 본 발명의 일 실시예에 따른 음성기반 이미지 파일 태깅장치의 구성 블록도이다.
도 3 은 본 발명에 따른 클라우드 서비스 기반 이미지 공유 서비스 서버의 구성 블록도이다.
도 4a, 도4b 는 본 발명에 따른 클라우드 서비스 기반 이미지 공유 서비스 서버에서 실행되는 이미지 파일 검색방법 흐름도이다.
Figure 1 shows an overall system according to the invention.
2 is a block diagram of a speech-based image file tagging apparatus according to an exemplary embodiment of the present invention.
3 is a configuration block diagram of a cloud service based image sharing service server according to the present invention.
4A and 4B are flowcharts of an image file searching method executed in a cloud service based image sharing service server according to the present invention.

이하, 첨부된 도면을 참조하여 전술한, 그리고 추가적인 양상을 기술되는 바람직한 실시예를 통하여 본 발명을 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the present embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout.

본 발명에 따른 전체 시스템은 도 1에 도시한 바와 같이, 음성기반 이미지 파일 태깅장치(110)가 탑재된 휴대용 통신 단말기(100)와, 휴대용 통신 단말기(100)와 네트워크를 통해 연결되는 클라우드 서비스 기반 이미지 공유 서비스 서버(150)를 포함하여 구현된다. 휴대용 통신 단말기(100)는 일례로, 스마트폰, 노트북, 태블릿 PC, 또는 카메라 연결이 가능한 워치폰(Watch Phone) 중 어느 하나로 구현될 수 있다. 클라우드 서비스 기반 이미지 공유 서비스 서버(150)는 웹 서버 또는 앱 서버 또는 클라우드 서버로 구현될 수 있다.
1, the entire system according to the present invention includes a portable communication terminal 100 on which a voice-based image file tagging apparatus 110 is mounted, a cloud service base 100 connected to the portable communication terminal 100 via a network, And an image sharing service server 150. The portable communication terminal 100 may be implemented as any one of a smart phone, a notebook, a tablet PC, or a watch phone capable of connecting to a camera. The cloud service based image sharing service server 150 may be implemented as a web server, an app server, or a cloud server.

휴대용 통신 단말기(100)는 유무선 인터넷 및 CDMA, W-CDMA, 블루투스(Bluetooth), IEEE 802.11 표준을 따르는 무선랜(Wireless LAN, WLAN), 와이파이(Wi-Fi), 와이브로(WiBro) 통신이 가능한 통신부와, 사용자 조작명령 및 데이터 입력이 가능한 수단, 예컨대 마이크, 숫자키와 기능키 등으로 이루어지는 키패드, 터치 패널, 필기체 입력수단, 음성 인식수단을 갖는다. 휴대용 통신 단말기(100)는 피사체 촬영시에 감지되는 광신호를 전기적 신호로 변환하는 카메라 센서와, 카메라 센서로부터 얻어지는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부를 포함하는 카메라부를 포함하여 구현된다. 카메라 센서는 CCD로 구현 가능하며 신호처리부는 DSP로 구현 가능하다. 이러한 카메라 센서와 신호 처리부는 일체형으로 구현할 수 있으며 분리구현도 가능하다.The portable communication terminal 100 includes a communication unit 100 capable of communicating with the wired and wireless Internet and CDMA, W-CDMA, Bluetooth, a wireless LAN (WLAN) conforming to the IEEE 802.11 standard, Wi-Fi, WiBro A keypad including a microphone, numeric keys and function keys, a touch panel, a handwriting input means, and a voice recognition means. The portable communication terminal 100 includes a camera unit including a camera sensor for converting an optical signal sensed at the time of photographing a subject into an electrical signal and a signal processing unit for converting an analog video signal obtained from the camera sensor into digital data. Camera sensor can be realized by CCD and signal processing part can be implemented by DSP. Such a camera sensor and a signal processing unit can be integrally implemented and can be separated.

휴대용 통신 단말기(100)는 단말기의 동작을 전반적으로 제어하기 위한 프로그램 데이터가 저장되는 프로그램 메모리, 단말기 제어 동작시 발생하는 데이터를 일시 저장하기 위한 데이터 메모리, 그리고 본 발명의 실시예에 따라 촬영된 원 영상 이미지 데이터들을 저장하는 메모리와, 메모리에 저장된 제어 프로그램 데이터에 기초하여 카메라 폰의 동작을 전반적으로 제어하는 제어부를 포함한다. 휴대용 통신 단말기(100)에는 일례로, 카메라에서 출력되는 영상신호로부터 이미지 표준포맷(JPG, GIF, PNG, BMP 등) 규격으로 이미지 파일을 생성하고 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하여 이미지 파일에 삽입하여 저장하며 이미지 공유 서비스 서버로 전송하도록 하는 전용 앱(APP)이 탑재될 수 있다.
The portable communication terminal 100 includes a program memory for storing program data for overall control of the operation of the terminal, a data memory for temporarily storing data generated in the terminal control operation, A memory for storing video image data, and a control unit for controlling overall operation of the camera phone based on control program data stored in the memory. For example, the portable communication terminal 100 generates an image file in the image standard format (JPG, GIF, PNG, BMP, etc.) standard from a video signal output from a camera, converts a user voice signal inputted through a microphone into text (APP) which is inserted into an image file and stored and transmitted to an image sharing service server.

본 발명의 일 실시예에 따른 음성기반 이미지 파일 태깅장치(110)는 도 2에 도시한 바와 같이, 음성 처리부(111)와 영상신호 처리부(112)와 이미지 태깅부(113)와 정지영상 저장부(114)와 영상파일 전송부(115)를 포함하여 구현된다. 음성기반 이미지 파일 태깅장치(110)는 물리적인 하드웨어로 구현될 수도 있고, 앱 스토어(APP STORE)를 통해 다운로드되는 단말기 전용 앱(APP)으로 구현될 수도 있다.2, the voice-based image file tagging apparatus 110 according to an exemplary embodiment of the present invention includes a voice processing unit 111, an image signal processing unit 112, an image tagging unit 113, (114) and an image file transfer unit (115). The voice-based image file tagging apparatus 110 may be implemented by physical hardware or by a device-specific application (APP) downloaded through an APP STORE.

음성 처리부(111)는 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하는 STT(Sound-To-Text) 기능을 포함하여 구현될 수 있다. 일례로, 음성 처리부(111)는 음절 복원 규칙에 따라 복원 문자열을 생성한다. 한국어는 하나의 형태소 내부 또는 형태소와 형태소 사이에서 말소리가 바뀌는 음운 변동이 일어날 수 있다. 따라서, 음성 인식 과정에서 적용된 음운 변동을 역으로 해석하여 원래의 발화 문장으로 바꾸어주는 음절 복원 과정이 필요하다. 예를 들어,‘목적지’는‘목쩍찌’,‘길을’은‘기를’혹은‘?을’과 같이 인식될 수 있다. 이러한 경우, 인식된 정보는 음절 복원 규칙에 따라‘목쩍찌’는‘목적지’,‘부사느로’는‘부산으로’,‘설쩡함니다’는‘설정합니다’로 복원되어 복원 문자열을 생성할 수 있다. 또한 음성 처리부(111)는 복원 문자열에 대하여 추가적으로 형태소 분석을 통해 복원 문자열이 문법적으로 올바른 어절인지 여부를 판단하고 정확한 문자열을 결정할 수 있다.
The voice processing unit 111 may include a sound-to-text (STT) function for converting a user voice signal input through a microphone into text. For example, the voice processing unit 111 generates a restoration character string according to syllable restoration rules. In Korean, phonological fluctuations can occur within a single morpheme or between a morpheme and a morpheme. Therefore, a syllable restoration process is needed to reverse the applied phonological fluctuation in the speech recognition process to the original spoken sentence. For example, a 'destination' can be recognized as a 'peck', a 'way', a 'flag', or a '?' In this case, according to the syllable restoration rule, the recognized information is restored to 'Set', 'Restore' to 'Destination', 'Adverbial' to 'Busan' . In addition, the voice processing unit 111 may determine whether the restored character string is a correct word or not by correcting the restored character string by morphological analysis, and determine the correct character string.

영상신호 처리부(112)는 카메라에서 출력되는 영상신호를 프레임 단위로 신호 처리하여 출력한다. 이미지 태깅부(113)는 영상신호 처리부(112)에서 출력되는 프레임 단위의 원 영상 이미지를 캡쳐하여 적어도 JPEG, GIF, PNG, BMP 중 어느 하나의 포맷으로 이미지 파일을 생성하고, 음성 처리부(111)에서 처리된 이미지에 대한 설명데이터를 이미지 파일 내에 삽입한다. 예를 들어, JPEG의 경우 Application Marker 필드 내에 이미지에 대한 설명데이터가 삽입되며, GIF의 경우 Application Extension Block 필드 내에 이미지에 대한 설명데이터가 삽입된다.
The video signal processing unit 112 processes the video signal output from the camera in units of frames and outputs the signal. The image tagging unit 113 generates an image file in at least one of JPEG, GIF, PNG, and BMP by capturing an original image in units of frames output from the image signal processing unit 112, And inserts description data of the processed image in the image file. For example, in the case of JPEG, description data of an image is inserted in the Application Marker field, and in the case of GIF, description data of the image is inserted in the Application Extension Block field.

이미지 태깅부(113)는 이미지에 대한 설명데이터가 삽입될 이미지 파일의 특정 필드의 표준포맷규격 크기보다 큰 경우, 상기 이미지에 대한 설명데이터 중 일부만을 이미지 파일 내에 삽입한다. 예를 들어, 사용자가 마이크로“성산 일출봉 해돋이”라고 입력한 경우, 이미지 태깅부(113)는“성산 일출봉 해돋이”가 JPEG의 Application Marker 필드의 크기(2byte)를 초과하는 경우,“성산 일출봉 해돋이”에서, 해돋이를 삭제하고 “성산 일출봉”을 삽입한다.
The image tagging unit 113 inserts only part of the description data for the image into the image file if the description data for the image is larger than the standard format specification size of the specific field of the image file to be inserted. For example, when the user inputs a micro "Sunrise Sunrise Sunrise", the image tagging unit 113 sets the "Sunrise Sunrise Sunrise" as "Sunrise Sunrise Sunrise" exceeds the size of the JPEG Application Marker field (2 bytes) , Remove the sunrise and insert "Seongsan Ilchuk-ro".

정지영상 저장부(114)는 이미지에 대한 설명데이터가 삽입된 이미지 파일을 압축하여 메모리에 저장한다. 영상파일 전송부(115)는 메모리로부터 이미지 파일을 독출하여 통신부를 통해 이미지 공유 서비스 서버(150)로 전송한다. 영상파일 전송부(115)는 메모리에 저장된 이미지 파일들 중 시간적으로 가장 오래된 이미지 파일들을 미리 지정된 외부 서버로 전송하고 메모리에서 삭제하도록 구현될 수 있다. 일례로, 미리 지정된 외부 서버는 다음 카페, SNS, 싸이월드, 이미지 공유 서비스 서버(150)일 수 있다.The still image storage unit 114 compresses the image file in which the description data of the image is embedded, and stores the compressed image file in the memory. The image file transmission unit 115 reads an image file from the memory and transmits the image file to the image sharing service server 150 through the communication unit. The image file transfer unit 115 may be configured to transfer the oldest image files among the image files stored in the memory to the predetermined external server and delete the oldest image files from the memory. For example, the predetermined external server may be the next café, the SNS, the cyworld, and the image sharing service server 150.

본 발명에 따른 이미지 공유 서비스 서버(150)는 도 3에 도시한 바와 같이, 유무선 인터넷 및 CDMA, W-CDMA, 블루투스(Bluetooth), IEEE 802.11 표준을 따르는 무선랜(Wireless LAN, WLAN), 와이파이(Wi-Fi), 와이브로(WiBro) 통신이 가능한 통신부(151)와, 이미지 파일 분석부(152)와, 연관 단어 검색부(153)와, 이미지 검색 처리부(154)와, 이미지 데이터베이스(155)/연관모델 데이터베이스(156)/인덱스 데이터베이스(157)를 포함한다.
3, the image sharing service server 150 according to the present invention includes a wired / wireless Internet and a wireless LAN (WLAN) compliant with CDMA, W-CDMA, Bluetooth, IEEE 802.11 standard, An image file analysis unit 152, an associated word search unit 153, an image search processing unit 154, and an image database 155 / And an association model database 156 / index database 157.

이미지 파일 분석부(152)는 이미지 파일에서 이미지에 대한 설명데이터를 검출한다. 일례로, 이미지에 대한 설명데이터는“성산 일출봉”이고, 이미지는 성산 일출봉인 것으로 가정한다. 이미지 파일 분석부(152)는 검출한 설명데이터에 대해 형태소 분석을 수행하여 이미지에 대한 설명데이터에 포함된 단어를 획득한다. 이미지에 대한 설명데이터가“성산 일출봉”인 경우,“성산”,“일출봉”이라는 단어를 획득한다. The image file analyzing unit 152 detects descriptive data on the image in the image file. For example, the descriptive data for the image is " Seongsan Il peak, " and the image is assumed to be Seongsan Il peak. The image file analyzing unit 152 performs morphological analysis on the detected description data to obtain words included in the description data of the image. If the descriptive data for the image is " Sacred Mountain Peak ", the words " Sacred Mountain ", "

연관 단어 검색부(153)는 단어에 대한 연관 분석을 수행하여 이미지 파일 분석부(152)서 획득한 단어와 연관관계를 갖는 복수개의 단어를 연관모델 데이터베이스(156)에서 검색한다(S414). 일례로,“성산”,“일출봉”이라는 단어와 연관관계를 갖는 단어로“제주도”,“서귀포”,“섭지코지”,“해녀촌”를 연관모델 데이터베이스(156)에서 검색할 수 있다.
The related word searching unit 153 performs association analysis on words and searches the association model database 156 for a plurality of words associated with the words acquired in the image file analyzing unit 152 at step S414. For example, the association model database 156 can search for "Jeju Island", "Seogwipo", "Seoji Koji", and "Haenyeongchon" as words associated with the words "Seongsan" and "

연관모델이란 단어들 간의 연관관계를 기반으로 모델링(Modeling)한 데이터 구조로서, 그 대표적인 예로 온톨로지(Ontology)가 있다. 온톨로지란 지식의 특정 영역 내에 존재하는 실체 및 상호작용의 작업모델로서, 일정한 추론 규칙에 따라 특정 단어와 연관된 단어들이 계층적으로 연결된다. 연관모델 데이터베이스(156)에는 일정한 추론 규칙에 따라 특정 단어와 연관된 단어들이 계층적으로 저장되어 있다. An association model is a data structure that is modeled based on the relationship between words, and ontology is a representative example thereof. An ontology is a working model of entities and interactions that exist within a specific area of knowledge, and words associated with a particular word are hierarchically linked according to certain inference rules. In association model database 156, words associated with specific words are hierarchically stored according to a certain reasoning rule.

이미지 공유 서비스 서버(150)는 이미지에 대한 설명데이터에 포함된 단어와 연관된 단어를 이미지 파일에 대한 색인정보로 인덱스 데이터베이스(157)에 저장한다. 이미지 검색 처리부(154)는 휴대용 통신 단말기로부터 검색 키워드를 포함하는 이미지 검색요청정보가 입력되면, 검색 키워드와 동일 또는 검색 키워드를 포함하는 단어를 인덱스 데이터베이스(157)로부터 검색하고, 검색된 단어에 해당하는 이미지 파일을 이미지 데이터베이스(155)에서 읽어들인다. 이후, 이미지 검색 처리부(154)는 이미지 데이터베이스(155)에서 읽어들인 이미지 파일을 휴대용 통신 단말기로 전송한다.
The image sharing service server 150 stores the words associated with the words included in the descriptive data on the image in the index database 157 as index information on the image file. When the image search request information including the search keyword is inputted from the portable communication terminal, the image search processing unit 154 searches the index database 157 for a word that is the same as the search keyword or includes the search keyword, The image file is read from the image database 155. Then, the image search processing unit 154 transmits the image file read from the image database 155 to the portable communication terminal.

본 발명에 따른 클라우드 서비스 기반 이미지 공유 서비스 서버에서 실행되는 이미지 파일 검색방법은 도 4a, 도4b 에 도시한 바와 같이, 먼저, 이미지 공유 서비스 서버는 휴대용 통신 단말기로부터 이미지에 대한 설명데이터가 삽입된 이미지 파일을 수신한다(S411). 이미지 파일은 JPEG, GIF, PNG, BMP 일 수 있으며, 예를 들어, JPEG의 경우 Application Marker 필드 내에 이미지에 대한 설명데이터가 삽입되며, GIF의 경우 Application Extension Block 필드 내에 이미지에 대한 설명데이터가 삽입된다.
4A and 4B illustrate an image file search method executed by the cloud service based image sharing service server according to the present invention. First, the image sharing service server extracts image data And receives the file (S411). The image file may be JPEG, GIF, PNG, or BMP. For example, description data for an image is inserted in an Application Marker field for JPEG, and description data for an image is inserted in an Application Extension Block field for GIF .

이후, 이미지 공유 서비스 서버는 단계 S411에서 수신한 이미지 파일에서 이미지에 대한 설명데이터를 검출한다(S412). 일례로, 이미지에 대한 설명데이터는“성산 일출봉”이고, 이미지는 성산 일출봉인 것으로 가정한다. 이미지 공유 서비스 서버는 단계 S412에서 검출한 설명데이터에 대해 형태소 분석을 수행하여 상기 이미지에 대한 설명데이터에 포함된 단어를 획득한다(S413). 이미지에 대한 설명데이터가“성산 일출봉”인 경우,“성산”,“일출봉”이라는 단어를 획득한다.
Thereafter, the image sharing service server detects descriptive data on the image in the image file received in step S411 (S412). For example, the descriptive data for the image is " Seongsan Il peak, " and the image is assumed to be Seongsan Il peak. The image sharing service server performs morpheme analysis on the descriptive data detected in step S412 to acquire words included in the descriptive data of the image (S413). If the descriptive data for the image is " Sacred Mountain Peak ", the words " Sacred Mountain ","

이후, 이미지 공유 서비스 서버는 단계 S413에서 획득한 단어에 대한 연관 분석을 수행하여 단계 S413에서 획득한 단어와 연관관계를 갖는 복수개의 단어를 연관모델 데이터베이스에서 검색한다(S414). 일례로,“성산”,“일출봉”이라는 단어와 연관관계를 갖는 단어로“제주도”,“서귀포”,“섭지코지”,“해녀촌”를 연관모델 데이터베이스에서 검색할 수 있다.
In step S414, the image sharing service server performs association analysis on the acquired word in step S413, and searches the association model database for a plurality of words associated with the acquired word in step S413. For example, "Jeju Island", "Seogwipo", "Seoji Koji" and "Haenyeongchon" can be retrieved from the associated model database with words related to the words "Seongsan" and "

이후, 이미지 공유 서비스 서버는 단계 S413에서 획득한 이미지에 대한 설명데이터에 포함된 단어와 단계 S414에서 검색한 연관된 단어를 단계 S411에서 수신한 이미지 파일에 대한 색인정보로 인덱스 데이터베이스에 저장한다(S415). 이에 따라 사용자는 음성기반 이미지 파일 태깅장치가 탑재된 휴대용 통신 단말기에서 사진을 촬영한 후,“성산 일출봉”이라는 음성을 마이크를 통해 입력하기만 하면, 이미지 공유 서비스 서버에 “성산 일출봉”이라는 텍스트에 포함된 “성산”,“일출봉”이라는 단어와 연관관계를 갖는“제주도”,“서귀포”,“섭지코지”,“해녀촌”이라는 연관 단어들을 이미지 파일에 대한 색인정보로 인덱스 데이터베이스에 자동으로 저장할 수 있게 되는 것이다.
Then, the image sharing service server stores the words included in the description data of the image acquired in step S413 and the associated word retrieved in step S414 as index information on the image file received in step S411 (step S415) . Accordingly, after the user takes a picture on the portable communication terminal equipped with the voice-based image file tagging device and then inputs a voice called " Seongsan Ilchulbong " through the microphone, the user can input the text " Seongsan Ilchulbong Related words such as "Jeju Island", "Seogwipo", "Seoji Koji", and "Haenyeongchon", which are associated with the words "Seongsan" and "Sunrise Hill", are automatically stored in the index database as index information about image files It will be possible.

이후, 이미지 공유 서비스 서버는 네트워크로 연결된 휴대용 통신 단말기로부터 검색 키워드를 포함하는 이미지 검색요청정보가 입력되면(S416), 검색 키워드와 동일 또는 검색 키워드를 포함하는 단어를 인덱스 데이터베이스로부터 검색하고(S417), 검색된 단어에 해당하는 이미지 파일을 이미지 데이터베이스에서 읽어들인다(S418). 이후, 이미지 공유 서비스 서버는 이미지 데이터베이스에서 읽어들인 이미지 파일을 상기 휴대용 통신 단말기로 전송한다(S419).
When the image search request information including the search keyword is input from the portable communication terminal connected to the network in operation S416, the image sharing service server retrieves the same or the word including the search keyword from the index database in operation S417. , And reads an image file corresponding to the searched word from the image database (S418). Thereafter, the image sharing service server transmits the image file read from the image database to the portable communication terminal (S419).

지금까지, 본 명세서에는 본 발명이 속하는 기술 분야에서 통상의 지식을 지닌 자가 본 발명을 용이하게 이해하고 재현할 수 있도록 도면에 도시한 실시예들을 참고로 설명되었으나 이는 예시적인 것에 불과하며, 당해 기술분야에 통상의 지식을 지닌 자라면 본 발명의 실시예들로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위에 의해서만 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Accordingly, the true scope of the present invention should be determined only by the appended claims.

Claims (7)

마이크와 카메라와 메모리와 통신부를 포함하는 휴대용 통신 단말기에 탑재되는 음성기반 이미지 파일 태깅장치로서,
상기 마이크를 통해 입력되는 사용자 음성신호를 텍스트로 변환하는 음성 처리부;
상기 카메라에서 출력되는 영상신호를 프레임 단위로 신호 처리하여 출력하는 영상신호 처리부;
상기 영상신호 처리부에서 출력되는 프레임 단위의 원 영상 이미지를 캡쳐하여 이미지 파일을 생성하고, 상기 음성 처리부에서 처리된 상기 이미지에 대한 설명데이터를 상기 이미지 파일 내에 삽입하되 상기 이미지에 대한 설명데이터가 삽입될 이미지 파일의 특정 필드의 표준포맷규격 크기보다 큰 경우, 상기 이미지에 대한 설명데이터 중 상기 특정 필드의 표준포맷규격에 해당하는 설명데이터의 앞부분만을 상기 이미지 파일 내에 삽입하는 이미지 태깅부;
상기 이미지에 대한 설명데이터가 삽입된 이미지 파일을 압축하여 상기 메모리에 저장하는 정지영상 저장부; 및
상기 메모리로부터 이미지 파일을 독출하여 상기 통신부를 통해 미리 지정된 외부 서버로 전송하는 영상파일 전송부;
를 포함함을 특징으로 하는 음성기반 이미지 파일 태깅장치.
1. A voice-based image file tagging apparatus mounted on a portable communication terminal including a microphone, a camera, a memory, and a communication unit,
A voice processor for converting a user voice signal input through the microphone into text;
A video signal processor for signal processing and outputting a video signal output from the camera on a frame basis;
A description will be given of a case where description data of the image processed by the voice processing unit is inserted into the image file, and description data of the image is inserted An image tagging unit for inserting only the leading part of the description data corresponding to the standard format standard of the specific field among the description data for the image, when the size of the image data is larger than the standard format standard size of the specific field of the image file;
A still image storage unit for compressing an image file in which descriptive data on the image is embedded and storing the compressed image file in the memory; And
An image file transfer unit for reading an image file from the memory and transferring the image file to a predetermined external server through the communication unit;
Based image file tagging device.
청구항 1에 있어서,
상기 음성 처리부는 음절 복원 규칙에 따라 복원 문자열을 생성하는 것,
을 특징으로 음성기반 이미지 파일 태깅장치.
The method according to claim 1,
The voice processing unit generates a restoration character string according to syllable restoration rules,
Based image file tagging apparatus.
청구항 1에 있어서,
상기 음성기반 이미지 파일 태깅장치는 스마트폰, 노트북, 태블릿 PC, 또는 카메라 연결이 가능한 워치폰(Watch Phone) 중 어느 하나에 탑재되는 것을 특징으로 음성기반 이미지 파일 태깅장치.
The method according to claim 1,
Wherein the voice-based image file tagging device is mounted on any one of a smart phone, a notebook, a tablet PC, or a watch phone capable of connecting to a camera.
청구항 1에 있어서,
상기 이미지 태깅부는, JPEG, GIF, PNG, BMP 중 어느 하나의 포맷으로 이미지 파일을 생성하는 것,
을 특징으로 음성기반 이미지 파일 태깅장치.
The method according to claim 1,
The image tagging unit may generate an image file in one of JPEG, GIF, PNG, and BMP formats,
Based image file tagging apparatus.
청구항 1에 있어서,
상기 영상파일 전송부는,
상기 메모리에 저장된 이미지 파일들 중 시간적으로 가장 오래된 이미지 파일들을 미리 지정된 외부 서버로 전송하고 상기 메모리에서 삭제하는 것,
을 특징으로 음성기반 이미지 파일 태깅장치.
The method according to claim 1,
Wherein the image file transfer unit comprises:
Transmitting the oldest image files in time from the image files stored in the memory to a predetermined external server and deleting the oldest image files from the memory,
Based image file tagging apparatus.
청구항 1 내지 청구항 5 중 어느 한 항에 기재된 음성기반 이미지 파일 태깅장치가 탑재되는 휴대용 통신 단말기와 네트워크를 통해 연결되는 클라우드 서비스 기반 이미지 공유 서비스 서버에서 실행되는 이미지 파일 검색방법으로서,
상기 이미지 공유 서비스 서버가 휴대용 통신 단말기로부터 이미지에 대한 설명데이터가 삽입된 이미지 파일을 입력받아 저장하는 단계;
상기 이미지 파일에서 이미지에 대한 설명데이터를 검출하는 단계;
상기 이미지에 대한 설명데이터에 대해 형태소 분석을 수행하여 상기 이미지에 대한 설명데이터에 포함된 단어를 획득하는 단계;
상기 획득한 단어와 연관관계를 갖는 복수개의 단어를 연관모델 데이터베이스에서 검색하는 단계;
상기 이미지에 대한 설명데이터에 포함된 단어와 상기 검색한 연관된 단어를 이미지 파일에 대한 색인정보로 저장하는 단계;
네트워크로 연결된 휴대용 통신 단말기로부터 검색 키워드를 포함하는 이미지 검색요청정보가 입력되면, 상기 검색 키워드와 동일 또는 상기 검색 키워드를 포함하는 단어 또는 상기 검색 키워드와 연관된 단어를 인덱스 데이터베이스로부터 검색하고, 검색된 단어에 해당하는 이미지 파일을 이미지 데이터베이스에서 읽어들이는 단계; 및
상기 이미지 데이터베이스에서 읽어들인 이미지 파일을 상기 휴대용 통신 단말기로 전송하는 단계;
를 포함하는 것을 특징으로 클라우드 서비스 기반 이미지 파일 검색방법.
A method for searching an image file executed in a cloud service-based image sharing service server connected via a network with a portable communication terminal equipped with the voice-based image file tagging apparatus according to any one of claims 1 to 5,
Receiving the image file in which the image sharing service server inserts the descriptive data of the image from the portable communication terminal and storing the received image file;
Detecting description data for an image in the image file;
Performing morpheme analysis on explanatory data on the image to obtain words included in explanatory data on the image;
Retrieving from the association model database a plurality of words associated with the acquired word;
Storing a word included in the descriptive data of the image and the searched related word as index information on the image file;
When the image search request information including the search keyword is input from the portable communication terminal connected to the network, a word including the search keyword or a word associated with the search keyword is searched from the index database, Reading the corresponding image file from the image database; And
Transmitting an image file read from the image database to the portable communication terminal;
The method comprising the steps of:
청구항 6에 있어서, 상기 휴대용 통신 단말기는 스마트폰, 노트북, 태블릿 PC, 또는 카메라 연결이 가능한 워치폰(Watch Phone) 중 어느 하나인 것,
을 특징으로 클라우드 서비스 기반 이미지 파일 검색방법.
The mobile communication terminal of claim 6, wherein the portable communication terminal is one of a smart phone, a notebook, a tablet PC, or a watch phone capable of connecting to a camera,
A cloud service based image file search method.
KR1020140012154A 2014-02-03 2014-02-03 Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same KR101592981B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140012154A KR101592981B1 (en) 2014-02-03 2014-02-03 Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140012154A KR101592981B1 (en) 2014-02-03 2014-02-03 Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same

Publications (2)

Publication Number Publication Date
KR20150092390A KR20150092390A (en) 2015-08-13
KR101592981B1 true KR101592981B1 (en) 2016-02-12

Family

ID=54056696

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140012154A KR101592981B1 (en) 2014-02-03 2014-02-03 Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same

Country Status (1)

Country Link
KR (1) KR101592981B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019146942A1 (en) * 2018-01-26 2019-08-01 삼성전자주식회사 Electronic apparatus and control method thereof
KR20200054350A (en) 2018-11-02 2020-05-20 (주)구름연구소 Voice information service operation method voice information service operation system based on cloud

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102252072B1 (en) 2014-10-14 2021-05-14 삼성전자주식회사 Method and Apparatus for Managing Images using Voice Tag
CN107016109B (en) * 2017-04-14 2018-11-30 维沃移动通信有限公司 A kind of photo film making method and mobile terminal
KR102196199B1 (en) * 2017-12-05 2020-12-30 라이브픽쳐스(주) Photograph sharing method, apparatus and system based on voice recognition
KR102144492B1 (en) * 2020-01-16 2020-08-13 송혜선 Image Memorizing and Checking Smart Terminal by Using Voice Data and Method Thereof

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005276187A (en) 2004-02-26 2005-10-06 Sharp Corp Method for identifying image and terminal apparatus

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100802915B1 (en) * 2006-06-01 2008-02-14 (주) 엘지텔레콤 Tag-based picture file management method
KR100856407B1 (en) * 2006-07-06 2008-09-04 삼성전자주식회사 Data recording and reproducing apparatus for generating metadata and method therefor
KR101436325B1 (en) * 2008-07-30 2014-09-01 삼성전자주식회사 Method and apparatus for configuring thumbnail image of video
KR20130078376A (en) 2011-12-30 2013-07-10 김시복 Information coupling device for transferring and combining a text data at an image of the video data and controlling method therefor
KR101868637B1 (en) 2012-02-16 2018-06-18 삼성전자주식회사 Methods for encoding and decoding image files, machine-readable storage medium and communication terminal

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005276187A (en) 2004-02-26 2005-10-06 Sharp Corp Method for identifying image and terminal apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019146942A1 (en) * 2018-01-26 2019-08-01 삼성전자주식회사 Electronic apparatus and control method thereof
KR20200054350A (en) 2018-11-02 2020-05-20 (주)구름연구소 Voice information service operation method voice information service operation system based on cloud

Also Published As

Publication number Publication date
KR20150092390A (en) 2015-08-13

Similar Documents

Publication Publication Date Title
KR101592981B1 (en) Apparatus for tagging image file based in voice and method for searching image file based in cloud services using the same
KR101198744B1 (en) Apparatus, method and computer program product for using images in contact lists maintained in electronic devices
US20120062766A1 (en) Apparatus and method for managing image data
KR101782923B1 (en) Method, apparatus, program and recording medium for determining similarity and terminal
US20080320033A1 (en) Method, Apparatus and Computer Program Product for Providing Association of Objects Using Metadata
US9973649B2 (en) Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program
EP2980737A1 (en) Method, apparatus, and system for providing translated content
US20150278248A1 (en) Personal Information Management Service System
JP2008083863A (en) Content management device, web server, network system, content management method, content information management method and program
CN104158945A (en) Conversation information obtaining method, device and system
KR20130072138A (en) Image sensing apparatus, information processing apparatus and control method
US20110305406A1 (en) Business card recognition system
KR101871779B1 (en) Terminal Having Application for taking and managing picture
KR20140060217A (en) System and method for posting message by audio signal
JP2007018166A (en) Information search device, information search system, information search method, and information search program
JP6056375B2 (en) Information processing system, information processing method, and computer program
KR102196199B1 (en) Photograph sharing method, apparatus and system based on voice recognition
CN108255917B (en) Image management method and device and electronic device
US20160335500A1 (en) Method of and system for generating metadata
JP2007052581A (en) Metadata generation device, metadata generation system, processing method in them and program making computer execute the method
US20120179676A1 (en) Method and apparatus for annotating image in digital camera
CN104252475A (en) Method and device for positioning text messages in picture
JP6107003B2 (en) Dictionary updating apparatus, speech recognition system, dictionary updating method, speech recognition method, and computer program
KR101135222B1 (en) Method of managing multimedia file and apparatus for generating multimedia file
JP5059080B2 (en) Voice information retrieval system and voice information retrieval method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190201

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20200213

Year of fee payment: 5