KR101871779B1 - 사진 촬영 및 관리 어플리케이션을 구비한 단말기 - Google Patents

사진 촬영 및 관리 어플리케이션을 구비한 단말기 Download PDF

Info

Publication number
KR101871779B1
KR101871779B1 KR1020170086402A KR20170086402A KR101871779B1 KR 101871779 B1 KR101871779 B1 KR 101871779B1 KR 1020170086402 A KR1020170086402 A KR 1020170086402A KR 20170086402 A KR20170086402 A KR 20170086402A KR 101871779 B1 KR101871779 B1 KR 101871779B1
Authority
KR
South Korea
Prior art keywords
voice
photo
photographing
user
photograph
Prior art date
Application number
KR1020170086402A
Other languages
English (en)
Inventor
김태수
Original Assignee
김태수
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김태수 filed Critical 김태수
Priority to KR1020170086402A priority Critical patent/KR101871779B1/ko
Application granted granted Critical
Publication of KR101871779B1 publication Critical patent/KR101871779B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72522—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G06F17/30268—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/74—Details of telephonic subscriber devices with voice recognition means

Abstract

본 발명의 실시 형태는 사용자 단말기에 설치되어 사진 촬영 및 사진 관리를 하는 어플리케이션이, 사진 촬영이 있은 후 촬영된 사진, 촬영 시간 정보, 및 촬영 위치 정보가 포함된 사진 파일을 생성하는 사진 파일 생성부; 촬영된 사진에 대해서 태그 역할을 하는 사용자 음성을 인식하여 텍스트로 변환한 STT 텍스트를 사진 파일에 기록하는 사용자 음성 기록부; 사진, 촬영 시간 정보, 촬영 위치 정보, 및 사용자 음성인식을 통해 기록된 STT 텍스트가 포함된 사진 파일들을 사진 갤러리 데이터베이스에 저장하는 사진 갤러리 저장부; 상기 갤러리 데이터베이스에 저장된 사진 파일들의 리스트를 리스트 갤러리뷰로서 표시하여, 상기 리스트 갤러리뷰 중에서 사용자로부터 선택된 사진 파일의 사진을 확대하여 확대 갤러리뷰로서 표시하는 사진 갤러리 제공부; 및 사진 검색 모드로 동작하는 경우, 상기 리스트 갤러리뷰 중에서 음성 검색을 통해 입력되는 검색 음성과 매칭되는 사용자 음성을 가지는 사진 파일을 추출하여 표시하는 음성 검색 제공부;를 포함할 수 있다.

Description

사진 촬영 및 관리 어플리케이션을 구비한 단말기{Terminal Having Application for taking and managing picture}
본 발명은 사진 촬영/관리 어플리케이션으로서 사진을 촬영하고 사진을 관리하는 사진 촬영/관리 어플리케이션을 구비한 단말기에 관한 것이다.
현대사회는 기술혁신에 힘입어 이동통신산업이 급속히 발전하고 있다. 이러한 이동통신산업의 성장세는 디지털방송, 차세대 이동통신(4G), 무선 데이터통신(무선랜, 휴대인터넷) 등의 새로운 기술 및 서비스들의 발전으로 이어짐으로써, 정보통신 산업은 고부가 가치를 창출하는 새로운 성장동력이 되었다.
이러한 상황 가운데, 무선인터넷, 고화질 디지털 TV, 고화질 카메라 등과 같은 부가서비스들과 이동통신단말기가 통합된 신개념 단말기들이 개발 출시되고 있다. 그 중에서 고화질 카메라폰은 현대인들에게 큰 인기를 얻어, 생활필수품으로 자리매김하고 있다. 따라서, 이동통신사업자들은 사용자들의 카메라(110)폰 사용에 따른 편리성을 제공하기 위해, 카메라폰으로 촬영한 사진파일의 관리방법에 연구를 집중하고 있다. 이때, 종래 카메라폰을 통해 촬영한 사진파일을 저장하는 방법으로는 촬영된 사진파일에 의미를 구분할 수 없는 임의의 숫자(001.jpg)나 촬영시점(2006009.jpg으로 사진 이름을 강제로 부여하여 저장하는 방식을 사용하였다.
또한 주로 사진의 촬영 형태에서는 인물을 중심으로 촬영하였으며 여행지 또는 일상생활에서 얻을 수 있는 주의 정보를 뒷 배경으로 인물사진이 주를 이루고 있다.
하지만, 이러한 종래의 사진파일 관리방법에 의하면, 파일이 많이 저장되어 있거나, 또는 저장된지 오래된 파일들에 대해 사용자가 자신이 원하는 사진파일을 검색하고자 할 경우, 사진이름만으론 원하는 사진을 찾기가 불가능하고, 사진의 촬영당시의 감성이 잊혀진 채로 언제 촬영을 하였는지 시간이 흐름으로 인하여 흐릿한 기억이나 착각의 기억을 갖게 되기 일수 이다. 이로 인해 사용자가 미리 보기를 통해 사진을 일일이 검색해야 하는 번거로운 문제점이 있었다.
또한 촬영당시의 감성을 나타내기 위하여 별도의 편집프로그램(포토샵, 페인트 등)을 통해 이모티콘이나 텍스트 삽입 등의 꾸미기 작업을 해야하는 문제점이 있었다.
한국동록특허 제10-1170877호
본 발명의 기술적 과제는 사진을 촬영하고 음성인식으로 사진속에 원본의 사진을 유지한채 찰영당시의 감성을 글로 나타내어 사진을 볼 때 사진위에 글로 그때의 추억을 기록하게 되며 그 기록을 이용하여 사진을 관리하는 사진 촬영 및 관리 어플리케이션을 구비한 단말기를 제공하는데 있다.
본 발명의 실시 형태는 사용자 단말기에 설치되어 사진 촬영 및 사진 관리를 하는 어플리케이션이, 사진 촬영이 있은 후 촬영된 사진, 촬영 시간 정보, 및 촬영 위치 정보가 포함된 사진 파일을 생성하는 사진 파일 생성부; 촬영된 사진에 대해서 태그 역할을 하는 사용자 음성을 인식하여 텍스트로 변환한 STT 텍스트를 사진 파일에 기록하는 사용자 음성 기록부; 사진, 촬영 시간 정보, 촬영 위치 정보, 및 사용자 음성인식을 통해 기록된 STT 텍스트가 포함된 사진 파일들을 사진 갤러리 데이터베이스에 저장하는 사진 갤러리 저장부; 상기 갤러리 데이터베이스에 저장된 사진 파일들의 리스트를 리스트 갤러리뷰로서 표시하여, 상기 리스트 갤러리뷰 중에서 사용자로부터 선택된 사진 파일의 사진을 확대하여 확대 갤러리뷰로서 표시하는 사진 갤러리 제공부; 및 사진 검색 모드로 동작하는 경우, 상기 리스트 갤러리뷰 중에서 음성 검색을 통해 입력되는 검색 음성과 매칭되는 사용자 음성을 가지는 사진 파일을 추출하여 표시하는 음성 검색 제공부;를 포함할 수 있다.
상기 사진 갤러리 제공부는, 사진 갤러리 데이터베이스에 저장된 사진 파일들을 최신 촬영 순서대로 정렬하여 최신순 리스트 갤러리뷰로서 표시하거나, 또는 사진 갤러리 데이터베이스에 저장된 사진 파일들을 지역별, 내용별로 정렬하여 지역별 리스트 갤러리뷰로서 표시할 수 있다.
상기 확대 갤러리뷰는, 확대된 사진이 표시되는 사진 표시 필드; 촬영 시간 정보, 및 촬영 위치 정보가 표시되는 촬영 상세 정보 표시 필드; 및 지도상에 사진 촬영된 위치를 표시한 지도 표시 필드;를 포함할 수 있다.
상기 사진 촬영/관리 어플리케이션은, 사진의 기록내용, 시간, 장소에 맞게 지도에 사진을 나열하여 여정이 나타나도록 하는 여행 일기 지도 및 블로그 형태의 맛집, 생활일기를 제공하는 여행 일기 제공부;를 포함할 수 있다.
상기 사진 파일은, 사용자 음성을 인식하여 변환된 STT 텍스트가 기록되는 사용자 STT 텍스트 필드, 촬영 시간 정보와 촬영 위치 정보가 기록되는 촬영 정보 데이터 필드, 촬영된 사진이 기록되는 사진 데이터 필드가 포함된 데이터 프레임의 구조를 가질 수 있다.
상기 음성 검색 제공부는, 음성 검색을 통해 입력되는 검색 음성의 단어나 문구를 추출하여, 추출한 검색 음성의 단어나 문구와 매칭되는 사용자 STT 텍스트 필드를 가지는 사진 파일을 추출하는 표시할 수 있다.
상기 사용자 음성 기록부는, 입력되는 사용자 음성의 음성 특징점을 파악하여 파악된 음성 특징점을 상기 사용자 STT 텍스트 필드에 기록하며, 상기 음성 검색 제공부는, 음성 검색을 통해 입력되는 검색 음성의 음성 특징점을 파악하거나, 텍스트의 내용에서 얻어지는 단어나 문구를 통해 파악된 검색 음성의 음성 특징점과 기록된 텍스트에서 매칭되는 사용자 STT 텍스트 필드를 가지는 사진 파일을 추출하는 표시할 수 있다.
본 발명의 실시 형태에 따르면 음성을 이용하여 사진을 관리함로써 손쉬운 검색 및 관리가 가능하다.
도 1은 본 발명의 실시예에 따른 사용자 단말기의 사시도.
도 2는 본 발명의 실시예에 따른 사용자 단말기의 구성 블록도.
도 3은 본 발명의 실시예에 따른 사진 촬영 어플리케이션의 구성 블록도.
도 4는 본 발명의 실시예에 따른 사진 촬영 및 음성 입력 화면을 도시한 그림.
도 5는 본 발명의 실시예에 따른 사진 갤러리뷰의 표시 과정을 도시한 그림.
도 6은 본 발명의 실시예에 따른 최신순, 지역별, 내용의 단어나 문구로 정렬된 리스트 갤러리뷰의 예시 그림.
도 7은 본 발명의 실시예에 따라 음성 검색을 통해 사진을 검색하는 모습을 도시한 그림.
도 8은 본 발명의 실시예에 따른 사진 파일의 데이터 프레임 구조를 도시한 그림.
이하, 본 발명의 장점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은, 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것으로, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 또한, 본 발명을 설명함에 있어 관련된 공지 기술 등이 본 발명의 요지를 흐리게 할 수 있다고 판단되는 경우 그에 관한 자세한 설명은 생략하기로 한다.
도 1은 본 발명의 실시예에 따른 사용자 단말기의 사시도이며, 도 2는 본 발명의 실시예에 따른 사용자 단말기의 구성 블록도이다.
본 발명의 사용자 단말기(100)는 사진 촬영 후 음성으로 내용을 말하면 이를 인식하여 자동으로 그 내용이 사진에 표시되면서 GPS와 연동되어 장소와 시간이 자동으로 사진에 같이 표시되도록 한다. 아울러 터치하는 횟수에 맞게 원본 사진이 음성의 내용이 사진에 함께 표시되어 교번되게 표시한다.
본 발명의 사용자 단말기(100)는 도 1에 도시한 바와 같이 스마트폰(smart phone)을 예로 들어 설명하나, 스마트폰만 아니라 데스크탑 PC(desktop PC), 태블릿 PC(tablet PC), 슬레이트 PC(slate PC), 노트북 컴퓨터(notebook computer), 디지털 카메라(110)(Digital Camera) 등이 해당될 수 있다. 물론, 본 발명이 적용 가능한 단말기는 상술한 종류에 한정되지 않고, 카메라(110)를 구비하여 음성을 입력받을 수 있는 단말기를 모두 포함할 수 있음은 당연하다.
사용자 단말기(100)는 도 2에 도시한 바와 같이, 카메라(110), 마이크(120), GPS 위치 산출부(130), 표시부(140), 입력부(150), 메모리(160), 및 제어부(170)를 포함한다.
카메라(110)는, 풍경, 사람 등을 촬영하여 사진을 생성하는 유닛으로서, 렌즈 어셈블리, 필터, 광전 변환 모듈, 및 아날로그/디지털 변환 모듈을 포함할 수 있다. 렌즈 어셈블리는 줌 렌즈, 포커스 렌즈 및 보상 렌즈를 포함할 수 있으며, 아날로그/디지털 변환 모듈(미도시)은 광전 변환 모듈(OEC)로부터의 아날로그 신호를 처리하여, 그 고주파 노이즈를 제거하고 진폭을 조정한 후 디지털 신호의 사진으로 변환시켜 출력한다.
마이크(120)는 사용자 음성을 입력받는 모듈이다.
GPS 위치 산출부(130)는, 적어도 세 개 이상의 GPS 위성으로부터 수신한 GPS 정보를 이용하여 사용자 단말기(100)의 위치 정보를 산출한다.
표시부(140)는, 사진 촬영시의 촬영 화면, 촬영된 사진들의 리스트 및 확대 갤러리뷰 등을 표시하는 표시창이다.
입력부(150)는, 사진 촬영을 위한 입력, 사진 선택 등의 사용자 입력을 받는 모듈로서, 입력부(150)와 표시부(140)는 터치스크린패널의 단일 형태로 구현될 수 있다. 터치스크린패널은, 입력과 표시를 동시에 수행할 수 있는 터치 스크린 화면을 제공하여 단말기의 전면에 마련되어 작업 화면을 표시하는 표시창으로서, 학습자와의 소통을 위한 그래픽 유저 인터페이스(GUI;Graphic User Interface)를 표시한다.
메모리(160)는, 사진, 촬영 시간 정보, 촬영 위치 정보, 및 사용자 음성이 포함된 사진 파일들이 저장되는 저장체이다. 이러한 메모리(160)는, 플래시메모리(Flash Memory), CF카드(Compact Flash Card), SD카드(Secure Digital Card), SM카드(Smart Media Card), MMC 카드(Multi-Media Card) 또는 메모리 스틱(Memory Stick) 등 정보의 입출력이 가능한 모듈로서 장치의 내부에 구비되어 있을 수도 있고, 별도의 장치에 구비되어 있을 수도 있다
제어부(170)는, 사용자 단말기(100)의 각 기능 모듈을 제어하는 MCU(Main Control Unit)로 구현되어 있어, 사진 촬영/관리 어플리케이션이 설치되어 구동된다. 사진 촬영/관리 어플리케이션은, 사진 촬영이 있은 후 촬영된 사진, 촬영 시간 정보, 및 촬영 위치 정보, 사용자 음성이 변환된 STT 텍스트가 포함된 사진 파일을 생성하여 저장하며, 사진 열람 모드로 동작하는 경우, 갤러리 데이터베이스에 저장된 사진 파일들의 리스트를 리스트 갤러리뷰로서 표시하여, 상기 리스트 갤러리뷰 중에서 사용자로부터 선택된 사진 파일의 사진을 확대하여 확대 갤러리뷰로서 표시한다. 또한 사진 검색 모드로 동작하는 경우, 리스트 갤러리뷰 중에서 음성 검색을 통해 입력되는 검색 음성과 매칭되는 STT 텍스트를 가지는 사진 파일을 추출하여 표시한다. 이러한 사진 촬영/관리 어플리케이션에 대해서는 후술할 도 3과 함께 상술한다.
참고로, 스마트폰(smart phone) 등으로 구현되는 사용자 단말기(100)는, 수백여 종의 다양한 어플리케이션(응용프로그램)을 사용자가 원하는 대로 설치하고 추가 또는 삭제할 수 있어, 사용자가 원하는 어플리케이션을 직접 제작할 수도 있으며, 다양한 어플리케이션을 통하여 자신에게 알맞은 인터페이스를 구현할 수 있다. 따라서 구글마켓, 애플스토어 등에서 어플리케이션(앱)을 다운로드받아 스마트폰에 설치할 수 있다.
도 3은 본 발명의 실시예에 따른 사진 촬영 어플리케이션의 구성 블록도이며, 도 4는 본 발명의 실시예에 따른 사진 촬영 및 음성 입력 화면을 도시한 그림이며, 도 5는 본 발명의 실시예에 따른 사진 갤러리뷰의 표시 과정을 도시한 그림이며, 도 6은 본 발명의 실시예에 따른 최신순, 지역별, 내용의 단어나 문구로 정렬된 리스트 갤러리뷰의 예시 그림이며, 도 7은 본 발명의 실시예에 따라 음성 검색을 통해 사진을 검색하는 모습을 도시한 그림이며, 도 8은 본 발명의 실시예에 따른 사진 파일의 데이터 프레임 구조를 도시한 그림이다.
사진 촬영/관리 어플리케이션은, 사용자 단말기(100)에 설치되어 사진 촬영 및 사진 관리를 하는 어플리케이션(APP;application)으로서, 사진 파일 생성부(171), 사용자 음성 기록부(172), 사진 갤러리 저장부(173), 사긴 갤러리 제공부(174), 및 음성 검색 제공부(150)를 포함할 수 있다. 이밖에 여행 일기 제공부(176)를 추가로 더 포함할 수 있다.
사진 파일 생성부(171)는, 사진 촬영이 있은 후 촬영된 사진, 촬영 시간 정보, 및 촬영 위치 정보가 포함된 사진 파일을 생성한다. 즉, 도 4(a)에 도시한 초기 화면 중에서 사진 촬영 요청 버튼(10)의 클릭이 있는 경우 도 4(b)에 도시한 바와 같이 사진 촬영 모드로 진입하여 사진 촬영이 이루어질 수 있다.
사용자 음성 기록부(172)는, 촬영된 사진에 대해서 태그 역할을 하는 사용자 음성을 입력받아 입력된 사용자 음성을 인식하여 STT 텍스트로 변환하여 텍스트 형태로서 사진 파일에 기록한다. 즉, 도 4(b)에 도시한 바와 같이 촬영이 완료된 사진이 촬영 사진 아이콘 필드(30)에 표시되고, 사용자가 촬영 사진 아이콘 필드를 선택하면 도 4(c)에 도시한 음성 입력 화면이 표시된다. 사용자는 도 4(c)의 음성 입력 화면의 마이크 버튼(40)을 클릭하여 해당 사진에 기록할 음성을 입력하게 되고, 사용자 음성 기록부(172)는, 입력된 사용자 음성을 STT 텍스트 형태로서 사진 파일에 기록하게 된다. 참고로, 공지된 바와 같이 STT(Speech to Text)는, 사람이 말하는 음성 언어를 컴퓨터가 해석해 그 내용을 문자 데이터로 전환하는 처리하는 것을 말함으로써, 본 발명에서는 STT 처리된 문자 데이터를 STT 텍스트라 부르기로 한다.
사진 갤러리 저장부(173)는, 사진, 촬영 시간 정보, 촬영 위치 정보, 및 사용자 음성이 포함된 사진 파일들을 사진 갤러리 데이터베이스에 저장한다.
사진 갤러리 제공부는, 사진 열람 모드로 동작하는 경우, 도 5(a)에 도시한 초기 화면에서 사진 갤러리 버튼(20)이 클릭되는 경우, 갤러리 데이터베이스에 저장된 사진 파일들의 리스트를 도 5(b)에 도시한 바와 같이 리스트 갤러리뷰로서 표시한다. 표시된 리스트 갤러리뷰에서 어느 하나의 사진이 선택되면, 사용자로부터 선택된 사진 파일의 사진을 확대하여 도 5(c), 도 5(d), 및 5(e)의 차례를 거쳐서 확대 갤러리뷰로서 표시한다.
상기의 확대 갤러리뷰는, 도 5(c)에 도시한 바와 같이, 확대된 사진이 표시되는 사진 표시 필드(51)와, 촬영 시간 정보와 촬영 위치 정보가 표시되는 촬영 상세 정보 표시 필드(52)와, 지도상에 사진 촬영된 위치를 표시한 지도 표시 필드(53)를 포함할 수 있다. 따라서 사용자는 확대 갤러리뷰의 촬영 상세 정보 표시 필드를 통해 촬영 시간 정보와 촬영 위치 정보를 확인할 수 있으며, 나아가 확대 갤러리뷰의 지도 표시 필드를 통해 사진이 촬영된 장소를 지도상에서 직관적으로 확인할 수 있게된다.
나아가 사진 갤러리 제공부는, 도 6(a)에 도시한 바와 같이 순서대로 정렬하여 최신순 리스트 갤러리뷰로서 표시하거나, 또는 도 6(b)에 도시한 바와 같이 사진 갤러리 데이터베이스에 저장된 사진 파일들을 지역별, 내용별로 정렬하여 지역별 리스트 갤러리뷰로서 표시할 수 있다.
여행 일기 제공부(176)는, 사진의 기록내용, 시간, 장소에 맞게 지도에 사진을 나열하여 여정이 나타나도록 하는 여행 일기 지도 및 블로그 형태의 맛집, 생활일기를 제공하할 수 있다. 이는 촬영된 사진을 이용하여 블로그 제작에 사용될 수 있다. 즉, 사진의 기록내용, 시간, 장소에 맞게 지도에 사진을 나열하면 자동으로 여정이 나타나는 여행 일기가 되고, 이를 고객에게 제공할 수 있게 되어, 업무일지, 상품제작 일지 등의 다양한 용도로 사용될 수 있다.
음성 검색 제공부(150)는, 리스트 갤러리뷰 중에서 음성 검색을 통해 입력되는 검색 음성과 매칭되는 사용자 음성을 가지는 사진 파일을 추출하여 표시한다. 즉, 도 7(a)에 도시한 바와 같이 리스트 갤러리뷰에서 음성 검색 버튼(60)이 선택되면 도 7(b)에 도시한 바와 같이 사용자 검색 음성 입력 화면이 표시되도록 한다. 그리고 이러한 사용자 검색 음성 입력 화면을 통해 입력되는 검색 음성과 매칭되는 사용자 음성을 가지는 사진 파일을 추출하여 제공한다.
예를 들어, 사용자가 '강릉'이라 검색 음성을 입력한 경우, '강릉'의 사용자 음성이 함께 기록되어 있는 사진들을 검색하여 검색된 사진들을 제공한다. 따라서 갤러리뷰에서 음성으로 원하는 내용을 말하면 그 내용에 맞는 사진이 로딩되어 편의성이 향상될 수 있다.
한편, 사진 파일 생성부(171)는, 사진, 사용자 음성, 촬영 시간 정보, 및 촬영 위치 정보가 포함된 사진 파일에 저장하는데, 이러한 사진 파일은 도 8에 도시한 바와 같이 압축 방식 및 사진 고유 넘버 등의 헤더 정보가 기록되는 헤더 필드(81)(81), 사용자 음성이 기록되는 사용자 STT 텍스트 필드(82), 촬영 시간 정보와 촬영 위치 정보가 기록되는 촬영 정보 데이터 필드(83), 촬영된 사진이 기록되는 사진 데이터 필드(84)가 포함된 데이터 프레임의 구조를 가지게 된다.
그런데 음성 데이터의 경우 MP3 등의 음성 압축을 하더라도 데이터 크기 커서 사용자 단말기(100)의 메모리(160) 용량을 많이 차지하게 된다. 이는 즉, 사진 파일 데이터 프레임의 사용자 STT 텍스트 필드(82)의 크기가 커야 함을 의미한다.
이에 메모리(160) 용량의 사용 효율을 높이기 위하여, 음성 데이터 필드(82)에 저장되는 사용자 음성의 용량을 줄일 필요가 있다. 이를 위하여 본 발명은 사용자 음성의 특정 부분만 저장하는 음성 일부 저장 방식과, 사용자 음성의 특징점만 저장하는 음성 특징점 저장 방식이 사용될 수 있다.
음성 일부 저장 방식은, 입력되는 사용자 음성의 첫 단어만을 사용자 STT 텍스트 필드(82)에 기록하여, 추후 음성 검색 시에 활용하는 것이다. 이를 위해 사용자음성 기록부는, 입력되는 사용자 음성의 단어나 문구만을 사용자 STT 텍스트 필드(82)에 기록한다. 예를 들어, 해운대에서 찍은 사진을 저장할 때 '해운대에서 찍은 사진이야'라고 사용자가 음성 입력을 하는 경우, 사용자 음성 기록부(172)는 첫 번째 문구인 '해운대에서'라는 사용자 음성만 사용자 STT 텍스트 필드(82)에 기록한다. 참고로, 사용자 음성 중에서 문구와 문구간의 음성이 입력되지 않는 첫번째 영역의 앞부분을 단어나 문구라 파악할 수 있다.
음성 검색 제공부(150)는, 음성 검색을 통해 입력되는 검색 음성의 단어나 문구를 추출하여 추출한 검색 음성의 단어나 문구와 매칭되는 사용자 STT 텍스트 필드(82)를 가지는 사진 파일을 추출하는 표시한다. 예를 들어, '해운대에서 찍은 사진 찾아줘'라고 검색 음성이 입력되는 경우, 검색 음성의 단어나 문구인 '해운대에서'라는 음성과 일치하는 음성이 저장된 사진들을 검색하여 추출하는 것이다.
한편, 음성 특징점 저장 방식은, 입력되는 사용자 음성의 음성 특징점만을 저장하는 것이다. 이를 위해 사용자음성 기록부는, 입력되는 사용자 음성의 음성 특징점을 파악하여 파악된 음성 특징점을 사용자 STT 텍스트 필드(82)에 기록한다. 음성 특징점은, 입력되는 사용자 음성중에서 모음의 순서일 수 있다. 예를 들어, 사진에 함께 저장되는 사용자 음성이 '해운대'인 경우, 모음 순서는, 'ㅐ'->'ㅜ'->'ㅐ'가 된다. 따라서 사용자 STT 텍스트 필드(82)에는, 'ㅐㅜㅐ'의 데이터가 저장된다.
음성 검색 제공부(150)는, 음성 검색을 통해 입력되는 검색 음성의 음성 특징점을 파악하여, 파악된 검색 음성의 음성 특징점과 매칭되는 사용자 STT 텍스트 필드(82)를 가지는 사진 파일을 추출하는 표시한다. 예를 들어, 음성 검색으로서 '해운대'가 입력되는 경우, 음성 검색인 '해운대'의 모음 순서를 추출하면 'ㅐㅜㅐ'가 되고, 이러한 'ㅐㅜㅐ'가 기록된 사용자 STT 텍스트 필드(82)를 가지는 사진 파일들을 추출하여 표시하는 것이다.
상술한 본 발명의 설명에서의 실시예는 여러가지 실시가능한 예중에서 당업자의 이해를 돕기 위하여 가장 바람직한 예를 선정하여 제시한 것으로, 이 발명의 기술적 사상이 반드시 이 실시예만 의해서 한정되거나 제한되는 것은 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위내에서 다양한 변화와 변경 및 균등한 타의 실시예가 가능한 것이다.
100:사용자 단말기
171:사진 파일 생성부
172:사용자 음성 기록부
173:사진 갤러리 저장부
174:사진 갤러리 제공부
175:음성 검색 제공부

Claims (7)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 사진 촬영 및 사진 관리를 하는 어플리케이션이 구비된 단말기에 있어서,
    상기 어플리케이션은,
    사진 촬영이 있은 후 촬영된 사진, 촬영 시간 정보, 및 촬영 위치 정보가 포함된 사진 파일을 생성하는 사진 파일 생성부;
    촬영된 사진이 촬영사진 아이콘 필드에 표시되고, 사용자가 촬영사진 아이콘 필드를 선택하여 표시된 음성입력화면에서 마이크 버튼을 클릭하여 해당 사진에 기록할 음성을 입력하고, 입력된 사용자 음성을 태그 역할을 하도록 텍스트로 변환한 STT 텍스트를 사진 파일에 기록하는 사용자 음성 기록부;
    사진, 촬영 시간 정보, 촬영 위치 정보, 및 사용자 음성인식을 통해 기록된 STT 텍스트가 포함된 사진 파일들을 사진 갤러리 데이터베이스에 저장하는 사진 갤러리 저장부;
    상기 갤러리 데이터베이스에 저장된 사진 파일들의 리스트를 리스트 갤러리뷰로서 표시하여, 상기 리스트 갤러리뷰 중에서 사용자로부터 선택된 사진 파일의 사진을 확대하여 확대 갤러리뷰로서 표시하는 사진 갤러리 제공부;
    사진 검색 모드로 동작하는 경우, 상기 리스트 갤러리뷰 중에서 음성 검색을 통해 입력되는 검색 음성과 매칭되는 사용자 음성을 가지는 사진 파일을 추출하여 표시하는 음성 검색 제공부;및
    사진의 기록내용, 시간, 장소에 맞게 지도에 사진을 나열하여 여정이 나타나도록 하는 여행 일기 지도 및 블로그 형태의 맛집, 생활일기를 제공하는 여행 일기 제공부;
    를 포함하고,
    상기 사진 갤러리 제공부는,
    사진 갤러리 데이터베이스에 저장된 사진 파일들을 최신 촬영 순서대로 정렬하여 최신순 리스트 갤러리뷰로서 표시하거나,
    또는 사진 갤러리 데이터베이스에 저장된 사진 파일들을 지역별, 내용별로 정렬하여 지역별 리스트 갤러리뷰로서 표시하고,
    상기 확대 갤러리뷰는,
    확대된 사진이 표시되는 사진 표시 필드;
    촬영 시간 정보, 및 촬영 위치 정보가 표시되는 촬영 상세 정보 표시 필드; 및
    지도상에 사진 촬영된 위치를 표시한 지도 표시 필드;
    를 포함하는 사진 촬영 및 관리 어플리케이션을 구비한 단말기.
  5. 청구항 4에 있어서, 상기 사진 파일은,
    압축 방식 및 사진 고유 넘버가 기록되는 헤더 필드와, 사용자 음성을 인식하여 변환된 STT 텍스트가 기록되는 사용자 STT 텍스트 필드, 촬영 시간 정보와 촬영 위치 정보가 기록되는 촬영 정보 데이터 필드, 촬영된 사진이 기록되는 사진 데이터 필드가 포함된 데이터 프레임의 구조를 가지는 사진 촬영 및 관리 어플리케이션을 구비한 단말기.
  6. 청구항 5에 있어서,
    상기 음성 검색 제공부는, 음성 검색을 통해 입력되는 검색 음성의 단어나 문구를 추출하여, 추출한 검색 음성의 단어나 문구와 매칭되는 사용자 STT 텍스트 필드를 가지는 사진 파일을 추출하는 표시하는 사진 촬영 및 관리 어플리케이션을 구비한 단말기.
  7. 청구항 5에 있어서,
    상기 사용자 음성 기록부는, 입력되는 사용자 음성의 음성 특징점을 파악하여 파악된 음성 특징점을 상기 사용자 STT 텍스트 필드에 기록하며,
    상기 음성 검색 제공부는, 음성 검색을 통해 입력되는 검색 음성의 음성 특징점을 파악하거나, 텍스트의 내용에서 얻어지는 단어나 문구를 통해 파악된 검색 음성의 음성 특징점과 기록된 텍스트에서 매칭되는 사용자 STT 텍스트 필드를 가지는 사진 파일을 추출하는 표시하는 사진 촬영 및 관리 어플리케이션을 구비한 단말기.
KR1020170086402A 2017-07-07 2017-07-07 사진 촬영 및 관리 어플리케이션을 구비한 단말기 KR101871779B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170086402A KR101871779B1 (ko) 2017-07-07 2017-07-07 사진 촬영 및 관리 어플리케이션을 구비한 단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170086402A KR101871779B1 (ko) 2017-07-07 2017-07-07 사진 촬영 및 관리 어플리케이션을 구비한 단말기

Publications (1)

Publication Number Publication Date
KR101871779B1 true KR101871779B1 (ko) 2018-06-27

Family

ID=62789743

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170086402A KR101871779B1 (ko) 2017-07-07 2017-07-07 사진 촬영 및 관리 어플리케이션을 구비한 단말기

Country Status (1)

Country Link
KR (1) KR101871779B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200030392A (ko) * 2018-09-12 2020-03-20 네이버 주식회사 관심지점을 이용하여 이미지를 필터링하기 위한 방법 및 시스템
KR20200062158A (ko) * 2018-09-12 2020-06-03 네이버 주식회사 관심지점을 이용하여 이미지를 필터링하기 위한 방법 및 시스템
KR102144492B1 (ko) * 2020-01-16 2020-08-13 송혜선 음성 정보를 이용하여 촬영사진을 저장하고 검색하는 스마트 단말기 및 이를 이용한 스마트 단말기의 촬영사진 저장 및 검색 방법
CN113348451A (zh) * 2019-01-30 2021-09-03 索尼集团公司 信息处理系统、信息处理方法和信息处理设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100086427A (ko) * 2009-01-22 2010-07-30 에이치티씨 코포레이션 이동 장치에서 이미지 및 지리적 위치 데이터를 관리하는 방법 및 시스템
KR20110001551A (ko) * 2009-06-30 2011-01-06 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR101170877B1 (ko) 2006-09-06 2012-08-02 애플 인크. 사진 관리용 휴대용 전자 장치
KR20130017179A (ko) * 2011-08-10 2013-02-20 엘지전자 주식회사 이동 단말기, 이동 단말기의 제어 방법 및 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101170877B1 (ko) 2006-09-06 2012-08-02 애플 인크. 사진 관리용 휴대용 전자 장치
KR20100086427A (ko) * 2009-01-22 2010-07-30 에이치티씨 코포레이션 이동 장치에서 이미지 및 지리적 위치 데이터를 관리하는 방법 및 시스템
KR20110001551A (ko) * 2009-06-30 2011-01-06 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR20130017179A (ko) * 2011-08-10 2013-02-20 엘지전자 주식회사 이동 단말기, 이동 단말기의 제어 방법 및 시스템

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200030392A (ko) * 2018-09-12 2020-03-20 네이버 주식회사 관심지점을 이용하여 이미지를 필터링하기 위한 방법 및 시스템
KR102118462B1 (ko) * 2018-09-12 2020-06-03 네이버 주식회사 관심지점을 이용하여 이미지를 필터링하기 위한 방법 및 시스템
KR20200062158A (ko) * 2018-09-12 2020-06-03 네이버 주식회사 관심지점을 이용하여 이미지를 필터링하기 위한 방법 및 시스템
KR102427830B1 (ko) 2018-09-12 2022-08-01 네이버 주식회사 관심지점을 이용하여 이미지를 필터링하기 위한 방법 및 시스템
CN113348451A (zh) * 2019-01-30 2021-09-03 索尼集团公司 信息处理系统、信息处理方法和信息处理设备
KR102144492B1 (ko) * 2020-01-16 2020-08-13 송혜선 음성 정보를 이용하여 촬영사진을 저장하고 검색하는 스마트 단말기 및 이를 이용한 스마트 단말기의 촬영사진 저장 및 검색 방법

Similar Documents

Publication Publication Date Title
US9003330B2 (en) User interface for selecting a photo tag
US8375283B2 (en) System, device, method, and computer program product for annotating media files
KR101871779B1 (ko) 사진 촬영 및 관리 어플리케이션을 구비한 단말기
JP5611829B2 (ja) 情報処理装置の動作制御システム及び動作制御方法
RU2740785C2 (ru) Способ и оборудование обработки изображений, электронное устройство и графический пользовательский интерфейс
WO2010047336A1 (ja) 画像撮影システム及び画像撮影方法
KR20120028491A (ko) 이미지 데이터 관리장치 및 방법
JP2007027945A (ja) 撮影情報提示システム
CN104298694A (zh) 一种照片信息添加方法、装置及移动终端
TW201503675A (zh) 媒體檔案管理方法及系統
JP2007018166A (ja) 情報検索装置、情報検索システム、情報検索方法及び情報検索プログラム
CN111046210A (zh) 一种信息推荐方法、装置和电子设备
CN109977390B (zh) 一种生成文本的方法及装置
CN113987128A (zh) 相关文章搜索方法、装置、电子设备和存储介质
JP5102708B2 (ja) 合成画像撮影システム及び合成画像撮影方法
CN112396675A (zh) 图像处理方法、装置及存储介质
US11010978B2 (en) Method and system for generating augmented reality interactive content
KR20120026458A (ko) 데이터 관리 장치, 데이터 관리 방법 및 기록 매체
US20070284450A1 (en) Image handling
KR101135222B1 (ko) 멀티미디어 파일을 관리하는 방법 및 멀티미디어 파일 생성 장치
KR20150026382A (ko) 전자 장치 및 전자 장치에서 연락처 관리 방법
KR20110013073A (ko) 얼굴인식을 이용한 디지털 촬영기기의 멀티미디어 컨텐츠 자동 태깅 시스템
CN112102843A (zh) 一种语音识别方法、装置和电子设备
JP2024018302A (ja) 情報処理装置、方法及びプログラム並びに情報処理システム
WO2019109223A1 (zh) 一种生成相册标题的方法及设备

Legal Events

Date Code Title Description
GRNT Written decision to grant