KR102340251B1 - 데이터 관리 방법 및 그 방법을 처리하는 전자 장치 - Google Patents

데이터 관리 방법 및 그 방법을 처리하는 전자 장치 Download PDF

Info

Publication number
KR102340251B1
KR102340251B1 KR1020140079746A KR20140079746A KR102340251B1 KR 102340251 B1 KR102340251 B1 KR 102340251B1 KR 1020140079746 A KR1020140079746 A KR 1020140079746A KR 20140079746 A KR20140079746 A KR 20140079746A KR 102340251 B1 KR102340251 B1 KR 102340251B1
Authority
KR
South Korea
Prior art keywords
electronic device
audio data
tagging information
image
input
Prior art date
Application number
KR1020140079746A
Other languages
English (en)
Other versions
KR20160001359A (ko
Inventor
임영균
진영태
천재봉
이우광
이찬호
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140079746A priority Critical patent/KR102340251B1/ko
Priority to PCT/KR2015/006401 priority patent/WO2015199430A1/en
Priority to CN201580033944.1A priority patent/CN106471493B/zh
Priority to US14/749,937 priority patent/US10691717B2/en
Priority to EP15174165.9A priority patent/EP2960816A1/en
Publication of KR20160001359A publication Critical patent/KR20160001359A/ko
Application granted granted Critical
Publication of KR102340251B1 publication Critical patent/KR102340251B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26—Visual data mining; Browsing structured data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating

Abstract

데이터를 생성 또는 저장하기 위한 전자 장치 및 방법이 개시되어 있는 바, 다양한 실시예에 따르면, 전자 장치의 데이터 관리 방법은 전자장치에서, 상기 전자 장치와 기능적으로 연결된 출력 장치를 통하여 제공될 수 있는 컨텐츠의 적어도 일부분에 대한 태깅 정보를 생성하기 위한 요청을 확인하는 동작, 상기 요청에 응답하여 상기 적어도 일부분에 대응하는 소리(Sound)를 판단하는 동작 및 상기 소리에 기반하여, 대응하는 적어도 하나의 지정된 데이터를 상기 태깅 정보로서 획득하는 동작을 포함할 수 있다. 다른 실시예들이 가능하다.

Description

데이터 관리 방법 및 그 방법을 처리하는 전자 장치{METHOD FOR MANAGING DATA AND AN ELECTRONIC DEVICE THEREOF}
다양한 실시예는 전자 장치에 관한 것으로, 예컨대, 데이터를 생성 또는 저장하기 위한 전자 장치 및 방법에 관한 것이다.
최근 들어 하나 또는 그 이상의 기능을 복합적으로 수행하는 전자 장치들이 점점 늘어나고 있다. 더욱이 전자 장치들로는 소위 '스마트 폰'이라 대별되는 이동 단말기가 주류를 이루고 있다. 이동 단말기는 대화면 터치 방식의 디스플레이 모듈을 구비하고 있으며, 상대방과의 통신이라는 기본적인 기능 이외에 고화소 카메라 모듈을 구비하고 있어 정지 영상 또는 동영상 촬영이 가능하다. 또한, 음악, 동영상 등 멀티미디어 콘텐츠를 재생할 수 있고, 네트워크 망에 접속하여 웹 서핑을 수행할 수도 있다. 이러한 이동 단말기는 점차 고성능 프로세서를 구비함으로써 다양한 기능을 수행할 수 있다.
최근 전자 장치는 다양한 종류의 데이터를 생성하거나 저장할 수 있다. 예를 들어, 상기 전자 장치는 카메라 기능을 이용하여 영상 데이터를 생성하여 저장할 수 있다. 다른 예에 따르면, 상기 전자 장치는 녹음 기능을 이용하여 오디오 데이터를 생성하여 저장할 수 있다.
상술한 기능을 이용하는 전자 장치는 예컨대 일본 공표특허공보 특표2013-535042호(2013.09.09.) 등을 통해 공개되어 있다.
종래 기술에 따르면, 상기 전자 장치는 저장 공간의 상태, 예를 들어, 저장 가능한 메모리 용량을 기반으로 데이터를 생성할 수 있다. 예를 들어, 상기 전자 장치는 저장 가능한 공간의 용량이 크면 녹음 구간이 긴 오디오 데이터를 생성할 수 있다.
일반적으로, 상기 전자 장치는 텍스트 형식의 파일명을 이용하여 오디오 데이터를 저장하나 이러한 파일명은 오디오 데이터의 주제(subject)를 표현하는데 한계가 있다.
본 발명의 다양한 실시예에 따르면, 데이터 저장시 저장 데이터의 주제를 나타낼 수 있는 정보를 저장하기 위한 장치 및 방법을 제공할 수 있다.
본 발명의 다양한 실시예에 따르면, 저장 데이터의 주제에 해당하는 이미지 정보를 획득하여 저장 데이터와 연관하여 저장하기 위한 장치 및 방법을 제공할 수 있다.
본 발명의 다양한 실시예에 따르면, 요청에 대응하여 데이터의 적어도 일부를 나타내는 주제에 대응하는 이미지 정보를 획득하기 위한 장치 및 방법을 제공할 수 있다.
다양한 실시예에 따르면, 전자 장치의 데이터 관리 방법은, 상기 전자 장치를 통해 오디오 데이터를 기록하는 인터페이스를 상기 전자 장치의 디스플레이 상에 표시하는 동작; 상기 오디오 데이터가 기록되는 동안에, 상기 전자 장치의 프로세서를 통해 상기 오디오 데이터와 연관된 적어도 하나의 이미지를 획득하기 위한 입력을 검출하는 동작; 상기 입력의 검출에 대응하여, 상기 입력이 검출되는 시간에 기반하여 지정된 기간 동안 기록된 오디오 데이터에 해당되는 상기 오디오 데이터의 일부를 확인하는 동작; 상기 오디오 데이터의 일부의 확인에 대응하여, 상기 프로세서를 통해 상기 오디오 데이터의 일부로부터 적어도 하나의 단어를 획득하는 동작; 상기 적어도 하나의 단어의 획득에 대응하여, 상기 적어도 하나의 단어에 기반하여 외부 전자 장치로부터 검색된 적어도 하나의 이미지를 획득하는 동작; 및 상기 적어도 하나의 이미지의 획득에 대응하여, 상기 오디오 데이터와 연관된 상기 적어도 하나의 이미지를 상기 전자 장치의 메모리에 저장하고, 복수의 이미지 중 상기 적어도 하나의 이미지가 선택되면, 상기 오디오 데이터의 일부를 출력하는 동작을 포함하고, 상기 입력은 키 입력, 터치 입력 및 상기 전자 장치의 지정된 움직임 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치는, 디스플레이; 메모리; 및 프로세서를 포함하고, 상기 프로세서는, 상기 전자 장치를 통해 오디오를 기록하는 인터페이스를 상기 디스플레이 상에 표시하고, 상기 오디오 데이터가 기록되는 동안에, 상기 오디오 데이터와 연관된 적어도 하나의 이미지를 획득하기 위한 입력을 검출하고, 상기 입력의 검출에 대응하여, 상기 입력이 검출되는 시간에 기반하여 지정된 기간 동안 기록된 오디오 데이터에 해당되는 상기 오디오 데이터의 일부를 확인하고, 상기 오디오 데이터의 일부의 확인에 대응하여, 상기 오디오 데이터의 일부로부터 적어도 하나의 단어를 획득하고, 상기 적어도 하나의 단어의 획득에 대응하여, 상기 적어도 하나의 단어에 기반하여 외부 전자 장치로부터 검색된 적어도 하나의 이미지를 획득하고, 상기 적어도 하나의 이미지의 획득에 대응하여, 상기 오디오 데이터와 연관된 상기 적어도 하나의 이미지를 상기 메모리에 저장하고, 복수의 이미지 중 상기 적어도 하나의 이미지가 선택되면, 상기 오디오 데이터의 일부를 출력하도록 설정되고, 상기 입력은, 키 입력, 터치 입력 및 상기 전자 장치의 지정된 움직임 중 적어도 하나를 포함할 수 있다.
삭제
삭제
본 발명의 다양한 실시예에 따른 전자 장치의 데이터 관리 방법 및 장치는, 예를 들어, 조건을 만족하는 시점에 해당하는 데이터의 구간에 대하여 이미지 정보를 생성하여 데이터 검색 성능을 향상시킬 수 있다.
도 1은 다양한 실시예에 따른, 전자 장치를 포함하는 네트워크 환경을 도시한다.
도 2는 본 발명의 다양한 실시예에 따른 데이터 관리 모듈의 구성을 도시한다.
도 3은 본 발명의 다양한 실시예에 따른 전자 장치에서 카메라 기능을 이용하여 태깅 정보를 수집하는 동작을 도시한 도면이다.
도 4는 본 발명의 다양한 실시예에 따른 전자 장치에서 오디오 데이터를 분석하여 태깅 정보를 수집하는 동작을 도시한 도면이다.
도 5는 본 발명의 다양한 실시예에 따른 전자 장치의 설정 화면을 도시한 도면이다.
도 6은 본 발명의 다양한 실시예에 따른 전자 장치의 입력 기반 태깅 정보 수집 동작을 도시한 도면이다.
도 7은 본 발명의 다양한 실시예에 따른 전자 장치의 타이머 기반 태깅 정보 수집 동작을 도시한 도면이다.
도 8은 본 발명의 다양한 실시예에 따른 전자 장치의 제스처 기반 태깅 정보 수집 동작을 도시한 도면이다.
도 9는 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 도면이다.
도 10은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 도면이다.
도 11은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 관리 동작을 도시한 도면이다.
도 12는 본 발명의 다양한 실시예에 따른 전자 장치에서 태깅 정보와 연동된 데이터를 재생하는 동작을 도시한 도면이다.
도 13은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 도면이다.
도 14는 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 흐름도이다.
도 15는 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 편집 동작을 도시한 흐름도이다.
도 16은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 관리 동작을 도시한 흐름도이다.
도 17은 다양한 실시예들에 따른 전자 장치의 블록도를 도시한다.
이하, 첨부된 도면을 참조하여 본 개시(present disclosure)를 설명한다. 본 개시는 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 개시를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 개시의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 개시 가운데 사용될 수 있는“포함한다” 또는 “포함할 수 있다” 등의 표현은 개시된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 개시에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 개시에서 “또는” 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, “A 또는 B”는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
본 개시 가운데 “제 1,”“제2,”“첫째,”또는“둘째,”등의 표현들이 본 개시의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분 짓기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 개시의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.
본 개시에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 개시를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 개시에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 개시에 따른 전자 장치는, 통신 기능 이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smartwatch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 또는 산업용 또는 가정용 로봇 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 개시에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 개시에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시예에 따른, 전자 장치 101을 포함하는 네트워크 환경 100를 도시한다. 도 1을 참조하면, 상기 전자 장치 101는 버스 110, 프로세서 120, 메모리 130, 입출력 인터페이스 140, 디스플레이 150, 통신 인터페이스 160 및 데이터 관리 모듈 170을 포함할 수 있다.
상기 버스 110은 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.
상기 프로세서 120은, 예를 들면, 상기 버스 110을 통해 전술한 다른 구성요소들(예: 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 데이터 관리 모듈 170 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리 130는, 상기 프로세서 120 또는 다른 구성요소들(예: 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 데이터 관리 모듈 170 등)로부터 수신되거나 상기 프로세서 120 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리 130은, 예를 들면, 커널 131, 미들웨어 132, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 133 또는 어플리케이션 134 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 131은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널 131은 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에서 상기 전자 장치 101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 132는 상기 API 133 또는 상기 어플리케이션 134가 상기 커널 131과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 132는 상기 어플리케이션 134로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션 134 중 적어도 하나의 어플리케이션에 상기 전자 장치 101의 시스템 리소스(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API 133는 상기 어플리케이션 134가 상기 커널 131 또는 상기 미들웨어 132에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션 134는 상기 전자 장치 101과 외부 전자 장치(예: 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 101의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 101과 통신하는 외부 전자 장치(예: 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134는 상기 외부 전자 장치(예: 전자 장치 104)의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 134는 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134는 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 상기 어플리케이션 134는 전자 장치 101에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 106 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스 140은, 입출력 장치(예: 센서, 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 110를 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 데이터 관리 모듈 170에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 120로 제공할 수 있다. 또한, 상기 입출력 인터페이스 140은, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 데이터 관리 모듈 170으로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 상기 프로세서 120을 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다.
상기 디스플레이 150은 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다.
상기 통신 인터페이스 160은 상기 전자 장치 101과 외부 장치(예: 전자 장치 104 또는 서버 106) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스 160은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 네트워크 162는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 전자 장치 101과 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션 134, API 133, 상기 미들웨어 132, 커널 131 또는 통신 인터페이스 160 중 적어도 하나에서 지원될 수 있다.
상기 데이터 관리 모듈 170은, 한 실시예에 따르면, 예컨대, 데이터 저장 시 저장 데이터의 주제를 나타낼 수 있는 태깅 정보를 생성하여 데이터와 연관하여 저장하도록 처리할 수 있다. 다양한 실시예에 따르면, 상기 데이터 관리 모듈 170은, 태깅 정보 생성 요청에 대응하여 저장 데이터의 적어도 일부와 관련된 주제에 해당하는 이미지 정보를 획득할 수 있다. 일 실시예에 따르면, 상기 데이터 관리 모듈 170은 카메라 기능을 활성화시켜 이미지 형태의 태깅 정보를 획득할 수 있다. 다른 실시예에 따르면, 상기 데이터 관리 모듈 170은 저장 데이터를 분석하여 저장 데이터의 일부와 관련된 주제 획득을 위한 검색어를 획득하고 획득한 검색어를 기반으로 태깅 정보를 획득할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈 170은 저장 데이터에 대한 태깅 정보를 분석하여 태깅 정보를 편집하도록 처리할 수 있다. 예를 들어, 상기 데이터 관리 모듈 170은 저장 데이터에 대한 태깅 정보의 수를 줄일 수 있다. 예를 들어, 상기 데이터 관리 모듈 170은 동일한 주제를 나타내는 태깅 정보를 하나로 합칠 수 있다. 다른 예를 들면, 상기 데이터 관리 모듈 170은 저장 데이터에 대한 태깅 정보를 변경할 수 있다. 예를 들어, 상기 저장 데이터에 대한 태깅 정보가 생성된 후, 사용자의 입력에 따라 기 생성된 태깅 정보가 다른 태깅 정보로 변경되거나 삭제될 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈 170은 기 저장된 태깅 정보를 이용하여 저장 데이터를 재생하도록 처리할 수 있다. 예를 들어, 상기 데이터 관리 모듈 170은 태깅 정보를 리스트로 관리할 수 있으며, 입력에 의해 태깅 정보가 선택되면, 선택된 태깅 정보에 대응하는 저장 데이터를 로딩할 수 있다.
후술하는 도 2 내지 도 16을 통하여 상기 데이터 관리 모듈 170에 대한 추가적인 정보가 제공된다.
도 2는 본 발명의 다양한 실시예에 따른 데이터 관리 모듈(170)의 구성을 도시한다. 상기 도 2를 참조하면, 상기 데이터 관리 모듈(170)은 상황 판단 모듈(210), 데이터 분석 모듈(220), 정보 획득 모듈(230)을 포함하여 구성될 수 있다.
상기 상황 판단 모듈(210)은 태깅 정보를 생성하도록 하는 요청 또는 요청이 발생하는 상황을 판단할 수 있다.
다양한 실시예에 따르면, 상기 요청은 타이머를 기반으로 발생될 수 있다.
예를 들어, 타이머 기반으로 상기 요청이 발생되도록 설정된 상태이면, 상기 상황 판단 모듈(210)은 미리 정의된 시간, 예를 들어, 30초로 동작하는 타이머를 구동시킬 수 있으며, 타이머가 만료되는 시점을 상기 요청이 발생된 상황으로 판단할 수 있다.
다양한 실시예에 따르면, 상기 요청은 미리 정의된 재생 구간을 기반으로 발생될 수 있다.
예를 들어, 상기 재생 구간은 데이터의 일부 재생 구간이 될 수 있으며, 또는 데이터 재생이 중단되고, 새로 데이터가 재생되는 시점 등이 될 수 있다. 이러한 재생 구간을 기반으로 상기 요청이 발생되도록 설정된 상태이고, 데이터 재생 순서가 정의되어 있으면(예를 들어, 재생 리스트가 정의되어 있으면), 상기 상황 판단 모듈(210)은 새로운 데이터가 재생되는 시점을 상기 요청이 발생된 상황으로 판단할 수 있다. 더하여, 상기 상황 판단 모듈(210)은 영상 데이터에 대하여는 프레임의 순서를 기반으로 상기 요청이 발생되는 상황인지를 판단할 수 있다.
다양한 실시예에 따르면, 상기 요청은 전자 장치의 제스처, 사용자에 의한 키 입력, 터치 입력, 음성 명령어 입력 등을 기반으로 발생될 수도 있다.
예를 들어, 상기 입력을 기반으로 상기 요청이 발생되도록 설정된 상태이면, 상기 상황 판단 모듈(210)은 센서, 터치 스크린, 키 버튼, 마이크 등으로 통해 감지되는 입력이 미리 정해진 조건을 만족하는 경우, 상기 요청이 발생된 상황으로 판단할 수 있다.
다양한 실시예에 따르면, 상기 요청은 성문 인식, 감정 인식 등을 기반으로 발생될 수도 있다. 예를 들어, 상기 인식을 기반으로 상기 요청이 발생되도록 설정된 상태이면, 상기 상황 판단 모듈(210)은 데이터에 포함된 오디오 성분을 분석하여 미리 정의된 성문 또는 미리 정의된 감정을 인식하여 상기 요청이 발생된 상황으로 판단할 수 있다. 다른 예로, 상기 데이터에 다수의 사용자에 대한 오디오 성분이 포함된 경우, 상기 상황 판단 모듈(210)은 오디오 성분을 분석하여 오디오 성분이 변경, 예를 들어, 화자 변경을 확인하여 상기 요청이 발생된 상황으로 판단할 수 있다.
상기 데이터 분석 모듈(220)은 상기 전자 장치에 저장된 데이터 또는 저장하고자 하는 데이터(예를 들어, 오디오 데이터)의 전체 또는 일부를 표현할 수 있는 주제를 파악할 수 있다. 일 실시예에 따르면, 상기 데이터의 일부를 표현할 수 있는 주제는 태깅 정보를 획득하기 위한 검색어로 사용될 수 있다.
다양한 실시예에 따르면, 상기 데이터 분석 모듈(220)은 오디오 성분을 분석하여 데이터에 대한 주제를 파악할 수 있다. 여기에서, 상기 데이터 분석 모듈(220)은 상기 데이터의 오디오 성분을 분석하여 단어, 문장 등을 주제로 파악할 수 있다. 다양한 실시예에 따르면, 상기 데이터 분석 모듈(220)은 추출된 단어, 문장 등에 대한 추출 순서, 추출 구간, 반복도, 음량 등을 기반으로 주제를 파악할 수 있다.
예를 들어, 음악 데이터에 대한 태깅 정보를 생성하도록 하는 요청이 타이머를 기반으로 발생된 경우, 상기 데이터 분석 모듈(220)은 음악 데이터에 대하여 타이머의 동작 주기, 예를 들어, 30초 주기마다 재생되는 가사를 주제로 파악할 수 있다. 더하여, 재생 시간이 6분인 음악 데이터일 경우, 12개의 주제가 파악될 것이며, 파악된 주제는 서로 동일할 수도 있으며, 동일하지 않을 수도 있다. 예를 들어, 음악 데이터에 반복되는 가사가 많을 경우, 동일한 주제가 많아질 수 있다.
다양한 실시예에 따르면, 상기 데이터 분석 모듈(220)은 텍스트 성분을 분석하여 데이터에 대한 주제를 확인할 수도 있다. 예를 들어, 문서 데이터, 이북 컨텐츠, 자막 데이터 등과 같이 텍스트 성분을 포함하는 데이터에 대하여는 텍스트 성분을 분석하여 데이터를 표현하는 주제를 파악할 수도 있다.
상기 정보 획득 모듈(230)은 상기 상황 판단 모듈(210)에 판단된 요청 또는 요청이 발생하는 상황에 대응하여 상기 데이터에 대한 태깅 정보를 획득할 수 있다. 상기 태깅 정보는 상기 데이터의 주제를 표현할 수 있는 정보로, 일 실시예에 따르면, 상기 파악된 주제와 연관된 이미지 데이터, 동영상 데이터, 텍스트 데이터 등을 포함할 수 있다. 예를 들어, 상기 태깅 정보는 데이터에 포함된 대표 단어, 대표 사용자, 대표 사용자의 감정 등을 표현할 수 있다.
다양한 실시예에 따르면, 상기 정보 획득 모듈(230)은 상기 데이터 분석 모듈(220)에 의해 파악된 주제를 기반으로 상기 데이터에 대한 태깅 정보를 획득할 수 있다. 다양한 실시예에 따르면, 상기 정보 획득 모듈(230)은 상기 파악된 주제를 검색어로 태깅 정보를 획득할 수 있다. 다양한 실시예에 따르면, 상기 정보 획득 모듈(230)은 웹 검색 기능, 데이터 검색 기능 등을 실행하고, 상기 파악된 주제를 검색어로 하여 태깅 정보를 획득할 수 있다.
다양한 실시예에 따르면, 상기 정보 획득 모듈(230)은 판단된 요청 또는 요청이 발생하는 상황에 대응하여 주변 영상을 태깅 정보로 획득할 수 있다. 예를 들어, 상기 정보 획득 모듈(230)은 상기 요청 또는 요청이 발생되는 상황을 감지할 경우, 카메라 기능을 활성화시켜 적어도 카메라 센서의 방향에 해당하는 영상을 태깅 정보로 수집할 수 있다.
다양한 실시예에 따르면, 상기 정보 획득 모듈(230)은 태깅 정보에 대한 상황 정보를 획득할 수 있다. 여기에서, 상기 상황 정보는 상기 태깅 정보를 수집한 시점의 위치 정보, 기상 정보, 잡음 정보 등을 포함할 수 있다.
다양한 실시예에 따르면, 상기 정보 획득 모듈(230)은 수집된 태깅 정보에 대하여 적어도 일부를 편집할 수 있다. 여기에서, 상기 태깅 정보를 편집하는 것은 태깅 정보의 개수를 줄이거나 태깅 정보의 형태를 변경하는 것이 될 수 있다. 예를 들어, 상기 정보 획득 모듈(230)은 수집된 태깅 정보가 타인에게 노출되지 않도록 태깅 정보의 적어도 일부 영역에 효과, 예를 들어, 모자이크 효과를 적용할 수 있다. 다른 예로, 상기 정보 획득 모듈(230)은 유사성을 가지는 적어도 두 개 이상의 태깅 정보로 하나의 태깅 정보로 사용하도록 처리할 수 있다. 여기에서, 유사성을 가진다는 것은 각각의 태깅 정보 들이 동일한 주제를 표현하는 것이 될 수 있다. 예를 들어, 상기 정보 획득 모듈(230)은 연속적으로 동일한 주제를 가지는 복수의 태깅 정보가 수집되는 경우, 유사성을 가지는 다수의 태깅 정보 가운데 하나의 태깅 정보만을 선택하여 사용할 수 있다.
다양한 실시예에 따르면, 전자 장치는 태깅 정보 생성을 위한 요청을 입력받는 입력부, 및 전자 장치와 기능적으로 연결된 출력 장치를 통하여 제공될 수 있는 컨텐츠의 적어도 일부분에 대한 태깅 정보를 생성하기 위한 요청을 확인하고, 상기 요청에 응답하여 상기 적어도 일부분에 대응하는 소리(Sound)를 판단하고, 상기 소리에 기반하여, 대응하는 적어도 하나의 지정된 데이터를 상기 태깅 정보로서 획득하는 데이터 관리 모듈을 포함할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈은 상기 적어도 하나의 지정된 데이터를 상기 적어도 일부분과 연관시켜 저장하도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈은 상기 소리에 기반하여, 상기 적어도 일부분에 대응하는 주제를 확인하도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈은 상기 전자 장치와 통신하는 외부 장치로부터 상기 적어도 하나의 지정된 데이터를 수신하도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈은 상기 요청에 응답하여 주변 환경에 대한 데이터를 획득하도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈은 사용자, 단어, 문장, 구, 사용자의 감정, 주변 소음 가운데 적어도 하나를 소리로 판단하도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 획득된 태깅 정보를 출력하는 출력부를 더 포함할 수 있으며, 상기 데이터 관리 모듈은, 상기 출력된 태깅 정보를 선택하는 입력에 대응하여, 상기 선택된 태깅 정보와 연관된 데이터를 실행하도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 데이터 관리 모듈은 상기 적어도 하나의 이미지 형태의 지정된 데이터를 상기 태깅 정보로서 획득하도록 처리할 수 있다.
도 3은 본 발명의 다양한 실시예에 따른 전자 장치에서 카메라 기능을 이용하여 태깅 정보를 수집하는 동작을 도시한 도면이다.
일 실시예에 따르면, 상기 전자 장치는 데이터 저장시 저장 데이터에 대한 태깅 정보를 저장할 수 있다. 상기 데이터는 문서 데이터, 오디오 데이터, 이미지 데이터, 영상 데이터 등을 포함하는 디지털 컨텐츠 일 수 있으며, 상기 태깅 정보는 상기 저장하고자 하는 데이터의 주제를 표현할 수 있는 정보가 될 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 조건을 만족할 때(예를 들어, 특정 타이머를 통한 요청, 감정 변화, 화자 변경이 감지되는 경우), 또는 사용자의 요청(예를 들어, 제스처 입력, 키입력, 터치 입력, 음성 명령어 입력 등)을 통해 태깅 정보를 획득하여 저장할 수 있다. 한 실시예에 따르면, 상기 태깅 정보는 이미지 형태(예를 들어, 원본 사이즈의 이미지, 축소 사이즈의 이미지 등) 로 표현될 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 복수의 이미지를 이용하여 움직이는 이미지 형태의 태깅 정보를 수집할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 이미지 형태의 태깅 정보뿐만 아니라 다양한 형태, 예를 들어, 텍스트 형태 등의 태깅 정보를 수집하여 저장할 수 있다.
다양한 실시예에 따른 오디오 데이터 생성 동작은 다음과 같을 수 있다.
상기 전자 장치는 녹음 기능을 실행하여 오디오 데이터를 생성할 수 있다. 상기 전자 장치는 녹음 기능을 실행한 후, 녹음 시작을 요청하는 입력을 감지하는 시점부터 마이크로 입력되는 신호를 오디오 데이터로 저장할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 오디오 데이터를 생성 또는 저장하는 중 오디오 데이터에 대한 태깅 정보를 생성할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 이미지 정보를 태깅 정보로 생성할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 태깅 정보 생성을 위한 요청을 감지할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 상기 요청에 응답하여 오디오 데이터의 적어도 일부분에 대응하는 오디오 성분(소리)를 판단하고, 상기 판단된 소리에 기반하여 상기 오디오 데이터에 대한 태깅 정보를 생성할 수 있다. 예를 들어, 상기 전자 장치는 상기 요청에 대응하여 판단된 오디오 데이터의 일부분의 소리와 연관된 이미지 정보를 태깅 정보로 생성할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 상기 생성된 태깅 정보를 상기 오디오 데이터의 일부분에 해당하는 재생 위치와 연관하여 저장할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 카메라 기능을 이용하여 태깅 정보로 사용할 이미지를 획득할 수 있다. 예를 들어, 상기 전자 장치는 카메라 기능을 활성화한 후, 촬영 이미지를 오디오 데이터에 대한 태깅 정보로 사용할 수 있다.
도시된 도면은 상기 전자 장치가 오디오 데이터 생성 기능, 예를 들어, 녹음기 기능을 실행한 상태(300)에서 태깅 정보를 생성하도록 하는 요청을 감지함에 따라 카메라 기능을 실행(310)시킨 후, 프리뷰 화면에 출력된 이미지를 획득하여 오디오 데이터에 대한 태깅 정보로 저장한 상황을 도시한다. 다양한 실시예에 따르면, 상기 전자 장치는 도시된 도면과 같이 태깅 정보로 저장된 이미지 정보를 화면 일부에 출력(320)할 수 있다. 예를 들어, 상기 전자 장치는 오디오 데이터를 재생하면서 생성된 태깅 정보의 리스트, 또는 가장 최근에 생성된 태깅 정보를 재생 화면 일부에 출력할 수 있다.
더하여, 상기 전자 장치는 태깅 정보가 생성된 오디오 데이터의 구간에 미리 정의된 방식으로 식별자를 표시할 수 있다. 상기 전자 장치는 오디오 데이터의 재생 구간에 태깅 정보가 생성된 지점을 표시하여, 사용자가 태깅 정보가 생성된 위치를 인식할 수 있도록 처리할 수 있다.
도 4는 본 발명의 다양한 실시예에 따른 전자 장치에서 오디오 데이터를 분석하여 태깅 정보를 수집하는 동작을 도시한 도면이다. 도 4와 관련된 설명 중 도 3과 동일 또는 유사한 부분에 대한 설명은 생략된다.
다양한 실시예에 따르면, 상기 전자 장치는 태깅 정보를 생성하도록 하는 요청에 대응하여 오디오 데이터를 분석하고, 분석 결과를 기반으로 태깅 정보로 사용할 이미지를 획득할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 상기 요청을 감지한 시점을 기준으로 일정 구간의 오디오 데이터를 분석할 수 있으며, 상기 구간과 관련된 주제를 파악하고, 상기 주제를 표현할 수 있는 태깅 정보를 생성할 수 있다. 예를 들어, 상기 전자 장치는 오디오 데이터를 분석하여 임계값 이상 반복되는 단어, 문장 등을 확인하고, 확인된 단어 또는 문장에 해당하는 이미지를 획득하여 태깅 정보로 사용할 수 있다. 다른 예로, 상기 전자 장치는 오디오 데이터를 분석하여 임계값 이상의 음량에 해당하는 단어 또는 문장을 확인하고, 확인된 단어 또는 문장에 해당하는 이미지를 획득하여 태킹 정보로 사용할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 웹 검색 기능, 저장 데이터 검색 기능 등을 이용하여 태깅 정보로 사용할 데이터, 예를 들어, 단어 또는 문장에 해당하는 이미지를 획득할 수 있다. 예를 들어, 상기 전자 장치는 기 저장된 이미지 가운데 상기 주제를 표현할 수 있는 이미지를 획득할 수 있다. 다른 예로, 상기 전자 장치는 기 정의된 웹 사이트에 접속하여 상기 주제를 표현할 수 있는 이미지를 검색하고, 검색된 이미지 가운데 하나 이상의 이미지를 획득할 수 있다.
도시된 도면은 상기 전자 장치가 오디오 데이터 생성 기능, 예를 들어, 녹음기 기능을 실행한 상태(400)에서 오디오 데이터의 일부분에 대하여 여행, 치킨, 기차라는 주제를 확인한 후, 확인된 주제에 대한 리스트를 출력(410)하고, 출력된 리스트 가운데 사용자에 의해 선택된 주제에 해당하는 이미지를 획득하여 오디오 데이터에 대한 태깅 정보로 저장(420)하는 상황을 도시한다.
도 5는 본 발명의 다양한 실시예에 따른 전자 장치의 설정 화면을 도시한 도면이다.
일 실시예에 따르면, 상기 전자 장치는 데이터 저장시 저장 데이터에 대한 태깅 정보를 저장할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 태깅 정보를 수집하기 위한 요청을 감지하는 조건을 설정할 수 있다.
일 실시예에 따르면, 상기 전자 장치는 미리 정해지 제스처가 감지되는 시점에 태깅 정보를 수집하여 저장하도록 설정할 수 있다. 여기에서, 상기 제스처는 외부 영향에 의해 상기 전자 장치의 위치 또는 상태가 변경되는 것이 될 수 있다. 예를 들어, 상기 전자 장치는 미리 정해진 패턴으로 흔들리는 제스처, 미리 정해진 경로로 움직이는 제스처, 전자 장치를 뒤집는 제스처 등을 태깅 정보 수집을 위한 요청으로 사용할 수 있다.
다른 실시예에 따르면, 상기 전자 장치는 미리 정해진 시간이 도래하는 시점에 태깅 정보를 수집하도록 설정할 수 있다.
다른 실시예에 따르면, 상기 전자 장치는 미리 정해진 입력(예를 들어, 소프트 버튼, 하드웨어 버튼, 음성 명령어 등)에 대한 입력이 감지되는 시점에 태깅 정보를 수집하여 저장하도록 설정할 수 있다.
도시된 도면은 상기 전자 장치가 태깅 정보를 수집하기 위한 요청을 선택할 수 있도록 하는 설정 화면을 출력(510)한 상황을 도시한다. 다양한 실시예에 따르면, 상기 전자 장치는 시간 정보를 기반으로 태깅 정보를 수집하도록 하는 메뉴에 대한 입력을 감지할 경우, 도시된 바와 같이 태깅 정보를 수집하는 주기에 대한 화면을 출력(520)하고 입력에 대응하는 주기를 설정할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 제스처 기능으로 태깅 정보를 수집하도록 하는 메뉴에 대한 입력을 감지할 경우, 도시된 바와 같이 태깅 정보를 수집하도록 하는 명령어에 해당하는 제스처에 대한 리스트를 출력(530)하고 입력에 대응하는 제스처를 설정할 수 있다. 상기 전자 장치는 미리 정의된 제스처에 대한 리스트를 제공할 수 있으며, 다양한 실시예에 따르면, 상기 전자 장치는 상기 리스트로 제공되지 않는 제스처를 등록하여 태깅 정보를 수집하도록 하는 요청으로 사용할 수 있다. 예를 들어, 상기 전자 장치는 사용자에 의해 발생되는 제스처를 감지하고 이를 태깅 정보를 수집하는 제스처로 설정할 수도 있다.
도 6은 본 발명의 다양한 실시예에 따른 전자 장치의 입력 기반 태깅 정보 수집 동작을 도시한 도면이다. 도 6과 관련된 설명 중 도 3과 동일 또는 유사한 부분에 대한 설명은 생략된다.
다양한 실시예에 따르면, 오디오 데이터 생성 화면(600)은 오디오 데이터 생성 기능을 제어하는 화면(예를 들어, 녹음 시작 요청 메뉴, 녹음 중지 요청 메뉴, 녹음 중단 요청 메뉴 등을 포함하는 화면), 녹음 진행 상태를 나타내는 화면 등을 포함할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 도시된 바와 같이 태깅 정보를 수집하도록 하는 요청을 발생시키는 메뉴(602)를 상기 오디오 데이터 생성 화면, 예를 들어, 녹음 기능 실행 화면에 출력되도록 처리할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 오디오 데이터 생성을 위한 입력, 예를 들어, 녹음 시작을 요청하는 입력이 감지되면 마이크로 입력되는 신호를 오디오 데이터로 저장할 수 있으며, 상기 오디오 데이터 생성 도중 또는 오디오 데이터 생성이 완료된 시점에 상기 태깅 정보를 수집하도록 하는 요청을 발생시키는 메뉴가 입력(610)되는 경우, 상기 전자 장치는 오디오 데이터에 대한 태깅 정보를 수집(620)할 수 있다.
예를 들어, 상기 전자 장치는 상기 요청을 발생시키는 메뉴에 대한 입력을 감지할 경우, 카메라 기능을 실행하여 오디오 데이터에 대한 태깅 정보를 수집하거나, 상기 입력을 감지한 시점을 기준으로 일정 구간의 오디오 데이터를 분석하여 웹 검색 기능, 저장 데이터 검색 기능 등을 이용하여 오디오 데이터에 대한 태깅 정보를 수집할 수 있다.
도 7은 본 발명의 다양한 실시예에 따른 전자 장치의 타이머 기반 태깅 정보 수집 동작을 도시한 도면이다. 도 7과 관련된 설명 중 도 3과 동일 또는 유사한 부분에 대한 설명은 생략된다.
다양한 실시예에 따르면, 오디오 데이터 생성 화면(700)은 오디오 데이터 생성 기능을 제어하는 화면(예를 들어, 녹음 시작 요청 메뉴, 녹음 중지 요청 메뉴, 녹음 중단 요청 메뉴 등을 포함하는 화면)(702), 녹음 진행 상태를 나타내는 화면(704) 등을 포함할 수 있다. 다양한 실시예에 따르면, 상기 녹음 진행 상태는 시간 정보, 상태바 등을 이용하여 표시할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 오디오 데이터를 생성 또는 재생하는 도중에 타이머를 기반으로 태깅 정보를 생성하는 요청을 감지할 수 있다.
예를 들어, 상기 전자 장치는 태깅 정보를 수집하도록 하는 타이머 주기가 20초일 경우, 녹음이 진행되는 중 20초 간격으로 태깅 정보를 생성할 수 있다. 도시된 바와 같이 20초가 되기 전에는 오디오 데이터를 재생 또는 생성하고, 20초가 되는 시점에 태깅 정보를 생성(712)할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 상기 요청에 대응하여 오디오 데이터 생성 화면 일부에 태깅 정보 수집을 알리는 정보, 태깅 정보 수집 동작을 나타내는 화면(예: 카메라 실행 화면 등), 수집된 태깅 정보 등을 출력할 수 있다.
도 8은 본 발명의 다양한 실시예에 따른 전자 장치의 제스처 기반 태깅 정보 수집 동작을 도시한 도면이다. 도 8과 관련된 설명 중 도 3과 동일 또는 유사한 부분에 대한 설명은 생략된다.
다양한 실시예에 따르면, 상기 전자 장치는 오디오 데이터를 생성(800)하는 도중에 제스처 입력을 기반으로 태깅 정보를 생성하는 요청을 감지할 수 있다.
예를 들어, 상기 전자 장치는 태깅 정보를 수집하도록 하는 제스처가 회전 제스처이고, 녹음이 진행되는 중 조건을 만족하는 방향 및 각도로 회전하는 제스처를 감지(810)할 경우, 태깅 정보를 생성(812)할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 상기 요청에 대응하여 오디오 데이터 생성 화면 일부에 태깅 정보 수집을 알리는 정보, 태깅 정보 수집 동작을 나타내는 화면(예: 카메라 실행 화면 등), 수집된 태깅 정보 등을 출력할 수 있다.
예를 들어, 상기 전자 장치는 미리 정의된 제스처, 예를 들어, 전자 장치의 회전을 감지할 경우, 카메라 기능을 실행하여 오디오 데이터에 대한 태깅 정보를 수집하거나, 상기 입력을 감지한 시점을 기준으로 일정 구간의 오디오 데이터를 분석하여 웹 검색 기능, 저장 데이터 검색 기능 등을 이용하여 오디오 데이터에 대한 태깅 정보를 수집할 수 있다.
도 9는 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 생성 동작을 도시한 도면이다.
다양한 실시예에 따르면, 상기 전자 태깅 정보를 생성하도록 하는 요청(예를 들어, 도 6에 도시된 바와 같이 태깅 정보를 생성하도록 하는 입력을 감지하거나, 도 7에 도시된 바와 같이 태깅 정보 생성 주기가 도래함을 확인하거나, 도 8에 도시된 바와 같이 태깅 정보를 생성하도록 하는 제스처)이 감지되는 경우, 상기 전자 장치는 태깅 정보를 생성(900)한 후, 태깅 정보가 생성된 상황을 표시할 수 있다. 예를 들어, 상기 전자 장치는 오디오 데이터 생성 화면 또는 재생 화면 일부에 생성된 태깅 정보를 출력(910)할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 사용자의 입력을 감지하여 도 9에 도시된 꽃을 피사체로 하는 이미지를 획득하거나 사용자의 입력이 감지된 시점의 단어, 문장 등과 분석하여 저장된 이미지 가운데 분석된 단어 또는 문장, 예를 들어, 단어 꽃이라는 단어에 대응되는 이미지를 획득하거나, 분석된 단어 또는 문장에 대응하는 이미지를 외부 전자 장치를 통해 획득할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 획득한 이미지를 오디오 데이터에 대한 태깅 정보로 사용할 수 있으며, 상기 태깅 정보를 오디오 데이터와 연관하여 저장할 수 있다. 여기에서, 태깅 정보를 오디오 데이터와 연관하여 저장한다는 것으로, 오디오 데이터를 이용하여 태깅 정보를 재생하거나 상기 태깅 정보를 이용하여 오디오 데이터를 재생할 수 있도록 저장하는 것이 될 수 있다.
도 10은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 도면이다.
일 실시예에 따르면, 상기 전자 장치는 데이터 저장 시 성문 인식, 감정 인식 등을 기반으로 태깅 정보를 생성할 수 있다. 예를 들어, 상기 전자 장치는 오디오 성분을 분석하여 미리 정의된 성문 또는 미리 정의된 감정을 인식하여 상기 요청이 발생된 상황으로 판단할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 인식된 사용자의 감정, 연령, 주소 등에 대응되는 이미지 또는 사용자에 대응되는 이미지를 폰북, 외부 전자 장치 등으로부터 획득하여 태깅 정보로 사용할 수 있다
다른 예로, 상기 전자 장치는 다수의 사용자에 대한 오디오 성분을 감지하는 경우, 오디오 성분이 변경, 예를 들어, 화자가 변경되는 경우, 상기 요청이 발생된 상황으로 판단할 수 있다, 다양한 실시예에 따르면, 상기 전자 장치는 화자가 변경되는 시점마다 사용자에 해당하는 태깅 정보를 생성할 수 있다. 상기 전자 장치는 각각 사용자와의 통화 시 음성을 분석하여 사용자에 대한 분석 결과를 저장한 후 태깅 정보 생성에 사용할 수 있다.
도시된 도면은 상기 전자 장치(1000)가 오디오 데이터를 분석하면서, A라는 사용자에 대한 음성(예: “Hello”)을 확인한 경우, 폰북, 갤러리 등에 저장된 사용자 A의 이미지를 획득하여 출력(1010)하고, B라는 사용자의 음성(예: “Hello what are you doing?”)이 새로이 확인되는 경우, 사용자 B의 이미지를 획득하여 출력(1020)한 상황을 도시한다.
도 11은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 관리 동작을 도시한 도면이다.
다양한 실시예에 따르면, 상기 전자 장치는 데이터 저장 시 태깅 정보를 연관하여 저장할 수 있다. 일 실시예에 따르면, 상기 전자 장치는 오디오 데이터의 파일명과 함께 태깅 정보가 출력되도록 처리할 수 있다. 예를 들어, 006이라는 파일명을 가지는 녹음 파일(1101)에 이미지 형식의 태깅 정보(1103)가 추가되어 리스트로 관리될 수 있다. 녹음 파일에 포함된 주제가 풍경일 경우, 상기 녹음 파일에 해당하는 태깅 정보는 풍경에 해당하는 이미지가 될 수 있다.
다양한 실시예에 따르면, 상기 전자 장치는 데이터 저장 시 태깅 정보를 파일명으로 사용하여 저장할 수 있다. 일 실시예에 따르면, 상기 전자 장치는 오디오 데이터에 포함된 태깅 정보와 상기 태깅 정보를 표현하는 텍스트 정보를 파일명으로 저장하고, 이를 리스트로 관리할 수 있다. 예를 들어, 상기 전자 장치는 유럽과 관련된 주제에 해당하는 태깅 정보(1112)와 상기 태깅 정보를 표현하는 유럽이라는 텍스트 정보(1114)를 녹음 파일에 대한 파일 명으로 사용할 수 있다.
도시된 도면은 상기 전자 장치가 오디오 데이터에 대하여, 파일명에 태깅 정보를 추가한 상황(1100)과 상기 전자 장치가 태깅 정보와 태깅 정보에 해당하는 텍스트 정보를 파일명으로 사용한 상황(1110)을 도시하고 있다. 상기 전자 장치는 태깅 정보와 텍스트 정보를 파일명으로 사용하는 해당 데이터가 녹음 파일이라는 표시를 추가할 수 있다.
도 12는 본 발명의 다양한 실시예에 따른 전자 장치에서 태깅 정보와 연동된 데이터를 재생하는 동작을 도시한 도면이다.
상기 전자 장치는 저장 데이터에 대한 태깅 정보를 리스트(1200)로 관리할 수 있다.
다양한 실시예에 따르면, 상기 태깅 정보는 이미지 정보를 포함할 수 있다. 상기 전자 장치는 오디오 데이터에 대한 태깅 정보를 수집한 후, 이를 이미지 관리 기능과 연동시킬 수 있다. 예를 들어, 상기 전자 장치는 오디오 데이터와 태깅 정보를 연관을 가지도록 설정한 후, 태깅 정보를 갤러리와 같은 이미지 관리 기능과 연동시킬 수 있다. 상기 태깅 정보에는 연동되는 데이터에 대한 정보, 예를 들어, 오디오 데이터에 대한 태깅 정보임을 나타내는 정보(1202)를 포함할 수 있다.
상기 전자 장치는 이미지를 선택하는 입력을 감지(1204)할 경우, 상기 선택된 이미지와 연관되어 저장된 오디오 데이터를 로딩하여 재생(1210)할 수 있다.
도시된 도면은, 상기 전자 장치가 이미지 관리 기능을 실행하여 다수의 이미지에 대한 리스트를 출력한 후, 태깅 정보를 선택하는 입력을 감지하여 선택된 태깅 정보와 연관되어 저장된 오디오 데이터를 재생하는 상황을 도시하고 있다. 상기 도면에서는 오디오 데이터의 재생(1210)에 따라 태깅 정보도 함께 출력(1212)될 수 있음을 나타내고 있다.
도 13은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 도면이다.
다양한 실시예에 따르면, 상기 전자 장치는 오디오 데이터 생성 화면을 출력한 상태에서 태깅 정보를 수집할 수 있다. 일 실시예에 따르면, 상기 오디오 데이터 생성 화면은 오디오 데이터 생성 기능을 제어하는 화면(예를 들어, 녹음 시작 요청 메뉴, 녹음 중지 요청 메뉴, 녹음 중단 요청 메뉴 등을 포함하는 화면)(1310), 녹음 진행 상태를 나타내는 화면(1300) 등을 포함할 수 있다. 상기 녹음 진행 상태는 시간 정보, 상태바 등을 이용하여 표시할 수 있다.
본 발명에 다양한 실시예에 따르면, 상기 오디오 데이터 생성 화면은 오디오 데이터의 구간 가운데 태깅 정보가 생성된 위치를 나타내는 정보(1320)를 포함할 수 있다. 도시된 도면에서 상기 정보(1320)는 위치를 지정할 수 있는 삼각형 형태로 표현되어 있으며, 예를 들어, 상기 태깅 정보가 오디오 데이터의 30초에 해당하는 재생 위치에서 생성된 경우, 상기 정보는 상기 녹음 진행 상태를 나타내는 상태바 가운데 태깅 정보가 생성된 30초의 위치에 표시될 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 태깅 정보가 생성된 각각의 위치에 대응하는 태깅 정보를 출력할 수 있으며, 예를 들어, 각각의 위치에 대하여 사이즈가 조절된 태깅 정보(이미지 정보)(1322)를 출력할 수 있다. 더하여, 상기 오디오 데이터 생성 화면은 최근에 생성된 태깅 정보를 출력하는 영역(1330)을 포함할 수 있다.
다양한 실시예에 따르면, 상기 최근에 생성된 태깅 정보를 출력하는 영역(1330)은 복수의 태깅 정보를 출력할 수 있다. 일 실시예에 따르면, 상기 영역은 제 1 태깅 정보가 출력되는 영역(1332)과 제 2 태깅 정보가 출력되는 영역(1334)을 포함할 수 있다. 일 실시예에 따르면, 상기 제 1 태깅 정보는 카메라 기능, 웹 검색 기능, 데이터 검색 기능 등으로 획득된 데이터를 포함할 수 있으며, 상기 제 2 태깅 정보는 상기 제 1 태깅 정보에 대한 부가 정보가 될 수 있다. 예를 들어, 상기 제 2 태깅 정보는 상기 제 1 태깅 정보를 획득한 시점에 대한 상기 전자 장치의 상황 정보, 제 1 태깅 정보에 대한 상세 정보를 포함할 수 있다.
일 실시예에 따르면, 상기 전자 장치는 오디오 데이터를 분석하여 제 1 태깅 정보로 제주도에 대한 이미지를 획득할 수 있으며, 제 2 태깅 정보로 제주도에 대응하는 제 1 태깅 정보를 획득한 전자 장치의 위치 정보를 획득할 수 있다.
다른 실시예에 따르면, 상기 전자 장치는 오디오 데이터를 분석하여 제 1 태깅 정보로 제주도에 대한 이미지를 획득할 수 있으며, 제 2 태깅 정보로 제주도에 대한 부가 정보를 획득할 수 있다.
상기 전자 장치는 태깅 정보가 생성된 구간에 대한 입력을 감지(1340)할 경우, 해당 구간에 대한 태깅 정보(예를 들어, 제 1 태깅 정보(1332)와 제 2 태깅 정보(1334))를 출력할 수 있다.
도 14는 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 수집 동작을 도시한 흐름도이다.
동작 1401에서, 상기 전자 장치는 데이터 생성 기능을 활성화할 수 있다. 여기에서, 상기 데이터는 문서 데이터, 오디오 데이터, 이미지 데이터, 영상 데이터 등을 포함할 수 있으며, 일 실시예에 따르면, 상기 전자 장치는 오디오 데이터를 생성하기 위해서 녹음 기능을 활성화할 수 있다.
동작 1403에서, 상기 전자 장치는 태깅 정보 생성을 위한 요청을 감지할 수 있다. 일 실시예에 따르면, 상기 요청은 키입력, 음성 명령어 입력, 제스처 입력 등에 의해 감지될 수 있다. 다양한 실시예에 따르면, 상기 요청은 타이머 기반으로 감지될 수도 있다.
동작 1405에서, 상기 전자 장치는 태깅 정보 생성 요청에 대응하여, 데이터의 적어도 일부를 표현할 수 있는 주제를 파악할 수 있다. 일 실시예에 따르면, 상기 주제는 상기 요청이 감지된 시점에 데이터에 포함된 소리, 단어, 문장 등을 기반으로 파악될 수 있으며, 단어 자체가 주제가 될 수도 있다.
동작 1407에서, 상기 전자 장치는 상기 파악된 주제를 기반으로 태깅 정보를 생성할 수 있다. 여기에서, 상기 태깅 정보를 생성하는 것은, 상기 파악된 주제에 대응되는 이미지, 텍스트, 동영상 등을 저장 데이터 또는 외부 저장 장치로부터 획득하는 것이 될 수 있다. 더하여, 상기 태깅 정보를 생성하는 것은 상기 태깅 정보를 생성하는 시점에 상응하는 환경 정보, 예를 들어, 태깅 정보를 획득한 전자 장치의 위치 정보, 태깅 정보를 획득한 전자 장치의 주변 잡음 정보, 태깅 정보를 획득한 시점의 기상 정보 등에 대한 정보를 수집하는 것이 될 수 있다.
동작 1409에서, 상기 전자 장치는 생성된 태깅 정보를 저장할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 상기 태깅 정보를 데이터와 연관하여 저장할 수 있다. 예를 들어, 상기 전자 장치는 데이터의 메타 정보에 태깅 정보를 추가하거나 데이터 파일명에 태깅 정보를 추가할 수도 있다.
도 15는 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 편집 동작을 도시한 흐름도이다.
동작 1501에서, 상기 전자 장치는 태깅 정보를 분석할 수 있다. 일 실시예에 따르면, 상기 데이터와 연관된 태깅 정보는 다수일 수 있으며, 상기 전자 장치는 유사한 태깅 정보를 하나로 합치기 위하여 태깅 정보를 분석할 수 있다. 여기에서, 유사성을 가진다는 것은 각각의 태깅 정보 들이 동일한 주제를 표현하는 것이 될 수 있다.
동작 1503에서, 상기 전자 장치는 유사도에 따라 태깅 정보를 편집할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 연속적으로 동일한 주제를 가지는 복수의 태깅 정보 가운데 하나의 태깅 정보만을 선택하여 사용하거나, 데이터에 기 설정된 태깅 정보를 다른 태깅 정보로 변경할 수 있다.
동작 1505에서, 상기 전자 장치는 입력에 대응하여 편집된 태깅 정보를 저장할 수 있다. 일 실시예에 따르면, 상기 전자 장치는 편집된 태깅 정보를 저장하도록 하는 입력을 감지할 경우, 기존 태깅 정보를 새로이 편집된 태깅 정보로 대체할 수 있다.
동작 1507에서, 상기 전자 장치는 데이터에 설정된 태깅 정보 가운데 미리 정의된 조건을 만족하는 태깅 정보를 데이터에 대한 대표 정보로 설정할 수 있다.
여기에서, 상기 대표 정보는 상기 데이터에 대한 파일명, 검색어로 사용될 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 태깅 정보에 대한 우선 순위를 확인하여 대표 정보로 설정할 태깅 정보를 선택할 수 있다. 여기에서, 상기 우선 순위는 태깅 정보 획득 순서, 태깅 정보의 반복도 등을 포함할 수 있다.
도 16은 본 발명의 다양한 실시예에 따른 전자 장치의 태깅 정보 관리 동작을 도시한 흐름도이다.
동작 1601에서, 상기 전자 장치는 태깅 정보 리스트를 출력할 수 있다. 다양한 실시예에 따르면, 상기 태깅 정보는 데이터와 연관되어 저장된 것으로, 종류에 따라, 이미지 리스트, 문서 리스트, 오디오 데이터 리스트에 포함될 수 있다.
동작 1063에서, 상기 전자 장치는 태깅 정보 리스트에서 사용자에 의해 선택되는 태깅 정보를 확인할 수 있다.
동작 1605에서, 상기 전자 장치는 선택된 태깅 정보와 연관된 데이터를 확인할 수 있다.
동작 1607에서, 상기 전자 장치는 선택된 태깅 정보 및 확인된 데이터를 로딩하여 재생할 수 있다.
다양한 실시예에 따른 전자 장치의 동작 방법은 전자장치에서, 상기 전자 장치와 기능적으로 연결된 출력 장치를 통하여 제공될 수 있는 컨텐츠의 적어도 일부분에 대한 태깅 정보를 생성하기 위한 요청을 확인하는 동작, 상기 요청에 응답하여 상기 적어도 일부분에 대응하는 소리(Sound)를 판단하는 동작 및 상기 소리에 기반하여, 대응하는 적어도 하나의 지정된 데이터를 상기 태깅 정보로서 획득하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 지정된 데이터를 상기 적어도 일부분과 연관시켜 저장하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 상기 획득하는 동작은 상기 소리에 기반하여, 상기 적어도 일부분에 대응하는 주제를 확인하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 획득하는 동작은 상기 전자 장치와 통신하는 외부 장치로부터 상기 적어도 하나의 지정된 데이터를 수신하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 획득하는 동작은 상기 요청에 응답하여 주변 환경에 대한 데이터를 획득하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 소리(Sound)를 판단하는 동작은 사용자를 구분하는 동작, 단어, 문장, 구 가운데 적어도 하나를 인식하는 동작, 사용자의 감정을 인식하는 동작, 주변 소음을 인식하는 동작 가운데 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치의 동작 방법은 상기 획득된 태깅 정보를 출력하는 동작 및 상기 출력된 태깅 정보를 선택하는 입력에 대응하여, 상기 선택된 태깅 정보와 연관된 데이터를 실행하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 지정된 데이터는 이미지 형태의 데이터를 포함할 수 있다.
도 17은 다양한 실시예들에 따른 전자 장치 1701의 블록도 1700을 도시한다. 상기 전자 장치 1701은, 예를 들면, 도 1에 도시된 전자 장치 101의 전체 또는 일부를 구성할 수 있다. 도 17을 참조하면, 상기 전자 장치 1701은 하나 이상의 어플리케이션 프로세서(AP: application processor) 1710, 통신 모듈 1720, SIM(subscriber identification module) 카드 1724, 메모리 1730, 센서 모듈 1740, 입력 장치 1750, 디스플레이 1760, 인터페이스 1770, 오디오 모듈 1780, 카메라 모듈 1791, 전력관리 모듈 1795, 배터리 1796, 인디케이터 1797 및 모터 1798을 포함할 수 있다.
상기 AP 1710은 운영체제 또는 응용 프로그램을 구동하여 상기 AP 1710에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 1710은, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 상기 AP 1710는 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 통신 모듈 1720(예: 도 1의 상기 통신 인터페이스 160)은 상기 전자 장치 1701(예: 상기 전자 장치 101)과 네트워크를 통해 연결된 다른 전자 장치들(예: 도 1의 전자 장치 104 또는 서버 106) 간의 통신에서 데이터 송수신을 수행할 수 있다. 한 실시예에 따르면, 상기 통신 모듈 1720은 셀룰러 모듈 1721, Wifi 모듈 1723, BT 모듈 1725, GPS 모듈 1727, NFC 모듈 1728 및 RF(radio frequency) 모듈 1729를 포함할 수 있다.
상기 셀룰러 모듈 1721은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다. 또한, 상기 셀룰러 모듈 1721은, 예를 들면, 가입자 식별 모듈(예: SIM 카드 1724)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 상기 셀룰러 모듈 1721은 상기 AP 1710가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈 1721은 멀티 미디어 제어 기능의 적어도 일부를 수행할 수 있다.
한 실시예에 따르면, 상기 셀룰러 모듈 1721은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈 1721은, 예를 들면, SoC로 구현될 수 있다. 도 17에서는 상기 셀룰러 모듈 1721(예: 커뮤니케이션 프로세서), 상기 메모리 1730 또는 상기 전력관리 모듈 1795 등의 구성요소들이 상기 AP 1710과 별개의 구성요소로 도시되어 있으나, 한 실시예에 따르면, 상기 AP 1710가 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈 1721)를 포함하도록 구현될 수 있다.
한 실시예에 따르면, 상기 AP 1710 또는 상기 셀룰러 모듈 1721(예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 1710 또는 상기 셀룰러 모듈 1721은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 Wifi 모듈 1723, 상기 BT 모듈 1725, 상기 GPS 모듈 1727 또는 상기 NFC 모듈 1728 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 도 17에서는 셀룰러 모듈 1721, Wifi 모듈 1723, BT 모듈 1725, GPS 모듈 1727 또는 NFC 모듈 1728이 각각 별개의 블록으로 도시되었으나, 한 실시예에 따르면, 셀룰러 모듈 1721, Wifi 모듈 1723, BT 모듈 1725, GPS 모듈 1727 또는 NFC 모듈 1728 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈 1721, Wifi 모듈 1723, BT 모듈 1725, GPS 모듈 1727 또는 NFC 모듈 1728 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈 1721에 대응하는 커뮤니케이션 프로세서 및 Wifi 모듈 1723에 대응하는 Wifi 프로세서)는 하나의 SoC로 구현될 수 있다.
상기 RF 모듈 1729는 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈 1729는, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 1729는 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 17에서는 셀룰러 모듈 1721, Wifi 모듈 1723, BT 모듈 1725, GPS 모듈 1727 및 NFC 모듈 1728이 하나의 RF 모듈 1729를 서로 공유하는 것으로 도시되어 있으나, 한 실시예에 따르면, 셀룰러 모듈 1721, Wifi 모듈 1723, BT 모듈 1725, GPS 모듈 1727 또는 NFC 모듈 1728 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드 1724는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드 1724는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 1730(예: 도 1의 메모리 130)은 내장 메모리 1732 또는 외장 메모리 1734를 포함할 수 있다. 상기 내장 메모리 1732는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 내장 메모리 1732는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리 1734는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 1734는 다양한 인터페이스를 통하여 상기 전자 장치 1701과 기능적으로 연결될 수 있다. 한 실시예에 따르면, 상기 전자 장치 1701은 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 센서 모듈 1740은 물리량을 계측하거나 전자 장치 1701의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 1740은, 예를 들면, 제스처 센서 1740A, 자이로 센서 1740B, 기압 센서 1740C, 마그네틱 센서 1740D, 가속도 센서 1740E, 그립 센서 1740F, 근접 센서 1740G, color 센서 1740H(예: RGB(red, green, blue) 센서), 생체 센서 1740I, 온/습도 센서 1740J, 조도 센서 1740K 또는 UV(ultra violet) 센서 1740M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 1740은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 1740은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 입력 장치 1750은 터치 패널(touch panel) 1752, (디지털) 펜 센서(pen sensor) 1754, 키(key) 1756 또는 초음파(ultrasonic) 입력 장치 1758을 포함할 수 있다. 상기 터치 패널 1752는, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널 1752은 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널 1752는 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 1752는 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 1754는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키 1756은, 예를 들면, 물리적인 버튼, 광학식 키 또는 키패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 1758은 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치 1701에서 마이크(예: 마이크 1788)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시예에 따르면, 상기 전자 장치 1701은 상기 통신 모듈 1720을 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 1760(예: 도 1의 디스플레이 150)은 패널 1762, 홀로그램 장치 1764 또는 프로젝터 1766을 포함할 수 있다. 상기 패널 1762는, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 1762는, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 1762은 상기 터치 패널 1752과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 1764은 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 1766는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 1701의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 상기 디스플레이 1760은 상기 패널 1762, 상기 홀로그램 장치 1764, 또는 프로젝터 1766를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스 1770은, 예를 들면, HDMI(high-definition multimedia interface) 1772, USB(universal serial bus) 1774, 광 인터페이스(optical interface) 1776 또는 D-sub(D-subminiature) 1778를 포함할 수 있다. 상기 인터페이스 1770는, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 1770은, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 1780은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 1780의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 1780은, 예를 들면, 스피커 1782, 리시버 1784, 이어폰 1786 또는 마이크 1788 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 1791은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬(flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다.
상기 전력 관리 모듈 1795는 상기 전자 장치 1701의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력 관리 모듈 1795는, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 1796의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 1796은 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 1701에 전원을 공급할 수 있다. 상기 배터리 1796은, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 1797은 상기 전자 장치 1701 혹은 그 일부(예: 상기 AP 1710)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 1798은 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 1701은 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 개시에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 개시에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 개시에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 개시에 사용된 용어 “모듈”은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. “모듈”은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. “모듈”은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. “모듈”은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. “모듈”은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 개시에 따른 “모듈”은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 본 개시에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서 210)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 220가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서210에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 개시의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 개시에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 개시에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 전자장치에서, 상기 전자 장치와 기능적으로 연결된 출력 장치를 통하여 제공될 수 있는 컨텐츠의 적어도 일부분에 대한 태깅 정보를 생성하기 위한 요청을 확인하는 동작, 상기 요청에 응답하여 상기 적어도 일부분에 대응하는 소리(Sound)를 판단하는 동작 및 상기 소리에 기반하여, 대응하는 적어도 하나의 지정된 데이터를 상기 태깅 정보로서 획득하는 동작을 포함할 수 있다.
그리고 본 명세서와 도면에 개시된 본 개시의 실시 예들은 본 개시의 기술 내용을 쉽게 설명하고 본 개시의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 개시의 범위를 한정하고자 하는 것은 아니다. 따라서 본 개시의 범위는 여기에 개시된 실시 예들 이외에도 본 개시의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 개시의 범위에 포함되는 것으로 해석되어야 한다.

Claims (17)

  1. 전자 장치의 데이터 관리 방법에 있어서,
    상기 전자 장치를 통해 오디오 데이터를 기록하는 인터페이스를 상기 전자 장치의 디스플레이 상에 표시하는 동작;
    상기 오디오 데이터가 기록되는 동안에, 상기 전자 장치의 프로세서를 통해 상기 오디오 데이터와 연관된 적어도 하나의 이미지를 획득하기 위한 입력을 검출하는 동작;
    상기 입력의 검출에 대응하여, 상기 입력이 검출되는 시간에 기반하여 지정된 기간 동안 기록된 오디오 데이터에 해당되는 상기 오디오 데이터의 일부를 확인하는 동작;
    상기 오디오 데이터의 일부의 확인에 대응하여, 상기 프로세서를 통해 상기 오디오 데이터의 일부로부터 적어도 하나의 단어를 획득하는 동작;
    상기 적어도 하나의 단어의 획득에 대응하여, 상기 적어도 하나의 단어에 기반하여 외부 전자 장치로부터 검색된 적어도 하나의 이미지를 획득하는 동작; 및
    상기 적어도 하나의 이미지의 획득에 대응하여, 상기 오디오 데이터와 연관된 상기 적어도 하나의 이미지를 상기 전자 장치의 메모리에 저장하고, 복수의 이미지 중 상기 적어도 하나의 이미지가 선택되면, 상기 오디오 데이터의 일부를 출력하는 동작을 포함하고,
    상기 입력은 키 입력, 터치 입력 및 상기 전자 장치의 지정된 움직임 중 적어도 하나를 포함하고,
    상기 적어도 하나의 이미지는, 상기 적어도 하나의 단어의 의미와 관련된 이미지를 포함하는, 방법.
  2. 제 1항에 있어서,
    상기 오디오 데이터의 일부는, 상기 입력이 검출되기 전 지정된 시간 동안 상기 전자 장치에 입력되는 소리에 대응되는 오디오 데이터를 포함하는, 방법.
  3. 삭제
  4. 제 1항에 있어서,
    상기 적어도 하나의 이미지는, 상기 적어도 하나의 단어로부터 획득된 주제와 관련된 이미지를 포함하는, 방법.
  5. 제 1항에 있어서,
    상기 입력의 검출에 대응하여, 상기 오디오 데이터를 기록하는 동안, 상기 전자 장치의 카메라를 활성화하는 동작;
    상기 카메라의 활성화에 대응하여, 상기 카메라를 통해 이미지를 획득하는 동작; 및
    상기 획득된 이미지를 상기 오디오 데이터와 함께 상기 메모리에 저장하는 동작을 더 포함하는, 방법.
  6. 제 1항에 있어서,
    상기 적어도 하나의 단어에 대응되는 텍스트를 획득하는 동작; 및
    상기 획득된 텍스트를 상기 오디오 데이터와 함께 상기 메모리에 저장하는 동작을 더 포함하는, 방법.
  7. 전자 장치에 있어서,
    디스플레이;
    메모리; 및
    프로세서를 포함하고,
    상기 프로세서는,
    상기 전자 장치를 통해 오디오 데이터를 기록하는 인터페이스를 상기 디스플레이 상에 표시하고,
    상기 오디오 데이터가 기록되는 동안에, 상기 오디오 데이터와 연관된 적어도 하나의 이미지를 획득하기 위한 입력을 검출하고,
    상기 입력의 검출에 대응하여, 상기 입력이 검출되는 시간에 기반하여 지정된 기간 동안 기록된 오디오 데이터에 해당되는 상기 오디오 데이터의 일부를 확인하고,
    상기 오디오 데이터의 일부의 확인에 대응하여, 상기 오디오 데이터의 일부로부터 적어도 하나의 단어를 획득하고,
    상기 적어도 하나의 단어의 획득에 대응하여, 상기 적어도 하나의 단어에 기반하여 외부 전자 장치로부터 검색된 적어도 하나의 이미지를 획득하고,
    상기 적어도 하나의 이미지의 획득에 대응하여, 상기 오디오 데이터와 연관된 상기 적어도 하나의 이미지를 상기 메모리에 저장하고, 복수의 이미지 중 상기 적어도 하나의 이미지가 선택되면, 상기 오디오 데이터의 일부를 출력하도록 설정되고,
    상기 입력은, 키 입력, 터치 입력 및 상기 전자 장치의 지정된 움직임 중 적어도 하나를 포함하고,
    상기 적어도 하나의 이미지는, 상기 적어도 하나의 단어의 의미와 관련된 이미지를 포함하는, 전자 장치.
  8. 제 7항에 있어서,
    상기 오디오 데이터의 일부는, 상기 입력이 검출되기 전 지정된 시간 동안 상기 전자 장치에 입력되는 소리에 대응되는 오디오 데이터를 포함하는, 전자 장치.
  9. 삭제
  10. 제 7항에 있어서,
    상기 적어도 하나의 이미지는, 상기 적어도 하나의 단어로부터 획득된 주제와 관련된 이미지를 포함하는, 전자 장치.
  11. 제 7항에 있어서,
    상기 프로세서는,
    상기 입력의 검출에 대응하여, 상기 오디오 데이터를 기록하는 동안 상기 전자 장치의 카메라를 활성화하고,
    상기 카메라의 활성화에 대응하여, 상기 카메라를 통해 이미지를 획득하고,
    상기 획득된 이미지를 상기 오디오 데이터와 함께 상기 메모리에 저장하도록 설정된, 전자 장치.
  12. 제 7항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 단어에 대응되는 텍스트를 획득하고,
    상기 획득된 데이터를 상기 오디오 데이터와 함께 상기 메모리에 저장하도록 설정된, 전자 장치.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
KR1020140079746A 2014-06-27 2014-06-27 데이터 관리 방법 및 그 방법을 처리하는 전자 장치 KR102340251B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020140079746A KR102340251B1 (ko) 2014-06-27 2014-06-27 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
PCT/KR2015/006401 WO2015199430A1 (en) 2014-06-27 2015-06-24 Method and apparatus for managing data
CN201580033944.1A CN106471493B (zh) 2014-06-27 2015-06-24 用于管理数据的方法和装置
US14/749,937 US10691717B2 (en) 2014-06-27 2015-06-25 Method and apparatus for managing data
EP15174165.9A EP2960816A1 (en) 2014-06-27 2015-06-26 Method and apparatus for managing data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140079746A KR102340251B1 (ko) 2014-06-27 2014-06-27 데이터 관리 방법 및 그 방법을 처리하는 전자 장치

Publications (2)

Publication Number Publication Date
KR20160001359A KR20160001359A (ko) 2016-01-06
KR102340251B1 true KR102340251B1 (ko) 2021-12-16

Family

ID=53502491

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140079746A KR102340251B1 (ko) 2014-06-27 2014-06-27 데이터 관리 방법 및 그 방법을 처리하는 전자 장치

Country Status (5)

Country Link
US (1) US10691717B2 (ko)
EP (1) EP2960816A1 (ko)
KR (1) KR102340251B1 (ko)
CN (1) CN106471493B (ko)
WO (1) WO2015199430A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11335080B2 (en) * 2015-09-21 2022-05-17 International Business Machines Corporation System for suggesting search terms
US11386870B2 (en) * 2017-07-31 2022-07-12 Sony Corporation Information processing apparatus and information processing method
US10552524B1 (en) * 2017-12-07 2020-02-04 Palantir Technolgies Inc. Systems and methods for in-line document tagging and object based data synchronization
WO2020162709A1 (en) 2019-02-08 2020-08-13 Samsung Electronics Co., Ltd. Electronic device for providing graphic data based on voice and operating method thereof
US11093690B1 (en) 2019-07-22 2021-08-17 Palantir Technologies Inc. Synchronization and tagging of image and text data

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040062364A1 (en) 2002-09-27 2004-04-01 Rockwell Electronic Commerce Technologies, L.L.C. Method selecting actions or phases for an agent by analyzing conversation content and emotional inflection
US20070136680A1 (en) 2005-12-11 2007-06-14 Topix Llc System and method for selecting pictures for presentation with text content
US20080194270A1 (en) 2007-02-12 2008-08-14 Microsoft Corporation Tagging data utilizing nearby device information
US20110030477A1 (en) 2008-05-01 2011-02-10 Airbus Operations Limited Ultrasound inspection method and apparatus
US20120323575A1 (en) * 2011-06-17 2012-12-20 At&T Intellectual Property I, L.P. Speaker association with a visual representation of spoken content
US20130024882A1 (en) 2011-07-21 2013-01-24 Lg Electronics Inc. Electronic device and social commerce server for performing coupon search
JP2013535042A (ja) * 2010-05-27 2013-09-09 ノキア コーポレイション 拡張されたコンテンツタグ共有のための方法及び装置
US20140006027A1 (en) 2012-06-28 2014-01-02 Lg Electronics Inc. Mobile terminal and method for recognizing voice thereof
US20140014097A1 (en) 2011-03-25 2014-01-16 Maria Julia OLLER PEREIRA System to prevent water from entering a snorkel breather tube
US20140047386A1 (en) 2012-08-13 2014-02-13 Digital Fridge Corporation Digital asset tagging
US20150039646A1 (en) 2013-08-02 2015-02-05 Google Inc. Associating audio tracks with video content

Family Cites Families (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6505160B1 (en) * 1995-07-27 2003-01-07 Digimarc Corporation Connected audio and other media objects
JP3230569B2 (ja) * 1996-04-24 2001-11-19 富士ゼロックス株式会社 情報蓄積装置、情報蓄積方法および情報蓄積再生装置
US5905981A (en) * 1996-12-09 1999-05-18 Microsoft Corporation Automatically associating archived multimedia content with current textual content
US5995936A (en) * 1997-02-04 1999-11-30 Brais; Louis Report generation system and method for capturing prose, audio, and video by voice command and automatically linking sound and image to formatted text locations
US7406214B2 (en) * 1999-05-19 2008-07-29 Digimarc Corporation Methods and devices employing optical sensors and/or steganography
US7526431B2 (en) * 2001-09-05 2009-04-28 Voice Signal Technologies, Inc. Speech recognition using ambiguous or phone key spelling and/or filtering
KR20050087312A (ko) 2004-02-26 2005-08-31 한국흑판교재주식회사 강의내용의 음성인식 방법과 이를 이용한 강의자료 편집시스템
KR100621401B1 (ko) * 2004-03-31 2006-09-08 삼성전자주식회사 회전상태를 인식하여 저장된 정보를 탐색하는이동통신기기 및 그 방법
US8509419B2 (en) 2004-09-30 2013-08-13 Avaya, Inc. Computer and telephony integration
US20150371629A9 (en) * 2005-01-03 2015-12-24 Luc Julia System and method for enabling search and retrieval operations to be performed for data items and records using data obtained from associated voice files
KR100605143B1 (ko) 2005-01-14 2006-07-31 (주)필링크 멀티미디어메시지 생성 시스템 및 방법
JP4940588B2 (ja) * 2005-07-27 2012-05-30 ソニー株式会社 ビート抽出装置および方法、音楽同期画像表示装置および方法、テンポ値検出装置および方法、リズムトラッキング装置および方法、音楽同期表示装置および方法
US20070239537A1 (en) * 2006-04-07 2007-10-11 Miva, Inc. Advertisement brokerage system for diversified general media
US8239480B2 (en) * 2006-08-31 2012-08-07 Sony Ericsson Mobile Communications Ab Methods of searching using captured portions of digital audio content and additional information separate therefrom and related systems and computer program products
US8171237B2 (en) * 2006-10-31 2012-05-01 Yahoo! Inc. Automatic association of reference data with primary process data based on time and shared identifier
KR100893546B1 (ko) 2007-03-12 2009-04-17 (주)티아이스퀘어 음성 인식을 이용한 영상 합성 통화 서비스 방법 및 장치
US20090234655A1 (en) * 2008-03-13 2009-09-17 Jason Kwon Mobile electronic device with active speech recognition
KR101481001B1 (ko) 2008-03-17 2015-01-09 에스케이텔레콤 주식회사 음성인식 기반의 영상제공 시스템 및 방법, 그리고 이에적용되는 서버
US8098894B2 (en) * 2008-06-20 2012-01-17 Yahoo! Inc. Mobile imaging device as navigator
KR20100030968A (ko) * 2008-09-11 2010-03-19 엘지전자 주식회사 단말기 및 그의 메뉴 디스플레이 방법
US8201074B2 (en) * 2008-10-08 2012-06-12 Microsoft Corporation Talking paper authoring tools
KR101450580B1 (ko) * 2008-11-19 2014-10-14 삼성전자주식회사 이미지 합성 방법 및 장치
US20100216441A1 (en) * 2009-02-25 2010-08-26 Bo Larsson Method for photo tagging based on broadcast assisted face identification
WO2010103717A1 (ja) * 2009-03-11 2010-09-16 パナソニック株式会社 デジタル放送受信装置および映像表示方法
US8793332B2 (en) * 2009-07-21 2014-07-29 Apple Inc. Content tagging using broadcast device information
US20110054647A1 (en) * 2009-08-26 2011-03-03 Nokia Corporation Network service for an audio interface unit
US9262120B2 (en) * 2009-09-11 2016-02-16 Nokia Technologies Oy Audio service graphical user interface
US20110083073A1 (en) * 2009-10-07 2011-04-07 Cisco Technology, Inc. Synchronized Recording and Playback of a Plurality of Media Content
CN101764990A (zh) * 2009-12-11 2010-06-30 圆展科技股份有限公司 识别标签呈现方法、呈现系统与视频提供装置、接收装置
US20110154197A1 (en) * 2009-12-18 2011-06-23 Louis Hawthorne System and method for algorithmic movie generation based on audio/video synchronization
US8447604B1 (en) * 2010-04-12 2013-05-21 Adobe Systems Incorporated Method and apparatus for processing scripts and related data
US9183560B2 (en) * 2010-05-28 2015-11-10 Daniel H. Abelow Reality alternate
US20110304774A1 (en) 2010-06-11 2011-12-15 Microsoft Corporation Contextual tagging of recorded data
US9009592B2 (en) * 2010-06-22 2015-04-14 Microsoft Technology Licensing, Llc Population of lists and tasks from captured voice and audio content
US7992773B1 (en) * 2010-09-15 2011-08-09 Reagan Inventions, Llc System and method for presenting information about an object on a portable electronic device
KR20120040816A (ko) * 2010-10-20 2012-04-30 삼성전자주식회사 파일 통합 운용 방법 및 이를 지원하는 휴대 단말기
US10142687B2 (en) * 2010-11-07 2018-11-27 Symphony Advanced Media, Inc. Audience content exposure monitoring apparatuses, methods and systems
US8631473B2 (en) * 2011-07-06 2014-01-14 Symphony Advanced Media Social content monitoring platform apparatuses and systems
WO2012066557A1 (en) * 2010-11-16 2012-05-24 Hewlett-Packard Development Company L.P. System and method for using information from intuitive multimodal interactions for media tagging
KR101268436B1 (ko) 2011-01-31 2013-06-05 (주)티아이스퀘어 개인 휴대 단말에서의 음성 인식을 이용한 멀티미디어 콘텐츠 합성 영상 채팅 서비스 제공 방법 및 시스템
US9380410B2 (en) * 2011-04-04 2016-06-28 Soundlink, Inc. Audio commenting and publishing system
US20130018659A1 (en) * 2011-07-12 2013-01-17 Google Inc. Systems and Methods for Speech Command Processing
US9489457B2 (en) * 2011-07-14 2016-11-08 Nuance Communications, Inc. Methods and apparatus for initiating an action
US9171105B2 (en) * 2011-11-22 2015-10-27 Lg Electronics Inc. Electronic device and method of operating the same
KR101936605B1 (ko) 2012-03-13 2019-01-09 삼성전자주식회사 휴대용 단말기에서 콘텐츠 태깅 방법 및 장치
US20140365884A1 (en) * 2012-03-30 2014-12-11 Google Inc. Voice command recording and playback
CN102682091A (zh) * 2012-04-25 2012-09-19 腾讯科技（深圳）有限公司 基于云服务的视觉搜索方法和系统
KR101977072B1 (ko) * 2012-05-07 2019-05-10 엘지전자 주식회사 음성 파일과 관련된 텍스트의 표시 방법 및 이를 구현한 전자기기
CN103428539B (zh) * 2012-05-15 2017-08-22 腾讯科技（深圳）有限公司 一种推送信息的发布方法及装置
KR101939253B1 (ko) * 2012-05-21 2019-01-16 엘지전자 주식회사 음성 녹음 중에 탐색을 용이하게 하는 방법 및 이를 구현한 전자기기
US8532675B1 (en) * 2012-06-27 2013-09-10 Blackberry Limited Mobile communication device user interface for manipulation of data items in a physical space
KR102100952B1 (ko) * 2012-07-25 2020-04-16 삼성전자주식회사 데이터 관리를 위한 방법 및 그 전자 장치
EP2704039A3 (en) * 2012-08-31 2014-08-27 LG Electronics, Inc. Mobile terminal
US9547647B2 (en) * 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US9521258B2 (en) * 2012-11-21 2016-12-13 Castel Communications, LLC Real-time call center call monitoring and analysis
US20140196084A1 (en) * 2013-01-07 2014-07-10 Smrtv, Inc. System and method for word relevant content delivery for television media
US9113213B2 (en) * 2013-01-25 2015-08-18 Nuance Communications, Inc. Systems and methods for supplementing content with audience-requested information
KR102050897B1 (ko) * 2013-02-07 2019-12-02 삼성전자주식회사 음성 대화 기능을 구비한 휴대 단말기 및 이의 음성 대화 방법
US9672575B2 (en) * 2013-04-03 2017-06-06 Salesforce.Com, Inc. Capturing information regarding an interaction to a database
KR102108893B1 (ko) * 2013-07-11 2020-05-11 엘지전자 주식회사 이동 단말기
KR102249086B1 (ko) * 2014-04-04 2021-05-10 삼성전자주식회사 레코딩 지원 전자장치 및 방법

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040062364A1 (en) 2002-09-27 2004-04-01 Rockwell Electronic Commerce Technologies, L.L.C. Method selecting actions or phases for an agent by analyzing conversation content and emotional inflection
US20070136680A1 (en) 2005-12-11 2007-06-14 Topix Llc System and method for selecting pictures for presentation with text content
US20080194270A1 (en) 2007-02-12 2008-08-14 Microsoft Corporation Tagging data utilizing nearby device information
US20110030477A1 (en) 2008-05-01 2011-02-10 Airbus Operations Limited Ultrasound inspection method and apparatus
JP2013535042A (ja) * 2010-05-27 2013-09-09 ノキア コーポレイション 拡張されたコンテンツタグ共有のための方法及び装置
US20140380420A1 (en) 2010-05-27 2014-12-25 Nokia Corporation Method and apparatus for expanded content tag sharing
US20140014097A1 (en) 2011-03-25 2014-01-16 Maria Julia OLLER PEREIRA System to prevent water from entering a snorkel breather tube
US20120323575A1 (en) * 2011-06-17 2012-12-20 At&T Intellectual Property I, L.P. Speaker association with a visual representation of spoken content
US20130024882A1 (en) 2011-07-21 2013-01-24 Lg Electronics Inc. Electronic device and social commerce server for performing coupon search
US20140006027A1 (en) 2012-06-28 2014-01-02 Lg Electronics Inc. Mobile terminal and method for recognizing voice thereof
US20140047386A1 (en) 2012-08-13 2014-02-13 Digital Fridge Corporation Digital asset tagging
US20150039646A1 (en) 2013-08-02 2015-02-05 Google Inc. Associating audio tracks with video content

Also Published As

Publication number Publication date
US10691717B2 (en) 2020-06-23
WO2015199430A1 (en) 2015-12-30
US20150379098A1 (en) 2015-12-31
CN106471493B (zh) 2020-12-29
EP2960816A1 (en) 2015-12-30
KR20160001359A (ko) 2016-01-06
CN106471493A (zh) 2017-03-01

Similar Documents

Publication Publication Date Title
KR102337509B1 (ko) 컨텐츠 제공 방법 및 그 전자 장치
CN115097981B (zh) 处理内容的方法及其电子设备
KR102178892B1 (ko) 정보 제공 방법 및 그 전자 장치
US20160063339A1 (en) Scrapped information providing method and apparatus
US10691402B2 (en) Multimedia data processing method of electronic device and electronic device thereof
US10606398B2 (en) Method and apparatus for generating preview data
KR102268540B1 (ko) 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
KR102386893B1 (ko) 이미지 데이터의 보안 방법 및 이를 지원하는 전자 장치
KR102340251B1 (ko) 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
US20180033463A1 (en) Electronic device and operation method thereof
KR20170036300A (ko) 동영상 제공 방법 및 이를 수행하는 전자 장치
US10108391B2 (en) Audio data operating method and electronic device supporting the same
KR102209729B1 (ko) 인식 영역에 기반하여 콘텐트를 검출하는 전자 장치 및 방법
KR102305114B1 (ko) 데이터 처리 방법 및 그 전자 장치
US10122958B2 (en) Method for recording execution screen and electronic device for processing the same
US10482151B2 (en) Method for providing alternative service and electronic device thereof
KR102250777B1 (ko) 컨텐츠 제공 방법 및 그 전자 장치
KR102292877B1 (ko) 콘텐츠 재생 방법 및 그 방법을 처리하는 전자 장치
KR20160112217A (ko) 전자 장치 및 전자 장치에서의 정보 처리 방법
KR102398453B1 (ko) 영상 출력 방법 및 이를 지원하는 전자 장치
US20180173701A1 (en) Method for contents tagging and electronic device supporting the same

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant