KR20230148644A - 개인 데이터 통합 관리 방법 - Google Patents

Abstract

본 발명의 일 실시예에 따르면, 정보 통신 기기에서 실행되며 개인 데이터 관리 앱에 의한 개인 데이터 통합 관리 방법에 있어서, 상기 정보 통신 기기에 설치된 관리 대상 앱과 연동하는 단계; 상기 연동된 관리 대상 앱과 통신하여, 새로 생성된 개인 데이터를 확인하는 단계; 상기 개인 데이터로부터 텍스트를 추출하는 단계; 및 상기 추출된 텍스트를 저장소에 저장하는 단계;를 포함하는 개인 데이터 통합 관리 방법을 제공한다.

Description

개인 데이터 통합 관리 방법 {Method for integrated management of personal data}

본 발명은 개인 데이터를 통합 관리하는 방법에 관한 것으로, 보다 상세하게는 개인이 다수의 정보 통신 기기를 이용하여 저장해 둔 개인 데이터를 통합적으로 관리하고 손쉽게 검색할 수 있도록 하는 통합 관리 방법에 관한 것이다.

유비쿼터스 환경의 도래와 함께 사용자가 언제 어디서든 정보 통신망에 접속하여 다양한 정보통신 서비스를 활용할 수 있게 되었으며, 이와 함께 한 사용자가 사용하는 정보 통신 기기의 수도 크게 증가하였다.

일 예로서, 한명의 사용자가 회사에서는 회사의 컴퓨터를 이용하여, 집에서는 개인용 컴퓨터를 이용하여, 그리고 장소에 구애받지 않고 핸드폰이나 태블릿 등 사용자가 소유하고 있는 정보 통신 기기를 이용하여 네트워크에 접속하고 정보통신 서비스를 활용할 수 있으며, 이 과정에서 필연적으로 개인 데이터의 저장이 발생한다. 개인 데이터는 사용자가 생성한 다양한 형식의 데이터로서 그 예로서 사용자가 작성한 문서, 멀티미디어 파일, 북마크(또는 즐겨찾기) 또는 읽기 목록으로 저장한 웹페이지 주소 등을 포함할 수 있다. 이러한 개인 데이터는 사용하고 있던 정보 통신 기기의 로컬 저장 공간 또는 클라우드 서비스 제공자가 직접적으로 제공하거나 노트앱이나 협업툴 등을 통해 간접적으로 제공하는 클라우드 공간에 저장될 수 있다.

그러나, 한 사용자가 다수의 정보 통신 기기를 사용하고, 복수개의 클라우드 서비스를 이용하는 것이 일반적인 환경 하에서, 사용자가 생성한 개인 데이터는 서로 다른 공간에 흩어져서 저장되게 되고, 특히 사용자가 복수개의 노트앱 또는 협업툴을 사용하게 된다면 개인 데이터는 더욱 많은 저장 공간에 흩어져 저장되므로, 사용자는 자신이 생성 및 저장한 개인 데이터를 효율적으로 관리하기 어렵다는 문제가 발생한다.

또한, 사용자가 저장해 두었던 개인 데이터는 사용자가 개인적으로 관심이 있었던 내용 또는 주제에 관한 것이었을 가능성이 큼에도 불구하고 사용자가 필요한 정보를 찾을 목적으로 검색 사이트나 쇼핑 사이트, 소셜 네트워크 또는 동영상 등을 검색할 때 사용자가 생성해 두었던 개인 데이터로부터도 해당 정보를 검색하여 통합 검색 결과를 제공해 주는 기술은 제공되고 있지 않아 검색을 통해서도 사용자가 정작 원했던 정보를 정확히 제공해 주지 못할 수 있다는 문제 또한 존재하였다.

따라서, 사용자가 별도의 노력을 통해 개인 데이터의 관리를 수행하지 않더라도 사용자가 사용하는 다수의 정보 통신 기기를 통해서 생성된 다양한 형식의 개인 데이터를 통합적으로 관리할 수 있고, 사용자가 필요한 정보를 검색하는 경우 이전에 생성되었던 개인 데이터로부터의 검색을 포함한 통합 검색 기능을 제공하여 사용자가 원하는 정보를 정확히 찾아줄 필요성이 제기되고 있다.

본 발명의 일 실시예에 따르면, 개인 데이터 관리 앱(애플리케이션)이 개인 데이터를 생성할 수 있는 다수의 앱과 연동하여 개인 데이터 생성시 이를 인식 및 가공하고, 개인 데이터용 저장소에 저장해 둠으로써 개인 데이터의 개인 데이터를 통합적으로 관리할 수 있는 방법을 개시한다.

본 발명의 일 실시예에 따르면, 정보 통신 기기에서 실행되며 개인 데이터 관리 앱에 의한 개인 데이터 통합 관리 방법에 있어서, 상기 정보 통신 기기에 설치된 관리 대상 앱과 연동하는 단계; 상기 연동된 관리 대상 앱과 통신하여, 새로 생성된 개인 데이터를 확인하는 단계; 상기 개인 데이터로부터 텍스트를 추출하는 단계; 및 상기 추출된 텍스트를 저장소에 저장하는 단계;를 포함하는 것을 특징으로 하는 개인 데이터 통합 관리 방법을 제공한다.

본 발명의 다른 실시예에 따르면, 상기 제공되는 개인 데이터 통합 관리 방법은 상기 연동된 관리 대상 앱에 기초하여 키워드 검색 요청을 확인하는 단계; 상기 키워드에 기초하여 개인 데이터를 검색하는 단계; 상기 연동된 관리 대상 앱으로부터 상기 키워드 검색 요청에 따른 결과를 수신하고 상기 개인 데이터 검색 결과와 통합한 통합 검색 결과 화면을 구성하는 단계; 및 상기 구성된 통합 검색 결과 화면을 표시하는 단계를 더 포함한다.

본 발명의 또 다른 실시예에 따르면, 상기 개인 데이터 통합 관리 방법을 정보 통신 기기에서 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록매체를 제공한다.

본 발명의 일 실시예에 따르면, 다수의 정보 통신 기기에서 다수의 앱을 이용하여 생성되는 개인 데이터를 인식 및 가공하여 통합적으로 관리할 수 있으므로 사용자가 별도로 수고를 들여서 개인 데이터를 관리하지 않아도 손쉬운 통합 관리가 가능하며 개인 데이터에 대한 검색 또한 용이하게 수행할 수 있다는 이점이 있다.

도1은 본 발명의 일 실시예에 따른 개인 데이터 관리 앱이 설치된 다수의 정보 통신 기기를 포함하는 전체 블록도를 도시하는 도면,
도2는 본 발명의 일 실시예에 따른 개인 데이터 관리 앱의 블록도를 도시하는 도면,
도3은 본 발명의 일 실시예에 따른 개인 데이터 추가시의 예시적인 동작을 설명하는 흐름도,
도4a는 본 발명의 일 실시예에 따른 검색 수행시의 예시적인 동작을 설명하는 흐름도,
도4b는 본 발명의 일 실시예에 따른 특정 컨텐츠 접근시 예시적인 동작을 설명하는 흐름도,
도5는 본 발명의 일 실시예에 따른 통합 검색 결과를 도시하는 도면,
도6은 본 발명의 다른 실시예에 따른 통합 검색 결과를 도시하는 화면이다.

이상의 본 발명의 목적들, 다른 목적들, 특징들 및 이점들은 첨부된 도면과 관련된 이하의 바람직한 실시예들을 통해서 쉽게 이해될 것이다. 그러나 본 발명은 여기서 설명되는 실시예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 오히려, 여기서 소개되는 실시예들은 개시된 내용이 철저하고 완전해질 수 있도록 그리고 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 제공되는 것이다.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 '포함한다(comprises)' 및/또는 '포함하는(comprising)'은 언급된 구성요소는 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.

또한 본 명세서에서 발명의 구성요소를 지칭하기 위해 사용된 "...부", "…모듈", "...보드", "…블록" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있고 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.

본 명세서에서, "개인 데이터"는 정보 통신 기기(예컨대 스마트폰, 태블릿 PC, 노트북, 데스크톱 컴퓨터 등의 사용자 단말기)의 사용 중에 사용자가 개인적인 이용을 위해 작성 또는 생성하고 로컬 또는 클라우드 등 다양한 공간에 저장한 다양한 형식의 데이터를 통칭하는 광의의 개념이며, 일 예로서 사용자가 노트 앱, 협업 툴, 또는 문서 앱 등을 통해 작성한 문서, 카메라 앱을 통해 촬영한 사진 또는 동영상, 캡쳐 앱을 이용하여 캡쳐한 이미지, 메신저 앱을 통해 전달받고 저장한 각종 파일, 녹음 앱을 통해 녹음한 음성, 브라우저의 사용 중에 북마크(또는 즐겨찾기) 또는 읽기목록으로서 저장한 웹페이지 주소 등을 포함하나 이에 한정되는 것은 아니다. 또한, 개인 데이터는 사용하고 있던 정보 통신 기기 내에 존재하는 로컬 저장 공간에 저장될 수도 있고, 네트워크를 통해 애플의 아이클라우드(iCloud), 마이크로소프트의 원드라이브(OneDrive), 드롭박스(Dropbox), 네이버의 네이버 클라우드 등 다양한 클라우드 서비스 제공자가 제공하는 클라우드 저장 공간에 직접 저장될 수도 있으며, 에버노트 (Evernote) 또는 노션(Notion) 등 노트앱 또는 협업툴 등이 제공하는 클라우드 저장 공간 및/또는 (정보 통신 기기의) 로컬 저장 공간에 저장될 수도 있다.

이하, 도면을 참조하여 본 발명을 상세히 설명하도록 한다. 아래의 특정 실시예들을 기술하는데 있어서, 여러 가지의 특정적인 내용들은 발명을 더 구체적으로 설명하고 이해를 돕기 위해 작성되었다. 하지만 본 발명을 이해할 수 있을 정도로 이 분야의 지식을 갖고 있는 독자는 이러한 여러 가지의 특정적인 내용들이 없어도 사용될 수 있다는 것을 인지할 수 있다. 어떤 경우에는, 발명을 기술하는 데 있어서 흔히 알려졌으면서 발명과 크게 관련 없는 부분들은 본 발명을 설명하는 데 있어 혼돈이 오는 것을 막기 위해 기술하지 않음을 미리 언급해 둔다.

도 1은 본 발명의 일 실시예에 따른 개인 데이터 관리 앱이 설치된 다수의 정보 통신 기기를 포함하는 전체 블록도를 도시하는 도면이다.

도면을 참조하면, 정보 통신 기기(10, 20)는 스마트폰, 태블릿 PC, 노트북 또는 데스크톱과 같이 네트워크(40)를 통하여 원격 저장소(30) 및 서버(50) 등과 통신할 수 있는 컴퓨팅 디바이스를 의미한다. 사용자가 정보 통신 기기(10, 20)를 사용 중에 웹 브라우저(110, 210) 또는 관리 대상 앱(140, 240) 등 다양한 애플리케이션을 이용하여 다양한 형식의 개인 데이터를 생성할 수 있고 생성된 개인 데이터는 관리 및 검색 편의를 위해 가공되어 로컬 저장소(130, 230) 또는 원격 저장소(30)에 저장되고, 사용자는 웹 브라우저(110, 210) 또는 개인 데이터 관리 앱(120, 220)을 통해 로컬 저장소(130, 230) 또는 원격 저장소(30)에 저장된 개인 데이터를 직접적으로 볼 수 있으며, 개인 데이터 또는 가공된 개인 데이터의 추가, 변경, 삭제 등 통합 관리를 수행할 수 있다.

한편, 웹 브라우저(110, 210)나 관리 대상 앱(140, 240)을 통해 사용자가 특정 정보를 검색하는 경우 로컬 저장소(130, 230) 또는 원격 저장소(30)에 저장된 개인 데이터에 대한 검색이 수행되고, 검색된 개인 데이터는 웹 브라우저(110, 210) 또는 관리 대상 앱(140, 240)이 제공하는 종래 검색 결과 화면과의 일관성을 유지하도록 UI(User Interface)를 구성하여 종래 검색 결과와 함께 통합 검색 결과를 제공한다. 여기에서 “종래 검색 결과”는 사용자가 검색을 위해 웹 브라우저(110, 210)를 통해 검색 또는 쇼핑 등 특정 웹사이트에 접속하고 키워드를 입력해서 나온 검색 결과, 또는 관리 대상 앱(140, 240)을 실행하고 키워드를 입력했을 때 표시되는 검색 결과를 의미한다.

본 발명의 다른 실시예에 따르면, 사용자가 웹 브라우저(110, 210)나 관리 대상 앱(140, 240)을 통해 특정 컨텐츠 (예컨대, 블로그 등)에 접근하는 경우에도 접근한 컨텐츠로부터 키워드를 추출하고, 추출된 키워드로 로컬 저장소(130, 230) 또는 원격 저장소(30)에 저장된 개인 데이터에 대한 검색이 수행되며, 검색된 개인 데이터는 웹 브라우저(110, 210) 또는 관리 대상 앱(140, 240)이 제공하는 특정 컨텐츠 화면과의 일관성을 유지하도록 UI(User Interface)를 구성하여 개인 데이터 검색 결과를 함께 제공한다.

도 1에서 정보 통신 기기(10, 20)는 2개가 도시되었고, 그 각각은 사용자가 사용하는 각각의 컴퓨팅 디바이스일 수 있으나 (예컨대, 정보 통신 기기(10)는 사용자의 노트북 컴퓨터이고, 정보 통신 기기(20)는 사용자의 스마트폰일 수 있음), 반드시 이에 한정되는 것은 아니며, 임의의 실시예에서 정보 통신 기기는 1개일 수도 있고 또는 복수개인 임의의 수로 존재할 수도 있다.

웹 브라우저(110, 210)는 HTML 문서와 그림, 멀티미디어 파일 등 월드 와이드 웹(WWW)을 기반으로 한 인터넷의 컨텐츠를 검색 및 열람하기 위한 응용 프로그램이며, 사용자가 방문하거나 검색한 특정 웹페이지를 북마크(또는 즐겨찾기) 또는 읽기목록으로 저장하는 경우 개인 데이터가 생성되고, 상세히 후술하는 바와 같이 웹 브라우저(110, 210)와 개인 데이터 관리 앱(120)의 연동이 된 경우 개인 데이터의 생성 여부, 또는 생성 여부 및 생성된 개인 데이터 (이 경우, 특정 웹사이트의 주소)가 개인 데이터 관리 앱(120, 220)으로 전송될 수 있다. 또한, 사용자가 웹 브라우저(110, 210)를 이용하여 구글이나 네이버, 유튜브 등의 검색 사이트, 아마존이나 쿠팡 또는 11번가와 같은 쇼핑 사이트, 또는 인스타그램과 같은 소셜 네트워크 서비스 사이트에 접속하고 특정 키워드를 입력하여 검색을 수행하는 경우, 개인 데이터에 대한 키워드 검색 또한 수행되며, 그 결과는 검색 사이트 또는 쇼핑 사이트에서의 검색 결과인 종래 검색 결과와 함께 통합 검색 결과로서 웹 브라우저(110, 210)에 표시될 수 있다. 본 발명의 다른 실시예에 따르면 사용자가 웹 브라우저(110, 210)를 이용하여 특정 컨텐츠(예컨대, 블로그 등)에 접근하는 경우에도 등)에 접근하는 경우에도 상기 컨텐츠로부터 키워드를 추출하고, 추출된 키워드로 개인 데이터에 대한 검색이 수행되며, 검색된 개인 데이터 결과가 컨텐츠 내용과 함께 통합 컨텐츠로서 웹 브라우저(110, 210)에 표시될 수 있다.

한편, 본 발명의 일 실시예에 따르면 사용자는 웹 브라우저(110, 210)에 표시된 통합 검색 결과 화면에서 개인 데이터 검색 결과에 직접적으로 편집을 수행할 수 있다. 사용자의 편집은 개인 데이터 검색 결과에 태그 달기, 검색 키워드 할당하기, 노트 추가하기, 다른 개인 데이터를 링크로 연결하기 등을 포함할 수 있으며, 추후 검색시 사용자가 편집한 내용이 반영되어 보다 정확한 개인 데이터 검색 결과를 제공할 수 있다.

개인 데이터 관리 앱(120, 220)은 웹 브라우저(110, 210) 또는 관리 대상 앱(140, 140)과 연동하여 개인 데이터에 대한 통합적인 관리를 수행하고 사용자가 웹 브라우저(110, 210)로 특정 사이트에 접속하거나 관리 대상 앱(140, 240)을 이용하여 특정 키워드로 검색을 수행하는 경우 또는 특정 컨텐츠에 접근하는 경우 개인 데이터에 대한 검색 또한 수행하고 그 결과를 종래 검색 결과와 함께 통합 검색 결과로서 구성하거나 특정 컨텐츠와 함께 정보 통신 기기를 통해 표시할 수 있도록 하는 응용 프로그램을 의미한다.

개인 데이터 관리 앱(120, 220)은 그 설치 형태에 구애받지 않으므로 일 실시예에서 개인 데이터 관리 앱(120, 220)은 설치형으로서 정보 통신 기기(10, 20)에 다운로드되어 설치되고 실행될 수 있고, 다른 실시예에서는 웹 브라우저(110, 210)의 익스텐션(extension) 또는 플러그-인(plug-in) 방식으로 설치되고 실행(활성화)될 수 있으며, 또 다른 실시예에서는 웹앱(Web App) 방식으로 별도의 설치 없이도 웹 브라우저(110, 210) 등을 이용하여 특정 웹사이트에 접속하여 로그인하고 사용할 수도 있다.

보다 구체적으로, 개인 데이터 관리 앱(120, 220)은 최초 실행시 웹 브라우저(110, 210) 및/또는 관리 대상 앱(140, 240)과 연동을 수행한다. 상기 연동은 다양한 방식으로 수행될 수 있는 바, 일 예로서는 개인 데이터 관리 앱(120, 220)이 연동 대상 앱과의 별도의 통신 없이 특정 디렉토리 또는 특정 파일 형식을 자동으로 검색할 수도 있고 이 경우 웹 브라우저가 북마크(또는 즐겨찾기) 또는 읽기목록을 저장하는 디폴트 디렉토리를 검색하거나 사진, 문서, 다운로드 또는 사용자가 사용하는 특정 클라우드 서비스에서 제공하는 가상 디렉토리 등 특정 디렉토리에서 사용자가 생성하였던 개인 데이터인 이미지, 문서, 동영상 등에 해당하는 확장자를 검색하는 방식 등을 포함할 수 있다. 다른 예로서 개인 데이터 관리 앱(120, 220)이 연동 대상 앱인 웹 브라우저(110, 210) 또는 관리 대상 앱(140, 240)의 서버와 통신하는 방식으로 연동이 수행될 수 있으며, 이 경우 서버 대 서버 간에 연결되고 사용자의 로그인 또는 인증을 거쳐 개인 데이터 관리 앱(120, 220)이 웹 브라우저(110, 210) 또는 관리 대상 앱(140, 240)이 사용하고 있는 클라우드 공간에 대한 정보 또는 이에 저장된 개인 데이터에 대한 정보를 검색 또는 확인할 수 있다. 또한, 연동이 되면 이후 웹 브라우저(110, 210)를 통해 또는 관리 대상 앱(140, 240)에서 개인 데이터가 새로 생성되는 경우 관리 대상 앱과의 통신에 기초하여(예를 들어, 연동된 앱으로부터의 통지 등에 의해) 실시간으로 또는 일정 주기 내에 확인이 가능하다.

개인 데이터 관리 앱(120, 220)은 최초 연동을 통해 또는 연동 후 실시간이나 일정 주기 간격으로 개인 데이터가 신규로 생성되었음을 확인한 경우, 일 실시예에 따르면 관리를 위해 개인 데이터를 로컬 저장소(130, 230) 및/또는 원격 저장소(30)에 저장하고, 관리를 위한 개인 데이터의 가공을 수행할 수 있다. 다른 실시예에 따르면 개인 데이터의 신규 생성 확인시 개인 데이터의 로컬 저장소(130, 230) 또는 원격 저장소(30)로의 저장 없이 개인 데이터의 가공을 수행하고, 가공된 개인 데이터만을 로컬 저장소(130, 230) 및/또는 원격 저장소(30)에 저장할 수 있다. 또 다른 실시예에 따르면 개인 데이터 및/또는 가공된 개인 데이터를 로컬 저장소(130, 230)에 먼저 저장하여 두고, 소정 조건을 만족하는 경우 (예컨대, 정보 통신 기기(10, 20)가 와이파이에 연결된 경우 또는 네트워크 속도 또는 대역폭이 일정 기준 이상인 경우 등) 저장된 개인 데이터 및/또는 가공된 개인 데이터를 원격 저장소(30)로 전송한 후 로컬 저장소(130, 230)에서는 공간의 확보를 위해 삭제할 수도 있다.

개인 데이터의 가공은 관리 및 검색의 용이성을 위해 수행되며, 기본적으로 개인 데이터로부터의 텍스트 추출을 포함한다. 문서 또는 북마크(또는 즐겨찾기) 또는 읽기목록에 저장된 웹페이지에 포함된 텍스트는 물론, 사진이나 스크린 캡쳐 등의 이미지 파일인 경우 공지 기술을 이용하여 이미지 내에 포함된 텍스트를 추출할 수 있고, 음성 파일 형식인 경우에는 공지 기술인 STT(Speech To Text)을 이용하여 텍스트를 추출할 수 있으며, 동영상의 경우에는 전술한 바와 같이 이미지 또는 음성으로부터 텍스트를 추출하는 기술을 이용하여 텍스트를 추출할 수 있다. 추출된 텍스트는 개인 데이터와 관련지어 가공된 개인 데이터의 적어도 일부로서 로컬 저장소(130, 230) 또는 원격 저장소(30)에 저장되며, 추후 검색시 속도 향상을 위해 인덱싱 작업이 선행될 수 있다. 이 밖에도 개인 데이터의 형식 종류 (예컨대, 텍스트인지, 이미지인지, 동영상인지, 음성인지 등), 사용자가 개인 데이터를 생성한 정보 통신 기기의 식별자, 개인 데이터가 저장되어 있는 본래의 위치 등의 데이터가 가공된 개인 데이터의 일부로서 더 저장될 수 있다. 한편, 개인 데이터 관리 앱(120, 220)은 사용자에 의한 개인 데이터 관리를 지원하기 위해 사용자가 저장된 개인 데이터 및/또는 가공된 개인 데이터를 보고, 직접적으로 추가, 수정, 삭제할 수 있는 사용자 인터페이스를 제공할 수 있다.

또한, 개인 데이터 관리 앱(120, 220)은 사용자가 웹 브라우저(110, 210)를 통해 검색 또는 쇼핑 사이트에 접속하고 키워드를 입력하여 검색을 수행하거나 또는 관리 대상 앱(140, 240)을 이용하여 키워드를 입력하여 검색을 수행하는 경우 이를 인식하고 입력된 키워드를 저장되어 있는 가공된 개인 데이터에 기초하여 개인 데이터 검색을 함께 수행하며, 일 예로서 가공된 개인 데이터 중 추출된 텍스트와 입력된 키워드를 대비하는 방식으로 검색을 수행할 수 있다.

또는, 개인 데이터 관리 앱(120, 220)은 사용자가 웹 브라우저(110, 210)를 통해 특정 컨텐츠(예컨대, 블로그 등)에 접근하거나 또는 관리 대상 앱(140, 240)(예컨대, 블로그 앱 등)을 이용하여 특정 컨텐츠에 접근하는 경우 상기 컨텐츠로부터 키워드를 추출하고 추출된 키워드를 저장되어 있는 가공된 개인 데이터에 기초한 개인 데이터 검색과 함께 수행하며, 일 예로서 가공된 개인 데이터 중 추출된 텍스트와 추출된 키워드를 대비하는 방식으로 검색을 수행할 수 있다. 이 때, 컨텐츠로부터 키워드를 추출하는 방식으로는 컨텐츠 내에 포함된 제목, 메타 데이터 또는 해시태그 등을 키워드로 정하거나, 또는 컨텐츠로부터 텍스트를 추출하고 추출된 텍스트와 기존에 존재하는 키워드 데이터베이스를 비교하여 키워드를 결정하는 방식 등이 있으나 이에 한정되는 것은 아니다.

여기서 키워드 데이터베이스는 키워드와 이와 연관되는 단어들을 저장하고 있는 데이터베이스로, 예컨대 키워드 "그리스"에 연관되는 단어들로 "아테네", "산토리니", "여행", "비행기" 등을 포함할 수 있으며, 컨텐츠에서 추출된 텍스트 중 특정 개수 이상이 키워드 데이터베이스 내의 특정 키워드에 연관되는 단어들과 일치하는 경우 연관성이 높은 것으로 판단하여(앞선 예에서, 컨텐츠에서 추출된 텍스트 중 2개 이상("아테네", "비행기")이 존재하는 경우 키워드 "그리스"와 연관성이 높은 것으로 판단할 수 있다), "그리스"를 키워드로 결정하고 이에 기초하여 개인 데이터 검색을 수행할 수 있다.

한편 개인 데이터 검색시, 사용자의 관심사 또는 찾고자 하는 검색 결과의 정확성 또는 검색 결과 화면의 일관성 유지를 위해 검색 대상을 특정 형식을 갖는 개인 데이터로 한정할 수 있다. 일 예로서, 사용자가 검색 사이트에 접속하여 일반 검색을 수행하는 경우, 개인 데이터 중에 검색 대상을 북마크(또는 즐겨찾기) 또는 읽기목록으로 저장한 웹사이트, 메모나 문서 등 텍스트 파일에 한정할 수 있고, 이미지 검색인 경우 개인 데이터 중에 사진 또는 캡쳐된 이미지로 검색 대상을 한정할 수 있으며, 동영상 검색인 경우에는 개인 데이터 중에 동영상만을 검색 대상으로 한정할 수도 있으나 반드시 이에 한정되는 것은 아니다.

개인 데이터 관리 앱(120, 220)은 개인 데이터 검색 결과를 종래의 검색 결과 (검색 사이트 또는 쇼핑 사이트 또는 관리 대상 앱을 통한)와 함께 통합 검색 결과로서, 또는 접근한 특정 컨텐츠와 함께 통합 컨텐츠로서 사용자에게 제공하며, 이때 검색 결과 화면 또는 컨텐츠 화면의 일관성 유지를 위해 종래의 검색 사이트/쇼핑 사이트/소셜 네트워크 서비스 사이트/컨텐츠 사이트 또는 관리 대상 앱의 검색 결과 화면 또는 컨텐츠 화면의 UI와 일치하게끔 통합 검색 결과 화면 또는 통합 컨텐츠 화면을 구성할 수 있다.

한편, 본 발명의 일 실시예에 따르면 개인 데이터 관리 앱(120, 220)은 통합 검색 결과 화면에서 사용자가 개인 데이터 검색 결과에 직접적으로 편집을 수행하는 기능을 제공할 수 있다. 사용자의 편집은 개인 데이터 검색 결과에 태그 달기, 검색 키워드 할당하기, 노트 추가하기, 다른 개인 데이터를 링크로 연결하기 등을 포함할 수 있으며, 추후 검색시 사용자가 편집한 내용이 반영되어 보다 정확한 개인 데이터 검색 결과를 제공할 수 있다.

로컬 저장소(130, 230)은 개인 데이터 관리 앱(120, 220)이 개인 데이터 및/또는 가공된 개인 데이터를 일시적으로 또는 비일시적으로 저장하기 위해 정보 통신 기기(10, 20) 내부에 또는 이와 유선으로 연결된 저장 공간을 의미하며 하드 디스크 드라이브(HDD), SD 카드 등의 플래시 메모리, 솔리드 스테이트 드라이브(SSD) 등 다양한 내장 또는 외장 저장 장치가 이에 포함될 수 있으나 전술한 종류에 한정되는 것은 아니다. 본 발명의 다양한 실시예에 따라서 개인 데이터 관리 앱(120, 220)이 연동을 통하여 기존에 저장된, 또는 연동 이후 신규로 생성된 개인 데이터가 로컬 저장소(130, 230)에 저장될 수 있으며, 개인 데이터의 가공 이후, 사용자의 직접적인 추가, 수정 또는 삭제에 의해, 또는 원격 저장소(30)로의 전송 후에 로컬 저장소(130, 230)에 저장된 개인 데이터 및/또는 가공된 개인 데이터가 추가, 수정 또는 삭제될 수 있다.

관리 대상 앱(140, 240)은 정보 통신 기기(10, 20)에 설치되어 실행되는 다양한 응용 프로그램들 중에 개인 데이터를 생성할 수 있거나, 개인 데이터를 저장할 수 있도록 클라우드 서비스를 제공하거나, 사용자가 키워드를 입력하여 검색을 수행할 수 있는, 또는 특정 컨텐츠에 접근할 수 있는 응용 프로그램을 모두 포함할 수 있는 광의의 개념이다. 일 예로서, 개인 데이터를 생성할 수 있는 응용 프로그램인 메모장 앱, 마이크로 소프트 오피스 365 앱, 한컴 한글오피스 앱, 카메라 앱, 캡쳐 앱, 녹음 앱, 메신저 앱, 에버노트, 드롭박스, 노션 등을 관리 대상 앱(140, 240)으로 볼 수 있으나 전술한 앱들에 한정되지 않으며, 사용자가 다양한 파일 형식의 개인 데이터를 생성할 수 있는 응용 프로그램이라면 모두 관리 대상 앱에 포함될 수 있다. 다른 예로서, 사용자가 키워드를 입력하여 검색을 수행할 수 있는 구글 앱, 네이버 앱, 유튜브 앱, 아마존 앱, 쿠팡 앱, 11번가 앱, 인스타그램 앱 등을 관리대상 앱(140, 240)으로 볼 수 있으나 전술한 앱들에 한정되지 않으며, 또 다른 예로서, 사용자가 특정 컨텐츠에 접근할 수 있는 카페 앱, 블로그 앱 등 또한 관리대상 앱(140, 240)으로 볼 수 있으나 전술한 앱들에 한정되지 않는다. 따라서, 사용자가 필요한 정보를 검색할 수 있거나 특정 컨텐츠에 접근할 수 있는 응용 프로그램이라면 모두 관리 대상 앱에 포함될 수 있고, 웹 브라우저(110, 210) 역시 검색 사이트, 쇼핑 사이트 또는 소셜 네트워크 서비스 사이트 등에 접속하여 검색을 수행할 수 있거나 특정 컨텐츠에 접근할 수 있으므로 광의의 의미로는 관리 대상 앱(140, 240)에 포함될 수 있다. 한편, 도 1에서는 정보 통신 기기(10, 20) 내에 하나의 관리 대상 앱(140, 240)만이 존재하는 것으로 도시하였으나, 반드시 이에 한정되는 것은 아니며, 하나의 정보 통신 기기(10, 20) 내에 임의의 수에 해당하는 관리 대상 앱이 존재할 수 있음은 이해될 수 있다.

관리 대상 앱(140, 240)은 개인 데이터 관리 앱(120, 220)과 연동될 수 있으며, 연동 이후 새로운 개인 데이터가 생성될 때마다 또는 새로운 검색 요청이 수행될 때마다 실시간으로 또는 주기적으로 해당 이벤트를 개인 데이터 관리 앱(120, 220)에 통지할 수 있다.

원격 저장소(30)는 개인 데이터 관리 앱(120, 220)이 개인 데이터 및/또는 가공된 개인 데이터를 일시적으로 또는 비일시적으로 저장하기 위한 저장 공간으로서, 정보 통신 기기(10, 20) 내에 위치하지 않고 원격으로 위치되어 네트워크(40)를 통해 접근할 수 있는 클라우드 등의 저장 공간을 의미한다. 본 발명의 다양한 실시예에 따라서 개인 데이터 관리 앱(120, 220)이 연동을 통하여 기존에 저장된, 또는 연동 이후 신규로 생성된 개인 데이터가 실시간으로 또는 특정 시점에 원격 저장소에 저장될 수 있으며 개인 데이터의 가공, 사용자의 직접적인 추가, 수정 또는 삭제 등에 의해 개인 데이터 및/또는 가공된 개인 데이터가 추가, 수정 또는 삭제될 수 있다.

또한 도 1에서 네트워크(40)는 하나 이상의 정보 통신 기기(10, 20)가 하나 이상의 서버(50) 및 원격 저장소(30)와 통신할 수 있는 유선 및/또는 무선 통신 네트워크 중 적어도 하나를 의미할 수 있으며, 예를 들어 인터넷, LAN(Local Area Network), MAN(Metropolitan Area Network), GSM(Global System for Mobile Network), HSDPA(High Speed Downlink Packet Access), 와이-파이(Wi-Fi), VoIP(Voice over Internet Protocol), 3GPP Long Term Evolution (LTE), 5G 또는 6G 등에서 선택되는 하나 이상의 유선 및/또는 무선 통신 네트워크를 의미할 수 있다.

서버(50)는 본 발명의 다양한 실시예에 따라 전술한 개인 데이터 관리 앱(120, 220)의 모든 구성요소가 정보 통신 기기(10, 20) 내부에 위치하지 않은 경우, 개인 데이터 관리 앱(120, 220)의 적어도 하나의 구성요소를 구비하고 개인 데이터 관리 앱(120, 220)에 위치한 나머지 구성요소와 네트워크(40)를 통해 통신하여 전술한 개인 데이터 관리 앱(120)의 전체적인 기능을 수행하는 컴퓨팅 디바이스로서 윈도우, 맥 또는 리눅스 등과 같은 운영체제, 프로세서, 메모리, 애플리케이션, 기억장치(예를 들면, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SDD)) 등을 구비한 장치로 구현될 수 있으나 반드시 이에 한정되는 것은 아니며 부가적으로 입출력 장치(예를 들어, 키보드, 마우스, 모니터 등과 같은)를 더 구비할 수도 있다. 본 발명의 다양한 실시예에 따라 서버(50)가 구비한 기억장치가 원격 저장소(30)의 일부 또는 전부일 수도 있으나 반드시 이에 한정되는 것은 아니다.

이하, 도 2를 참조하여 개인 데이터 관리 앱(120)을 더욱 상세히 설명한다. 도2는 본 발명의 일 실시예에 따른 개인 데이터 관리 앱의 블록도를 도시하는 도면이다. 개인 데이터 관리 앱(120)은 앱 연동부(121), 데이터 전송/저장부(122), 저장소 데이터 관리부(123), 키워드 검색부(124) 및 검색결과 표시부(125)를 포함하며, 전술한 바와 같이 발명의 다양한 실시예에 따라 그 중 적어도 하나의 구성요소는 정보 통신 기기(10) 내부가 아닌 서버(50) 내에 위치하고 나머지 구성요소와 통신하여 개인 데이터 관리 앱(120)의 전체적인 기능을 수행할 수도 있음은 이해될 수 있다.

앱 연동부(121)는 개인 데이터 관리 앱(120)의 웹 브라우저(110) 또는 관리 대상 앱(140)과의 연동을 수행하는 기능부이다. 일 실시예에서, 앱 연동부(121)는 정보 통신 기기의 웹 브라우저가 북마크(즐겨찾기) 또는 읽기목록를 저장해 두는 디폴트 디렉토리에 액세스하여 저장된 북마크(즐겨찾기) 또는 읽기목록이 존재하는지를 확인하여 존재하는 경우 데이터 전송/저장부(122)에게 새로운 개인 데이터가 있음을 통지할 수 있다. 다른 실시예에서, 앱 연동부(121)는 정보 통신 기기의 특정 디렉토리(문서, 다운로드 등)에 특정 형식(텍스트, 동영상, 이미지, 음성 파일 형식 등)의 데이터가 존재하는지, 해당 파일의 속성에 기초하여 만든이가 정보 통신 기기(10)의 사용자인지 여부 등을 확인하여 일치하는 개인 데이터가 존재하는 경우 데이터 전송/저장부(122)에게 새로운 개인 데이터가 있음을 통지할 수 있다. 또 다른 실시예에서, 앱 연동부(121)는 관리 대상 앱(140)의 설치 여부를 확인하고, 관리 대상 앱(140)의 서버와 통신 및 사용자의 로그인이나 인증을 통해 관리 대상 앱(140)이 저장해 두고 있던 사용자의 개인 데이터에 액세스할 수 있다. 또한 관리 대상 앱(140)과의 연동이 되면, 사용자가 이후 관리 대상 앱(140)을 이용하여 새로운 개인 데이터를 생성하는 경우 앱 연동부(121)는 이러한 사실을 관리 대상 앱(140)으로부터 통지받아, 데이터 전송/저장부(122)에게 통지한다.

그리고, 앱 연동부(121)는 사용자가 연동되어 있는 웹 브라우저(110)를 통해 특정 웹사이트에 접속하여 키워드를 입력하여 검색을 수행하거나 또는 연동되어 있는 관리 대상 앱(140)을 실행하고 키워드를 입력하여 검색을 수행하는 경우, 이를 통지받고 키워드 검색부(124)에 통지한다. 이때, 앱 연동부(121)는 사용자가 입력한 키워드, 사용자가 접속한 특정 웹사이트 또는 실행한 관리 대상 앱(140)의 종류를 키워드 검색부(124)에게 더 통지할 수 있다. 앱 연동부(121)는 사용자가 연동되어 있는 웹 브라우저(110)를 통해 특정 컨텐츠에 접근하거나 또는 연동되어 있는 관리 대상 앱(140)을 실행하고 특정 컨텐츠에 접근하는 경우에도, 이를 통지받고 키워드 검색부(124)에 통지한다. 이때, 앱 연동부(121)는 특정 컨텐츠로부터 키워드를 더 추출하고 추출된 키워드, 사용자가 접속한 특정 웹사이트 또는 실행한 관리 대상 앱(140)의 종류를 키워드 검색부(124)에게 더 통지할 수 있다.

데이터 전송/저장부(122)는 새로운 개인 데이터가 생성되었다고 앱 연동부(121)로부터 통지받는 경우 생성된 새로운 개인 데이터 중 적어도 일부를 로컬 저장소(130)에 저장하거나 원격 저장소(30)에 전송하여 저장하는 기능부이다. 또한, 저장소 데이터 관리부(123)에서 추출된 텍스트 등 가공된 개인 데이터 또한 데이터 전송/저장부(122)를 통해 저장될 수 있다. 본 발명의 다양한 실시예에 따라, 데이터 전송/저장부(122)가 로컬 저장소(130) 및/또는 원격 저장소(30)에 저장하는 데이터는 생성된 개인 데이터 그 자체의 복사본일 수도 있고, 개인 데이터를 액세스 할 수 있는 링크일 수도 있으며, 데이터 전송/저장부(122)는 개인 데이터를 로컬 저장소(130)에 저장하여 두고, 정보 통신 기기(10)가 와이파이에 연결되어 있거나 네트워크의 속도 또는 대역폭이 일정 기준 이상인 경우, 또는 저장소 데이터 관리부(123)로부터 텍스트 추출 등 개인 데이터의 가공이 완료되고 저장된 경우 등 특정 조건을 만족하는 경우에 로컬 저장소(130)에 저장되어 있는 데이터를 원격 저장소(30)로 전송한 후 로컬 저장소(130)에서는 공간 확보를 위해 삭제할 수도 있다.

저장소 데이터 관리부(123)는 로컬 저장소(130) 또는 원격 저장소(30)에 저장된 개인 데이터를 가공하는 기능을 수행하는 기능부이다. 보다 구체적으로, 저장소 데이터 관리부(123)는 로컬 저장소(130) 또는 원격 저장소(30)에 저장된 개인 데이터 또는 개인 데이터를 액세스할 수 있는 링크로부터 개인 데이터의 형식을 확인하고, 형식에 따른 가공을 수행할 수 있다. 예컨대, 저장된 개인 데이터가 특정 웹사이트의 링크 주소인 경우, 저장소 데이터 관리부(123)는 링크에 해당하는 특정 웹사이트 내에 포함된 텍스트를 웹 크롤링 등의 방식으로 추출하여 로컬 저장소(130) 또는 원격 저장소(30)에 저장한다. 만일 저장된 개인 데이터가 사진이나 스크린 캡쳐 등의 이미지 파일인 경우 공지 기술을 이용하여 이미지 내에 포함된 텍스트를 추출할 수 있고, 음성 파일 형식인 경우에는 공지 기술인 STT(Speech To Text)을 이용하여 텍스트를 추출할 수 있으며, 동영상의 경우에는 전술한 바와 같이 이미지 또는 음성으로부터 텍스트를 추출하는 기술을 이용하여 동영상 내에 포함된 텍스트를 추출할 수 있다. 추출된 텍스트는 가공된 개인 데이터의 적어도 일부로서 데이터 전송/저장부(122)를 통해 개인 데이터와 관련지어 로컬 저장소(130) 또는 원격 저장소(30)에 저장할 수 있으며, 추후 검색시 속도 향상을 위해 인덱싱 작업이 선행될 수 있다.

저장소 데이터 관리부(123)는 본 발명의 다양한 실시예에 따라 개인 데이터의 형식 종류 (예컨대, 텍스트인지, 이미지인지, 동영상인지, 음성인지 등) 또는 사용자가 개인 데이터를 생성한 정보 통신 기기의 식별자 등을 더 추출하고 데이터 전송/저장부(122)를 통해 가공된 개인 데이터의 일부로서 개인 데이터와 관련지어 로컬 저장소(130) 또는 원격 저장소(30)에 저장할 수 있다.

한편, 저장소 데이터 관리부(123)는 사용자가 로컬 저장소(130) 및/또는 원격 저장소(30)에 저장된 개인 데이터에 직접 접근하여 관리를 할 수 있는 사용자 인터페이스를 더 제공할 수 있다. 사용자는 이를 통해 저장되어 있는 개인 데이터의 리스트, 종류, 원본이 생성된 정보 통신 기기, 이와 관련되어 추출된 키워드 등을 볼 수 있고, 이 중 일부를 직접 추가, 삭제 또는 수정할 수도 있다.

또한, 저장소 데이터 관리부(123)는 후술하는 검색 결과 표시부(125)에서 제공하는 통합 검색 결과 화면에서 사용자가 개인 데이터를 직접적으로 편집하는 경우 편집된 내용을 반영하여 로컬 저장소(130) 및/또는 원격 저장소(30)에 저장한다. 보다 구체적으로, 사용자의 편집은 개인 데이터 검색 결과에 태그 달기, 검색 키워드 할당하기, 노트 추가하기, 다른 개인 데이터를 링크로 연결하기 등을 포함할 수 있으며, 저장소 데이터 관리부(123)에 의해 편집된 내용이 로컬 저장소(130) 및/또는 원격 저장소(30)에 저장되고 인덱싱 작업이 선행될 수 있으므로 추후 검색시 사용자의 의도에 보다 적합한 개인 데이터 검색 결과를 제공할 수 있다.

키워드 검색부(124)는 사용자의 검색시 로컬 저장소(130) 또는 원격 저장소(30)에 저장된 개인 데이터에 대한 검색을 수행하는 기능부이다. 사용자가 연동되어 있는 웹 브라우저(110)를 통해 특정 웹사이트에 접속하여 키워드를 입력하여 검색을 수행하거나 또는 관리 대상 앱(140)을 실행하고 키워드를 입력하여 검색을 수행하는 경우, 키워드 검색부(124)는 검색에 사용된 키워드와 함께 사용자의 검색을 통지받고, 키워드를 이용하여 로컬 저장소(130) 또는 원격 저장소(30)에 저장된 개인 데이터에 대한 검색을 수행한다. 사용자가 연동되어 있는 웹 브라우저(110)를 통해 또는 관리 대상 앱(140)을 실행하고 특정 컨텐츠에 접근하는 경우에도 키워드 검색부(124)는 추출된 키워드를 이용하여 로컬 저장소(130) 또는 원격 저장소(30)에 저장된 개인 데이터에 대한 검색을 수행한다.

전술한 바와 같이, 로컬 저장소(130) 또는 원격 저장소(30)에는 개인 데이터로부터 추출된 텍스트가 가공된 개인 데이터의 적어도 일부로서 함께 저장되고 인덱싱되어 있으므로, 키워드 검색부(124)는 저장되어 있는 추출된 텍스트와 검색에 사용된 키워드를 비교하는 방식으로 빠르게 검색을 수행할 수 있다.

또한, 본 발명의 다양한 실시예에 따라 키워드 검색부(124)는 검색 대상이 되는 개인 데이터의 형식을 한정할 수도 있다. 예를 들어, 사용자가 검색을 위해 접속한 웹사이트가 일반 검색 사이트이거나 쇼핑 사이트인 경우 키워드 검색부(124)가 검색할 개인 데이터의 형식을 텍스트, 또는 텍스트와 캡쳐된 이미지만으로 한정할 수도 있고, 접속한 웹사이트가 동영상 검색 사이트인 경우 검색부(124)가 검색할 개인 데이터의 형식을 동영상만으로 한정할 수도 있다. 그리고, 사용자가 실행한 관리 대상 앱(140)의 종류에 따라서도 전술한 예와 같이 검색할 개인 데이터의 형식을 한정할 수도 있음은 이해될 수 있다.

검색 결과 표시부(125)는 키워드 검색부(124)의 개인 데이터 검색 결과 및 사용자가 웹 브라우저(110) 또는 관리 대상 앱(140)을 통해 검색한 종래 검색 결과를 통합한 통합 검색 결과를 사용자에게 제공하는 기능부이다. 검색 결과 표시부(125)는 연동을 통해 웹 브라우저(110) 또는 관리 대상 앱(140)으로부터 종래 검색 결과를 제공받고, 웹 브라우저(110)에서 검색을 위해 접속한 웹 사이트 또는 관리 대상 앱(140)의 종류를 확인하여 종래 검색 결과 화면에 어울리도록 통합 검색 결과의 UI를 생성하여 제공한다. 전술한 UI는 사용자가 검색 결과로서 제공된 개인 데이터를 직접적으로 편집할 수 있도록 하는 기능을 더 제공할 수 있으며, 사용자가 특정 개인 데이터를 편집하는 경우 전술한 바와 같이 저장소 데이터 관리부(123)에서 편집된 개인 데이터를 로컬 저장소(130) 및/또는 원격 저장소(30)에 저장한다.

본 발명의 일 실시예에 따른 통합 검색 결과를 도시하는 도 5를 참조하여 검색 결과 표시부(125)에 대해 설명하면, 사용자가 웹 브라우저(110)를 실행하고, 검색 사이트에 접속하여 특정 키워드를 키워드 입력부(510)에 입력하면 종래 검색 결과가 검색 결과 영역(530)에 표시되고, 영역(540)은 키워드와 관련된 광고가 제공되거나 또는 빈 상태로 되어 있다. 검색 결과 표시부(125)는 광고 또는 비어 있는 영역(540)을 개인 데이터 검색 결과를 표시하는 공간으로 활용함으로써 사용자가 본원 발명을 사용하지 않은 상태의 검색 결과와 비교하여도 일관성을 유지하고 어울리게끔 통합 검색 결과에 대한 UI를 구성하여 제공할 수 있다. 한편, 도 5는 일 예에 불과하므로 본원 발명의 검색 결과 표시부(125)는 통합 검색 결과의 표시에 있어 반드시 도 5에 한정되는 것은 아니며, 검색 결과 화면을 상하로 나누어 개인 데이터 검색 결과를 상단에 표시하고, 종래 검색 결과를 하단에 표시하거나 또는 별도의 영역을 나누지 않고 종래 검색 결과 및 개인 데이터 검색 결과를 마치 하나의 검색 결과에 해당하는 것처럼 섞어서 표시하는 등 종래 검색 결과와 일관성을 유지하고 어울릴 수 있는 다양한 방식으로 표시할 수 있음은 이해될 수 있다. 또한, 도 5의 예에서 개인 데이터 관리 앱은 웹 브라우저의 익스텐션 또는 플러그인 방식으로 구현되었고 설치시 웹 브라우저에 생성되는 버튼(520)을 클릭하여 실행 또는 활성화하는 방식으로 사용할 수 있으나, 반드시 이러한 실시예에 한정되는 것은 아니며 설치형 또는 웹앱 방식 등 다양하게 구현, 설치 및 실행될 수 있음은 이해될 수 있다. 한편, 도 5에는 명시적으로 도시되어 있지 아니하나, 통합 검색 결과 화면에서 사용자는 개인 데이터 검색 결과 중 특정 개인 데이터를 선택하고 직접적으로 편집(예컨대, 태그 달기, 노트 추가하기, 다른 개인 데이터를 링크로 연결하기 또는 검색 키워드 할당하기 등)할 수 있다.

한편, 도 6은 본 발명의 다른 실시예에 따른 통합 검색 결과를 도시하는 화면이다. 사용자가 웹 브라우저(110) 또는 관리 대상 앱(140)을 실행하고 특정 키워드를 키워드 입력부(610)에 입력하여 동영상만을 검색하는 경우 키워드 검색부(124)는 동영상 형식에 대해서만 개인 데이터 검색을 수행할 수 있고, 검색 결과 표시부(125)는 동영상의 정지 화면, 동영상 파일명이나 추출된 텍스트 중 적어도 일부, 작성 일자 등 종래 검색 결과와 동일하게끔 개인 데이터 검색 결과를 구성할 수 있다. 예를 들어 도6에 도시한 것처럼 통합 검색 결과 화면을 상하로 나누어 상부 영역(630)에는 개인 데이터 검색 결과를, 하부 영역(640)에는 종래 검색 결과를 표시하거나 좌우측으로 개인 데이터 검색 결과 및 종래 검색 결과 표시 영역을 나누거나, 또는 별도의 영역을 나누지 않고 종래 검색 결과 및 개인 데이터 검색 결과를 마치 하나의 검색 결과에 해당하는 것처럼 섞어서 표시하는 등 종래 검색 결과와 일관성을 유지하고 어울리게끔 통합 검색 결과의 UI를 구성하여 제공할 수 있으나, 반드시 전술한 예에 한정되는 것은 아니며 다양한 방식으로 통합 검색 결과 화면을 구성할 수 있음은 당업자에게 이해될 수 있다. 한편, 도 6에는 명시적으로 도시되어 있지 아니하나, 통합 검색 결과 화면에서 사용자는 개인 데이터 검색 결과 중 특정 개인 데이터를 선택하고 직접적으로 편집(예컨대, 태그 달기, 노트 추가하기, 다른 개인 데이터를 링크로 연결하기 또는 검색 키워드 할당하기 등)할 수 있다.

또한, 검색 결과 표시부(125)는 키워드 검색부(124)의 개인 데이터 검색 결과 및 사용자가 웹 브라우저(110) 또는 관리 대상 앱(140)을 통해 접근한 컨텐츠를 통합한 통합 컨텐츠를 사용자에게 제공할 수 있다. 검색 결과 표시부(125)는 연동을 통해 웹 브라우저(110) 또는 관리 대상 앱(140)으로부터 종래 검색 결과를 제공받고, 웹 브라우저(110)에서 접근한 컨텐츠 또는 관리 대상 앱(140)의 종류를 확인하여 종래 검색 결과 화면에 어울리도록 통합 컨텐츠의 UI를 생성하여 제공한다. 전술한 UI는 사용자가 검색 결과로서 제공된 개인 데이터를 직접적으로 편집할 수 있도록 하는 기능을 더 제공할 수 있으며, 사용자가 특정 개인 데이터를 편집하는 경우 전술한 바와 같이 저장소 데이터 관리부(123)에서 편집된 개인 데이터를 로컬 저장소(130) 및/또는 원격 저장소(30)에 저장한다.

다시 도2를 참조하면, 도2에 도시한 개인 데이터 관리 앱(120)은 정보 통신 기기(10)에 설치되는 앱을 의미하지만, 정보 통신 기기(20)에 설치되는 개인 데이터 관리 앱(220) 역시 도2의 앱(120)과 동일 또는 유사한 구성 및 동일 또는 유사한 기능을 수행함을 당업자는 이해할 것이다.

도3은 본 발명의 일 실시예에 따른 개인 데이터 추가시의 예시적인 동작을 설명하는 흐름도이다. 도면을 참조하면, 개인 데이터 관리앱(120)의 최초 실행시 개인 데이터 관리앱(120)은 단계(S100)에서 웹 브라우저(110) 또는 관리 대상 앱(140)과의 연동을 수행한다. 전술한 바와 같이 연동은 특정 디렉토리를 액세스하거나, 관리 대상 앱(140)의 서버와 통신을 하는 등 개인 데이터 관리앱(120)의 실행시 사용자가 새로이 생성한 개인 데이터가 있는지를 확인할 수 있는 다양한 방식으로 수행될 수 있다. 연동을 통해 단계(S110)에서 사용자가 새로 생성한 개인 데이터를 확인할 수 있다. 새로 생성한 데이터가 있는 경우, 개인 데이터 관리앱(120)은 단계(S120)에서 새로 생성된 개인 데이터 또는 그 중 적어도 일부를 로컬 저장소(130)에 저장하거나 원격 저장소(30)에 전송하여 저장한다. 전술한 바와 같이, 단계(S120)에서 저장되는 데이터는 새로 추가된 개인 데이터 그 자체의 복사본일 수도 있고, 개인 데이터를 액세스할 수 있는 링크일 수도 있다.

이후, 개인 데이터 관리앱(120)은 단계(S130)에서 로컬 저장소(130) 또는 원격 저장소(30)에 저장된 개인 데이터 또는 그 적어도 일부로부터 신규로 추가된 개인 데이터의 형식을 확인하고, 그 형식에 기초하여 텍스트 추출을 수행한다. 전술한 바와 같이, 저장된 개인 데이터가 특정 웹사이트의 링크 주소인 경우, 링크에 해당하는 특정 웹사이트 내에 포함된 텍스트를 웹 크롤링 등의 방식으로 추출할 수 있고, 사진이나 스크린 캡쳐 등의 이미지 파일인 경우 공지 기술을 이용하여 이미지 내에 포함된 텍스트를 추출할 수 있으며, 음성 파일 형식인 경우에는 공지 기술인 STT(Speech To Text)을 이용하여 텍스트를 추출할 수 있다. 또한, 동영상의 경우에는 전술한 바와 같이 이미지 또는 음성으로부터 텍스트를 추출하는 기술을 이용하여 동영상 내에 포함된 텍스트를 추출할 수 있다.

이와 같이 새로 생성된 개인 데이터로부터 추출된 텍스트는 단계(S140)에서 개인 데이터와 관련지어 가공된 개인 데이터의 적어도 일부로서 로컬 저장소(130) 또는 원격 저장소(30)에 저장되며, 추출된 텍스트는 추후 검색시 속도 향상을 위해 인덱싱 작업이 선행될 수 있다. 또한, 단계(S140)에서는 추출된 텍스트 이외에도 개인 데이터의 형식이나 개인 데이터가 생성된 정보 통신 기기의 식별자 등을 가공된 개인 데이터의 일부로서 더 저장할 수 있다.

한편, 단계(S150)은 본 발명의 실시예에 따라 수행될 수도 있는 선택적인 단계로서, 만일 단계(120)에서 개인 데이터 또는 그 적어도 일부, 또는 단계(S140)에서 추출된 텍스트가 로컬 저장소(130)에만 저장된 경우, 개인 데이터 관리 앱(120)은 실시간으로 또는 특정 조건을 만족하는 경우 로컬 저장소(130)에만 저장된 상기 데이터를 원격 저장소(30)로 전송하여 저장하게 할 수 있다. 이 때, 로컬 저장소(130)의 공간 확보를 위해 데이터의 원격 저장소(30)로의 전송 및 저장시 로컬 저장소(130)에서는 해당 데이터를 삭제할 수도 있다.

개인 데이터 관리 앱(120)은 단계(S100)을 통해 웹 브라우저(110) 또는 관리 대상 앱(140)과 연동되므로, 이후 새로운 개인 데이터의 추가시 연동된 웹 브라우저(110) 또는 관리 대상 앱(140)으로부터의 통지에 의해 단계(S110)으로 돌아가 이후 전술한 과정을 반복하여 수행할 수 있다.

도4a는 본 발명의 일 실시예에 따른 검색 수행시의 예시적인 동작을 설명하는 흐름도이다. 도면을 참조하면, 단계(S200)에서 사용자가 웹 브라우저(110)를 통해 특정 검색 사이트나 쇼핑 사이트에 접속한 후 키워드를 입력하여 검색하거나 관리 대상 앱(140)을 실행하고 키워드를 입력하여 검색하면, 개인 데이터 관리 앱(120)은 연동되어 있는 웹 브라우저(110) 또는 관리 대상 앱(140)으로부터 검색 여부를 입력된 키워드와 함께 통지받는다. 한편, 단계(S200)에서는 검색을 수행한 검색 사이트의 종류, 또는 관리 대상 앱(140)의 종류를 더 통지받을 수 있다.

다음으로, 개인 데이터 관리 앱(120)은 단계(S210)에서 입력된 키워드를 이용하여 개인 데이터를 검색한다. 개인 데이터는 로컬 저장소(130) 또는 원격 저장소(30)에 추출된 텍스트를 가공된 개인 데이터의 적어도 일부로서 포함하여 저장되어 있으며, 검색은 추출된 텍스트와 입력된 키워드를 대비하는 방식으로 수행될 수 있다. 한편, 단계(S210)에서는 검색 사이트의 종류 또는 관리 대상 앱(140)의 종류에 기초하여 검색을 수행할 개인 데이터의 형식을 한정할 수 있다.

개인 데이터 관리 앱(120)은 단계(S220)에서, 단계(S210)에서 수행된 개인 데이터 검색 결과를 웹 브라우저(110) 또는 관리 대상 앱(140)을 통하여 수행된 종래 검색 결과 및 검색 사이트 또는 관리 대상 앱(140)의 종류에 기초하여 통합 검색 결과 화면을 구성한다. 구성된 통합 검색 결과 화면은 도 5 또는 도 6의 예와 같이 구성될 수도 있으나 반드시 이에 한정되는 것은 아니며, 본원 발명의 기술적 의의를 벗어나지 않는 범위 내에서 다양한 방식으로 구성되거나 표시될 수 있음은 이해될 수 있다. 마지막으로, 단계(S220)에서 구성된 통합 검색 결과 화면은 단계(S230)에서 검색을 수행한 웹 브라우저(110) 또는 관리 대상 앱(140)을 통해 사용자에게 표시된다.

한편 도4b는 본 발명의 일 실시예에 따른 특정 컨텐츠 접근시의 예시적인 동작을 설명하는 흐름도이다. 도면을 참조하면, 단계(S300)에서 사용자가 웹 브라우저(110)를 통해 또는 관리 대상 앱(140)을 실행하고 특정 컨텐츠에 접근하면 (예컨대, 블로그 등), 개인 데이터 관리 앱(120)은 연동되어 있는 웹 브라우저(110) 또는 관리 대상 앱(140)으로부터 접근한 컨텐츠의 링크 또는 컨텐츠의 링크에 존재하는 컨텐츠 소스(예컨대, 상기 링크에 접속하여 수신할 수 있는 HTML 등의 마크업 언어 방식의 소스를 수신할 수 있으며, 상기 소스에는 태그 내에 포함된 제목이나 메타데이터 또는 스타일 시트인 CSS, 동적 구동 등을 위한 자바스크립트 등의 관련 데이터가 포함될 수 있다)를 통지받는다. 한편, 단계(S300)에서는 접근한 컨텐츠의 종류 또는 관리 대상 앱(140)의 종류를 더 통지받을 수 있다.

다음으로, 개인 데이터 관리 앱(120)은 단계(S310)에서 통지받은 컨텐츠의 링크로부터 또는 컨텐츠 링크에 해당하는 컨텐츠 소스로부터 해당 컨텐츠의 키워드를 추출한다. 전술한 바와 같이, 컨텐츠로부터 키워드를 추출하는 방식은 컨텐츠 내에 포함된 제목, 메타 데이터 또는 해시태그 등을 키워드로 정하거나, 또는 컨텐츠로부터 텍스트를 추출하고 추출된 텍스트와 기존에 존재하는 키워드 데이터베이스를 비교하고 특정 기준치 이상인 경우 (예컨대, 컨텐츠에서 추출된 텍스트 중 특정 개수 이상이 키워드 데이터베이스 내의 특정 키워드와 연관되는 단어들과 일치하는 경우) 키워드를 결정하는 방식 중 어느 하나 이상을 포함할 수 있으나 이에 한정되지 않고 기타 컨텐츠 소스에 포함된 기타 데이터(CSS 또는 자바스크립트 등)을 활용할 수 있는 등 다양한 방식으로 구현될 수 있다는 점은 이해될 수 있다.

이후, 개인 데이터 관리 앱(120)은 단계(S320)에서 추출된 키워드를 이용하여 개인 데이터를 검색한다. 개인 데이터는 로컬 저장소(130) 또는 원격 저장소(30)에 추출된 텍스트를 가공된 개인 데이터의 적어도 일부로서 포함하여 저장되어 있으며, 검색은 추출된 텍스트와 추출된 키워드를 대비하는 방식으로 수행될 수 있다. 한편, 단계(S320)에서는 접근한 컨텐츠의 종류 또는 관리 대상 앱(140)의 종류에 기초하여 검색을 수행할 개인 데이터의 형식을 한정할 수 있다.

개인 데이터 관리 앱(120)은 단계(S330)에서, 단계(S320)에서 수행된 개인 데이터 검색 결과를 웹 브라우저(110) 또는 관리 대상 앱(140)을 통하여 접근한 컨텐츠와 함께 통합 컨텐츠 화면을 구성한다. 구성된 통합 컨텐츠 화면은 본원 발명의 기술적 의의를 벗어나지 않는 범위 내에서 다양한 방식으로 구성되거나 표시될 수 있음은 이해될 수 있다. 마지막으로, 단계(S330)에서 구성된 통합 검색 결과 화면은 단계(S340)에서 컨텐츠에 접근한 웹 브라우저(110) 또는 관리 대상 앱(140)을 통해 사용자에게 표시된다.

이상과 같이 도면을 참조하여 본 발명의 실시예들을 설명하였지만 본 발명이 속하는 분야에서 통상의 지식을 가진 당업자라면 상술한 명세서의 기재로부터 다양한 수정 및 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

10, 20: 정보 통신 기기 30: 원격 저장소
40: 네트워크 50: 서버
110, 210: 웹 브라우저
120, 220: 개인 데이터 관리앱 121: 앱 연동부
122: 데이터 전송/저장부 123: 저장소 데이터 관리부
124: 키워드 검색부 125: 검색결과 표시부
130, 230: 로컬 저장소 140, 240: 관리 대상 앱

Claims (9)

1. 정보 통신 기기에서 실행되며 개인 데이터 관리 앱에 의한 개인 데이터 통합 관리 방법에 있어서,
   상기 정보 통신 기기에 설치된 관리 대상 앱과 연동하는 단계;
   상기 연동된 관리 대상 앱에 기초하여 키워드 검색 요청을 확인하는 단계;
   상기 키워드에 기초하여 로컬 또는 원격 저장소에서 개인 데이터를 검색하는 단계;
   상기 연동된 관리 대상 앱으로부터 상기 키워드 검색 요청에 따른 결과를 수신하고 상기 개인 데이터 검색 결과와 통합한 통합 검색 결과 화면을 구성하는 단계; 및
   상기 구성된 통합 검색 결과 화면을 표시하는 단계;를 더 포함하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
2. 제 1 항에 있어서,
   상기 관리 대상 앱은 웹 브라우저, 문서 또는 메모를 생성할 수 있는 문서 앱, 클라우드 서비스를 제공하는 클라우드 앱, 사진을 촬영하거나 동영상을 녹화할 수 있는 카메라 앱, 화면을 캡쳐할 수 있는 캡쳐 앱 또는 음성을 녹음할 수 있는 녹음 앱 중 하나 이상을 포함하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
3. 제 1 항에 있어서,
   상기 개인 데이터는 북마크 또는 읽기목록으로 저장한 웹페이지 주소, 상기 문서 앱으로 생성된 문서나 메모, 상기 카메라 앱으로 촬영된 사진 또는 녹화된 동영상, 상기 캡쳐 앱으로 캡쳐된 이미지, 또는 녹음 앱으로 녹음된 음성 중 하나 이상을 포함하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
4. 제 1 항에 있어서, 상기 개인 데이터를 검색하는 단계는,
   상기 저장소에 저장된 상기 추출된 텍스트와 상기 키워드를 비교하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
5. 제 1 항에 있어서,
   상기 추출된 텍스트를 저장소에 저장하는 단계는 상기 개인 데이터의 형식을 저장하는 단계를 더 포함하고,
   상기 개인 데이터를 검색하는 단계는 상기 키워드 검색 요청이 확인된 관리 대상 앱의 종류 또는 상기 관리 대상 앱에서 접속한 검색 사이트에 기초하여 검색 대상이 되는 상기 개인 데이터의 형식을 제한하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
6. 제 5 항에 있어서,
   상기 통합 검색 결과 화면을 구성하는 단계는 상기 통합 검색 결과 화면을 상기 키워드 검색 요청이 확인된 관리 대상 앱의 종류 또는 상기 관리 대상 앱에서 접속한 검색 사이트의 검색 결과 화면과 일관성을 유지하도록 구성하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
7. 제 1 항에 있어서,
   상기 저장소는 상기 정보 통신 기기 내부의 로컬 저장소 및 상기 정보 통신 기기 외부의 원격 저장소 중 하나를 포함하는 것을 특징으로 하는 개인 데이터 통합 관리 방법.
8. 제 1 항에 있어서,
   상기 키워드 검색 요청을 확인하는 단계는 상기 연동된 관리 대상 앱에 기초하여 특정 컨텐츠 접근을 확인하는 단계; 및 상기 특정 컨텐츠로부터 키워드를 추출하는 단계이고;
   상기 통합 검색 결과 화면을 구성하는 단계는 상기 연동된 관리 대상 앱으로부터 상기 키워드 검색 요청에 따른 결과를 수신하고 상기 특정 컨텐츠와 통합한 통합 컨텐츠 화면을 구성하는 단계이며;
   상기 통합 검색 결과 화면을 표시하는 단계는 상기 구성된 통합 컨텐츠 화면을 표시하는 단계인 것을 특징으로 하는 개인 데이터 통합 관리 방법.
9. 제1항 내지 제8항 중 어느 한 항에 기재된 방법을 정보 통신 기기에서 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록매체.
   

Images