KR102469526B1

KR102469526B1 - Portable terminal having smart privacy protection function and method of protecting provacy using the same

Info

Publication number: KR102469526B1
Application number: KR1020200155072A
Authority: KR
Inventors: 정성진
Original assignee: (주)성진하이텍
Priority date: 2020-11-19
Filing date: 2020-11-19
Publication date: 2022-11-23
Also published as: KR20220068363A

Abstract

본 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기 및 이의 사생활 보호 방법은 위치 정보 모듈을 갖는 무선 통신부, 카메라부와 마이크부를 갖는 입력부, 센싱수, 출력부, 디스플레이부, 메모리부, 인터페이스부를 구비하고, 각부의 동작을 제어하고, 다수의 비밀화 구간으로 분리된 저장 데이터를 관리하는 비밀화 구간 관리 모듈과, 주변 정보를 입력 받아 분류하는 AI 정보 분류 모듈과, 저장된 주변 정보에 따라 주변 사람 존재 여부 및 현재 위치를 판단하는 AI 판단 모듈 및 AI 판단 모듈의 결과에 따라 비밀화 구간별 비밀화를 설정하는 비밀화 설정 모듈을 포함하는 것을 특징으로 하는 스마트 사생활 보호 기능을 갖는 휴대용 단말기를 제공한다.A portable terminal having a smart privacy protection function and a privacy protection method thereof according to the present embodiment includes a wireless communication unit having a location information module, an input unit having a camera unit and a microphone unit, a sensing unit, an output unit, a display unit, a memory unit, and an interface unit. An encryption section management module that controls the operation of each unit and manages stored data separated into multiple sections, an AI information classification module that receives and classifies surrounding information, and people around you according to the stored information. Provides a portable terminal having a smart privacy protection function, characterized in that it includes an AI determination module for determining whether or not and the current location, and an encryption setting module for setting encryption for each encryption section according to the result of the AI determination module.

Description

Portable terminal having smart privacy protection function and privacy protection method thereof

본 발명은 스마트 사생활 보호 기능을 갖는 휴대용 단말기 및 이의 사생활 보호 방법에 관한 것으로, 휴대용 단말기의 주변 정보에 따라 사생활 보호를 위한 비밀화 작업을 수행할 수 있는 스마트 사생활 보호 기능을 갖는 휴대용 단말기 및 이의 사생활 보호 방법을 제공한다.The present invention relates to a portable terminal having a smart privacy protection function and a privacy protection method thereof, and a portable terminal having a smart privacy protection function capable of performing a confidential operation for privacy protection according to surrounding information of the portable terminal and a privacy protection method thereof Provides a method of protection.

최근 휴대용 단말기는 휴대가 간편하고, 그 편의성이 향상되었고, 사용자가 개인 목적으로 사용하기 때문에 다양한 개인 정보들이 저장되어 있다. 보안이 강조됨으로 인해 중요 프로그램 또는 데이터들을 휴대용 단말기의 별도 디렉토리에 저장하고, 별도의 인증을 거쳐 접근하도록 하고 있습니다.Recently, portable terminals are easy to carry, their convenience has improved, and various types of personal information are stored because users use them for personal purposes. Due to the emphasis on security, important programs or data are stored in a separate directory on portable terminals and accessed through separate authentication.

하지만, 휴대용 단말기는 이동하면서 사용하기 때문에 주변 사람들이 화면의 내용을 처다볼 수 있는 등의 개인 사생활 보호 기능이 취약한 단점이 있습니다.However, since portable terminals are used while moving, there is a disadvantage in that the personal privacy protection function is weak, such as people around you looking at the contents of the screen.

(특허 문헌 1) 한국등록특허공보 제10-0582206호(Patent Document 1) Korean Patent Registration No. 10-0582206

본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 단말기 주변의 사용자 존재 여부를 판단하여 자동으로 비밀화 설정을 수행할 수 있고, 저장된 데이터를 다수 단계로 분류하여 비밀화 강도를 다르게할 수 있는 스마트 사생활 보호 기능을 갖는 휴대용 단말기 및 이의 사생활 보호 방법에 관한 것이다.The present invention has been devised to solve the above-mentioned problems, and it is possible to automatically set encryption by determining whether a user exists around a terminal, and to classify stored data into multiple stages to vary the strength of encryption. It relates to a portable terminal having a smart privacy protection function and a privacy protection method thereof.

본 발명에 따른 위치 정보 모듈을 갖는 무선 통신부, 카메라부와 마이크부를 갖는 입력부, 센싱수, 출력부, 디스플레이부, 메모리부, 인터페이스부를 구비하고, 각부의 동작을 제어하고, 다수의 비밀화 구간으로 분리된 저장 데이터를 관리하는 비밀화 구간 관리 모듈과, 주변 정보를 입력 받아 분류하는 AI 정보 분류 모듈과, 저장된 주변 정보에 따라 주변 사람 존재 여부 및 현재 위치를 판단하는 AI 판단 모듈 및 AI 판단 모듈의 결과에 따라 비밀화 구간별 비밀화를 설정하는 비밀화 설정 모듈을 포함하는 것을 특징으로 하는 스마트 사생활 보호 기능을 갖는 휴대용 단말기를 제공한다.A wireless communication unit having a location information module according to the present invention, an input unit having a camera unit and a microphone unit, a sensing unit, an output unit, a display unit, a memory unit, and an interface unit, and controlling the operation of each unit, An encryption section management module that manages separated stored data, an AI information classification module that receives and classifies surrounding information, an AI judgment module that determines the existence of people around you and the current location according to stored surrounding information, and an AI judgment module Provided is a portable terminal having a smart privacy protection function, characterized in that it includes an encryption setting module for setting encryption for each encryption section according to the result.

상기 비밀화 구간은 저장된 데이터를 사용자에 의해 분류되거나 스마트 구간 분류부를 통해 민감 정보가 저장된 데이터를 제1 단계 비밀화 구간에 저장하고, 민감하지 않지만, 중요한 정보가 저장된 데이터를 제2 단계 비밀화 구간에 저장하고, 일반 정보는 제3 단계 비밀화 구간에 저장할 수 있고, 제3 단계 비밀화 구간에 둔감 정보지만, 외부 노출이 제약되어야 하는 데이터를 제3 단계에, 일반 정보를 제4 단계 비밀화 구간에 저장하거나, 사용자 사용 빈도에 따라 각 단계에 저장되는 데이터가 변화되는 것을 특징으로 한다.In the encryption section, the stored data is classified by the user or sensitive information is stored in the first step encryption section through the smart section classification unit, and data that is not sensitive but important information is stored in the second step encryption section. Stored in, general information can be stored in the third stage encryption interval, insensitive information in the third stage encryption interval, but data that needs to be restricted from external exposure is stored in the third stage, and general information is encrypted in the fourth stage. It is characterized in that data stored in sections or stored in each step is changed according to the frequency of user use.

상기 AI 정보 분류 모듈은 장치의 각부로 부터 다양한 정보를 수집 저장하는 정보 수집부와, 수집된 정보를 이미지 정보, 음성 정보, 위치 정보로 분류하는 정보 분류부와, 분류된 정보를 코딩변환시키는 정보 변환부를 포함하는 것을 특징으로 한다.The AI information classification module includes an information collection unit for collecting and storing various information from each unit of the device, an information classification unit for classifying the collected information into image information, audio information, and location information, and information for encoding and converting the classified information. Characterized in that it includes a conversion unit.

상기 AI 판단 모듈은 제공 받은 위치 정보를 통해 사용자의 현재 위치를 파악하는 위치 판단부와, 이미지지 정보와 음성 정보를 바탕으로 주변 사람 수를 산출하는 사람 판단부를 포함하고, 상기 사람 판단부는 이미지 정보에서 주변 사람수를 산출하는 이미지 산출부와, 음성 정보에서 사람 수를 산출하는 음성 산출부와, 이들의 합을 통해 최종 사람 수를 산출하는 사람수 결정부를 포함하는 것을 특징으로 한다.The AI determination module includes a location determination unit that determines the current location of the user through the provided location information, and a person determination unit that calculates the number of people around based on image information and voice information, wherein the person determination unit includes image information is characterized in that it includes an image calculation unit that calculates the number of people around, a voice calculation unit that calculates the number of people from voice information, and a number of people determination unit that calculates the final number of people through the sum of them.

상기 이미지 산출부는 CNN 모델을 통해 이미지 정보에서 사람 수를 추출하거나, 얼굴 인식 기능을 사용하고, 상기 음성 산출부는 CNN 모델을 통해 음성 정보에서 사람 수를 추출하거나, 음역대에 따른 입력 값들을 분류하여 사람 수를 판단하되, 사용자의 이미지 정보나 음성 정보는 카운팅하지 않고, 상기 사람수 결정부는 이미지 산출부와 음성 산출부 각각을 통해 산출된 사람수중 큰 수를 주변에 위치한 사람수로 결정하는 것을 특징으로 한다.The image calculation unit extracts the number of people from image information through a CNN model or uses a face recognition function, and the voice calculation unit extracts the number of people from voice information through a CNN model or classifies the input values according to the sound range. The number of people is determined, but the user's image information or voice information is not counted, and the number of people determination unit determines the larger number of people among the number of people calculated through each of the image calculation unit and the voice calculation unit as the number of people located in the vicinity. do.

비밀화 설정 모듈은 AI 판단 모듈을 통해 판단된 주변 사람수 및/또는 위치 정보에 따라 각 단계의 비밀화 구간의 데이터의 실행 및 화면 노출을 제어하되,The privacy setting module controls the execution of data in the privacy section of each stage and screen exposure according to the number of people around and / or location information determined through the AI judgment module,

사람 수만으로 비밀화 구간을 제어하는 경우에는 4단계로 분류하고, 주변 사람수가 0인 경우에는 제1 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 1~5명인 경우에는 제1 단계 비밀화 구간 정보는 차단하고, 제2 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 6~10명인 경우에는 제1 단계와 제2 단계 비밀화 구간은 차단하고, 제3 단계 및 제4 단계 비밀화 구간 정보를 노출하고, 주변 사람수가 11명 이상인 경우에는 제1 단계 내지 제3 단계 비밀화 구간은 차단하고, 제4 단계 비밀화 구간 정보만을 노출시키고, 위치 정보로 비밀화 구간을 제어하는 경우에는 3단계로 분류하고, 현재 위치가 사전에 저장된 위치 영역인 경우에는 제1 단계 비밀화 구간에서 제3 단계 비밀화 구간까지 정보를 노출하고, 현재 위치가 저장된 위치 영역의 인접 영역인 경우에는 제2 단계에서 제3 단계 비밀화 구간까지 정보만을 노출하고, 현재 위치가 저장된 위치 영역으로 부터 멀리 떨어진 경우에는 제3 단계 비밀화 구간 정보만을 노출시키고, 주변 사람수 정보와 위치 정보를 사용하는 경우에는 4단계로 분류하고, 현재 위치가 사전에 저장된 위치 영역인 경우, 사람수가 1명인 경우에는 제1 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 2명인 경우에는 제1 단계 비밀화 구간 정보는 차단하고, 제2 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 3명 이상인 경우에는 제1 단계와 제2 단계 비밀화 구간은 차단하고, 제3 단계 및 제4 단계 비밀화 구간 정보를 노출시키는 것을 특징으로 한다.In the case of controlling the encryption section with only the number of people, it is classified into 4 levels. In the case of 6 to 10 people, the information of the 1st step encryption section is blocked, the information from the 2nd step encryption section to the 4th step encryption section is exposed, and if the number of people around is 6 to 10, the 1st and 2nd steps Encryption section is blocked, 3rd and 4th step encryption section information is exposed, if the number of people around is 11 or more, 1st to 3rd step encryption section is blocked, 4th step encryption section In the case of exposing only information and controlling the confidential section with location information, it is classified into 3 stages, and if the current location is a pre-stored location area, information from the 1st stage to the 3rd stage is exposed. When the current location is in an area adjacent to the stored location area, only information from the second stage to the third stage encryption section is exposed, and when the current location is far from the stored location area, only the third stage encryption section information is exposed. If the current location is a pre-stored location area or if the number of people is 1, the 4th stage is encrypted in the 1st stage encryption section. The information up to the section is exposed, and when the number of people around is 2, the information of the first stage of encryption is blocked, the information from the second stage to the fourth stage of encryption is exposed, and the number of people around is 3. If there are more than 100, it is characterized in that the first and second stage encryption sections are blocked, and the third and fourth stage encryption interval information is exposed.

상기 비밀화 설정 모듈은 상기 설명의 차단 기능 대신, 화면 영상 밝기를 조절하는 것을 특징으로 한다.The privacy setting module is characterized in that it adjusts the brightness of the screen image instead of the blocking function described above.

또한, 본 발명에 따른 사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단하는 단계와, 데이터를 변경하는 경우, 촬영된 이미지 정보 및 녹음된 음성 정보를 수집 분류하는 단계와, 분류된 정보를 기반으로 주변에 위치한 사람 수를 산출하는 단계와, 변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고, 주변 사람 수에 따라 해당 비밀화 구간의 정보를 차단하거나 노출시키는 단계를 포함하는 것을 특징으로 하는 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 제공한다.In addition, the step of determining whether the user changes the data displayed on the screen through the user input unit according to the present invention, the step of collecting and classifying the captured image information and the recorded voice information when the data is changed, and the classification The step of calculating the number of people located in the vicinity based on the identified information, determining which level of the previously classified confidentiality section the changed data corresponds to, and blocking or exposing the information in the corresponding confidentiality section according to the number of people around It provides a privacy protection method of a portable terminal having a smart privacy protection function, characterized in that it comprises the step.

사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단하는 단계와, 데이터를 변경하는 경우, 위치 정보를 수집 분류하는 단계와, 분류된 정보를 기반으로 현재 위치 영역을 산출하는 단계와, 변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고, 위치 영역에 따라 해당 비밀화 구간의 정보를 차단하거나 노출시키는 단계를 포함하는 것을 특징으로 하는 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 제공한다.Determining whether or not the user changes the data displayed on the screen through the user input unit; Collecting and classifying location information if the data is changed; calculating a current location area based on the classified information; , Determining which stage of the previously classified encryption section corresponds to the changed data, and blocking or exposing the information of the corresponding encryption section according to the location area. provides a way to protect the privacy of

사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단하는 단계와, 데이터를 변경하는 경우, 촬영된 이미지 정보, 녹음된 음성 정보 및 위치 정보를 수집 분류하는 단계와, 분류된 정보를 기반으로 현재 위치 영역과 주변에 위치한 사람 수를 산출하는 단계와, 변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고, 위치 영역과 주변 사람 수에 따라 해당 비밀화 구간의 정보를 차단하거나 노출시키는 단계를 포함하는 것을 특징으로 하는 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 제공한다.Determining whether or not the user changes data displayed on the screen through a user input unit; in case of changing the data, collecting and classifying captured image information, recorded voice information, and location information; Based on the step of calculating the current location area and the number of people located in the vicinity, it is determined which level of the previously classified encryption section the changed data corresponds to, and the information of the corresponding encryption section is calculated according to the location area and the number of people nearby. It provides a privacy protection method of a portable terminal having a smart privacy protection function, characterized in that it includes the step of blocking or exposing.

사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단하는 단계와, 데이터를 변경하는 경우, 촬영된 이미지 정보 및 녹음된 음성 정보를 수집 분류하는 단계와, 분류된 정보를 기반으로 주변에 위치한 사람 수를 산출하는 단계와, 변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고, 주변 사람 수에 따라 해당 비밀화 구간의 정보가 노출되는 화면의 밝기를 최소화 하는 단계를 포함하는 것을 특징으로 하는 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 제공한다.Determining whether the user changes data displayed on the screen through a user input unit, and if the data is changed, collecting and classifying captured image information and recorded voice information, and based on the classified information, The step of calculating the number of people located in , the step of determining which level of the previously classified encryption section corresponds to the changed data, and the step of minimizing the brightness of the screen on which the information of the encryption section is exposed according to the number of people around. It provides a privacy protection method of a portable terminal having a smart privacy protection function, characterized in that it comprises.

이와 같이 본 발명은 휴대용 단말 내의 정보를 다수 단계로 분리 저장하고 주변 영역 정보에 따라 순차적으로 이의 비밀화를 해제하여 개인의 사행활을 보호할 수 있다.As described above, the present invention can protect personal privacy by separating and storing information in a portable terminal in multiple stages and sequentially decrypting information according to surrounding area information.

또한, 스마트 기능을 통해 자동으로 영상 밝기를 조절하거나 블랙 스크린으로 변화시켜 주변 사람이 휴대용 단말기의 내용을 시청하는 것을 차단할 수 있다.In addition, it is possible to block nearby people from viewing the contents of the portable terminal by automatically adjusting the brightness of the video or changing the screen to a black screen through a smart function.

도 1은 본 발명의 일 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 블록도.
도 2는 본 발명의 일 실시예에 따른 휴대용 단말기의 제어부 블록도.
도 3은 본 발명의 일 실시예에 따른 휴대용 단말기의 AI 정보 분류 모듈의 블록도.
도 4는 본 발명의 일 실시예에 따른 휴대용 단말기의AI 판단 모듈의 블록도.
도 5는 본 발명의 일 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도.
도 6은 본 발명의 다른 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도.
도 7은 본 발명의 또다른 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도.
도 8은 본 발명의 일 변형예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도.1 is a block diagram of a portable terminal having a smart privacy protection function according to an embodiment of the present invention.
2 is a block diagram of a control unit of a portable terminal according to an embodiment of the present invention.
3 is a block diagram of an AI information classification module of a portable terminal according to an embodiment of the present invention.
4 is a block diagram of an AI determination module of a portable terminal according to an embodiment of the present invention.
5 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to an embodiment of the present invention.
6 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to another embodiment of the present invention.
7 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to another embodiment of the present invention.
8 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to a modified example of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 실시예를 더욱 상세히 설명하기로 한다. 그러나 본 발명은 이하에서 개시되는 실시예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 도면상에서 동일 부호는 동일한 요소를 지칭한다.Hereinafter, embodiments of the present invention will be described in more detail with reference to the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but will be implemented in a variety of different forms, only these embodiments will complete the disclosure of the present invention, and will fully cover the scope of the invention to those skilled in the art. It is provided to inform you. Like reference numerals designate like elements in the drawings.

본 명세서에서의 구성부들에 대한 구분은 각 구성부가 담당하는 주기능별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다. 따라서, 본 명세서를 통해 설명되는 각 구성부들의 존재 여부는 기능적으로 해석 되어야 할 것이다. 이러한 이유로 본 발명의 스마트 사생활 보호 기능을 갖는 휴대용 단말기 및 이의 사생활 보호 방법의 구성부들의 구성은 본 발명의 목적을 달성할 수 있는 한도 내에서 상이해질 수 있음을 명확히 밝혀둔다.It is intended to be clear that the classification of components in this specification is merely a classification for each main function in charge of each component. That is, two or more components to be described below may be combined into one component, or one component may be divided into two or more for each more subdivided function. In addition, each component to be described below may additionally perform some or all of the functions of other components in addition to its main function, and some of the main functions of each component may be performed by other components. Of course, it may be dedicated and performed by . Therefore, the existence or nonexistence of each component described through this specification should be interpreted functionally. For this reason, it is clearly stated that the configuration of the components of the portable terminal having the smart privacy protection function and the privacy protection method of the present invention may be different within the limit capable of achieving the object of the present invention.

본 명세서에서, 제1 및 제2, 상부 및 하부 등의 관계적인 용어는, 그러한 엔티티 또는 액션 간의 실제 관계 또는 순서를 반드시 요구하거나 암시하지 않고 다른 엔티티나 액션과 하나의 엔티티 또는 액션을 구별하는 데에만 사용될 수 있다. 용어 "포함하다(comprises)", "포함하는(comprising)" 또는 그 다른 변형은, 구성요소의 리스트를 포함하는 프로세스, 방법, 제품, 또는 장치가 구성요소만을 포함하지 않지만 그러한 프로세스, 방법, 제품, 또는 장치에 명시적으로 열거되거나 내재되지 않은 다른 구성요소를 포함할 수 있도록, 비배타적인 포함물을 커버하도록 의도된다. "하나의 ~를 포함하다"로 진행되는 하나의 구성요소는, 더 이상의 제한없이, 구성요소를 포함하는 프로세스, 방법, 제품, 또는 장치 내에 부가적인 동일한 구성요소의 존재를 배제한다.In this specification, relational terms such as first and second, upper and lower are used to distinguish one entity or action from another entity or action without necessarily requiring or implying an actual relationship or order between those entities or actions. can only be used for The terms "comprises", "comprising" or other variations thereof refer to a process, method, product, or apparatus that includes a list of elements but does not include only those elements, such process, method, product, or product. , or other components not explicitly listed or implicit in the device. One element proceeding to “comprises a” excludes, without further limitation, the presence of additional identical elements within the process, method, product, or apparatus that includes the element.

본 발명의 실시예에 따른 휴대 단말기는 PDC(Personal Digital Cellular), PCS(Personal Communication Service), PHS(Personal Handyphone System), CDMA△2000(1X, 3X)폰, WCDMA(Wideband CDMA)폰, 듀얼 밴드/듀얼 모드(Dual Band/Dual Mode)폰, GSM(Global Standard for Mobile)폰, MBS(Mobile Broadband System)폰, DMB(Digital Multimedia Broadcasting)폰, 스마트(Smart) 폰, 이동통신 단말기등과 같은 통신 기능이 포함될 수 있는 단말기가 될 수 있다. 또한 PMP(Portable multimedia player), MP3 플레이어(MP3 player), 휴대용 게임기 등과 같이 통신 기능이 포함되지 않은 단말기도 통칭하는 개념으로 해석된다.A portable terminal according to an embodiment of the present invention is a PDC (Personal Digital Cellular), PCS (Personal Communication Service), PHS (Personal Handyphone System), CDMAΔ2000 (1X, 3X) phone, WCDMA (Wideband CDMA) phone, dual band / Communications such as Dual Band/Dual Mode phones, GSM (Global Standard for Mobile) phones, MBS (Mobile Broadband System) phones, DMB (Digital Multimedia Broadcasting) phones, smart phones, mobile communication terminals, etc. It can be a terminal that can include functions. In addition, it is interpreted as a concept that collectively refers to terminals that do not include a communication function, such as a portable multimedia player (PMP), an MP3 player, and a portable game machine.

도 1은 본 발명의 일 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 블록도이다.1 is a block diagram of a portable terminal having a smart privacy protection function according to an embodiment of the present invention.

도 2는 본 발명의 일 실시예에 따른 휴대용 단말기의 제어부 블록도이고,2 is a block diagram of a control unit of a portable terminal according to an embodiment of the present invention;

도 3은 본 발명의 일 실시예에 따른 휴대용 단말기의 AI 정보 분류 모듈의 블록도이고, 도 4는 본 발명의 일 실시예에 따른 휴대용 단말기의AI 판단 모듈의 블록도이다.3 is a block diagram of an AI information classification module of a portable terminal according to an embodiment of the present invention, and FIG. 4 is a block diagram of an AI determination module of a portable terminal according to an embodiment of the present invention.

도 1 내지 도 4에 도시된 바와 같이, 본 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기는 무선 통신부(100), A/V(Audio/Video) 입력부(200), 사용자 입력부(300), 센싱부(400), 출력부(500), 메모리(600), 인터페이스부(700), 제어부(800) 및 전원 공급부(900) 등을 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수도 있다.1 to 4, a portable terminal having a smart privacy protection function according to the present embodiment includes a wireless communication unit 100, an audio/video (A/V) input unit 200, a user input unit 300, It may include a sensing unit 400 , an output unit 500 , a memory 600 , an interface unit 700 , a control unit 800 and a power supply unit 900 . Since the components shown in FIG. 1 are not essential, a mobile terminal having more or fewer components may be implemented.

상기 무선 통신부(100)는 단말기와, 무선 통신 시스템 사이 또는 단말기 간의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부는 방송 수신 모듈(110), 이동통신 모듈(120), 무선 인터넷 모듈(130), 근거리 통신 모듈(140) 및 위치 정보 모듈(150) 등을 포함할 수 있다.The wireless communication unit 100 may include one or more modules enabling wireless communication between a terminal and a wireless communication system or between terminals. For example, the wireless communication unit may include a broadcast reception module 110, a mobile communication module 120, a wireless Internet module 130, a short-distance communication module 140, and a location information module 150.

방송 수신 모듈(110)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다. 상기 방송 수신 모듈은, 예를 들어, DMBT(Digital Multimedia Broadcasting-Terrestrial), DMBS(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다.The broadcast reception module 110 receives a broadcast signal and/or broadcast-related information from an external broadcast management server through a broadcast channel. The broadcast related information may exist in various forms. For example, it may exist in the form of an Electronic Program Guide (EPG) of Digital Multimedia Broadcasting (DMB) or an Electronic Service Guide (ESG) of Digital Video Broadcast-Handheld (DVB-H). The broadcast receiving module may include, for example, DMBT (Digital Multimedia Broadcasting-Terrestrial), DMBS (Digital Multimedia Broadcasting-Satellite), MediaFLO (Media Forward Link Only), DVB-H (Digital Video Broadcast-Handheld), ISDB-T A digital broadcasting signal can be received using a digital broadcasting system such as (Integrated Services Digital Broadcast-Terrestrial).

이동통신 모듈(120)은 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.The mobile communication module 120 transmits and receives a radio signal with at least one of a base station, an external terminal, and a server on a mobile communication network. The wireless signal may include a voice call signal, a video call signal, or various types of data according to text/multimedia message transmission/reception.

무선 인터넷 모듈(130)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 단말기에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.The wireless Internet module 130 refers to a module for wireless Internet access, and may be built into or external to a terminal. Wireless Internet technologies include wireless LAN (WLAN) (Wi-Fi), wireless broadband (Wibro), world interoperability for microwave access (Wimax), high speed downlink packet access (HSDPA), and the like.

근거리 통신 모듈(140)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short-distance communication module 140 refers to a module for short-distance communication. As a short range communication technology, Bluetooth, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, or the like may be used.

위치정보 모듈(150)은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다.The location information module 150 is a module for acquiring the location of a mobile terminal, and a representative example thereof is a Global Positioning System (GPS) module.

또한, 본 실시예에 따른 휴대용 단말기의 A/V 입력부(200)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 카메라(210)와 마이크(220) 등이 포함될 수 있다. 카메라(210)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 이때, 처리된 화상 프레임은 디스플레이부(510)에 표시될 수 있다. 카메라(210)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.In addition, the A/V input unit 200 of the portable terminal according to the present embodiment is for inputting an audio signal or a video signal, and may include a camera 210 and a microphone 220. The camera 210 processes an image frame such as a still image or a moving image obtained by an image sensor in a video call mode or a photographing mode. At this time, the processed image frame may be displayed on the display unit 510 . Two or more cameras 210 may be provided depending on the use environment.

마이크(220)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(120)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다.The microphone 220 receives an external sound signal through a microphone in a call mode, a recording mode, or a voice recognition mode, and processes it into electrical voice data. The processed voice data may be converted into a form that can be transmitted to a mobile communication base station through the mobile communication module 120 in the case of a call mode and then output.

또한, 휴대용 단말기는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시키는 사용자 입력부(300)를 구비한다. 사용자 입력부(300)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.In addition, the portable terminal includes a user input unit 300 through which the user generates input data for controlling the operation of the terminal. The user input unit 300 may include a key pad, a dome switch, a touch pad (static pressure/capacity), a jog wheel, a jog switch, and the like.

센싱부(400)는 휴대용 단말기의 개폐 상태, 단말기의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 단말기의 현 상태를 감지하여 단말기의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 단말기가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 감지할 수 있다. 또한, 전원 공급부(900)의 전원 공급 여부, 인터페이스부(700)의 외부 기기 결합여부 등을 감지할 수도 있다.The sensing unit 400 detects the current state of the terminal, such as the opening/closing state of the portable terminal, the location of the terminal, whether or not there is a user contact, the direction of the mobile terminal, and the acceleration/deceleration of the mobile terminal, etc., and sends a sensing signal to control the operation of the terminal. generate For example, if the terminal is in the form of a slide phone, whether the slide phone is opened or closed can be detected. In addition, it is also possible to detect whether or not the power supply unit 900 is supplying power and whether or not the interface unit 700 is connected to an external device.

출력부(500)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(510), 음향 출력 모듈(520), 알람부(530), 및 햅틱 모듈(540) 등이 포함될 수 있다.The output unit 500 is for generating an output related to sight, hearing, or touch, and may include a display unit 510, a sound output module 520, an alarm unit 530, and a haptic module 540. .

디스플레이부(510)는 단말기에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 단말기가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. 디스플레이부(510)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.The display unit 510 displays (outputs) information processed by the terminal. For example, when the mobile terminal is in a call mode, a UI (User Interface) or GUI (Graphic User Interface) related to a call is displayed. When the terminal is in a video call mode or a shooting mode, a photographed or/and received video, UI, or GUI is displayed. The display unit 510 may include a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED), and a flexible display. display) and a 3D display.

단말기의 구현 형태에 따라 디스플레이부(510)이 2개 이상 존재할 수 있다. 예를 들어, 단말기에는 복수의 디스플레이부(510)들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.Depending on the implementation form of the terminal, two or more display units 510 may exist. For example, in the terminal, a plurality of display units 510 may be spaced apart or integrally disposed on one surface, or may be respectively disposed on different surfaces.

디스플레이부(510)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함) 가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(510)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다. 터치 센서는 디스플레이부(510)의 특정 부위에 가해진 압력 또는 디스플레이부(510)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호는 터치 제어기로 보내진다. 터치 제어기는 그 신호를 처리한 다음 대응하는 데이터를 제어부(800)로 전송한다. 이로써, 제어부(800)는 디스플레이부(510)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.When the display unit 510 and a sensor for detecting a touch operation (hereinafter referred to as a 'touch sensor') form a mutual layer structure (hereinafter referred to as a 'touch screen'), the display unit 510 may include an output device as well as an output device. It can also be used as an input device. The touch sensor may have a form of, for example, a touch film, a touch sheet, or a touch pad. The touch sensor may be configured to convert a pressure applied to a specific portion of the display unit 510 or a change in capacitance generated at a specific portion of the display unit 510 into an electrical input signal. The touch sensor may be configured to detect not only the touched position and area, but also the pressure upon touch. When there is a touch input to the touch sensor, a corresponding signal is sent to the touch controller. The touch controller processes the signal and transmits corresponding data to the controller 800 . Thus, the controller 800 can know which area of the display unit 510 has been touched.

음향 출력 모듈(520)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(100)로부터 수신되거나 메모리(600)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(520)은 단말기에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다.The audio output module 520 may output audio data received from the wireless communication unit 100 or stored in the memory 600 in reception of a call signal, communication mode or recording mode, voice recognition mode, or broadcast reception mode. The sound output module 520 also outputs sound signals related to functions performed in the terminal (eg, call signal reception sound, message reception sound, etc.).

이러한 음향 출력 모듈(520)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The sound output module 520 may include a receiver, a speaker, a buzzer, and the like.

알람부(530)는 단말기의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(530)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(510)나 음성 출력 모듈(520)을 통해서도 출력될 수 있어서, 이들은 알람부(530)의 일부로 분류될 수도 있다.The alarm unit 530 outputs a signal for notifying occurrence of an event in the terminal. Examples of events generated in the mobile terminal include call signal reception, message reception, key signal input, and touch input. The alarm unit 530 may output a signal for notifying the occurrence of an event in a form other than a video signal or an audio signal, for example, vibration. Since the video signal or audio signal may be output through the display unit 510 or the audio output module 520, they may be classified as part of the alarm unit 530.

햅틱 모듈(haptic module)(540)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(540)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(540)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다. 햅틱 모듈(540)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.A haptic module 540 generates various tactile effects that a user can feel. A representative example of the tactile effect generated by the haptic module 540 is vibration. The strength and pattern of vibration generated by the haptic module 540 can be controlled. For example, different vibrations may be synthesized and output or sequentially output. In addition to vibration, the haptic module 540 responds to stimuli such as an array of pins that move vertically with respect to the contact skin surface, air blowing force or suction force through a nozzle or suction port, rubbing against the skin surface, contact with an electrode, and electrostatic force. It is possible to generate various tactile effects, such as the effect of heat absorption and the effect of reproducing the feeling of coolness and warmth using an element capable of absorbing heat or generating heat.

햅틱 모듈(540)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(540)은 휴대 단말기의 구성 태양에 따라 2개 이상이 구비될 수 있다.The haptic module 540 not only transmits a tactile effect through direct contact, but also can be implemented so that a user can feel a tactile effect through a muscle sense such as a finger or an arm. Two or more haptic modules 540 may be provided according to the configuration of the portable terminal.

메모리(600)는 제어부(800)의 동작을 위한 프로그램(예를 들어, 앱, Application)을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다.The memory 600 may store programs (eg, apps, applications) for operation of the controller 800, and may store input/output data (eg, phonebooks, messages, still images, videos, etc.) It can also be temporarily stored.

상기 메모리(600)는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.The memory 600 may store data related to vibration and sound of various patterns output when a touch is input on the touch screen.

메모리(600)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 휴대용 단말기는 인터넷(internet)상에서 상기 메모리(600)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.The memory 600 is a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (eg SD or XD memory, etc.), RAM (Random Access Memory, RAM), SRAM (Static Random Access Memory), ROM (Read-Only Memory, ROM), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM (Programmable Read-Only Memory), magnetic memory, magnetic It may include at least one type of storage medium among a disk and an optical disk. The portable terminal may operate in relation to a web storage performing a storage function of the memory 600 on the Internet.

인터페이스부(700)는 단말기에 연결되는 모든 외부기기와의 통로 역할을 한다.The interface unit 700 serves as a passage for all external devices connected to the terminal.

제어부(controller, 800)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(800)는 멀티 미디어 재생을 위한 멀티미디어 모듈을 구비할 수도 있다.A controller (800) typically controls overall operations of the mobile terminal. It performs related control and processing for, for example, voice calls, data communications, video calls, and the like. The controller 800 may include a multimedia module for playing multimedia.

상기 제어부(800)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.The controller 800 may perform a pattern recognition process capable of recognizing a handwriting input or a drawing input performed on the touch screen as a character and an image, respectively.

전원 공급부(900)는 제어부(800)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.The power supply unit 900 receives external power and internal power under the control of the controller 800 and supplies power necessary for the operation of each component.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.Various embodiments described herein may be embodied in a recording medium readable by a computer or similar device using, for example, software, hardware, or a combination thereof.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(800) 자체로 구현될 수 있다.According to hardware implementation, the embodiments described herein include application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), It may be implemented using at least one of processors, controllers, micro-controllers, microprocessors, and electrical units for performing other functions. The described embodiments may be implemented by the control unit 800 itself.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(600)에 저장되고, 제어부(800)에 의해 실행될 수 있다.According to software implementation, embodiments such as procedures and functions described in this specification may be implemented as separate software modules. Each of the software modules may perform one or more functions and operations described herein. The software code may be implemented as a software application written in any suitable programming language. The software code may be stored in the memory 600 and executed by the controller 800.

상기의 소프트웨어의 실행으로 인해 제어부(800) 내에 다수의 모듈들이 생성되고, 이러한 모듈들에 의한 단말기의 제어를 통해 사생활 보호가 가능해진다.Due to the execution of the above software, a plurality of modules are created in the control unit 800, and privacy protection is possible through the control of the terminal by these modules.

본 실시예에서는 사생활 보호 앱을 사용자가 자신의 휴대용 단말기인 스마트 폰에 다운받아 저장하고, 이를 실행시킬 경우 동작하게 된다. 최초 1회 실행 이후 별도의 명령이나 삭제 등의 동작을 수행하지 않는 경우에는 상기 사생활 보호 앱은 휴대용 단말기의 재 부팅후에도 자동으로 수행된다.In this embodiment, the privacy protection app is operated when the user downloads and stores the privacy protection app in his or her portable terminal, the smart phone, and executes it. If an operation such as a separate command or deletion is not performed after the first execution, the privacy protection app is automatically executed even after the portable terminal is rebooted.

본 실시예의 제어부는 사생활 보호 앱이 실행된 이후에 그 제어권을 이용하여 사생활 보호 기능을 수행한다.The control unit of this embodiment performs a privacy protection function by using the control right after the privacy protection app is executed.

이를 위해 제어부(800)는 다수의 비밀화 구간으로 분리된 저장 데이터를 관리하는 비밀화 구간 관리 모듈(810)과, 주변 정보를 입력 받아 분류하는 AI 정보 분류 모듈(820)과, 저장된 주변 정보에 따라 주변 사람 존재 여부 및 현재 위치를 판단하는 AI 판단 모듈(830)과, AI 판단 모듈(830)의 결과에 따라 비밀화 구간별 비밀화를 설정하는 비밀화 설정 모듈(840)을 포함한다.To this end, the control unit 800 includes an encryption section management module 810 that manages stored data separated into a plurality of encryption sections, an AI information classification module 820 that receives and classifies surrounding information, and stored surrounding information. It includes an AI determination module 830 that determines whether there is a person around you and the current location according to the result, and an encryption setting module 840 that sets encryption for each encryption section according to the result of the AI determination module 830.

본 실시예의 각 모듈은 사용자가 새로운 어플이나 프로그램을 시행할때 동작하는 것이 바람직하다. 물론, 사용자가 시청하는 화면의 정보가 변화하는 경우 동작되는 것도 가능하다.Each module of this embodiment is preferably operated when a user executes a new application or program. Of course, it is also possible to operate when the information on the screen viewed by the user changes.

비밀화 구간 관리 모듈(810)은 2~6단계의 비밀화 구간을 설정하고, 이를 관리한다. 데이터는 사생활 보호 앱이 휴대용 단말에 인스톨될때, 사용자에 의해 각 비밀화 구간별도 분류될 수 있다. 바람직하게는 본 실시예에서는 3~4단계의 비밀화 구간을 설정하는 것이 효과적이다. 그리고, 사용자에 의한 분류 뿐만 아니라 스마트 구간 분류부에 의해 데이터가 분류될 수 있다. 즉, 민감 정보가 저장된 데이터를 제1 단계 비밀화 구간에 저장하고, 민감하지 않지만, 중요한 정보가 저장된 데이터를 제2 단계 비밀화 구간에 저장하고, 일반 정보는 제3 단계 비밀화 구간에 저장할 수 있다. 물론, 제3 단계 비밀화 구간에 둔감 정보지만, 외부 노출이 제약되어야 하는 데이터를 제3 단계에, 일반 정보를 제4 단계 비밀화 구간에 저장하는 것이 가능하다. 또한, 사용자 사용 빈도에 따라 각 단계에 저장되는 데이터가 변화될 수 있다. 물론, 이러한 분류 방법은 융합되어 적용되는 것도 가능하다.The encryption section management module 810 sets and manages encryption sections in steps 2 to 6. When the privacy protection app is installed in the portable terminal, the data can be classified for each privacy section by the user. Preferably, in this embodiment, it is effective to set an encryption section of 3 to 4 steps. In addition, data may be classified not only by the user but also by the smart section classification unit. That is, data with sensitive information stored can be stored in the first-level encryption section, non-sensitive but important information stored in the second-level encryption section, and general information can be stored in the third-level encryption section. have. Of course, it is insensitive information in the third stage encryption section, but it is possible to store data whose external exposure should be restricted in the third stage and general information in the fourth stage encryption interval. In addition, data stored in each step may be changed according to the user's frequency of use. Of course, it is also possible that these classification methods are fused and applied.

데이터는 저장 이미지, 파일, 폴더, 어플이나, 앱에 한정되지 않고, 휴대용 단말기에 저장된 모든 정보를 지칭한다. 더욱 상세하게는 화면을 통해 사용자에게 보여지는 정보인 것이 더욱 효과적이다. 이를 통해 주변의 시각적 시청을 차단하는 것이 가능하다.Data is not limited to stored images, files, folders, applications, or applications, and refers to all information stored in a portable terminal. More specifically, it is more effective that the information is displayed to the user through a screen. Through this, it is possible to block the visual viewing of the surroundings.

AI 정보 분류 모듈(820)은 장치의 각부로 부터 다양한 정보를 수집 저장하는 정보 수집부(821)와, 수집된 정보를 이미지 정보, 음성 정보, 위치 정보로 분류하는 정보 분류부(822)와, 분류된 정보를 코딩변환시키는 정보 변환부(823)를 포함한다.The AI information classification module 820 includes an information collection unit 821 that collects and stores various information from each unit of the device, and an information classification unit 822 that classifies the collected information into image information, voice information, and location information, It includes an information conversion unit 823 for encoding and converting the classified information.

정보 수집부(821)는 각부로 부터 정보를 수집하되, 특히, 무선 통신부(100)의 위치 정보 모듈(150)에 의해 위치 정보를 수집할 수 있다. 정보 수집부(821)는 A/V 입력부(200)를 통해 영상 정보, 이미지 정보, 음성 정보를 수집하는 것이 가능하다. 이때, 수집된 영상 정보는 프레임 단위로 분류되어 이미지 정보로 변환된다. 이때, 이 변환작업은 정보 변환부(823)에서 수행할 수 있다. 정보 수집부(821)는 저장된 정보를 저장한다. 그리고, 정보 수집부(821)는 사전에 사용자로부터 동의에 따라 실시간으로 각부를 동작시켜 해당 정보를 제공 받을 수 있다. 정보 수집부(821)는 위치 정보 모듈을 동작시켜 위치 정보를, 카메라부(210)를 동작시켜 이미지 정보를, 마이크부(220)를 통해 음성 정보를 전달 받을 수 있다.The information collection unit 821 may collect information from each unit, but in particular, location information may be collected by the location information module 150 of the wireless communication unit 100 . The information collection unit 821 can collect video information, image information, and audio information through the A/V input unit 200 . At this time, the collected image information is classified in frame units and converted into image information. At this time, this conversion work can be performed by the information conversion unit 823. The information collection unit 821 stores stored information. In addition, the information collecting unit 821 may receive corresponding information by operating each unit in real time according to the consent of the user in advance. The information collection unit 821 may receive location information by operating the location information module, image information by operating the camera unit 210 , and voice information through the microphone unit 220 .

정보 분류부(822)는 저장된 이미지 정보, 음성 정보 및 위치 정보를 AI 판단 모듈(830)에 의해 설정된 조건에 따라 분류한다. 저장된 이미지 정보는 1초 단위로 3번 카메라부(210)로 찍은 3개의 이미지를 선정하여 분류한다. 음성 정보는 5초간 마이크부로 수신된 음성을 선정 분류한다. 위치 정보도 1초 단위로 3번 위치 정보 모듈(150)에 의해 측정된 값을 선정 분류한다.The information classification unit 822 classifies the stored image information, voice information, and location information according to conditions set by the AI determination module 830. The stored image information is classified by selecting three images taken by the camera unit 210 three times per second. For voice information, the voice received by the microphone unit for 5 seconds is selected and classified. The location information also selects and classifies the value measured by the location information module 150 3 times per second.

정보 변환부(823)는 이미지 정보의 크기를 조정하여 AI 판단 모듈(830)에서 균일하게 사용가능하도록 할 수 있다. 음성 정보 또한 그 크기와 사이즈를 조절하는 것이 가능하다.The information conversion unit 823 may adjust the size of image information so that it can be used uniformly in the AI determination module 830 . It is also possible to adjust the size and size of voice information.

AI 판단 모듈(830)은 제공 받은 위치 정보를 통해 사용자의 현재 위치를 파악하는 위치 판단부(831)와, 이미지 정보와 음성 정보를 바탕으로 주변 사람 수를 산출하는 사람 판단부(832)를 포함할 수 있다.The AI determination module 830 includes a location determination unit 831 that determines the user's current location through the provided location information and a person determination unit 832 that calculates the number of people around them based on image information and voice information. can do.

위치 판단부(831)는 GPS의 위치 정보를 바탕으로 사용자의 현재 위치를 파악한다.The location determining unit 831 determines the user's current location based on GPS location information.

사람 판단부(832)는 이미지 정보에서 주변 사람수를 산출하는 이미지 산출부(832-1)와, 음성 정보에서 사람 수를 산출하는 음성 산출부(832-2)와, 이들의 합을 통해 최종 사람 수를 산출하는 사람수 결정부(832-3)를 포함한다.The person determination unit 832 determines the final image calculation unit 832-1 that calculates the number of people in the vicinity from image information and the voice calculation unit 832-2 that calculates the number of people from audio information and the sum of these. and a number of people determining unit 832-3 that calculates the number of people.

이미지 산출부(832-1)는 이미지 정보에서 사람 수를 추출하는 것은 CNN(convolution neural networks) 모델을 사용하는 것이 가능하다. 물론, 이에 한정되지 않고, 휴대용 단말기에서 제공하는 얼굴 인식 기능을 사용하는 것도 가능하다. 이때, 이미지 산출부(832-1)는 이미지 정보내에서 사용자는 사람수에서 카운팅하지 않는다.The image calculator 832-1 may use a convolution neural networks (CNN) model to extract the number of people from image information. Of course, it is not limited thereto, and it is also possible to use a face recognition function provided by a portable terminal. At this time, the image calculation unit 832-1 does not count the number of users in the image information.

음성 산출부(832-2)는 음성 정보에서 사람 수를 추출하되, CNN 모델을 사용하는 것이 가능하다. 또한, 음성 산출부(832-2)는 음역대에 따른 입력 값들을 분류하여 사람 수를 판단하는 것도 가능하다. 물론 음색을 분류하여 사람 수를 판단하는 것도 가능하다. 음성 산출부(832-2)도 사용자의 음성 정보는 카운팅하지 않는다.The voice calculation unit 832-2 extracts the number of people from voice information, but it is possible to use a CNN model. In addition, the voice calculation unit 832-2 can classify the input values according to the sound range to determine the number of people. Of course, it is also possible to determine the number of people by classifying the tones. The voice calculation unit 832-2 also does not count the user's voice information.

사람수 결정부(832-3)는 이미지 산출부(832-1)와 음성 산출부(832-2) 각각을 통해 산출된 사람수중 큰 수를 주변에 위치한 사람수로 결정하는 것이 효과적이다. 즉, 촬영된 이미지 내에 사람이 3명인데, 음성 산출을 통해 측정된 사람수가 5명인 경우에는 주변 사람수를 5로 설정하는 것이 가능하다. 이와는 반대로 이미지내 사람수가 10명인데, 음성 산출을 통해 3명의 사람인 경우에는 10명으로 설정하는 것이 가능하다.It is effective for the number of people determining unit 832-3 to determine the larger number of people calculated through each of the image calculating unit 832-1 and the voice calculating unit 832-2 as the number of nearby people. That is, when there are 3 people in the captured image and the number of people measured through voice calculation is 5, it is possible to set the number of people around to 5. Contrary to this, if the number of people in the image is 10, but there are 3 people through voice calculation, it is possible to set it to 10 people.

비밀화 설정 모듈(840)은 AI 판단 모듈(830)을 통해 판단된 주변 사람수 및/또는 위치 정보에 따라 각 단계의 비밀화 구간의 데이터의 실행 및 화면 노출을 제어할 수 있다.The encryption setting module 840 may control the execution of data in the encryption section of each step and screen exposure according to the number of people around and/or location information determined through the AI determination module 830.

만일 사람 수만으로 비밀화 구간을 제어하는 경우에는 4단계로 분류하고, 주변 사람수가 0인 경우에는 제1 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 1~5명인 경우에는 제1 단계 비밀화 구간 정보는 차단하고, 제2 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 6~10명인 경우에는 제1 단계와 제2 단계 비밀화 구간은 차단하고, 제3 단계 및 제4 단계 비밀화 구간 정보를 노출하고, 주변 사람수가 11명 이상인 경우에는 제1 단계 내지 제3 단계 비밀화 구간은 차단하고, 제4 단계 비밀화 구간 정보만을 노출시킨다.If the encryption section is controlled only by the number of people, it is classified into 4 levels, and if the number of people around is 0, the information from the 1st level to the 4th level is exposed, In the case of 5 people, the information of the 1st step encryption section is blocked, and the information from the 2nd step encryption section to the 4th step encryption section is exposed. Block the stage encryption section, expose information on the third and fourth stages encryption intervals, block the first to third stages encryption intervals when the number of people around is more than 11, and block the fourth stage encryption Only section information is exposed.

위치 정보로 비밀화 구간을 제어하는 경우에는 3단계로 분류하고, 현재 위치가 사전에 저장된 위치 영역인 경우에는 제1 단계 비밀화 구간에서 제3 단계 비밀화 구간까지 정보를 노출하고, 현재 위치가 저장된 위치 영역의 인접 영역인 경우에는 제2 단계에서 제3 단계 비밀화 구간까지 정보만을 노출하고, 현재 위치가 저장된 위치 영역으로 부터 멀리 떨어진 경우에는 제3 단계 비밀화 구간 정보만을 노출한다. 이때, 인접 영역은 저장된 위치 영역을 기준으로 반경 10 ~ 1000m이내의 거리를 지칭한다.In the case of controlling the encrypting section with location information, it is classified into 3 steps, and if the current location is a pre-stored location area, information from the 1st step encrypting section to the 3rd step encrypting section is exposed, and the current location is In the case of an area adjacent to the stored location area, only information from the second stage to the third stage encryption section is exposed, and when the current location is far from the stored location area, only the third stage encryption section information is exposed. In this case, the adjacent area refers to a distance within a radius of 10 to 1000 m based on the stored location area.

주변 사람수 정보와 위치 정보를 사용하는 경우에는 4단계로 분류하고, 현재 위치가 사전에 저장된 위치 영역인 경우, 사람수가 1명인 경우에는 제1 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 2명인 경우에는 제1 단계 비밀화 구간 정보는 차단하고, 제2 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 3명 이상인 경우에는 제1 단계와 제2 단계 비밀화 구간은 차단하고, 제3 단계 및 제4 단계 비밀화 구간 정보를 노출시킨다.In the case of using the information on the number of people around and location information, it is classified into 4 stages. Information is exposed, and when the number of people around is 2, the information in the first stage of confidentiality is blocked, information from the second stage to the fourth stage of encryption is exposed, and the number of people around is 3 or more In , the first stage and the second stage encryption interval are blocked, and the third stage and fourth stage encryption interval information is exposed.

물론, 현재 위치 정보가 저장 위치 영역인 경우에는 모든 단계의 정보를 노출하는 것이 가능하다.Of course, if the current location information is the storage location area, it is possible to expose all stages of information.

현재 위치가 사전에 저장된 위치 영역과 인접한 영역인 경우, 주변 사람수가 1인 경우에는 제1 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 2~3명인 경우에는 제1 단계 비밀화 구간 정보는 차단하고, 제2 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 4~7명인 경우에는 제1 단계와 제2 단계 비밀화 구간은 차단하고, 제3 단계 및 제4 단계 비밀화 구간 정보를 노출하고, 주변 사람수가 8명 이상인 경우에는 제1 단계 내지 제3 단계 비밀화 구간은 차단하고, 제4 단계 비밀화 구간 정보만을 노출시킨다.If the current location is an area adjacent to the pre-stored location area and the number of people around is 1, information from the 1st stage to the 4th stage is exposed. The information in the first stage encryption section is blocked, and the information from the second stage encryption interval to the fourth stage encryption interval is exposed. is blocked, the third and fourth stage encryption section information is exposed, and if the number of people around is 8 or more, the first to third stage encryption sections are blocked, and only the fourth stage encryption section information is exposed. let it

현재 위치가 사전 저장된 위치 영역과 멀리 떨어진 경우, 주변 사람수가 0인 경우에는 제1 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 1~5명인 경우에는 제1 단계 비밀화 구간 정보는 차단하고, 제2 단계 비밀화 구간에서 제4 단계 비밀화 구간까지의 정보를 노출시키고, 주변 사람수가 6~10명인 경우에는 제1 단계와 제2 단계 비밀화 구간은 차단하고, 제3 단계 및 제4 단계 비밀화 구간 정보를 노출하고, 주변 사람수가 11명 이상인 경우에는 제1 단계 내지 제3 단계 비밀화 구간은 차단하고, 제4 단계 비밀화 구간 정보만을 노출시킨다.If the current location is far from the pre-stored location area and the number of people around is 0, information from the 1st stage to the 4th stage is exposed. Blocks the information in the stage encryption section, exposes information from the 2nd stage encryption section to the 4th stage encryption section, and blocks the 1st and 2nd stage encryption sections when the number of people around is 6 to 10 3rd and 4th step encryption section information is exposed, and if the number of people around is 11 or more, the first to third step encryption sections are blocked and only the 4th step encryption section information is exposed.

상기 설명에서의 차단은 데이터의 실행 및 로딩의 차단을 지칭하는 것으로, 화면상으로 데이터가 노출되지 않도록 하는 것을 의미한다. 물론, 해당 데이터가 음성 데이터인 경우에는 출력부(500)를 통해 출력되도록 할 수 있다.Blocking in the above description refers to blocking execution and loading of data, and means preventing data from being exposed on the screen. Of course, if the corresponding data is voice data, it may be output through the output unit 500 .

이에 한정되지 않고, 비밀화 설정 모듈(840)은 상기 설명의 차단 기능 대신, 화면 영상 밝기를 조절하는 것도 가능하다. 즉, 사람수 판단에 따를경우, 주변 사람수가 0인 경우에는 사용자가 보고 있는 화면의 데이터가 위치한 단계 비밀화 구간에 상관없이 정상적인 화면 밝기가 제공되고, 주변 사람수가 1~5명인 경우에는 사용자가 제1 단계 비밀화 구간 정보를 보고 있을 때에는 화면 밝기를 가장 어둡게 하고, 나머지 단계 비밀화 구간 정보를 볼 때에는 화면 밝기를 정상적인 밝기로 제공하고, 주변 사람수가 6~10명인 경우에는 제1 단계와 제2 단계 비밀화 구간을 보고 있을때에는 화면 밝기를 가장 어둡게 하고, 나머지 단계는 정상 밝기로 제공하고, 주변 사람수가 11명 이상인 경우에는 제1 단계 내지 제3 단계 비밀화 구간을 볼 경우 화면 밝기를 가장 어둡게 하고, 제4 단계 비밀화 구간 정보를 볼 때에는 화면 밝기를 정상 밝기로 제공한다.It is not limited thereto, and the encryption setting module 840 can also adjust the screen image brightness instead of the blocking function described above. That is, when the number of people is determined, if the number of people around is 0, normal screen brightness is provided regardless of the level of encryption section where the data of the screen the user is viewing is located, and when the number of people around is 1 to 5, the user The screen brightness is set to the darkest when viewing the first stage encryption section information, and the screen brightness is set to normal when viewing the remaining stage encryption section information. The screen brightness is set to the darkest when viewing the 2nd level encryption section, and the remaining levels are provided at normal brightness. It is dark, and the screen brightness is provided as normal brightness when viewing the fourth stage encryption section information.

물론, 제어부(800)는 사용자의 별도 인증이나 조작등을 통해 해당 비밀화 설정을 해제할 수 있다.Of course, the control unit 800 may release the corresponding encryption setting through separate authentication or manipulation of the user.

하기에서는 상술한 구조의 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법에 관하여 설명한다. 후술되는 설명중 상술한 설명과 중복되는 설명은 생략한다.Hereinafter, a privacy protection method of a portable terminal having a smart privacy protection function having the above structure will be described. Among the descriptions to be described later, descriptions overlapping with the above descriptions will be omitted.

도 5는 본 발명의 일 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도이다.5 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to an embodiment of the present invention.

도 5에 도시된 바와 같이, 사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단한다(S110).As shown in FIG. 5 , it is determined whether the user changes the data displayed on the screen through the user input unit (S110).

데이터를 변경하는 경우, 촬영된 이미지 정보 및 녹음된 음성 정보를 수집 분류한다(S120).When data is changed, captured image information and recorded voice information are collected and classified (S120).

분류된 정보를 기반으로 주변에 위치한 사람 수를 산출한다(S130).Based on the classified information, the number of people located nearby is calculated (S130).

변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고(S140), 주변 사람 수에 따라 해당 비밀화 구간의 정보를 차단하거나 노출시킨다(S150).It is determined which level of the previously classified encryption section corresponds to the changed data (S140), and information in the corresponding encryption section is blocked or exposed according to the number of people around (S150).

도 6은 본 발명의 다른 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도이다.6 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to another embodiment of the present invention.

도 6에 도시된 바와 같이, 사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단한다(S210).As shown in FIG. 6, it is determined whether the user changes the data displayed on the screen through the user input unit (S210).

데이터를 변경하는 경우, 위치 정보를 수집 분류한다(S220).When data is changed, location information is collected and classified (S220).

분류된 정보를 기반으로 현재 위치 영역을 산출한다(S230).A current location area is calculated based on the classified information (S230).

변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고(S240), 위치 영역에 따라 해당 비밀화 구간의 정보를 차단하거나 노출시킨다(S250).It is determined which level of the previously classified encryption section corresponds to the changed data (S240), and information of the corresponding encryption section is blocked or exposed according to the location area (S250).

도 7은 본 발명의 또다른 실시예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도이다.7 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to another embodiment of the present invention.

도 7에 도시된 바와 같이, 사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단한다(S310).As shown in FIG. 7 , it is determined whether the user changes the data displayed on the screen through the user input unit (S310).

데이터를 변경하는 경우, 촬영된 이미지 정보, 녹음된 음성 정보 및 위치 정보를 수집 분류한다(S320).When data is changed, the captured image information, recorded voice information, and location information are collected and classified (S320).

분류된 정보를 기반으로 현재 위치 영역과 주변에 위치한 사람 수를 산출한다(S330).Based on the classified information, the current location area and the number of people located around are calculated (S330).

변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고(S340), 위치 영역과 주변 사람 수에 따라 해당 비밀화 구간의 정보를 차단하거나 노출시킨다(S350).It is determined which stage of the previously classified encryption section corresponds to the changed data (S340), and information in the corresponding encryption section is blocked or exposed according to the location area and the number of people around (S350).

도 8은 본 발명의 일 변형예에 따른 스마트 사생활 보호 기능을 갖는 휴대용 단말기의 사생활 보호 방법을 설명하기 위한 흐름도이다.8 is a flowchart illustrating a privacy protection method of a portable terminal having a smart privacy protection function according to a modified example of the present invention.

도 8에 도시된 바와 같이, 사용자 입력부를 통해 사용자가 화면에 표시되는 데이터를 변경하는지 여부를 판단한다(S410).As shown in FIG. 8 , it is determined whether the user changes the data displayed on the screen through the user input unit (S410).

데이터를 변경하는 경우, 촬영된 이미지 정보 및 녹음된 음성 정보를 수집 분류한다(S420).When data is changed, captured image information and recorded voice information are collected and classified (S420).

분류된 정보를 기반으로 주변에 위치한 사람 수를 산출한다(S430).Based on the classified information, the number of people located nearby is calculated (S430).

변경 데이터가 기 분류된 비밀화 구간의 몇단계에 해당하는지를 판단하고(S440), 주변 사람 수에 따라 해당 비밀화 구간의 정보가 노출되는 화면의 밝기를 최소화 한다(S450).It is determined which level of the previously classified encryption section corresponds to the changed data (S440), and the brightness of the screen on which the information of the corresponding encryption section is exposed is minimized according to the number of people around (S450).

상기에서 설명한 본 발명의 기술적 사상은 바람직한 실시예에서 구체적으로 기술되었으나, 상기한 실시예는 그 설명을 위한 것이며 그 제한을 위한 것이 아님을 주의하여야 한다. 또한, 본 발명은 본 발명의 기술 분야의 통상의 전문가라면 본 발명의 기술적 사상의 범위 내에서 다양한 실시예가 가능함을 이해할 수 있을 것이다.Although the technical idea of the present invention described above has been specifically described in a preferred embodiment, it should be noted that the above embodiment is for explanation and not for limitation. In addition, those skilled in the art of the present invention will be able to understand that various embodiments are possible within the scope of the technical idea of the present invention.

100: 무선 통신부 200: A/V 입력부
300: 사용자 입력부 400: 센싱부
500: 출력부 600: 메모리부
700: 인터페이스부 800: 제어부
810: 비밀화 구간 관리 모듈 820: AI 정보 분류 모듈
830: AI 판단 모듈 840: 비밀화 설정 모듈
900: 전원 공급부100: wireless communication unit 200: A / V input unit
300: user input unit 400: sensing unit
500: output unit 600: memory unit
700: interface unit 800: control unit
810: Encryption Section Management Module 820: AI Information Classification Module
830: AI judgment module 840: confidentiality setting module
900: power supply

Claims

A wireless communication unit having a location information module, an input unit having a camera unit and a microphone unit, a sensing unit, an output unit, a display unit, a memory unit, and an interface unit,
Control the operation of each part,
Encryption section management module for managing stored data separated into a plurality of encryption sections;
AI information classification module that receives and classifies surrounding information;
An AI determination module for determining the existence of people around and the current location according to the stored surrounding information; and
An encryption setting module for setting encryption for each encryption section according to the result of the AI judgment module,
The AI information classification module includes an information collection unit for collecting and storing various information from each unit of the device, an information classification unit for classifying the collected information into image information, audio information, and location information, and information for encoding and converting the classified information. Including a conversion unit,
The information collection unit receives location information by operating a location information module, image information by operating a camera unit, and audio information through a microphone unit, and the information classification unit receives stored image information, voice information, and location information by an AI determination module. Classify according to set conditions, and the information conversion unit adjusts the size and size of the image information and audio information so that they can be used in the AI judgment module,
The AI determination module includes a location determination unit for determining the current location of the user through the provided location information, and a person determination unit for calculating the number of people around based on image information and voice information,
The person determination unit includes an image calculation unit that calculates the number of people around from image information, a voice calculation unit that calculates the number of people from audio information, and a number of people determination unit that calculates the final number of people through the sum of them;
In the encryption section, the stored data is classified by the user or sensitive information is stored in the first step encryption section through the smart section classification unit, and data that is not sensitive but important information is stored in the second step encryption section. , general information can be stored in the 3rd step encryption section, insensitive information in the 3rd step encryption section, but data that needs to be restricted from external exposure is stored in the 3rd step, and general information is encrypted in the 4th step. Data stored in sections or stored in each step is changed according to the user's frequency of use,
The image calculation unit extracts the number of people from image information through a CNN model or uses a face recognition function, and the voice calculation unit extracts the number of people from voice information through a CNN model or classifies the input values according to the sound range. The number of people is determined, but the user's image information or voice information is not counted. The setting module controls the execution of data and screen exposure in the encryption section of each stage according to the number of people around and / or location information determined through the AI judgment module. If the number of people around is 0, information from the 1st stage to the 4th stage is exposed, and if the number of people around is 1 to 5, the information in the 1st stage is blocked. , Information from the 2nd step encryption section to the 4th step encryption section is exposed, and if the number of people around is 6 to 10, the 1st and 2nd step encryption sections are blocked, and the 3rd and 4th steps Step 1 Encryption section information is exposed, and if the number of people around is 11 or more, the 1st to 3rd step encryption sections are blocked, only the 4th step encryption section information is exposed, and the encryption section is controlled with location information If the current location is a pre-stored location area, information from the 1st stage encryption section to the 3rd stage encryption section is exposed, and if the current location is an area adjacent to the saved location area In this case, only information from the second stage to the third stage encryption section is exposed, and if the current location is far from the stored location area, only the third stage encryption section information is exposed, and the number of people around and location information are used. If the current location is a pre-stored location area, if the number of people is 1, information from the 1st stage encryption section to the 4th stage encryption section is exposed, If the number of people around you is 2, the information in the first stage confidential section is blocked, the information from the second stage encryption section to the fourth stage encryption section is exposed, and if the number of people around you is three or more, the first step and The second stage encryption section is blocked, the third stage and fourth stage encryption interval information is exposed,
The privacy setting module is a portable terminal having a smart privacy protection function, characterized in that for adjusting the brightness of the screen image instead of blocking the screen exposure.

delete