WO2015142016A1 - 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치 - Google Patents

컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치 Download PDF

Info

Publication number
WO2015142016A1
WO2015142016A1 PCT/KR2015/002537 KR2015002537W WO2015142016A1 WO 2015142016 A1 WO2015142016 A1 WO 2015142016A1 KR 2015002537 W KR2015002537 W KR 2015002537W WO 2015142016 A1 WO2015142016 A1 WO 2015142016A1
Authority
WO
WIPO (PCT)
Prior art keywords
content
user
users
reproducing apparatus
age
Prior art date
Application number
PCT/KR2015/002537
Other languages
English (en)
French (fr)
Inventor
김현지
공원근
이남숙
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020167007420A priority Critical patent/KR102271854B1/ko
Priority to US14/783,228 priority patent/US10887654B2/en
Priority to EP15736370.6A priority patent/EP2966874B1/en
Priority to CN201580014504.1A priority patent/CN106134211B/zh
Priority to IN2382MUN2015 priority patent/IN2015MN02382A/en
Publication of WO2015142016A1 publication Critical patent/WO2015142016A1/ko
Priority to US17/124,294 priority patent/US11902626B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4751—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for defining user accounts, e.g. accounts for children
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/418—External card to be used in combination with the client device, e.g. for conditional access
    • H04N21/4182—External card to be used in combination with the client device, e.g. for conditional access for identification purposes, e.g. storing user identification data, preferences, personal settings or data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H04N21/4542—Blocking scenes or portions of the received content, e.g. censoring scenes

Definitions

  • the present invention relates to a method of controlling playback of content viewed by a plurality of users, and a content playback apparatus for performing the same.
  • the content contains content that is not appropriate for some of the plurality of users, or does not fit the taste of some users. Problems may occur such that content is not played.
  • a method of controlling the reproduction of the content may be considered in consideration of a plurality of users who watch the content.
  • a method of controlling the reproduction of the content may be considered in consideration of a plurality of users who watch the content.
  • At least one user is selected from among a plurality of users who watch the content using a predetermined criterion, and the reproduction of the content is controlled according to the selected user.
  • FIG. 1 is a diagram illustrating an implementation environment of a method for controlling playback of content according to an embodiment of the present invention.
  • FIG. 2 is a flowchart illustrating a method of controlling playback of content according to an embodiment of the present invention.
  • 3 to 5 are diagrams for describing a method of controlling playback of content using age information of a user stored in advance and selecting a minimum age according to an embodiment of the present invention.
  • 6 to 13 are diagrams illustrating various methods of limiting playback of content when the content playback apparatus includes a non-viewable scene in the content according to embodiments of the present disclosure.
  • FIG. 14 is a flowchart illustrating a method of controlling playback of content using age information of a user stored in advance and selecting a minimum age according to an embodiment of the present invention.
  • 15 to 17 are diagrams for describing reproduction control methods of content for predicting an age of a user using a user recognition result and selecting a minimum age according to embodiments of the present disclosure.
  • 18 and 19 are flowcharts illustrating methods of controlling reproduction of content for predicting an age of a user using a user recognition result and selecting a minimum age according to embodiments of the present invention.
  • 20 is a diagram for describing a method of controlling playback of content using age information input from a user when a user's age prediction fails, according to an embodiment of the present invention.
  • 21 is a flowchart illustrating a method of controlling playback of content using age information input from a user when a user's age prediction fails, according to an embodiment of the present invention.
  • 22 to 23 are diagrams for describing a content reproduction control method when a user who views a content according to an embodiment of the present invention is added and the content reproduction apparatus knows the ages of existing viewers.
  • FIG. 24 is a flowchart illustrating a content reproduction control method when a user who views a content according to an embodiment of the present invention is added and the content reproduction apparatus knows the ages of existing viewers.
  • 25 to 26 are diagrams for describing a content reproduction control method when a part of users who watch content according to an exemplary embodiment of the present invention is separated and the content reproduction apparatus knows the ages of existing users.
  • FIG. 27 is a flowchart illustrating a content reproduction control method when a part of users who watch content according to an exemplary embodiment of the present invention is separated and the content reproduction apparatus knows the ages of existing users.
  • 28 to 31 are diagrams for describing a content playback control method when the number of users who watch content according to an embodiment of the present invention changes and the content playback device does not know the age of existing viewers.
  • 32 is a flowchart illustrating a content reproduction control method when the number of users who watch content according to an embodiment of the present invention is changed and the content reproduction device does not know the age of existing viewers.
  • 33 to 34 are diagrams for describing a content reproduction control method when predicting a viewer to be added through analysis of viewers according to an embodiment of the present invention.
  • 35 is a flowchart illustrating a content reproduction control method in the case of predicting a viewer to be added through analysis of viewers' conversation according to an embodiment of the present invention.
  • 36 to 37 are diagrams for describing a method of performing viewer recognition and controlling playback of content when a playback content is changed according to an embodiment of the present invention.
  • 38 is a flowchart illustrating a method of performing viewer recognition and controlling playback of content when a playback content is changed according to an embodiment of the present invention.
  • 39 through 40 are diagrams for describing a method of periodically performing viewer recognition and controlling playback of content according to an embodiment of the present invention.
  • 41 is a flowchart illustrating a method of periodically performing viewer recognition and controlling playback of content according to an embodiment of the present invention.
  • 42A illustrates a method of limiting a search channel according to a user selected based on age according to an embodiment of the present invention.
  • 42B is a flowchart illustrating a method of limiting a search channel according to a user selected based on age according to an embodiment of the present invention.
  • 43A illustrates a method of controlling content playback according to a user selected based on an age when changing a channel according to an embodiment of the present invention.
  • 43B is a flowchart illustrating a method of controlling content reproduction according to a user selected based on age when changing a channel according to an embodiment of the present invention.
  • 44 to 45 are diagrams for describing a method of displaying a favorite channel according to a selected user based on a result of motion recognition of a user according to an embodiment of the present invention.
  • 46 is a flowchart illustrating a method of displaying a preferred channel according to a user selected according to a user's motion recognition result according to an embodiment of the present invention.
  • FIG. 47 is a diagram to describe a method of determining and displaying a favorite channel based on a viewing history of a user according to an embodiment of the present invention.
  • FIG. 48 is a flowchart illustrating a method of determining and displaying a favorite channel based on a viewing history of a user according to an embodiment of the present invention.
  • 49 is a diagram for describing a method of determining and displaying preferred content based on a viewing history of a user according to an embodiment of the present invention.
  • 50 is a flowchart illustrating a method of determining and displaying preferred content based on a viewing history of a user according to an embodiment of the present invention.
  • 51 is a diagram illustrating a configuration of a display apparatus that supports a content reproduction control function according to an embodiment of the present invention.
  • FIG. 52 is a diagram illustrating a system for performing content reproduction control according to an embodiment of the present invention.
  • FIG. 53 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 52 according to an embodiment.
  • FIG. 54 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 52 according to another embodiment.
  • 55 is a diagram illustrating a system for performing content reproduction control according to an embodiment of the present invention.
  • FIG. 56 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 55 according to an embodiment.
  • 57 is a diagram illustrating a system for performing content reproduction control according to an embodiment of the present invention.
  • FIG. 58 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 57 according to an embodiment.
  • Contents playback apparatus for solving the technical problem, the output unit for outputting video and audio; A user recognizing unit recognizing a plurality of users who watch content reproduced through the output unit; And a controller for selecting at least one user from among the recognized plurality of users by using a predetermined criterion and controlling reproduction of content according to the selected user.
  • the user recognition unit recognizes at least one of the face, voice or body shape of the plurality of users to determine the age of each of the plurality of users
  • the control unit selects a user of the minimum age of the plurality of users
  • the playback of content that is not allowed to be viewed by the selected user may be restricted.
  • the controller may analyze the content to determine a viewing rating, and compare the determined viewing rating with the age of the selected user to determine whether to allow viewing.
  • the user recognizer detects a change in the number of users watching the played content, and the controller may select at least one user again when the change in the number of users is detected.
  • the controller analyzes the voice conversations of a plurality of users who are watching the played content to predict the addition of the user who is watching the content, and at least one of the user who is predicted to be added and the plurality of users. You can select a user.
  • the user recognizer may recognize a plurality of users watching the content again, and the controller may again select at least one user from among the recognized plurality of users. .
  • the user recognition unit and the control unit may each periodically recognize the plurality of users and select at least one user.
  • the user recognition unit recognizes operations of the plurality of users, and the controller selects at least one user performing a preset operation among the plurality of users, and selects content according to a preference of the selected user. Playback can be controlled.
  • the controller may display the selected user's preferred channel list or preferred content list on the output unit.
  • a method of controlling playback of content including: recognizing a plurality of users who watch content; Selecting at least one user from among the recognized plurality of users using a predetermined criterion; And controlling playback of the content according to the selected user.
  • the recognizing may include recognizing at least one of a plurality of faces, voices, or body types of the plurality of users to determine an age of each of the plurality of users, and the selecting of the plurality of users may include: a user of a minimum age among the plurality of users. Selecting and controlling may limit the playback of content for which viewing of the selected user is not allowed.
  • the controlling may include: analyzing the content to determine a rating; Determining whether to allow viewing by comparing the determined viewing grade with an age of the selected user; And if the selected user is not allowed to view the content, playing the content by limiting at least a part of the content.
  • the recognizing and selecting may be performed whenever the number of users watching the content is changed.
  • the recognizing may include analyzing the voices of the voices of the plurality of users to predict the addition of the user watching the content, and the selecting may include at least one of the user who is predicted to add the plurality of users and the plurality of users. You can select the user.
  • the recognizing and selecting may be performed whenever the content to be played back changes.
  • the recognizing and selecting may be performed periodically.
  • the recognizing may include recognizing the motions of the plurality of users, and the selecting may include selecting at least one user performing a preset operation among the plurality of users, and controlling the selected user.
  • the playback of content can be controlled according to the preference of.
  • the method may further include displaying a preferred channel list or a preferred content list of the selected user on the screen.
  • FIG. 1 is a diagram illustrating an implementation environment of a method for controlling playback of content according to an embodiment of the present invention.
  • the display apparatus 1000 may be connected to a user recognition apparatus 1100 for recognizing a user who views content and a content reproducing apparatus 1200 for controlling reproduction of the content.
  • the method of controlling playback of content according to an embodiment of the present invention is implemented when a plurality of users watch the same content together.
  • the display device 1000 is shown in FIG. 1 as a TV, various devices having a display function such as a tablet, a smartphone, or a notebook may be used.
  • the content means various kinds of information such as text, voice (music), image, video, broadcast, application, game, and e-book.
  • the reproduction of the content refers to playing a video or broadcast video or audio (music), playing a game or an app, or displaying the contents of the e-book on the screen.
  • the content reproducing apparatus 1200 selects at least one user from among a plurality of users according to a predetermined criterion, and controls the reproduction of the content according to the selected user.
  • the criterion refers to demographic characteristics of the user who views the content.
  • the criterion may correspond to a minimum age, a male / female, a content preference, and a relationship between viewers.
  • the user recognition device 1100 may recognize a plurality of users who watch content.
  • the recognition refers to an operation of confirming the existence of the user or extracting and analyzing the user's characteristics.
  • the content reproducing apparatus 1200 selects at least one user from among a plurality of users according to a predetermined criterion by using various user information obtained from the user recognition result, and controls the reproduction of the content according to the selected user.
  • the content reproducing apparatus 1200 recognizes a user and obtains user information are as follows. After recognizing the user's face, body shape, or voice using the user recognition apparatus 1100, the user may be identified and compared with the previously stored user information to identify the user or confirm the user's age or preference. Alternatively, when there is no stored user information, the content reproducing apparatus 1200 may recognize a face, a body shape, or a voice of the user and analyze the same to predict the age of the user. Alternatively, the content reproducing apparatus 1200 may recognize a user performing a specific operation by recognizing the user's motion. A detailed description of other user recognition and user information acquisition will be described in the following embodiments.
  • the content reproducing apparatus 1200 may select at least one user from among a plurality of users using the user information obtained through user recognition.
  • the user may be selected according to a predetermined criterion.
  • the content reproducing apparatus 1200 may select a user of the minimum age when acquiring age information of the users, or may select a user performing a specific operation.
  • the content reproducing apparatus 1200 may select a user according to various criteria.
  • the content reproducing apparatus 1200 may control the reproduction of the content according to the selected user.
  • the content reproducing apparatus 1200 may control the reproduction of the content according to the user in consideration of various criteria. For example, the content reproducing apparatus 1200 may control content reproduction according to the user's age or control content reproduction according to the user's preference. If a user of the minimum age is selected, the content reproducing apparatus 1200 compares the viewing ratings of the selected user with the content to determine whether to view the content, and if it is determined that viewing is not possible, a part of the content so that no harmful scene is displayed on the screen. Can be played back or stopped.
  • the content reproducing apparatus 1200 displays a list of channels or contents preferred by the selected user on the content playback screen. You can also recommend.
  • the content playback apparatus may select two or more of the plurality of viewers, and when a plurality of users are selected, the content playback apparatus 1200 may play back the content in consideration of the ages or preferences of all the plurality of selected users. You can also control it.
  • the processes for controlling content reproduction are described as being performed by the content reproducing apparatus 1200.
  • the display apparatus 1000 may perform some or all of the corresponding processes, or separately. You can also run some or all of the processes on your server. That is, according to the configuration of the system, processes for content reproduction control may be performed on various devices. For detailed embodiments related to the system configuration, refer to FIGS. 51 to 58 below.
  • FIG. 2 is a flowchart illustrating a method of controlling playback of content according to an embodiment of the present invention.
  • the content reproducing apparatus recognizes a plurality of users who watch content.
  • the content reproducing apparatus may recognize faces, body types, or voices of a plurality of users.
  • the content reproducing apparatus selects at least one user from among the plurality of users according to a predetermined criterion in step 202. For example, the content reproducing apparatus may select a user of the minimum age or may select a user performing a specific operation.
  • the content reproducing apparatus controls the reproduction of the content according to the selected user. For example, the content reproducing apparatus may determine whether viewing is possible by comparing the age of the selected user with a viewing grade of the content, and if it is determined that the viewing is not possible, the content reproducing apparatus may stop playing the content or process the content and display the content on the screen.
  • the content reproducing apparatus recognizes a plurality of users, selects at least one user according to a predetermined criterion, and controls the reproduction of the content according to the selected user, so that even when the plurality of users watch the same content together appropriately Playback can be controlled.
  • FIGS. 3 to 5 are diagrams for describing a method of controlling playback of content using age information of a user stored in advance and selecting a minimum age according to an embodiment of the present invention.
  • FIGS. 3 to 5 will be described in detail.
  • the user recognition apparatus 1100 recognizes a plurality of users who watch content.
  • the user recognition device 1100 is illustrated as a camera provided separately from the display apparatus 1000, the user recognition device 1100 may be implemented in various forms without being limited thereto.
  • the user recognition device 1100 may be a camera provided in a frame of the display apparatus 1000.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition for a plurality of users who watch content. Since the technology for face recognition is generally well known, a detailed description of the technology content is omitted here. However, in brief, face recognition captures an image of a user, grasps a part of a person's face in the captured image, and then symmetrical composition of the face, appearance, hair, eye color, and facial muscle movement. It may be performed by extracting facial features by analyzing the back.
  • the content reproducing apparatus 1200 determines the ages of the recognized users based on prestored user age information.
  • age information of at least one user may be stored in advance.
  • the user age information may have a form in which the age of the corresponding user is mapped and stored in the picture of each user.
  • the content reproducing apparatus 1200 may determine the age of each user by comparing the recognized faces of the plurality of users with the pictures of the users stored in the table 410. Referring to the table 410 of FIG. 4, the content reproducing apparatus 1200 may determine that user A is 34 years old, user B is 17 years old, and user C is 6 years old.
  • FIG. 4 illustrates an embodiment in which the user recognition device 1100 and the content reproducing apparatus 1200 determine the user's age by recognizing the faces of the users
  • the user recognition device 1100 and the content reproducing apparatus are different.
  • 1200 may recognize the user's body shape or voice and compare the recognized body shape or voice with pre-stored user age information to determine the user's age.
  • the user age information may be in the form of a table in which the age of the corresponding user is mapped to information about the body shape or the voice of each user.
  • the content reproducing apparatus 1200 selects at least one user from among the plurality of users based on the age of the user according to a predetermined criterion.
  • 4 illustrates an example in which the content reproducing apparatus 1200 selects a user having a minimum age, and thus user C is selected.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 controls the reproduction of the content according to the user C.
  • FIG. 5 illustrates an embodiment in which the content reproducing apparatus 1200 restricts playback of content that cannot be viewed by comparing the age of the selected user and the viewing grade of the content.
  • the content reproducing apparatus 1200 receives a rating of a content from a content provider and compares it with the age of the selected user (user C) previously determined.
  • the content rating device 1200 since the content rating device 1200 receives a rating from a content provider of 19 or more viewers and the selected user C is 6 years old, the content playback device 1200 may view content. I think this is impossible.
  • the viewing rating of the content may be determined through analysis of the content.
  • the viewer rating may be determined by checking whether harmful elements are included in each frame of the content image.
  • the analysis and determination may be performed by a server on the cloud, or may be performed by the content reproducing apparatus 1200.
  • the result of the rating decision that was performed when another user previously viewed the same content may be stored in the server and used.
  • the server or the content reproducing apparatus 1200 may determine whether to include a harmful scene by analyzing an image of each frame of the content.
  • voice analysis included in the contents may be used to determine whether harmful contents are included.
  • a method of determining whether a harmful scene is included through frame-by-frame image analysis may include a server or a content reproducing apparatus 1200 that recognizes an object included in an image of each frame of content, and the recognized object is a knife, a gun or Determine if it is a harmful object such as tobacco.
  • the server or the content reproducing apparatus 1200 may recognize the human body in the image of each frame of the content, and determine whether the image is the exposed image through color analysis of the recognized body.
  • the analysis of the content and the determination of the viewing grade may be performed in various ways.
  • the content reproducing apparatus 1200 is selected by limiting the reproduction of the content in such a manner as to stop the reproduction of the content or to process and reproduce a part of the content. You can prevent users from being exposed to harmful content. 6 to 13 illustrate specific embodiments in which the content reproducing apparatus 1200 restricts reproduction of content.
  • 6 to 13 are diagrams illustrating various methods of limiting playback of content when the content playback apparatus includes a non-viewable scene in the content according to embodiments of the present disclosure.
  • the content reproducing apparatus 1200 displays a pop-up message 610 on the display 1000 asking whether to stop playing the content and continue to play the content. can do.
  • the first screen 600a of FIG. 6 illustrates a playback screen of normal content
  • the second screen 600b illustrates a playback screen of content on which a pop-up message 610 is displayed.
  • the pop-up message 610 may include information indicating that there is a user who cannot view the current content. Additionally, when the user selects to continue playing the content, the content reproducing apparatus 1200 displays a pop-up message requesting the input of the password on the display apparatus 1000, and when the input password matches, the content is displayed. You can also resume playback.
  • the content reproducing apparatus 1200 may skip and reproduce a scene including harmful content during the reproduction of the content. Since the first screen 700a of FIG. 7 includes harmful contents (scenes of smoking cigarettes), the content reproducing apparatus 1200 skips the scenes and resumes playback on the second screen 700b containing no harmful contents.
  • the display apparatus 1000 is controlled to control the display apparatus 1000.
  • the ratings of the entire content not only the ratings of the entire content, but also information on whether harmful contents are included in each scene constituting the content.
  • Such information may be provided by the content provider, or may be obtained by the server or the content reproducing apparatus 1200 through analysis of the content.
  • the method of determining whether harmful content is included in each scene by analyzing the content is as described above with respect to the determination of whether the harmful scene is included through image analysis of each frame.
  • the content reproducing apparatus 1200 may display an appropriate substitute image during the blank period. For example, the content reproducing apparatus 1200 may display a pre-stored substitute image or display title information or an advertisement screen of content. Details will be described below with reference to FIGS. 10 to 13.
  • the content reproducing apparatus 1200 may mosaic only a portion of the screen being reproduced with harmful elements.
  • the first screen 800a includes a harmful element 810. Accordingly, the content reproducing apparatus 1200 may process the content to mosaic the harmful elements on the first screen 800a, and display the processed second screen 800b on the display apparatus 1000.
  • the content reproducing apparatus 1200 needs to know which part of the entire screen contains the harmful element.
  • the content reproducing apparatus 1200 may use the information provided by the content provider, or may directly analyze the content of the content or obtain and use the information analyzed by the server on the cloud.
  • the server or the content reproducing apparatus 1200 may recognize an object included in the image of each frame of the content, and determine whether the recognized object corresponds to a harmful object such as a knife, a gun, or a cigarette. If a harmful object is found, the content reproducing apparatus 1200 may mosaic only a corresponding object portion from the entire image.
  • the content reproducing apparatus 1200 may blur the entire screen in a scene including harmful content during reproduction of the content.
  • the first screen 900a of FIG. 9 illustrates a playback screen of normal content
  • the second screen 900b illustrates a playback screen of blurred content.
  • the ratings of the entire content not only the ratings of the entire content, but also information on whether harmful contents are included in each scene constituting the content.
  • Such information may be provided by the content provider, or may be obtained by the server or the content reproducing apparatus 1200 through analysis of the content.
  • the method of determining whether harmful content is included in each scene by analyzing the content is as described above with respect to the determination of whether the harmful scene is included through image analysis of each frame.
  • the content reproducing apparatus 1200 stops the blurring process when all the scenes containing harmful contents have passed.
  • the content reproducing apparatus 1200 may display a substitute image on a screen of the display apparatus 1000 in a scene including harmful content during reproduction of content.
  • the first screen 1000a of FIG. 10 illustrates a playback screen of normal content
  • the second screen 1000b illustrates a playback screen of content on which a substitute image is displayed.
  • the ratings of the entire content not only the ratings of the entire content, but also information on whether harmful contents are included in each scene constituting the content.
  • Such information may be provided by the content provider, or may be obtained by the server or the content reproducing apparatus 1200 through analysis of the content.
  • the method of determining whether harmful content is included in each scene by analyzing the content is as described above with respect to the determination of whether the harmful scene is included through image analysis of each frame.
  • the substitute image may be previously stored in the content reproducing apparatus 1200 or may be provided by a server on the cloud that provides the content.
  • the content reproducing apparatus 1200 stops displaying the substitute image when all the scenes containing harmful content have passed.
  • the content reproducing apparatus 1200 may display a title 1101 of a content being played on a screen in a scene including harmful content during content playback.
  • 11 illustrates a playback screen of normal content on the first screen 1100a, and a playback screen of content on which the title 1101 of the content is displayed on the second screen 1100b.
  • the ratings of the entire content not only the ratings of the entire content, but also information on whether harmful contents are included in each scene constituting the content.
  • Such information may be provided by the content provider, or may be obtained by the server or the content reproducing apparatus 1200 through analysis of the content.
  • the method of determining whether harmful content is included in each scene by analyzing the content is as described above with respect to the determination of whether the harmful scene is included through image analysis of each frame.
  • the content reproducing apparatus 1200 may display the title 1101 of the content in a size occupying most of the screen so that the scene containing the harmful content is not visible to the viewer.
  • the content reproducing apparatus 1200 stops displaying the title of the content when all the scenes containing harmful content have passed.
  • the content reproducing apparatus 1200 may display an advertisement image on a screen of the display apparatus 1000 in a scene including harmful content during reproduction of the content.
  • the first screen 1200a of FIG. 12 illustrates a playback screen of normal content
  • the second screen 1200b illustrates a playback screen of content on which an advertisement image is displayed.
  • the ratings of the entire content not only the ratings of the entire content, but also information on whether harmful contents are included in each scene constituting the content.
  • Such information may be provided by the content provider, or may be obtained by the server or the content reproducing apparatus 1200 through analysis of the content.
  • the method of determining whether harmful content is included in each scene by analyzing the content is as described above with respect to the determination of whether the harmful scene is included through image analysis of each frame.
  • the content reproducing apparatus 1200 may receive an advertisement image from a server on a cloud that provides content.
  • the content reproducing apparatus 1200 stops displaying the advertisement image when all the scenes containing harmful contents have passed.
  • the content reproducing apparatus 1200 may display, on a screen of the display apparatus 1000, a phrase indicating that a viewing is restricted in a scene including harmful content during reproduction of content.
  • the first screen 1300a of FIG. 13 illustrates a playback screen of normal content
  • the second screen 1300b illustrates a playback screen of contents on which guide text is displayed.
  • the ratings of the entire content not only the ratings of the entire content, but also information on whether harmful contents are included in each scene constituting the content.
  • Such information may be provided by the content provider, or may be obtained by the server or the content reproducing apparatus 1200 through analysis of the content.
  • the method of determining whether harmful content is included in each scene by analyzing the content is as described above with respect to the determination of whether the harmful scene is included through image analysis of each frame.
  • the content reproducing apparatus 1200 may replace the entire screen with the guide text so that the scene containing the harmful content is not visible to the viewer.
  • the content reproducing apparatus 1200 stops displaying the guide text when all the scenes containing harmful contents have passed.
  • the content reproducing apparatus 1200 may provide different images for each of a plurality of users.
  • the content reproducing apparatus 1200 may display one image including two or more different image information on a screen of the display apparatus 1000 and display another image according to a condition of a user looking at the screen.
  • the plurality of users may view different images according to the position of the user with respect to the display apparatus 1000, the glasses worn by the user, the direction in which the user looks at the screen, and the angle formed by the screen.
  • the content reproducing apparatus 1200 may provide different images for each of a plurality of users, the content reproducing apparatus 1200 may control content reproduction as shown in FIGS. 6 to 13 only on the image viewed by the selected user. And no control is performed on the images viewed by the remaining users. Alternatively, two or more users may be selected, and content playback may be controlled such that each of the selected users and the remaining users can watch an appropriate image.
  • FIG. 14 is a flowchart illustrating a method of controlling playback of content using age information of a user stored in advance and selecting a minimum age according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition of a plurality of users who watch content. For example, when the user recognition apparatus 1100 photographs a plurality of users who watch content and transmits a captured image to the content reproduction apparatus 1200, the content reproduction apparatus 1200 may display the face of the person in the received captured image. After recognizing the corresponding part, face recognition may be performed by extracting a feature of a face.
  • the content reproducing apparatus 1200 compares the recognized face with previously stored user age information to determine the age of the users.
  • the user age information may be previously stored in the content reproducing apparatus 1200 in the form of a table in which the age of the user is mapped to the picture of each user.
  • step 1403 the content reproducing apparatus 1200 selects a user having a minimum age.
  • the content reproducing apparatus 1200 checks a viewing grade of the content being played.
  • the content reproducing apparatus 1200 may receive a rating of the content from the content provider or, if the content provider does not provide the rating, may directly analyze the content to determine the rating.
  • the server on the cloud may analyze the content to determine the viewing grade, and the content reproducing apparatus 1200 may receive the viewing grade from the server.
  • the content reproducing apparatus 1200 determines whether the selected user can view the content by comparing the age of the selected user with the viewing grade of the identified content.
  • step 1406 the content reproducing apparatus 1200 restricts viewing of the content.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 15 to 17 are diagrams for describing reproduction control methods of content for predicting an age of a user using a user recognition result and selecting a minimum age according to embodiments of the present disclosure.
  • the display apparatus 1000 may be connected to a user recognition apparatus 1100 for recognizing a user who views content and a content reproducing apparatus 1200 for controlling reproduction of the content.
  • the user recognition device 1100 recognizes a plurality of users who watch content.
  • the user recognition device 1100 is illustrated as a camera provided separately from the display apparatus 1000, the user recognition device 1100 may be implemented in various forms without being limited thereto.
  • the user recognition device 1100 may be a camera provided in a frame of the display apparatus 1000.
  • the user recognition device 1100 and the content reproducing apparatus 1200 perform face recognition for a plurality of users who watch content.
  • the method of performing face recognition has been described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 may predict the age of the users by using the face recognition result. For example, the content reproducing apparatus 1200 may predict the age by comparing a feature of each user's face extracted as a result of face recognition with a feature of a face for each age group previously stored. According to the embodiment illustrated in FIG. 16, the content reproducing apparatus 1200 predicts the ages of the user A, the user B, and the user C to about 35, about 20, and about 10 years, respectively.
  • the content reproducing apparatus 1200 selects at least one user from among the plurality of users based on the predicted age of the user according to a predetermined criterion.
  • FIG. 16 illustrates an example in which the content reproducing apparatus 1200 selects a user having a minimum predicted age, and thus user C is selected.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 controls the reproduction of the content according to the user C.
  • the content reproducing apparatus 1200 analyzes the face recognition result to predict the age of the user, the predicted age may not match the actual age, and thus the user may receive confirmation of the predicted age.
  • the content reproducing apparatus 1200 receives a user confirmation regarding a predicted age of a selected user.
  • the content reproducing apparatus 1200 displays a popup 1710 requesting confirmation of a predicted age of a user on a first screen 1700a of the display apparatus 1000.
  • the age of the user C is estimated to be about 10 years old, and the user C has been selected as the minimum age. Therefore, the pop-up 1710 displays a message requesting confirmation that the youngest viewer is 10 years old. If the user selects “Yes” in the pop-up 1710, the content reproducing apparatus 1200 determines that the selected user is 10 years old, determines that 10 years is the age of the selected user, and controls playback of the content. .
  • the content reproducing apparatus 1200 displays the second screen 1700b on the display apparatus 1000.
  • the second screen 1700b displays a popup 1720 requesting an age input of the youngest viewer.
  • the content reproducing apparatus 1200 determines 6 years as the age of the selected user and controls playback of the content. .
  • the content reproducing apparatus 1200 may determine the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the availability of the content, as described above with reference to FIG. 5.
  • 18 and 19 are flowcharts illustrating methods of controlling reproduction of content for predicting an age of a user using a user recognition result and selecting a minimum age according to embodiments of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition of a plurality of users who watch content. For example, when the user recognition apparatus 1100 photographs a plurality of users who watch content and transmits a captured image to the content reproduction apparatus 1200, the content reproduction apparatus 1200 may display the face of the person in the received captured image. After recognizing the corresponding part, face recognition may be performed by extracting a feature of a face.
  • the content reproducing apparatus 1200 analyzes the face recognition results of the users to predict the ages of the users. For example, the content reproducing apparatus 1200 may predict the age by comparing a feature of each user's face extracted as a result of face recognition with a feature of a face for each age group previously stored.
  • the content reproducing apparatus 1200 selects the user whose age is the minimum in step 1803.
  • the content reproducing apparatus 1200 checks a viewing grade of the content being played.
  • the content reproducing apparatus 1200 may receive a rating of the content from the content provider or, if the content provider does not provide the rating, may directly analyze the content to determine the rating.
  • the server on the cloud may analyze the content to determine the viewing grade, and the content reproducing apparatus 1200 may receive the viewing grade from the server.
  • the content reproducing apparatus 1200 determines whether the selected user can view the content by comparing the predicted age of the selected user with the viewing grade of the identified content.
  • step 1806 the content reproducing apparatus 1200 limits the viewing of the content.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • FIG. 19 is a flowchart illustrating an embodiment in which a step of confirming a predicted age of a selected user is added as compared with FIG. 18. Since steps 1901 to 1903 of FIG. 19 are the same as steps 1801 to 1803 of FIG. 18, a detailed description thereof will be omitted.
  • the content reproducing apparatus 1200 requests confirmation of a predicted age of the selected user through the screen of the display apparatus 1000.
  • the content reproducing apparatus 1200 may display a pop-up message on the screen of the display apparatus 1000 asking whether the predicted age of the selected user matches the actual age of the selected user.
  • the content playback apparatus 1200 restricts viewing of the content according to the identified age of the selected user in operation 1906.
  • the content playback device 1200 receives the correct age of the user selected from the user in step 1907.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the identified age of the selected user. A detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 20 is a diagram for describing a method of controlling playback of content using age information input from a user when a user's age prediction fails, according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition for a plurality of users who watch content.
  • the method of performing face recognition has been described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 may predict the age of the users by using the face recognition result. For example, the content reproducing apparatus 1200 may predict the age by comparing a feature of each user's face extracted as a result of face recognition with a feature of a face for each age group previously stored.
  • the age prediction may fail for some users. Such failure of age prediction may occur due to various factors such as inaccurate face recognition or failure to match with pre-stored facial features by age group.
  • the content reproducing apparatus 1200 predicts an age of about 35 years and about 20 years for the user A and the user B, respectively, but fails to predict the age for the user C. Therefore, the content reproducing apparatus 1200 displays a popup 2010 for requesting an input of the youngest viewer on the screen 2000 of the display apparatus 1000. As illustrated in FIG. 20, when the user inputs that the youngest viewer is 6 years old, the content reproducing apparatus 1200 determines 6 years as the age of the selected user and controls playback of the content.
  • the content reproducing apparatus 1200 may determine the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the availability of the content, as described above with reference to FIG. 5.
  • 21 is a flowchart illustrating a method of controlling playback of content using age information input from a user when a user's age prediction fails, according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition of a plurality of users who watch content. For example, when the user recognition apparatus 1100 photographs a plurality of users who watch content and transmits a captured image to the content reproduction apparatus 1200, the content reproduction apparatus 1200 may display the face of the person in the received captured image. After recognizing the corresponding part, face recognition may be performed by extracting a feature of a face.
  • the content reproducing apparatus 1200 analyzes the face recognition results of the users to predict the ages of the users. For example, the content reproducing apparatus 1200 may predict the age by comparing a feature of each user's face extracted as a result of face recognition with a feature of a face for each age group previously stored.
  • the content reproducing apparatus 1200 determines whether there is a viewer who fails to predict an age.
  • the age prediction may fail for some users. Such failure of age prediction may occur due to various factors such as inaccurate face recognition or failure to match with pre-stored facial features by age group.
  • step 2103 if no viewer fails to predict the age, the flow proceeds to step 2104 and the content reproducing apparatus 1200 selects the viewer having the minimum predicted age.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the predicted age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • the content playback apparatus 1200 requests input of the minimum age and receives the minimum age from the user in step 2106.
  • the content reproducing apparatus 1200 may display a pop-up requesting an age input of the youngest viewer on the screen.
  • the content reproducing apparatus 1200 determines the minimum age input from the user as the age of the selected user and restricts viewing of the content. A detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 22 to 23 are diagrams for describing a content reproduction control method when a user who views a content according to an embodiment of the present invention is added and the content reproduction apparatus knows the ages of existing viewers.
  • the display apparatus 1000 may be connected to a user recognition apparatus 1100 for recognizing a user watching content and a content reproducing apparatus 1200 for controlling reproduction of the content.
  • the content reproducing apparatus 1200 selects a user B having a lower age among the user A and the user B, and controls the reproduction of the content based on the user B.
  • the user recognition apparatus 1100 recognizes that a new viewer has been added, photographs the user's image, and transmits the captured image to the content reproducing apparatus 1200.
  • the content reproducing apparatus 1200 knows the ages of the user A and the user B. Accordingly, when the content reproducing apparatus 1200 checks only the age of the newly added user C, the content reproducing apparatus 1200 may select a new user by comparing the user's age with the age of the user B which is the previously selected user. Details will be described with reference to FIG. 23 below.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition of a newly added viewer C.
  • FIG. The method of performing face recognition has been described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 determines the age of the user C based on previously stored user age information.
  • age information of at least one user may be stored in advance.
  • the user age information may have a form in which the age of the corresponding user is mapped and stored in the picture of each user.
  • the content reproducing apparatus 1200 selects the user again by comparing the age of the user C with the age of the user B that is already known. In other words, the age of the newly selected user is compared with the age of the newly added user, and if the age of the previously selected user is lower, the user is selected again. If the newly added user is lower, the newly added user is added. Newly selected users. In FIG. 23, the user C is newly selected because the user C (6 years old), which is a newly added user, is lower than the age (17 years old) of user B, the previously selected user.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 controls the reproduction of the content according to the user C.
  • the content reproducing apparatus 1200 may determine whether viewing is possible by comparing the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the viewing availability. For details, refer to FIG. 5. As described above. In addition, a specific method of restricting viewing of content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • FIG. 24 is a flowchart illustrating a content reproduction control method when a user who views a content according to an embodiment of the present invention is added and the content reproduction apparatus knows the ages of existing viewers.
  • the user recognition apparatus 1100 and the content reproduction apparatus 1200 recognize an addition of a viewer. That is, when a user who views content is added, the user recognition apparatus 1100 photographs the user and transmits the captured image to the content reproduction apparatus 1200, and the content reproduction apparatus 1200 views the content through the received image. Recognize that a user has been added.
  • the content reproducing apparatus 1200 recognizes the added viewer's face. For example, when the user recognition apparatus 1100 photographs the added viewer and transmits the captured image to the content reproduction apparatus 1200, the content reproduction apparatus 1200 corresponds to the added viewer's face in the received captured image. After recognizing the part, the facial recognition may be performed by extracting the feature of the face.
  • the content reproducing apparatus 1200 determines the age of the additional viewer by comparing the recognized additional viewer's face with previously stored user age information.
  • the user age information may be previously stored in the content reproducing apparatus 1200 in the form of a table in which the age of the user is mapped to the picture of each user.
  • step 2404 the content reproducing apparatus 1200 determines whether the age of the additional viewer is lower than that of the previously selected user.
  • step 2404 if the age of the additional viewer is lower than the age of the previously selected user, the process proceeds to step 2405 and the content reproducing apparatus 1200 newly selects the additional user, and proceeds to step 2406.
  • step 2404 determines whether the age of the additional viewer is higher than the age of the previously selected user. If it is determined in operation 2404 that the age of the additional viewer is higher than the age of the previously selected user, the process proceeds to step 2407 and the content reproducing apparatus 1200 maintains the previously selected user, and proceeds to step 2406.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 25 to 26 are diagrams for describing a content reproduction control method when a part of users who watch content according to an exemplary embodiment of the present invention is separated and the content reproduction apparatus knows the ages of existing users.
  • the display apparatus 1000 may be connected to a user recognition apparatus 1100 for recognizing a user watching content and a content reproducing apparatus 1200 for controlling reproduction of the content.
  • the content reproducing apparatus 1200 selects the user C, which is the minimum age of the user A, the user B, and the user C, and controls the reproduction of the content based on the user C.
  • the user recognition apparatus 1100 recognizes that some viewers have left, photographs the user's image, and transmits the captured image to the content reproducing apparatus 1200.
  • the content reproducing apparatus 1200 knows the ages of the user A, the user B, and the user C. Therefore, when the user C has left, the content reproducing apparatus 1200 may newly select the user by comparing the ages of the user A and the user B which are already known. Details will be described with reference to FIG. 26 below.
  • the content reproducing apparatus 1200 selects the user again by comparing the ages of the user A and the user B remaining after the user C leaves.
  • the content reproducing apparatus 1200 may already know the ages of the user A and the user B, and thus may compare the ages of the users without a separate face recognition and age determination process.
  • the content reproducing apparatus 1200 since the user B's age (17 years old) is lower than the user A's age (34 years old), the content reproducing apparatus 1200 newly selects user B.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 restricts viewing of the content according to the age of the user B (17 years old).
  • the content reproducing apparatus 1200 may determine whether viewing is possible by comparing the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the viewing availability. For details, refer to FIG. 5. As described above. In addition, a specific method of restricting viewing of content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • FIG. 27 is a flowchart illustrating a content reproduction control method when a part of users who watch content according to an exemplary embodiment of the present invention is separated and the content reproduction apparatus knows the ages of existing users.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 recognize a viewer's departure. That is, when some of the users who watch the content leave, the user recognition device 1100 photographs the user and transmits the captured image to the content playback device 1200, and the content playback device 1200 receives the content through the received image. Recognize that some of the users watching the video have left.
  • the content reproducing apparatus determines whether the detached viewer is a previously selected user.
  • the previously selected user among the remaining viewers corresponds to the user of the minimum age, and the flow proceeds to step 2705 and the content reproducing apparatus 1200 maintains the selected user.
  • the process proceeds to step 2703 and the content reproducing apparatus 1200 selects the user again by comparing the ages of the remaining viewers.
  • the ages of the remaining viewers may already be known by the content reproducing apparatus 1200 or may be confirmed by the content reproducing apparatus 1200 again performing face recognition and age determination of the user.
  • the content reproducing apparatus restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 28 to 31 are diagrams for describing a content playback control method when the number of users who watch content according to an embodiment of the present invention changes and the content playback device does not know the age of existing viewers.
  • the display apparatus 1000 may be connected to a user recognition apparatus 1100 for recognizing a user watching content and a content reproducing apparatus 1200 for controlling reproduction of the content.
  • the content reproducing apparatus 1200 selects the user B and controls the reproduction of the content based on the user B.
  • the user recognition apparatus 1100 recognizes that a new viewer has been added, photographs the user's image, and transmits the captured image to the content reproducing apparatus 1200.
  • the content reproducing apparatus 1200 does not know the ages of the user A and the user B. Accordingly, the content reproducing apparatus 1200 checks both the newly added user C and the ages of the existing viewers A and B, and selects a new user by comparing them with each other. Details will be described with reference to FIG. 29 below.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 perform face recognition on a user A and a user B, which are existing viewers, and a newly added user C.
  • FIG. The method of performing face recognition has been described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 determines the ages of the recognized users based on the pre-stored user age information.
  • age information of at least one user may be stored in advance.
  • the user age information may have a form in which the age of the corresponding user is mapped and stored in the picture of each user.
  • the content reproducing apparatus 1200 may determine the age of each user by comparing the recognized faces of the plurality of users with the pictures of the users stored in the table 2910. Referring to the table 2910 of FIG. 29, the content reproducing apparatus 1200 may determine that the user A is 34 years old, the user B is 17 years old, and the user C is 6 years old.
  • the content reproducing apparatus 1200 When the age determination of the plurality of users is completed, the content reproducing apparatus 1200 newly selects a user having a minimum age among the users. In FIG. 29, since the user C is the minimum age, the content reproducing apparatus 1200 selects the user C.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 restricts viewing of the content according to the age (6 years) of the user C.
  • the content reproducing apparatus 1200 may determine whether viewing is possible by comparing the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the viewing availability. For details, refer to FIG. 5. As described above. In addition, a specific method of restricting viewing of content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • the display apparatus 1000 may be connected to a user recognition apparatus 1100 for recognizing a user watching content and a content reproducing apparatus 1200 for controlling reproduction of the content.
  • the content reproducing apparatus 1200 selects the user C, which is the minimum age among the user A, the user B, and the user C, and controls the reproduction of the content based on the user C.
  • the user recognition apparatus 1100 recognizes that some viewers have left, photographs the user's image, and transmits the captured image to the content reproducing apparatus 1200.
  • the content reproducing apparatus 1200 does not know the ages of the user A and the user B. Accordingly, the content reproducing apparatus 1200 checks both the ages of the user A and the user B remaining after the user C leaves, and compares each other to newly select the user. Details will be described with reference to FIG. 31 below.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition for the remaining viewers A and B.
  • the method of performing face recognition has been described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 determines the ages of the recognized users based on the pre-stored user age information.
  • age information of at least one user may be stored in advance.
  • the user age information may have a form in which the age of the corresponding user is mapped and stored in the picture of each user.
  • the content reproducing apparatus 1200 may determine the age of each user by comparing the recognized faces of the plurality of users with the pictures of the users stored in the table 3110. Referring to the table 3110 of FIG. 31, the content reproducing apparatus 1200 may determine that user A is 34 years old and user B is 17 years old.
  • the content reproducing apparatus 1200 When the age determination of the plurality of users is completed, the content reproducing apparatus 1200 newly selects a user having a minimum age among the users. In FIG. 31, since the user B is the minimum age, the content reproducing apparatus 1200 newly selects the user B.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 restricts viewing of the content according to the age of the user B (17 years old).
  • the content reproducing apparatus 1200 may determine whether viewing is possible by comparing the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the viewing availability. For details, refer to FIG. 5. As described above. In addition, a specific method of restricting viewing of content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 32 is a flowchart illustrating a content reproduction control method when the number of users who watch content according to an embodiment of the present invention is changed and the content reproduction device does not know the age of existing viewers.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 detect a change in the number of viewers. That is, when the number of users watching content changes, the user recognition apparatus 1100 photographs the user and transmits the captured image to the content reproducing apparatus 1200, and the content reproducing apparatus 1200 displays the content through the received image. Recognize that the user watching is added or some of the user watching the content has left.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 recognize the faces of the viewers. For example, when the user recognition device 1100 captures an added viewer and transmits a captured image to the content reproducing apparatus 1200, the content reproducing apparatus 1200 displays a portion corresponding to the face of the person in the received captured image. After recognition, face recognition may be performed by extracting facial features.
  • the content reproducing apparatus 1200 compares the recognized viewer's faces with previously stored user age information to determine the viewer's age.
  • the user age information may be previously stored in the content reproducing apparatus 1200 in the form of a table in which the age of the user is mapped to the picture of each user.
  • the content reproducing apparatus 1200 selects the viewers of the minimum age in step 3204.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 33 to 34 are diagrams for describing a content reproduction control method when predicting a viewer to be added through analysis of viewers according to an embodiment of the present invention.
  • user A and user B watch content played on the display apparatus 1000, but user C does not watch content. Accordingly, the user recognizing apparatus 1100 recognizes only the user A and the user B as the viewer, and the content reproducing apparatus 1200 controls the reproduction of the content based on the user B by selecting the user B, the minimum age of the two.
  • the user B makes a dialogue inviting the user C to watch the content to correct the content.
  • the user recognition device 1100 has a function of recognizing a voice, and for example, the user recognition device 1100 includes a microphone capable of recognizing a voice.
  • the content reproducing apparatus 1200 may recognize and analyze the conversation voice of the user B received from the user recognition apparatus 1100 and predict that the user C will be added to the viewer soon. Then, the content reproducing apparatus 1200 controls the reproduction of the content according to the additional prediction of the user C. A detailed process of the user's additional prediction through the dialogue analysis and the content reproduction control according to the above will be described in detail with reference to FIG. 34 below.
  • the content reproducing apparatus 1200 analyzes a dialogue voice in which user B invites user C to view content, and predicts that user C will be added. When the prediction is completed, the content reproducing apparatus 1200 determines the age of the user C whose addition is predicted.
  • the method of predicting the age of the user C by the content reproducing apparatus 1200 is as follows. Since the user C has not yet been added as a viewer, the user recognition device 1100 may not perform face recognition of the user C. FIG. However, since the content reproducing apparatus 1200 checks the name of the user C through voice recognition, the content reproducing apparatus 1200 may determine the age of the user C by comparing the confirmed user C's name with previously stored user age information. To this end, the user age information may be in a form in which the age of the corresponding user is mapped to the name of each user as shown in the table 3410 of FIG. 34. The content reproducing apparatus 1200 may determine the age of the user C as 6 years by comparing the recognized name of the user C with the table 3410 of the user age information.
  • the content reproducing apparatus 1200 may select a new user by comparing the age of the user B, the previously selected user, and the user C, for which the addition is expected. As a result of the comparison, user C is lower and user C is selected.
  • the content reproducing apparatus 1200 controls reproduction of the content according to the selected user. Therefore, the content reproducing apparatus 1200 controls the reproduction of the content according to the age (6 years) of the user C.
  • the content reproducing apparatus 1200 may determine whether viewing is possible by comparing the age of the selected user with the viewing grade of the content, and control the reproduction of the content according to the viewing availability. For details, refer to FIG. 5. As described above. In addition, a specific method of restricting viewing of content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 35 is a flowchart illustrating a content reproduction control method in the case of predicting a viewer to be added through analysis of viewers' conversation according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform voice recognition of viewers. That is, the user recognition apparatus 1100 receives a conversation voice of the user and transmits the received voice to the content reproducing apparatus 1000.
  • the content reproducing apparatus 1200 analyzes the recognized voice to predict additional viewers. For example, if the conversational voice of the existing viewers includes a content that invites a new user to watch the content, the user is expected to be added to the viewer.
  • the content reproducing apparatus 1200 determines the age of the user whose addition is predicted based on the pre-stored user age information. In this case, since the face recognition of the user whose addition is predicted cannot be performed, the age is determined by comparing the name of the user whose addition confirmed through the voice analysis is predicted with the user age information. In this case, the user age information may be in a form in which the age of the corresponding user is mapped to the name of each user.
  • the content reproducing apparatus 1200 determines whether a user whose addition is predicted is lower than an existing user. As a result of the determination, if the user expected to be added is older than the previously selected user, the process proceeds to step 3505 and the content reproducing apparatus 1200 newly selects the user expected to be added. However, if it is determined that the user whose addition is predicted to be older than the previously selected user, the process proceeds to step 3507 and the content reproducing apparatus 1200 maintains the previously selected user.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 36 to 37 are diagrams for describing a method of performing viewer recognition and controlling playback of content when a playback content is changed according to an embodiment of the present invention.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize a plurality of users who watch the first content 3600a and select user C as the minimum age.
  • the content reproducing apparatus 1200 controls the reproduction of the first content 3600a according to the age (6 years) of the user C, which is the selected user.
  • the content reproducing apparatus 1200 when the content reproduced in the content reproducing apparatus 1200 is changed from the first content 3600a to the second content 3600b, the content reproducing apparatus 1200 performs viewer recognition and user selection again. That is, the content reproducing apparatus 1200 determines the age by recognizing the user A and the user B watching the second content 3600b and selects the user B that is the minimum age.
  • the content reproducing apparatus 1200 restricts viewing by comparing an age of a newly selected user, User B, with a viewing grade of the second content 3600b.
  • the content reproducing apparatus 1200 receives a rating (viewing age 15 or older) of the second content 3600b from the content provider, and compares it with the age of the selected user B (17 years old). Since the selected user's age (age 17) is greater than or equal to the viewing grade age (age 15) of the second content 3600b, the content reproducing apparatus 1200 determines that the second content 3600b can be viewed. Accordingly, the content reproducing apparatus 1200 reproduces the second content 3600b without limitation.
  • 38 is a flowchart illustrating a method of performing viewer recognition and controlling playback of content when a playback content is changed according to an embodiment of the present invention.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize a plurality of users who watch content, and select one of the plurality of users.
  • a detailed method of recognizing a plurality of users and selecting a user based on age is as described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • the content reproducing apparatus 1200 determines whether the content being played is changed.
  • step 3804 the content playback apparatus 1200 performs viewer recognition and user selection again.
  • the method of recognizing the viewer and selecting the user is the same as in step 3801.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 39 through 40 are diagrams for describing a method of periodically performing viewer recognition and controlling playback of content according to an embodiment of the present invention.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize a plurality of users who watch content, and select user C as the minimum age.
  • the content reproducing apparatus 1200 controls the reproduction of the content according to the age (6 years) of the user C, which is the selected user.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform viewer recognition and user selection again. That is, the user recognizing apparatus 1100 and the content reproducing apparatus 1200 periodically recognize the viewer and select the user. In this case, the period of selecting the viewer and selecting the user may be arbitrarily set by the user. For example, the user may set the user recognition apparatus 1100 and the content reproducing apparatus 1200 to recognize the viewer and select the user every 10 minutes. In FIG. 39, the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize a user A and a user B who are watching content after a predetermined time elapses, and select a user B that is the minimum age.
  • the content reproducing apparatus 1200 restricts viewing by comparing the age of a newly selected user B and a viewing grade of the content.
  • the content reproducing apparatus 1200 receives a viewing grade (viewers over 19 years old) of the content from the content provider, and compares it with the age (17 years old) of the user B, the selected user. Since the selected user's age (age 17) is less than the viewing grade age (age 19) of the content, the content reproducing apparatus 1200 determines that viewing of the content is impossible. Therefore, the content reproducing apparatus 1200 restricts viewing of the content.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 41 is a flowchart illustrating a method of periodically performing viewer recognition and controlling playback of content according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 recognize a plurality of users who watch content and select one of the plurality of users.
  • a detailed method of recognizing a plurality of users and selecting a user based on age is as described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 restricts viewing of the content according to the age of the selected user.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • step 4103 the content reproducing apparatus 1200 determines whether a predetermined time elapses.
  • step 4104 the user recognition apparatus 11000 and the content reproducing apparatus 1200 perform viewer recognition and user selection again, at which time, the user recognition apparatus 1100 and the content reproduction are performed.
  • the apparatus 1200 recognizes the viewer and selects a user in the same manner as in step 4101.
  • the content reproducing apparatus 1200 limits viewing of the content according to the age of the selected user in step 4105.
  • a detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • 42A illustrates a method of limiting a search channel according to a user selected based on age according to an embodiment of the present invention.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize a plurality of users who watch content, and select user C as the minimum age.
  • the content reproducing apparatus 1200 controls the reproduction of the content according to the age (6 years) of the user C, which is the selected user.
  • the content reproducing apparatus 1200 limits the searchable channel according to the age (6 years) of the user C, which is the selected user.
  • the content reproducing apparatus 1200 limits the channel search according to the age of the selected user (6 years old). That is, the content reproducing apparatus 1200 displays only the remaining channels on the screen of the display apparatus 1000 as a search result except for channels that the selected user cannot watch. Referring to FIG. 42A, the content reproducing apparatus 1200 displays a channel search result 4210 in which channels with limited search are filtered on the second screen 4200b.
  • 42B is a flowchart illustrating a method of limiting a search channel according to a user selected based on age according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition of a plurality of viewers viewing content.
  • the user recognition device 1100 captures a plurality of users who watch content and transmits a captured image to the content reproducing apparatus 1200, and the content reproducing apparatus 1200 displays the face of the person in the received captured image.
  • face recognition may be performed by extracting a feature of a face.
  • the content reproducing apparatus 1200 compares the recognized face with previously stored user age information to determine the age of the users.
  • the user age information may be previously stored in the content reproducing apparatus 1200 in the form of a table in which the age of the user is mapped to the picture of each user.
  • a detailed method of recognizing the faces of the plurality of users who view the content and determining the age is as described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 selects a user of the minimum age in step 4203.
  • the content reproducing apparatus 1200 limits the searchable channel according to the age of the selected user. That is, the content reproducing apparatus 1200 displays only the remaining channels on the screen of the display apparatus 1000 as a search result except for channels that the selected user cannot watch.
  • 43A illustrates a method of controlling content playback according to a user selected based on an age when changing a channel according to an embodiment of the present invention.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize a plurality of users who watch content and select a user C that is the minimum age.
  • the content reproducing apparatus 1200 controls the reproduction of the content when the channel is changed according to the age (6 years) of the user C, the selected user.
  • the content reproducing apparatus 1200 determines whether the content in which viewing of the user C is restricted is being played on the changed channel. If the content being played on the changed channel is the content of which the user C is restricted from viewing, the content reproducing apparatus 1200 restricts the viewing of the content or skips the channel and changes the content that the user C can watch to the playing channel. .
  • FIG. 43A when the user C reproduces the first screen 4300a that can be viewed, the content playback device 1200 is changed to the channel that plays the second screen 4300b where the viewing of the user C is restricted. As shown, a part of the screen is mosaiced to restrict viewing of the content. A detailed method of restricting viewing of the content by the content reproducing apparatus 1200 is as described above with reference to FIGS. 6 to 13.
  • the content reproducing apparatus 1200 may skip a channel for reproducing content where the viewing of the user C is restricted and change to another channel for reproducing the content that the user C can watch, such as the third screen 4300c.
  • 43B is a flowchart illustrating a method of controlling content reproduction according to a user selected based on age when changing a channel according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform face recognition of a plurality of viewers viewing content.
  • the user recognition device 1100 captures a plurality of users who watch content and transmits a captured image to the content reproducing apparatus 1200, and the content reproducing apparatus 1200 displays the face of the person in the received captured image.
  • face recognition may be performed by extracting a feature of a face.
  • the content reproducing apparatus 1200 compares the recognized face with previously stored user age information to determine the age of the users.
  • the user age information may be previously stored in the content reproducing apparatus 1200 in the form of a table in which the age of the user is mapped to the picture of each user.
  • a detailed method of recognizing the faces of the plurality of users who view the content and determining the age is as described above with reference to FIG. 4.
  • the content reproducing apparatus 1200 selects the user of the minimum age in step 4303.
  • the content reproducing apparatus 1200 determines whether the content of which the viewing of the user selected in the changed channel is restricted is played in step 4305.
  • the content reproducing apparatus 1200 restricts the viewing of the content or skips the changed channel in step 4306. Change to another channel that is playing.
  • 44 to 45 are diagrams for describing a method of displaying a favorite channel according to a selected user based on a result of motion recognition of a user according to an embodiment of the present invention.
  • user A and user B watch content played on the display apparatus 1000 together.
  • the user recognizing apparatus 1100 and the content reproducing apparatus 1200 recognize operations of a plurality of users and select a user performing a predetermined specific operation.
  • the content reproducing apparatus 1200 selects user A who operates the remote controller 4410. This is to provide a feedback result according to a preference of a user who manipulates a channel of the display apparatus 1000.
  • the user may be selected based on various operations.
  • the content reproducing apparatus 1200 has previously stored the preferred channel list 4510 for a plurality of users.
  • the preferred channel list 4510 a channel preferred by the user may be mapped and stored in the picture of each user.
  • the category of the channel may be stored in the preferred channel list 4510, or specific channels may be stored. Since user A is selected in FIG. 44, the content reproducing apparatus 1200 determines that the user A's preferred channels are sports, movies, or news with reference to the preferred channel list 4510. The content reproducing apparatus 1200 displays the user A's favorite channel list 4520 on the screen as shown.
  • 46 is a flowchart illustrating a method of displaying a preferred channel according to a user selected according to a user's motion recognition result according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 perform motion recognition of a plurality of users who watch the reproduced content.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 may perform not only motion recognition but also face recognition for identifying each user.
  • the content reproducing apparatus 1200 selects a user performing a preset specific operation. For example, you can select the user who will operate the remote controller. In addition, the user may be selected based on various operations.
  • the content reproducing apparatus 1200 checks a preference channel of a pre-registered selected user. To this end, the content reproducing apparatus 1200 may pre-store a preferred channel list for a plurality of users.
  • the content reproducing apparatus 1200 displays a list of favorite channels of the selected user on the screen.
  • FIG. 47 is a diagram to describe a method of determining and displaying a favorite channel based on a viewing history of a user according to an embodiment of the present invention.
  • the preferred channel list for each user is pre-stored in the content reproducing apparatus 1200, and the content reproducing apparatus 1200 confirms the preferred channel of the selected user.
  • the viewing channel of each user is analyzed to determine the preferred channel of each user.
  • the content reproducing apparatus 1200 analyzes a viewing channel list 4710 of a plurality of users.
  • the list of channels watched by the user is mapped and stored in the viewing channel list 4710.
  • the viewing channels stored in the viewing channel list 4710 may be channels watched by each user for a predetermined time period, or channels watched by a predetermined number of each user.
  • a method of configuring a viewing channel list may be implemented in various ways, such as using a list of channels watched for each user's time zone.
  • the content reproducing apparatus 1200 determines the user A's preferred channel as the ESPN and the BBC whose number of times the user A watches more than a predetermined value. In addition, the content reproducing apparatus 1200 displays the user A's favorite channel list 4720 on the screen.
  • FIG. 48 is a flowchart illustrating a method of determining and displaying a favorite channel based on a viewing history of a user according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 recognize motions of a plurality of users who watch the reproduced content.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 may perform not only motion recognition but also face recognition for identifying each user.
  • the content reproducing apparatus 1200 selects a user who performs a preset specific operation. For example, you can select the user who will operate the remote controller. In addition, the user may be selected based on various operations.
  • the content reproducing apparatus 1200 may analyze the viewing history of the selected user and determine a favorite channel of the selected user.
  • the content reproducing apparatus 1200 may analyze a list of channels watched by the selected user and determine a channel having a predetermined number of times watched by the selected user as the preferred channel of the selected user.
  • the content reproducing apparatus 1200 displays a list of favorite channels of the selected user on the screen of the display apparatus 1000.
  • 49 is a diagram for describing a method of determining and displaying preferred content based on a viewing history of a user according to an embodiment of the present invention.
  • the content reproducing apparatus 1200 analyzes a list of channels watched by the user to determine and display the preferred channel of the selected user.
  • the content reproducing apparatus 1200 analyzes the list of contents watched by the user, analyzes the genre of the content preferred by the selected user, and displays the list recommending other contents of the genre to the display apparatus 1000. Display.
  • the content reproducing apparatus 1200 analyzes a viewing content list 4910 of a plurality of users.
  • the list of contents watched by the user is mapped and stored in the viewing contents list 4910.
  • the viewing contents stored in the viewing contents list 4910 may be contents watched by each user for a predetermined time period, or may be contents watched by a preset number of users.
  • a method of constructing a viewing content list may be variously implemented, such as using a list of contents watched by each user's time zone.
  • the content reproducing apparatus 1200 determines that the preferred content genre of the user A is an action.
  • the content reproducing apparatus 1200 searches for other contents of the action genre and displays the recommendation list 4920 on the screen of the display apparatus 1000.
  • 50 is a flowchart illustrating a method of determining and displaying preferred content based on a viewing history of a user according to an embodiment of the present invention.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 recognize motions of a plurality of users who watch content to be played back.
  • the user recognition apparatus 1100 and the content reproducing apparatus 1200 may perform not only motion recognition but also face recognition for identifying each user.
  • the content reproducing apparatus 1200 selects a user performing a preset specific operation. For example, you can select the user who will operate the remote controller. In addition, the user may be selected based on various operations.
  • the content reproducing apparatus 1200 may analyze the viewing history of the selected user to determine a preferred genre of the selected user. In detail, the content reproducing apparatus 1200 analyzes a list of contents watched by the selected user, and determines the genre of the content preferred by the selected user.
  • the content reproducing apparatus 1200 displays a content recommendation list of the selected genre of the selected user on the screen of the display apparatus 1000.
  • 51 is a diagram illustrating a configuration of a display apparatus that supports a content reproduction control function according to an embodiment of the present invention.
  • the processes for controlling content reproduction described so far may be performed in a content reproduction apparatus provided separately from the display apparatus, but all processes may be performed in the display apparatus. In this case, only one single device can control the reproduction of the content.
  • the display apparatus 1000 may include a user recognition apparatus 1100, a user interface unit 1010, a communication unit 1040, a storage unit 1050, an output unit 1030, and the like. It may include a controller 1020.
  • the user recognition device 1100 may recognize a plurality of users who watch content. In this case, recognition refers to an operation of confirming the existence of an object or extracting and analyzing a feature of the object.
  • the user recognition apparatus 1100 may include a detector (not shown) for detecting an image or an audio, and an analyzer (not shown) for analyzing the detected image or an audio.
  • the detector may be implemented as a camera or a microphone provided in the display apparatus 1000, and the analyzer may be implemented as a processor capable of analyzing video or audio.
  • the user interface 1010 is a component for receiving various inputs from a user, and corresponds to an operation button or a remote controller provided in the apparatus.
  • the communication unit 1040 is a component for transmitting and receiving data, and may receive content from an external server or the like through wired or wireless communication.
  • the storage unit 1050 is a space for storing data, and may store content, user age information, and a favorite channel list for each user received from the outside.
  • the output unit 1030 may include an image output unit 1031 and an audio output unit 1032.
  • the video and audio of the content reproduced by the display apparatus 1000 are output through the video output unit 1031 and the audio output unit 1032, respectively.
  • the controller 1020 controls the overall operation of the components included in the display apparatus 1000.
  • the controller 1020 may be implemented as a microprocessor.
  • the controller 1020 may include a recognition manager 1021 and a restriction manager 1022.
  • the recognition manager 1021 may perform user recognition using a user captured image or a user voice received from the user recognition apparatus 1100, and select at least one user from among the recognized plurality of users according to a predetermined criterion. .
  • the recognition manager 1021 detects a part corresponding to the face of the person in the photographed image, and then extracts facial features by analyzing the symmetrical composition, appearance, hair, eye color, and facial muscle movement. .
  • the recognition manager 1021 may determine the ages of the users by comparing the extracted facial features with user age information previously stored in the storage unit 1050.
  • the user age information may be a form in which the age of the corresponding user is mapped and stored in the picture of each user.
  • the recognition manager 1021 may analyze the figure of the person in the captured image received from the user recognition device 1100, or may analyze the voice of the user received from the user recognition device 1100 and compare it with previously stored user age information. It may also determine the age of the users.
  • the user age information may be in a form in which the age of the corresponding user is mapped and stored in the body shape or the voice of each user.
  • the recognition manager 1021 analyzes the photographed image or the user's voice received from the user recognition device 1100, and compares the analysis result with features of a face, body type, or voice for each age group previously stored in the storage unit 1050. You can also predict their age.
  • the recognition manager 1021 may analyze the operations of users from the captured image received from the user recognition device 1100.
  • the recognition manager 1021 may detect when there is a change in the number of users who watch the content, and may predict the addition of the user who views the content by analyzing the conversational voices of the users.
  • the recognition manager 1021 may select a user according to a predetermined criterion. For example, the recognition manager 1021 may select a user of a minimum age or a user who performs a specific operation. In addition, the recognition manager 1021 may select a user according to various criteria.
  • the restriction manager 1022 controls the playback of the content according to the selected user. For example, when the user of the minimum age is selected, the restriction manager 1022 may compare the age of the selected user and the viewing grade of the content to limit the playback of content that is not allowed for the selected user. In this case, the restriction manager 1022 may receive a rating of the content from the content provider. However, when the rating is not provided, the restriction manager 1022 may analyze the content to determine the rating.
  • the elements included in the display apparatus 1000 may perform operations for executing the content reproduction control method described above with reference to FIGS. 1 to 50, even if the operations are not described with reference to FIG. 51. .
  • FIG. 51 an embodiment in which all processes for controlling playback of content are directly performed by the display apparatus 1000 such as a TV having a display function has been described. Processes such as restrictions may be performed on separate devices or external servers.
  • a system for performing content reproduction control according to an embodiment of the present invention may include a display apparatus 1000, a user recognition apparatus 1100, a content reproduction apparatus 1200, and a server 1300. Can be. Specific configuration and operation of each device will be described with reference to FIGS. 53 and 54.
  • FIG. 53 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 52 according to an embodiment.
  • FIG. 53 illustrates only essential components necessary to perform the present embodiment, and thus, each device may further include general components.
  • the content reproducing apparatus 1200 performs all processes such as user recognition, content restriction determination, and content restriction.
  • the server 1300 provides content to be played back to the content reproducing apparatus 1200, and the user recognition apparatus 1100 transmits the captured image of the user to the content reproducing apparatus 1200.
  • the display apparatus 1000 may include a communication unit 1040 and an output unit 1030, and the output unit 1030 may include an image output unit 1031 and an audio output unit 1032.
  • the image output unit 1031 corresponds to a configuration such as an LCD or an OLED panel capable of displaying a content reproduction screen.
  • the voice output unit 1032 corresponds to a configuration such as a speaker.
  • the display apparatus 1000 may receive data for reproducing the content from the content reproducing apparatus 1200 through the communication unit 1040 and output the image and audio to the output unit 1030.
  • the user recognition device 1100 may include a camera 1110 for capturing an image and a communication unit 1120 for transmitting the captured image.
  • the user recognition device 1100 may further include a voice detector (not shown) for detecting a voice of the user.
  • the user recognition apparatus 1100 may be implemented as a separate device separate from the display apparatus 1000 as illustrated in FIGS. 52 and 53, or may be replaced by a camera module embedded in the display apparatus 1000. . See this embodiment shown in FIGS. 55 and 56 below.
  • the content reproducing apparatus 1200 may include a communication unit 1210, a control unit 1220, and a storage unit 1230, and the control unit 1220 may include a recognition manager 1221 and a restriction manager 1222.
  • the communication unit 1210 receives the captured image from the user recognition device 1100, transmits the captured image to the controller 1220, and receives the content from the server 1300 and transmits the content to the controller 1220.
  • the controller 1220 may perform user recognition, determination of content limitation, and content restriction.
  • the recognition manager 1221 may recognize the faces or body shapes of the plurality of users from the received captured image.
  • the recognition manager 1221 may analyze the user voice received from the user recognition device 1100.
  • the recognition manager 1221 selects at least one user from among the plurality of users according to a predetermined criterion. For example, the recognition manager 1221 may select a user of the minimum age, or may select a user performing a specific operation.
  • the restriction manager 1222 controls the reproduction of the content according to the selected user. For example, the restriction manager 1222 compares the selected user's age with the viewing grade of the content to determine whether the viewing is possible, and if it is determined that the viewing is not possible, stops the content playback or processes the content to display the display device 1000. Can transmit
  • the controller 1220 may access and use the necessary information in the storage unit 1230 when performing a process such as user recognition, content limitation determination, and content restriction.
  • the storage unit 1230 may store user information necessary for recognition of a user and selection of a reference user, and may store content related information necessary for determining whether to restrict content.
  • the server 1300 may include a communication unit 1330, a control unit 1320, and a storage unit 1310.
  • the communication unit 1330 of the server 1300 may be connected to the communication unit 1210 of the content reproducing apparatus 1200 through a network such as the Internet.
  • the controller 1320 of the server 1300 When the controller 1320 of the server 1300 receives a content request from the content reproducing apparatus 1200, the controller 1320 extracts the requested content from the content stored in the storage 1310 and transmits the requested content to the content reproducing apparatus 1200.
  • the content reproduction apparatus 1200 transmits the content reproduction data controlled through the communication unit 1210 to the communication unit 1040 of the display apparatus 1000, and the display apparatus 1000 converts the received content data to the output unit. Video and audio may be output to the 1030.
  • FIG. 54 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 52 according to another embodiment.
  • FIG. 54 illustrates only essential components necessary to perform the present embodiment, and thus, each device may further include general components.
  • the content reproducing apparatus 1200 and the server 1300 share and perform processes for content reproduction control.
  • the content reproducing apparatus 1200 performs user recognition
  • the server 1300 determines whether to restrict the content and limits the content based on the user recognition result.
  • the user recognition device 1100 transmits the captured image of the user to the content reproducing apparatus 1200.
  • the display apparatus 1000 may include a communication unit 1040 and an output unit 1030, and the output unit 1030 may include an image output unit 1031 and an audio output unit 1032.
  • the image output unit 1031 corresponds to a configuration such as an LCD or an OLED panel capable of displaying a content reproduction screen.
  • the voice output unit 1032 corresponds to a configuration such as a speaker.
  • the display apparatus 1000 may receive data for reproducing the content from the content reproducing apparatus 1200 through the communication unit 1040 and output the image and audio to the output unit 1030.
  • the user recognition device 1100 may include a camera 1110 for capturing an image and a communication unit 1120 for transmitting the captured image.
  • the user recognition device 1100 may further include a voice detector (not shown) for detecting a voice of the user.
  • the user recognition apparatus 1100 may be implemented as a separate device separate from the display apparatus 1000 as shown in FIGS. 52 and 54, or may be replaced by a camera module embedded in the display apparatus 1000. . See this embodiment shown in FIGS. 55 and 56 below.
  • the content reproducing apparatus 1200 may include a communication unit 1210, a control unit 1220, and a storage unit 1230, and the control unit 1220 may include a recognition manager 1221.
  • the communication unit 1210 receives the captured image from the user recognition device 1100, transmits the captured image to the controller 1220, and receives the content from the server 1300 and transmits the content to the controller 1220.
  • the controller 1220 may perform user recognition and user selection.
  • the recognition manager 1221 may recognize the faces or body shapes of the plurality of users from the received captured image.
  • the recognition manager 1221 may analyze the user voice received from the user recognition device 1100.
  • the recognition manager 1221 selects at least one user from among the plurality of users according to a predetermined criterion. For example, the recognition manager 1221 may select a user of the minimum age, or may select a user performing a specific operation.
  • the controller 1220 transmits the user recognition and the user selection result to the server 1300 through the communication unit 1210.
  • the controller 1220 may access and use the necessary information in the storage unit 1230 in performing a process such as user recognition and user selection.
  • the storage unit 1230 may store user information necessary for recognition of the user and selection of the user.
  • the server 1300 may include a communicator 1330, a controller 1320, and a storage 1310, and the controller 1320 may include a limit manager 1322.
  • the communication unit 1330 of the server 1300 may be connected to the communication unit 1210 of the content reproducing apparatus 1200 through a network such as the Internet.
  • the controller 1320 of the server 1300 When the controller 1320 of the server 1300 receives a content request from the content reproducing apparatus 1200, the controller 1320 extracts the requested content from the content stored in the storage 1310 and transmits the requested content to the content reproducing apparatus 1200.
  • the limitation manager 1322 included in the controller 1320 of the server 1300 controls the playback of the content according to the selected user. For example, the restriction manager 1322 compares the age of the selected user with a viewing grade of the content to determine whether to view the content, and if it is determined that the viewing is not possible, stops the content or processes the content to play the content. Can be sent to.
  • the content reproduction apparatus 1200 transmits the content reproduction data controlled through the communication unit 1210 to the communication unit 1040 of the display apparatus 1000, and the display apparatus 1000 converts the received content data to the output unit. Video and audio may be output to the 1030.
  • a system for performing content reproduction control according to an embodiment of the present invention may include a display apparatus 1000 and a server 1300.
  • the display apparatus 1000 includes a user recognition apparatus 1100. Specific configuration and operation of each device will be described with reference to FIG. 56.
  • FIG. 56 is a diagram illustrating a detailed configuration of devices included in the system shown in FIG. 55 according to an embodiment.
  • FIG. 56 illustrates only essential components necessary for performing the present embodiment, and thus, each device may further include general components.
  • the server 1300 does not include a separate device for playing content, and the server 1300 performs all processes such as user recognition, user selection, content limitation determination, and content restriction.
  • the display apparatus 1000 not only includes a communication unit 1040 and an output unit 1030 as shown in FIG. 53, but also additionally includes a user recognition device 1100. Therefore, the user recognition apparatus 1100 photographs images of a plurality of users, and the photographed images are transmitted to the server 1300 through the communication unit 1040.
  • the server 1300 may include a communication unit 1330, a controller 1320, and a storage unit 1310, and the controller 1320 may include a recognition manager 1321 and a restriction manager 1322.
  • the communication unit 1330 of the server 1300 may be connected to the communication unit 1040 of the display apparatus 1000 through a network such as the Internet.
  • the controller 1320 When the controller 1320 receives the content transmission request from the display apparatus 1000, the controller 1320 extracts the content corresponding to the request from the storage 1310 and transmits the content corresponding to the request to the display apparatus 1000 through the communication unit 1330. At this time, the recognition manager 1321 and the limit manager 1322 of the controller 1330 use the captured images of the plurality of photographers received from the display apparatus 1000 to determine user recognition, user selection, content limitation, and content limitation. Do this.
  • the recognition manager 1321 may recognize faces or body types of the plurality of users from the received captured image. Alternatively, the recognition manager 1321 may analyze the user voice received from the display apparatus 1100.
  • the recognition manager 1321 selects at least one user from among the plurality of users according to a predetermined criterion. For example, the recognition manager 1321 may select a user of the minimum age, or may select a user performing a specific operation.
  • the restriction manager 1322 controls the playback of the content according to the selected user. For example, the restriction manager 1322 compares the selected user's age with the viewing grade of the content to determine whether the viewing is possible, and when it is determined that the viewing is not possible, stops the playback of the content or processes the content to the display apparatus 1000. Can transmit
  • the controller 1320 may access and use the necessary information in the storage unit 1310 in performing processes such as user recognition, user selection, content limitation determination, and content restriction.
  • the storage unit 1310 may store user information necessary for recognition of a user and selection of a reference user, and may store content related information necessary for determining whether to restrict content.
  • a system for performing content reproduction control may include a display apparatus 1000, a user recognition apparatus 1100, and a content reproduction apparatus 1200.
  • the content reproducing device 1200 does not include a server and directly provides content and simultaneously controls playback of the content. Specific configuration and operation of each device will be described with reference to FIG. 58.
  • each device may further include general components.
  • the content reproducing apparatus 1200 does not include a server and directly provides content and simultaneously controls playback of the content. That is, the content reproducing apparatus 1200 directly provides the content using the content reproducing driver 1240 without having to receive the content from an external server.
  • the content reproducing driver 1240 corresponds to a configuration for reproducing contents recorded in a storage medium such as a CD / DVD driver or a USB driver.
  • the display apparatus 1000 may include a communication unit 1040 and an output unit 1030, and the output unit 1030 may include an image output unit 1031 and an audio output unit 1032.
  • the image output unit 1031 corresponds to a configuration such as an LCD or an OLED panel capable of displaying a content reproduction screen.
  • the voice output unit 1032 corresponds to a configuration such as a speaker.
  • the display apparatus 1000 may receive data for reproducing the content from the content reproducing apparatus 1200 through the communication unit 1040 and output the image and audio to the output unit 1030.
  • the user recognition device 1100 may include a camera 1110 for capturing an image and a communication unit 1120 for transmitting the captured image.
  • the user recognition device 1100 may further include a voice detector (not shown) for detecting a voice of the user.
  • the user recognition apparatus 1100 may be implemented as a separate device separate from the display apparatus 1000 as illustrated in FIGS. 52 and 53, or may be replaced by a camera module embedded in the display apparatus 1000. . See this embodiment shown in FIGS. 55 and 56 below.
  • the content reproducing apparatus 1200 may include a communication unit 1210, a control unit 1220, and a storage unit 1230, and the control unit 1220 may include a recognition manager 1221 and a restriction manager 1222.
  • the communication unit 1210 receives the captured image from the user recognition device 1100, transmits the captured image to the controller 1220, and receives the content from the server 1300 and transmits the content to the controller 1220.
  • the controller 1220 may perform user recognition, determination of content limitation, and content restriction.
  • the recognition manager 1221 may recognize the faces or body shapes of the plurality of users from the received captured image.
  • the recognition manager 1221 may analyze the user voice received from the user recognition device 1100.
  • the recognition manager 1221 selects at least one user from among the plurality of users according to a predetermined criterion. For example, the recognition manager 1221 may select a user of the minimum age, or may select a user performing a specific operation.
  • the restriction manager 1222 controls the reproduction of the content according to the selected user. For example, the restriction manager 1222 compares the selected user's age with the viewing grade of the content to determine whether the viewing is possible, and if it is determined that the viewing is not possible, stops the content playback or processes the content to display the display device 1000. Can transmit
  • the controller 1220 may access and use the necessary information in the storage unit 1230 when performing a process such as user recognition, content limitation determination, and content restriction.
  • the storage unit 1230 may store user information necessary for recognition of a user and selection of a reference user, and may store content related information necessary for determining whether to restrict content.
  • the above-described embodiments of the present invention can be written as a program that can be executed in a computer, and can be implemented in a general-purpose digital computer that operates the program using a computer-readable recording medium.
  • the computer-readable recording medium includes, for example, magnetic storage media such as ROM, floppy disk, hard disk, etc., optical read media such as CD-ROM, DVD, etc., and storage media such as carrier wave such as transmission over the Internet. .

Abstract

본 발명의 실시예에 따른 컨텐츠 재생 장치는, 영상 및 음성이 출력되는 출력부; 상기 출력부를 통해 재생되는 컨텐츠를 시청하는 복수의 사용자들을 인식하는 사용자 인식부; 및 상기 인식된 복수의 사용자들 중에서 미리 정해진 기준을 이용하여 적어도 하나의 사용자를 선택하고, 상기 선택된 사용자에 따라서 컨텐츠의 재생을 제어하는 제어부를 포함한다.

Description

컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치
본 발명은 복수의 사용자가 시청하는 컨텐츠의 재생을 제어하는 방법 및 이를 수행하기 위한 컨텐츠 재생 장치에 관한 것이다.
가정에서 TV를 시청할 때와 같이 복수의 사용자들이 함께 동일한 컨텐츠를 시청하는 경우를 가정하면, 복수의 사용자들 중 일부 사용자에게는 적절하지 않은 내용이 컨텐츠에 포함되어 있거나, 또는 일부의 사용자의 기호에 맞지 않는 컨텐츠가 재생되는 등의 문제점이 발생할 수 있다.
이를 해결하기 위해, 컨텐츠를 시청하는 복수의 사용자들을 고려하여 컨텐츠의 재생을 제어하는 방법을 생각할 수 있다. 다만 이때, 각각의 사용자들의 연령 또는 기호 등의 조건은 모두 다르므로 일정한 기준에 따라 복수의 사용자들을 고려하여 가장 적절한 제어 방법을 찾을 필요가 있다.
복수의 사용자가 함께 컨텐츠를 시청하는 경우, 컨텐츠를 시청하는 복수의 사용자에 따라서 컨텐츠의 재생을 제어하는 방법 및 장치를 제공하고자 한다.
본 발명의 실시예에 따르면, 컨텐츠를 시청하는 복수의 사용자들 중에서 미리 정해진 기준을 이용하여 적어도 하나의 사용자를 선택하고, 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다.
복수의 사용자가 함께 시청하는 컨텐츠의 재생을 적절하게 제어할 수 있다.
도 1은 본 발명의 실시예에 따른 컨텐츠의 재생 제어 방법의 실시 환경을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 컨텐츠의 재생 제어 방법을 나타내는 순서도이다.
도 3 내지 도 5는 본 발명의 실시예에 따른 미리 저장된 사용자의 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 설명하기 위한 도면들이다.
도 6 내지 도 13은 본 발명의 실시예들에 따른 컨텐츠에 시청 불가 장면이 포함된 경우, 컨텐츠 재생 장치가 컨텐츠의 재생을 제한하는 다양한 방법들을 도시한 도면들이다.
도 14는 본 발명의 실시예에 따른 미리 저장된 사용자의 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 나타내는 순서도이다.
도 15 내지 도 17은 본 발명의 실시예들에 따른 사용자 인식 결과를 이용하여 사용자의 연령을 예측하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법들을 설명하기 위한 도면들이다.
도 18 및 도 19는 본 발명의 실시예들에 따른 사용자 인식 결과를 이용하여 사용자의 연령을 예측하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법들을 나타내는 순서도들이다.
도 20은 본 발명의 실시예에 따른 사용자의 연령 예측 실패시 사용자로부터 입력받은 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 설명하기 위한 도면이다.
도 21은 본 발명의 실시예에 따른 사용자의 연령 예측 실패시 사용자로부터 입력받은 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 나타내는 순서도이다.
도 22 내지 도 23은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자가 추가되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 24는 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자가 추가되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 25 내지 도 26은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자 중 일부가 이탈하고, 컨텐츠 재생 장치가 기존 사용자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 27은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자 중 일부가 이탈하고, 컨텐츠 재생 장치가 기존 사용자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 28 내지 도 31은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자의 수가 변동되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알지 못하는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 32는 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자의 수가 변동되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알지 못하는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 33 내지 도 34는 본 발명의 실시예에 따른 시청자들의 대화 분석을 통해 추가될 시청자를 예측하는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 35는 본 발명의 실시예에 따른 시청자들의 대화 분석을 통해 추가될 시청자를 예측하는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 36 내지 도 37은 본 발명의 실시예에 따른 재생 컨텐츠의 변경시 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 설명하기 위한 도면들이다.
도 38은 본 발명의 실시예에 따른 재생 컨텐츠의 변경시 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 나타내는 순서도이다.
도 39 내지 도 40은 본 발명의 실시예에 따른 주기적으로 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 설명하기 위한 도면들이다.
도 41은 본 발명의 실시예에 따른 주기적으로 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 나타내는 순서도이다.
도 42a는 본 발명의 실시예에 따른 연령을 기준으로 선택된 사용자에 따라 검색 채널을 제한하는 방법을 설명하기 위한 도면이다.
도 42b은 본 발명의 실시예에 따른 연령을 기준으로 선택된 사용자에 따라 검색 채널을 제한하는 방법을 나타내는 순서도이다.
도 43a는 본 발명의 실시예에 따른 채널 변경시 연령을 기준으로 선택된 사용자에 따라 컨텐츠 재생을 제어하는 방법을 설명하기 위한 도면이다.
도 43b은 본 발명의 실시예에 따른 채널 변경시 연령을 기준으로 선택된 사용자에 따라 컨텐츠 재생을 제어하는 방법을 나타내는 순서도이다.
도 44 내지 도 45는 본 발명의 실시예에 따른 사용자의 동작 인식 결과에 기초하여 선택된 사용자에 따라 선호 채널을 표시하는 방법을 설명하기 위한 도면들이다.
도 46은 본 발명의 실시예에 따른 사용자의 동작 인식 결과에 따라 선택된 사용자에 따라 선호 채널을 표시하는 방법을 나타내는 순서도이다.
도 47은 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 채널을 판단하고 표시하는 방법을 설명하기 위한 도면이다.
도 48은 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 채널을 판단하고 표시하는 방법을 나타내는 순서도이다.
도 49는 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 컨텐츠를 판단하고 표시하는 방법을 설명하기 위한 도면이다.
도 50은 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 컨텐츠를 판단하고 표시하는 방법을 나타내는 순서도이다.
도 51은 본 발명의 실시예에 따른 컨텐츠 재생 제어 기능을 지원하는 디스플레이 장치의 구성을 도시한 도면이다.
도 52는 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템을 도시한 도면이다.
도 53은 일 실시예에 따라 도 52에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다.
도 54는 다른 실시예에 따라 도 52에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다.
도 55는 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템을 도시한 도면이다.
도 56은 일 실시예에 따라 도 55에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다.
도 57은 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템을 도시한 도면이다.
도 58은 일 실시예에 따라 도 57에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다.
상기 기술적 과제를 해결하기 위한 본 발명의 일 실시예에 따른 컨텐츠 재생 장치는, 영상 및 음성이 출력되는 출력부; 상기 출력부를 통해 재생되는 컨텐츠를 시청하는 복수의 사용자들을 인식하는 사용자 인식부; 및 상기 인식된 복수의 사용자들 중에서 미리 정해진 기준을 이용하여 적어도 하나의 사용자를 선택하고, 상기 선택된 사용자에 따라서 컨텐츠의 재생을 제어하는 제어부를 포함할 수 있다.
이때, 상기 사용자 인식부는 상기 복수의 사용자들의 얼굴, 음성 또는 체형 중 적어도 하나를 인식하여 상기 복수의 사용자들 각각의 연령을 판단하고, 상기 제어부는 상기 복수의 사용자들 중 최소 연령의 사용자를 선택하고, 상기 선택된 사용자의 시청이 허용되지 않는 컨텐츠의 재생을 제한할 수 있다.
또한 이때, 상기 제어부는 상기 컨텐츠를 분석하여 시청 등급을 판단하고, 상기 판단된 시청 등급을 상기 선택된 사용자의 연령과 비교하여 시청 허용 여부를 판단할 수 있다.
한편, 상기 사용자 인식부는 상기 재생되는 컨텐츠를 시청하는 사용자 수의 변경을 감지하고, 상기 제어부는 상기 사용자 수의 변경이 감지되면 다시 적어도 하나의 사용자를 선택할 수 있다.
또는, 상기 제어부는 상기 재생되는 컨텐츠를 시청하는 복수의 사용자들의 대화 음성을 분석하여, 상기 컨텐츠를 시청하는 사용자의 추가를 예측하고, 상기 추가가 예측되는 사용자 및 상기 복수의 사용자들 중에서 적어도 하나의 사용자를 선택할 수 있다.
또는, 상기 출력부를 통해서 재생되는 컨텐츠가 변경되는 경우, 상기 사용자 인식부는 컨텐츠를 시청하는 복수의 사용자들을 다시 인식하고, 상기 제어부는 상기 인식된 복수의 사용자들 중에서 다시 적어도 하나의 사용자를 선택할 수 있다.
또는, 상기 사용자 인식부 및 상기 제어부는 각각 복수의 사용자들의 인식 및 적어도 하나의 사용자의 선택을 주기적으로 수행할 수 있다.
또는, 상기 사용자 인식부는 상기 복수의 사용자들의 동작을 인식하고, 상기 제어부는 상기 복수의 사용자들 중에서 미리 설정된 동작을 수행하는 적어도 하나의 사용자를 선택하고, 상기 선택된 사용자의 기호(preference)에 따라 컨텐츠의 재생을 제어할 수 있다.
이때, 상기 제어부는 상기 선택된 사용자의 선호 채널 목록 또는 선호 컨텐츠 목록을 상기 출력부에 표시할 수 있다.
상기 기술적 과제를 해결하기 위한 본 발명의 다른 실시예에 따른 컨텐츠의 재생 제어 방법은, 컨텐츠를 시청하는 복수의 사용자들을 인식하는 단계; 상기 인식된 복수의 사용자들 중에서 미리 정해진 기준을 이용하여 적어도 하나의 사용자를 선택하는 단계; 및 상기 선택된 사용자에 따라서 상기 컨텐츠의 재생을 제어하는 단계를 포함할 수 있다.
이때, 상기 인식하는 단계는 상기 복수의 사용자들의 얼굴, 음성 또는 체형 중 적어도 하나를 인식하여 상기 복수의 사용자들 각각의 연령을 판단하고, 상기 선택하는 단계는 상기 복수의 사용자들 중 최소 연령의 사용자를 선택하고, 상기 제어하는 단계는 상기 선택된 사용자의 시청이 허용되지 않는 컨텐츠의 재생을 제한할 수 있다.
또한 이때, 상기 제어하는 단계는, 상기 컨텐츠를 분석하여 시청 등급을 판단하는 단계; 상기 판단된 시청 등급을 상기 선택된 사용자의 연령과 비교하여 시청 허용 여부를 판단하는 단계; 및 판단 결과 상기 선택된 사용자에게 상기 컨텐츠의 시청이 허용되지 않는다면, 상기 컨텐츠의 적어도 일부를 제한하여 상기 컨텐츠를 재생하는 단계를 포함할 수 있다.
한편, 상기 인식하는 단계 및 선택하는 단계는 상기 컨텐츠를 시청하는 사용자의 수가 변경될 때마다 수행될 수 있다.
또는, 상기 인식하는 단계는 상기 복수의 사용자들의 대화 음성을 분석하여, 상기 컨텐츠를 시청하는 사용자의 추가를 예측하고, 상기 선택하는 단계는 상기 추가가 예측되는 사용자 및 상기 복수의 사용자들 중에서 적어도 하나의 사용자를 선택할 수 있다.
또는, 상기 인식하는 단계 및 선택하는 단계는 재생되는 컨텐츠가 변경될 때마다 수행될 수 있다.
또는, 상기 인식하는 단계 및 선택하는 단계는 주기적으로 수행될 수 있다.
또는, 상기 인식하는 단계는 상기 복수의 사용자들의 동작을 인식하고, 상기 선택하는 단계는 상기 복수의 사용자들 중에서 미리 설정된 동작을 수행하는 적어도 하나의 사용자를 선택하고, 상기 제어하는 단계는 상기 선택된 사용자의 기호(preference)에 따라 컨텐츠의 재생을 제어할 수 있다.
이때, 상기 선택된 사용자의 선호 채널 목록 또는 선호 컨텐츠 목록을 화면에 표시하는 단계를 더 포함할 수 있다.
이하에서는 도면을 참조하여 본 발명의 실시예들을 상세히 설명한다. 본 실시예들의 특징을 보다 명확히 설명하기 위하여 이하의 실시예들이 속하는 기술분야에서 통상의 지식을 가진 자에게 널리 알려져 있는 사항들에 관해서는 자세한 설명은 생략하기로 한다.
도 1은 본 발명의 실시예에 따른 컨텐츠의 재생 제어 방법의 실시 환경을 도시한 도면이다.
도 1을 참조하면, 사용자 A, 사용자 B 및 사용자 C, 이렇게 3명의 사용자들이 함께 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있다. 그리고, 디스플레이 장치(1000)는 컨텐츠를 시청하는 사용자를 인식하기 위한 사용자 인식 장치(1100) 및 컨텐츠의 재생을 제어하기 위한 컨텐츠 재생 장치(1200)와 연결되어 있을 수 있다.
이와 같이, 본 발명의 실시예에 따른 컨텐츠의 재생 제어 방법은 복수의 사용자들이 함께 동일한 컨텐츠를 시청하는 경우에 실시된다. 한편, 도 1에는 디스플레이 장치(1000)가 TV인 것으로 도시하였으나, 이외에도 태블릿, 스마트폰 또는 노트북과 같이 디스플레이 기능이 있는 다양한 장치가 사용될 수도 있다. 이때, 컨텐츠란 문자, 음성(음악), 이미지, 비디오, 방송, 앱(Application), 게임(Game), 전자책 등으로 다양한 종류의 정보를 의미한다. 또한 이때, 컨텐츠의 재생이라 함은 비디오, 방송의 영상 또는 음성(음악)을 재생하거나, 게임 또는 앱 등을 실행하거나, 전자책의 내용을 화면에 표시하는 것을 의미한다.
컨텐츠를 시청하는 사용자에 적합하지 않은 컨텐츠가 포함되어 있거나 선호하지 않는 내용이 포함되어 있을 가능성이 있으므로, 컨텐츠를 가공하여 재생하거나 재생을 중지, 또는 컨텐츠를 추천 하는 등의 방식으로 컨텐츠의 재생을 제어를 할 필요가 있다. 그런데, 도 1과 같이 컨텐츠를 시청하는 사용자가 복수인 경우에는 어느 사용자를 기준으로 컨텐츠의 재생을 제어해야 하는지가 문제된다. 이를 해결하기 위해 본 발명의 실시예에서 컨텐츠 재생 장치(1200)는 일정한 기준에 따라서 복수의 사용자들 중에서 적어도 한명의 사용자를 선택하여, 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다.
여기서 기준이란, 컨텐츠를 시청하는 사용자의 인구통계학적 (Demographic) 특성에 관한 것으로 예를 들면, 최소 연령, 남/여, 컨텐츠 선호도, 시청자들간의 관계 등이 해당될 수 있다.
사용자 인식 장치(1100)는 컨텐츠를 시청하는 복수의 사용자들을 인식할 수 있다. 이때, 인식(recognition)이란 사용자의 존재를 확인하거나, 사용자의 특징을 추출 및 분석하는 동작을 의미한다.
컨텐츠 재생 장치(1200)는 사용자 인식 결과로부터 획득된 다양한 사용자 정보를 이용하여, 일정한 기준에 따라 복수의 사용자들 중에서 적어도 한명의 사용자를 선택하여, 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다.
컨텐츠 재생 장치(1200)가 사용자를 인식하고 사용자 정보를 획득하는 구체적인 예시들은 다음과 같다. 사용자 인식 장치(1100)를 이용하여 사용자의 얼굴, 체형 또는 음성 등을 인식한 후에 미리 저장된 사용자 정보와 비교하여 사용자를 식별하거나 사용자의 연령 또는 기호 등을 확인할 수 있다. 또는, 저장된 사용자 정보가 없을 경우, 컨텐츠 재생 장치(1200)는 사용자의 얼굴, 체형 또는 음성 등을 인식하고 이를 분석하여 사용자의 연령 등을 예측할 수도 있다. 또는, 컨텐츠 재생 장치(1200)는 사용자의 동작 인식을 통해 특정 동작을 수행하는 사용자를 인식할 수도 있다. 이외의 사용자 인식 및 사용자 정보 획득에 대한 자세한 설명은 아래의 각 실시 예들에서 설명하기로 한다.
이와 같이, 컨텐츠 재생 장치(1200)는 사용자 인식을 통해 획득한 사용자 정보를 이용하여 복수의 사용자들 중에서 적어도 한 명의 사용자를 선택할 수 있다. 이때, 사용자는 일정한 기준에 따라서 선택될 수 있다. 예를 들어, 컨텐츠 재생 장치(1200)는 사용자들의 연령 정보를 획득한 경우 최소 연령의 사용자를 선택할 수 있으며, 또는 특정 동작을 수행하는 사용자를 선택할 수도 있다. 이외에도 컨텐츠 재생 장치(1200)는 다양한 기준에 따라서 사용자를 선택할 수 있다.
사용자가 선택되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어할 수 있다. 컨텐츠 재생 장치(1200)는 다양한 기준을 고려하여 사용자에 따라 컨텐츠의 재생을 제어할 수 있다. 예를 들어, 컨텐츠 재생 장치(1200)는 사용자의 연령에 따라 컨텐츠 재생을 제어할 수도 있고, 또는 사용자의 기호(preference)에 따라 컨텐츠 재생을 제어할 수도 있다. 최소 연령의 사용자가 선택되었다면, 컨텐츠 재생 장치(1200)는 선택된 사용자와 컨텐츠의 시청 등급을 비교하여 시청 가능 여부를 판단하고, 시청이 불가하다고판단된 경우 유해한 장면이 화면에 표시되지 않도록 컨텐츠의 일부를 가공하여 재생하거나 재생을 중지할 수 있다. 또는, 컨텐츠 선택의 결정권을 가지고 있다고 판단되는 사용자(e.g. 리모트 컨트롤러를 조작하는 사용자)가 선택되었다면, 컨텐츠 재생 장치(1200)는 선택된 사용자가 선호하는 채널 또는 컨텐츠의 목록을 컨텐츠의 재생 화면에 함께 표시하여 추천할 수도 있다.
한편, 컨텐츠 재생장치는 복수의 시청자 중 두 명 이상을 선택할 수도 있으며, 복수의 사용자가 선택되는 경우, 컨텐츠 재생 장치(1200)는 복수의 선택된 사용자들 모두의 연령 또는 기호를 고려하여 컨텐츠의 재생을 제어할 수도 있다.
이 밖에도, 다양한 실시예들의 구현이 가능하며, 그에 대한 자세한 설명은 아래에서 도면을 참조하여 하도록 한다.
한편, 이하의 실시예들에서 컨텐츠 재생 제어를 위한 프로세스들은 컨텐츠 재생 장치(1200)에서 수행되는 것으로 설명하였으나, 이와 다르게 디스플레이 장치(1000)에서 해당 프로세스의 일부 또는 전부를 수행할 수도 있고, 또는 별도의 서버에서 해당 프로세스의 일부 또는 전부를 수행할 수도 있다. 즉, 시스템을 구성하기에 따라서 컨텐츠 재생 제어를 위한 프로세스들은 다양한 장치상에서 수행될 수 있다. 시스템 구성과 관련한 자세한 실시예들은 아래의 도 51 내지 도 58 부분을 참조한다.
도 2는 본 발명의 실시예에 따른 컨텐츠의 재생 제어 방법을 나타내는 순서도이다.
도 2를 참조하면, 201 단계에서 컨텐츠 재생 장치는 컨텐츠를 시청하는 복수의 사용자들을 인식한다. 이때, 컨텐츠 재생 장치는 복수의 사용자들의 얼굴, 체형 또는 음성 등을 인식할 수 있다.
복수의 사용자들의 인식이 완료되면, 202 단계에서 컨텐츠 재생 장치는 일정한 기준에 따라서 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 예를 들어, 컨텐츠 재생 장치는 최소 연령의 사용자를 선택할 수도 있고, 또는 특정 동작을 수행하는 사용자를 선택할 수도 있다.
203 단계에서 컨텐츠 재생 장치는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 예를 들어, 컨텐츠 재생 장치는 선택된 사용자의 연령과 컨텐츠의 시청 등급을 비교하여 시청 가능 여부를 판단하고, 시청 불가로 판단되면 컨텐츠의 재생을 중지하거나 컨텐츠를 가공하여 화면에 표시할 수 있다.
이와 같이, 컨텐츠 재생 장치는 복수의 사용자들을 인식하고 일정한 기준에 따라 적어도 하나의 사용자를 선택한 후, 선택된 사용자에 따라 컨텐츠의 재생을 제어함으로써 복수의 사용자가 함께 동일한 컨텐츠를 시청하는 경우에도 적절하게 컨텐츠의 재생을 제어할 수 있다.
도 3 내지 도 5는 본 발명의 실시예에 따른 미리 저장된 사용자의 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 설명하기 위한 도면들이다. 이하에서는 도 3 내지 도 5에 도시된 실시예에 대해서 자세히 설명한다.
도 3을 참조하면, 사용자 A, 사용자 B 및 사용자 C는 디스플레이 장치(1000)에서 재생되는 컨텐츠를 함께 시청하고 있다. 그리고, 사용자 인식 장치(1100)는 컨텐츠를 시청하는 복수의 사용자들을 인식한다. 이때, 사용자 인식 장치(1100)는 디스플레이 장치(1000)와는 별도로 구비된 카메라인 것으로 도시하였으나, 이에 한정되지 않고 다양한 형태로 구현될 수 있다. 예를 들어, 사용자 인식 장치(1100)는 디스플레이 장치(1000)의 프레임 내에 내장형으로 구비된 카메라일 수도 있다.
도 4를 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들에 대한 얼굴 인식(face recognition)을 수행한다. 얼굴 인식에 대한 기술은 일반적으로 널리 알려져 있으므로 여기에서 기술 내용에 대한 자세한 설명은 생략한다. 다만, 간단하게 설명하면 얼굴 인식은, 사용자에 대한 영상을 촬영하고, 촬영된 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 대칭적 구도, 생김새, 머리카락, 눈의 색상 및 얼굴 근육의 움직임 등을 분석하여 얼굴의 특징을 추출하는 방식으로 수행될 수 있다.
복수의 사용자들에 대한 얼굴 인식이 완료되면, 컨텐츠 재생 장치(1200)는 미리 저장된 사용자 연령 정보에 기초하여 인식된 사용자들의 연령을 판단한다. 컨텐츠 재생 장치(1200) 내부에 구비된 저장부에는 적어도 하나의 사용자에 대한 연령 정보가 미리 저장되어 있을 수 있다. 사용자 연령 정보는 도 4의 테이블(410)에 도시된 바와 같이 각각의 사용자의 사진에 해당 사용자의 연령이 맵핑되어 저장되어 있는 형태일 수 있다.
컨텐츠 재생 장치(1200)는 인식된 복수의 사용자들의 얼굴을 테이블(410)에 저장된 사용자들의 사진과 비교하여 각 사용자의 연령을 판단할 수 있다. 도 4의 테이블(410)을 참조하면, 컨텐츠 재생 장치(1200)는 사용자 A의 연령은 34세, 사용자 B의 연령은 17세, 그리고 사용자 C의 연령은 6세로 판단할 수 있다.
한편, 도 4에서는 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)가 사용자들의 얼굴 인식을 통해 사용자의 연령을 판단하는 실시예에 대해서 도시하였으나, 이와 다르게 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 사용자들의 체형 또는 음성 등을 인식하고, 인식된 체형 또는 음성을 미리 저장된 사용자 연령 정보와 비교하여 사용자들의 연령을 판단할 수도 있다. 이 경우, 사용자 연령 정보는 각각의 사용자의 체형 또는 음성에 대한 정보에 해당 사용자의 연령이 맵핑되어 저장된 테이블 형태일 수 있다.
복수의 사용자들에 대한 연령 판단이 완료되면, 컨텐츠 재생 장치(1200)는 일정한 기준에 따라 사용자의 연령에 기초하여 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 도 4에서는 컨텐츠 재생 장치(1200)가 최소 연령인 사용자를 선택하는 예를 도시하였으며, 따라서 사용자 C가 선택되었다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 C에 따라서 컨텐츠의 재생을 제어한다.
도 5에는 컨텐츠 재생 장치(1200)가 선택된 사용자의 연령과 컨텐츠의 시청 등급 비교를 통해 시청이 불가능한 컨텐츠의 재생을 제한하는 실시예를 도시하였다. 도 5를 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠 제공자로부터 컨텐츠의 시청 등급을 수신하고, 이를 앞서 판단한 선택된 사용자(사용자 C)의 연령과 비교한다. 도 5에 도시된 실시예에서는 컨텐츠 재생 장치(1200)가 컨텐츠 제공자로부터 수신한 시청 등급은 19세 이상 관람가이고 선택된 사용자인 사용자 C의 연령은 6세이므로, 컨텐츠 재생 장치(1200)는 컨텐츠의 시청이 불가한 것으로 판단한다.
한편, 만약 컨텐츠 제공자가 컨텐츠의 시청 등급을 제공하지 않는 경우에는, 컨텐츠의 시청 등급은 컨텐츠의 분석을 통해 판단될 수도 있다. 예를 들어, 컨텐츠 영상의 프레임 별로 미성년자에게 유해한 요소가 포함되어 있는지 여부를 확인하여 시청 등급을 판단할 수도 있다. 이때, 분석 및 판단은 클라우드상의 서버가 수행할 수도 있고, 또는 컨텐츠 재생 장치(1200)가 수행할 수도 있다. 또는, 다른 사용자가 이전에 동일한 컨텐츠를 시청할 때 수행되었던 시청 등급 판단 결과가 서버에 저장되었다가 사용될 수도 있다.
컨텐츠의 분석을 통해 컨텐츠의 시청 등급을 판단하는 방법은 다양하게 구현될 수 있는데, 예를 들어 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 각 프레임별 영상을 분석하여 유해 장면의 포함 여부를 판단할 수도 있고, 또는 컨텐츠에 포함된 음성 분석을 통해 유해한 내용이 포함되어 있는지를 확인할 수도 있다. 특히, 프레임별 영상 분석을 통해 유해 장면의 포함 여부를 판단하는 방법은, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 각 프레임의 영상에 포함된 객체를 인식하고, 인식된 객체가 칼, 총 또는 담배와 같은 유해한 객체에 해당되는지를 판단한다. 또는, 서버 또는 컨텐츠 재생 장치(1200)는 컨텐츠의 각 프레임의 영상에서 사람의 신체를 인식하고, 인식된 신체의 색상 분석을 통해 노출 영상 인지 여부를 판단할 수 있다. 이 밖에도, 컨텐츠의 분석 및 시청 등급의 판단은 다양한 방식으로 수행될 수 있다.
다시 도 5로 돌아와서, 선택된 사용자의 컨텐츠 시청이 불가한 것으로 판단되었으므로, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생을 중지하거나 컨텐츠의 일부를 가공하여 재생하는 등의 방식으로 컨텐츠의 재생을 제한함으로써 선택된 사용자가 유해한 내용에 노출되지 않도록 할 수 있다. 도 6 내지 도 13에는 컨텐츠 재생 장치(1200)가 컨텐츠의 재생을 제한하는 구체적인 실시예들을 도시하였다.
도 6 내지 도 13은 본 발명의 실시예들에 따른 컨텐츠에 시청 불가 장면이 포함된 경우, 컨텐츠 재생 장치가 컨텐츠의 재생을 제한하는 다양한 방법들을 도시한 도면들이다.
도 6을 참조하면, 컨텐츠 재생 장치(1200)는 선택된 사용자의 컨텐츠 시청이 불가하다고 판단되면 컨텐츠의 재생을 중지하고 컨텐츠를 계속 재생할 것인지 여부를 묻는 팝업 메시지(610)를 디스플레이 장치(1000)에 표시할 수 있다. 도 6의 제1 화면(600a)에는 정상적인 컨텐츠의 재생 화면을 도시하고, 제2 화면(600b)에는 팝업 메시지(610)가 표시된 컨텐츠의 재생 화면을 도시하였다.
이때, 팝업 메시지(610)에는 현재 컨텐츠를 시청할 수 없는 사용자가 있음을 알리는 내용이 포함될 수 있다. 또한, 부가적으로 사용자가 컨텐츠의 계속 재생을 선택하는 경우, 컨텐츠 재생 장치(1200)는 비밀번호의 입력을 요구하는 팝업 메시지를 디스플레이 장치(1000)에 표시하고, 입력된 비밀번호가 일치하는 경우에 컨텐츠 재생을 재개하도록 할 수도 있다.
도 7을 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생 중 유해한 내용이 포함된 장면(scene)을 스킵하고 재생할 수 있다. 도 7의 제1 화면(700a)에는 유해한 내용(담배 피는 장면)이 포함되어 있으므로, 컨텐츠 재생 장치(1200)는 이 장면을 스킵하고 유해한 내용이 포함되지 않은 제2 화면(700b)에서 재생을 재개하도록 디스플레이 장치(1000)를 제어한다.
이를 위해서는 컨텐츠 전체의 시청 등급뿐만 아니라, 컨텐츠를 구성하는 각 장면들에 유해한 내용이 포함되었는지 여부에 대한 정보가 필요하다. 이러한 정보는 컨텐츠 제공자가 제공할 수도 있고, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 획득할 수도 있다. 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 각 장면들에 유해한 내용이 포함되었는지를 판단하는 방법은, 앞서 프레임별 영상 분석을 통한 유해 장면의 포함 여부 판단에 대해서 설명한 바와 같다.
한편, 도 7의 실시예에서 재생되는 컨텐츠가 컨텐츠 재생 장치(1200)에 미리 저장된 컨텐츠라면 일부 장면을 스킵하고 공백 없이 바로 이어지는 장면을 재생하면 되지만, 컨텐츠 재생 장치(1200)가 외부 서버로부터 실시간으로 컨텐츠를 제공받는 경우라면 장면이 스킵되는 시간 동안 공백이 발생하게 된다. 따라서, 이러한 경우 컨텐츠 재생 장치(1200)는 공백 구간 동안 적절한 대체 영상을 표시할 수 있다. 예를 들어, 컨텐츠 재생 장치(1200)는 미리 저장된 대체 영상을 표시하거나, 컨텐츠의 타이틀 정보 또는 광고 화면 등을 표시할 수 있다. 자세한 내용은 아래에서 도 10 내지 도 13을 참조하여 설명한다.
도 8을 참조하면, 컨텐츠 재생 장치(1200)는 재생되는 화면 중 유해 요소가 있는 부분만을 모자이크 처리할 수도 있다. 도 8에서 제1 화면(800a)에는 유해 요소(810)가 포함되어 있다. 따라서, 컨텐츠 재생 장치(1200)는 제1 화면(800a)에서 유해 요소를 모자이크 처리하도록 컨텐츠를 가공하고, 가공된 제2 화면(800b)을 디스플레이 장치(1000)에 표시할 수 있다.
그런데, 이와 같이 유해 요소가 포함된 부분에만 모자이크 처리를 하기 위해서는, 컨텐츠 재생 장치(1200)는 전체 화면 중 어느 부분에 유해 요소가 포함되어 있는지를 알아야 한다. 이를 위해, 컨텐츠 재생 장치(1200)는 컨텐츠 제공자가 제공하는 정보를 이용할 수도 있고, 또는 직접 컨텐츠의 내용을 분석하거나 클라우드상의 서버가 분석한 정보를 획득하여 이용할 수도 있다. 예를 들어, 서버 또는 컨텐츠 재생 장치(1200)는 컨텐츠의 각 프레임의 영상에 포함된 객체를 인식하고, 인식된 객체가 칼, 총 또는 담배와 같은 유해한 객체에 해당되는지를 판단할 수 있다. 만약, 유해한 객체가 발견되었다면 컨텐츠 재생 장치(1200)는 전체 영상에서 해당 객체 부분만을 모자이크 처리할 수 있다.
도 9를 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생 중 유해한 내용이 포함된 장면에서는 화면 전체를 블러(blur) 처리할 수도 있다. 도 9의 제1 화면(900a)에는 정상적인 컨텐츠의 재생 화면을 도시하였고, 제2 화면(900b)에는 블러 처리된 컨텐츠의 재생 화면을 도시하였다.
이를 위해서는 컨텐츠 전체의 시청 등급뿐만 아니라, 컨텐츠를 구성하는 각 장면들에 유해한 내용이 포함되었는지 여부에 대한 정보가 필요하다. 이러한 정보는 컨텐츠 제공자가 제공할 수도 있고, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 획득할 수도 있다. 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 각 장면들에 유해한 내용이 포함되었는지를 판단하는 방법은, 앞서 프레임별 영상 분석을 통한 유해 장면의 포함 여부 판단에 대해서 설명한 바와 같다.
한편, 컨텐츠 재생 장치(1200)는 유해한 내용이 포함된 장면이 모두 지나가면 블러 처리를 중지한다.
도 10을 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생 중 유해한 내용이 포함된 장면에서는 대체 영상을 디스플레이 장치(1000)의 화면에 표시할 수도 있다. 도 10의 제1 화면(1000a)에는 정상적인 컨텐츠의 재생 화면을 도시하였고, 제2 화면(1000b)에는 대체 영상이 표시된 컨텐츠의 재생 화면을 도시하였다.
이를 위해서는 컨텐츠 전체의 시청 등급뿐만 아니라, 컨텐츠를 구성하는 각 장면들에 유해한 내용이 포함되었는지 여부에 대한 정보가 필요하다. 이러한 정보는 컨텐츠 제공자가 제공할 수도 있고, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 획득할 수도 있다. 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 각 장면들에 유해한 내용이 포함되었는지를 판단하는 방법은, 앞서 프레임별 영상 분석을 통한 유해 장면의 포함 여부 판단에 대해서 설명한 바와 같다.
이때, 대체 영상은 컨텐츠 재생 장치(1200)에 미리 저장된 것일 수도 있으며, 또는 컨텐츠를 제공하는 클라우드상의 서버가 제공하는 것일 수도 있다.
한편, 컨텐츠 재생 장치(1200)는 유해한 내용이 포함된 장면이 모두 지나가면 대체 영상의 표시를 중지한다.
도 11을 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생 중 유해한 내용이 포함된 장면에서는 재생중인 컨텐츠의 타이틀(1101)을 화면에 표시할 수도 있다. 도 11의 제1 화면(1100a)에는 정상적인 컨텐츠의 재생 화면을 도시하였고, 제2 화면(1100b)에는 컨텐츠의 타이틀(1101)이 표시된 컨텐츠의 재생 화면을 도시하였다.
이를 위해서는 컨텐츠 전체의 시청 등급뿐만 아니라, 컨텐츠를 구성하는 각 장면들에 유해한 내용이 포함되었는지 여부에 대한 정보가 필요하다. 이러한 정보는 컨텐츠 제공자가 제공할 수도 있고, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 획득할 수도 있다. 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 각 장면들에 유해한 내용이 포함되었는지를 판단하는 방법은, 앞서 프레임별 영상 분석을 통한 유해 장면의 포함 여부 판단에 대해서 설명한 바와 같다.
이때, 컨텐츠 재생 장치(1200)는 화면의 대부분을 차지하는 크기로 컨텐츠의 타이틀(1101)을 표시함으로써 유해한 내용이 포함된 장면이 시청자에게 보이지 않도록 할 수 있다.
한편, 컨텐츠 재생 장치(1200)는 유해한 내용이 포함된 장면이 모두 지나가면 컨텐츠의 타이틀 표시를 중지한다.
도 12를 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생 중 유해한 내용이 포함된 장면에서는 광고 영상을 디스플레이 장치(1000)의 화면에 표시할 수도 있다. 도 12의 제1 화면(1200a)에는 정상적인 컨텐츠의 재생 화면을 도시하였고, 제2 화면(1200b)에는 광고 영상이 표시된 컨텐츠의 재생 화면을 도시하였다.
이를 위해서는 컨텐츠 전체의 시청 등급뿐만 아니라, 컨텐츠를 구성하는 각 장면들에 유해한 내용이 포함되었는지 여부에 대한 정보가 필요하다. 이러한 정보는 컨텐츠 제공자가 제공할 수도 있고, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 획득할 수도 있다. 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 각 장면들에 유해한 내용이 포함되었는지를 판단하는 방법은, 앞서 프레임별 영상 분석을 통한 유해 장면의 포함 여부 판단에 대해서 설명한 바와 같다.
이때, 컨텐츠 재생 장치(1200)는 컨텐츠를 제공하는 클라우드상의 서버로부터 광고 영상을 제공받을 수 있다.
한편, 컨텐츠 재생 장치(1200)는 유해한 내용이 포함된 장면이 모두 지나가면 광고 영상의 표시를 중지한다.
도 13을 참조하면, 컨텐츠 재생 장치(1200)는 컨텐츠의 재생 중 유해한 내용이 포함된 장면에서는 시청이 제한되는 구간이라는 안내 문구를 디스플레이 장치(1000)의 화면에 표시할 수 있다. 도 13의 제1 화면(1300a)에는 정상적인 컨텐츠의 재생 화면을 도시하였고, 제2 화면(1300b)에는 안내 문구가 표시된 컨텐츠의 재생 화면을 도시하였다.
이를 위해서는 컨텐츠 전체의 시청 등급뿐만 아니라, 컨텐츠를 구성하는 각 장면들에 유해한 내용이 포함되었는지 여부에 대한 정보가 필요하다. 이러한 정보는 컨텐츠 제공자가 제공할 수도 있고, 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 획득할 수도 있다. 서버 또는 컨텐츠 재생 장치(1200)가 컨텐츠의 분석을 통해 각 장면들에 유해한 내용이 포함되었는지를 판단하는 방법은, 앞서 프레임별 영상 분석을 통한 유해 장면의 포함 여부 판단에 대해서 설명한 바와 같다.
이때, 컨텐츠 재생 장치(1200)는 화면 전체를 안내 문구로 대체함으로써 유해한 내용이 포함된 장면이 시청자에게 보이지 않도록 할 수 있다.
한편, 컨텐츠 재생 장치(1200)는 유해한 내용이 포함된 장면이 모두 지나가면 안내 문구의 표시를 중지한다.
한편, 컨텐츠 재생 장치(1200)는 복수의 사용자별로 서로 다른 영상을 제공할 수도 있다. 자세하게는, 컨텐츠 재생 장치(1200)는 둘 이상의 서로 다른 영상 정보를 포함하는 하나의 영상을 디스플레이 장치(1000)의 화면에 표시하고, 화면을 바라보는 사용자의 조건에 따라서 다른 영상이 보이도록 할 수 있다. 예를 들어, 디스플레이 장치(1000)에 대한 사용자의 위치, 사용자가 착용한 안경, 사용자가 화면을 바라보는 시선 방향과 화면이 이루는 각도 등에 따라서 복수의 사용자들은 각각 서로 다른 영상을 볼 수 있다.
이와 같이, 컨텐츠 재생 장치(1200)가 복수의 사용자별로 서로 다른 영상을 제공할 수 있는 경우, 컨텐츠 재생 장치(1200)는 선택된 사용자가 보는 영상에만 앞서 설명한 도 6 내지 도 13과 같은 컨텐츠 재생 제어를 수행하고, 나머지 사용자들이 보는 영상에는 아무런 제어를 수행하지 않도록 할 수 있다. 또는, 둘 이상의 사용자를 선택하고, 선택된 각각의 사용자들 그리고 나머지 사용자들이 적절한 영상을 시청할 수 있도록 컨텐츠 재생을 제어할 수도 있다.
도 14는 본 발명의 실시예에 따른 미리 저장된 사용자의 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 나타내는 순서도이다.
도 14를 참조하면, 1401 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들의 얼굴 인식을 수행한다. 예를 들어, 사용자 인식 장치(1100)가 컨텐츠를 시청하는 복수의 사용자들을 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하면, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
1402 단계에서 컨텐츠 재생 장치(1200)는 인식된 얼굴을 미리 저장된 사용자 연령 정보와 비교하여 사용자들의 연령을 판단한다. 이때, 사용자 연령 정보는 각 사용자의 사진에 해당 사용자의 연령이 맵핑된 테이블의 형태로 컨텐츠 재생 장치(1200)에 미리 저장되어 있을 수 있다.
사용자들의 연령이 판단되었으면, 1403 단계에서 컨텐츠 재생 장치(1200)는 최소 연령인 사용자를 선택한다.
1404 단계에서 컨텐츠 재생 장치(1200)는 재생중인 컨텐츠의 시청 등급을 확인한다. 이때, 컨텐츠 재생 장치(1200)는 컨텐츠 제공자로부터 컨텐츠의 시청 등급을 수신할 수도 있고, 컨텐츠 제공자가 시청 등급을 제공하지 않는 경우에는 직접 컨텐츠를 분석하여 시청 등급을 판단할 수도 있다. 또는, 클라우드상의 서버가 컨텐츠를 분석하여 시청 등급을 판단하고, 컨텐츠 재생 장치(1200)는 서버로부터 시청 등급을 수신할 수도 있다.
1405 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 확인된 컨텐츠의 시청 등급과 비교하여 선택된 사용자가 컨텐츠를 시청 가능한지 여부를 판단한다.
판단 결과, 선택된 사용자의 연령이 컨텐츠의 시청 가능 연령보다 낮아 시청이 불가한 것으로 판단되었다면, 1406 단계로 진행하여 컨텐츠 재생 장치(1200)는 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 15 내지 도 17은 본 발명의 실시예들에 따른 사용자 인식 결과를 이용하여 사용자의 연령을 예측하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법들을 설명하기 위한 도면들이다.
도 15를 참조하면, 사용자 A, 사용자 B 및 사용자 C는 디스플레이 장치(1000)에서 재생되는 컨텐츠를 함께 시청하고 있다. 그리고, 디스플레이 장치(1000)는 컨텐츠를 시청하는 사용자를 인식하기 위한 사용자 인식 장치(1100) 및 컨텐츠의 재생을 제어하기 위한 컨텐츠 재생 장치(1200)와 연결되어 있을 수 있다.
사용자 인식 장치(1100)는 컨텐츠를 시청하는 복수의 사용자들을 인식한다. 이때, 사용자 인식 장치(1100)는 디스플레이 장치(1000)와는 별도로 구비된 카메라인 것으로 도시하였으나, 이에 한정되지 않고 다양한 형태로 구현될 수 있다. 예를 들어, 사용자 인식 장치(1100)는 디스플레이 장치(1000)의 프레임 내에 내장형으로 구비된 카메라일 수도 있다.
도 16을 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들에 대한 얼굴 인식을 수행한다. 얼굴 인식의 수행 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
복수의 사용자들에 대한 얼굴 인식이 완료되면, 컨텐츠 재생 장치(1200)는 얼굴 인식 결과를 이용하여 사용자들의 연령을 예측할 수 있다. 예를 들어, 컨텐츠 재생 장치(1200)는 얼굴 인식을 수행한 결과 추출한 각 사용자들의 얼굴의 특징을 미리 저장된 연령대별 얼굴의 특징과 비교하여 매칭되는 연령대를 찾는 방식으로 연령을 예측할 수 있다. 도 16에 도시된 실시예에 따르면, 컨텐츠 재생 장치(1200)는 사용자 A, 사용자 B 및 사용자 C의 연령을 각각 약 35세, 약 20세 및 약 10세로 예측하였다.
복수의 사용자들에 대한 연령 판단이 완료되면, 컨텐츠 재생 장치(1200)는 일정한 기준에 따라 사용자의 예측된 연령에 기초하여 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 도 16에서는 컨텐츠 재생 장치(1200)가 예측된 연령이 최소인 사용자를 선택하는 예를 도시하였으며, 따라서 사용자 C가 선택되었다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 C에 따라서 컨텐츠의 재생을 제어한다.
한편, 컨텐츠 재생 장치(1200)가 얼굴 인식 결과를 분석하여 사용자의 연령을 예측하는 경우, 예측된 연령이 실제 연령과 일치하지 않을 수 있으므로 예측된 연령에 대한 사용자 확인을 받을 수도 있다.
도 17에는 컨텐츠 재생 장치(1200)가 선택된 사용자의 예측된 연령에 대한 사용자 확인을 받는 실시예를 도시하였다. 도 17을 참조하면, 컨텐츠 재생 장치(1200)는 디스플레이 장치(1000)의 제1 화면(1700a)에 예측된 사용자의 연령에 대한 확인을 요청하는 팝업(1710)을 표시한다. 앞서 도 16에서는 사용자 C의 연령이 약 10세로 예측되고, 사용자 C가 최소 연령으로 판단되어 선택된 바 있다. 따라서, 팝업(1710)에는 가장 어린 시청자의 연령이 10세가 맞는지에 대한 확인을 요청하는 메시지가 표시된다. 팝업(1710)에서 사용자가 “예”를 선택하는 경우, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령이 10세가 맞는 것으로 판단하고, 10세를 선택된 사용자의 연령으로 판단하고 컨텐츠의 재생을 제어한다.
반면, 팝업(1710)에서 사용자가 “아니오”를 선택하는 경우, 컨텐츠 재생 장치(1200)는 디스플레이 장치(1000)에 제2 화면(1700b)을 표시한다. 제2 화면(1700b)에는 가장 어린 시청자의 연령 입력을 요청하는 팝업(1720)이 표시된다. 사용자가 제2 화면(1700b)에 표시된 팝업(1720)에서 가장 어린 사용자의 실제 연령을 6세라고 입력하면, 컨텐츠 재생 장치(1200)는 6세를 선택된 사용자의 연령으로 판단하고 컨텐츠의 재생을 제어한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다.
도 18 및 도 19는 본 발명의 실시예들에 따른 사용자 인식 결과를 이용하여 사용자의 연령을 예측하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법들을 나타내는 순서도들이다.
도 18을 참조하면, 1801 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들의 얼굴 인식을 수행한다. 예를 들어, 사용자 인식 장치(1100)가 컨텐츠를 시청하는 복수의 사용자들을 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하면, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
1802 단계에서 컨텐츠 재생 장치(1200)는 사용자들의 얼굴 인식 결과를 분석하여 사용자들의 연령을 예측한다. 예를 들어, 컨텐츠 재생 장치(1200)는 얼굴 인식을 수행한 결과 추출한 각 사용자들의 얼굴의 특징을 미리 저장된 연령대별 얼굴의 특징과 비교하여 매칭되는 연령대를 찾는 방식으로 연령을 예측할 수 있다.
사용자들의 연령 예측이 완료되었으면, 1803 단계에서 컨텐츠 재생 장치(1200)는 예측된 연령이 최소인 사용자를 선택한다.
1804 단계에서 컨텐츠 재생 장치(1200)는 재생중인 컨텐츠의 시청 등급을 확인한다. 이때, 컨텐츠 재생 장치(1200)는 컨텐츠 제공자로부터 컨텐츠의 시청 등급을 수신할 수도 있고, 컨텐츠 제공자가 시청 등급을 제공하지 않는 경우에는 직접 컨텐츠를 분석하여 시청 등급을 판단할 수도 있다. 또는, 클라우드상의 서버가 컨텐츠를 분석하여 시청 등급을 판단하고, 컨텐츠 재생 장치(1200)는 서버로부터 시청 등급을 수신할 수도 있다.
1805 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 예측된 연령을 확인된 컨텐츠의 시청 등급과 비교하여 선택된 사용자가 컨텐츠를 시청 가능한지 여부를 판단한다.
판단 결과, 선택된 사용자의 예측된 연령이 컨텐츠의 시청 가능 연령보다 낮아 시청이 불가한 것으로 판단되었다면, 1806 단계로 진행하여 컨텐츠 재생 장치(1200)는 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 19는 도 18과 비교할 때, 선택된 사용자의 예측된 연령에 대한 확인 단계가 추가된 실시예를 나타내는 순서도이다. 도 19의 1901 단계 내지 1903 단계는 도 18의 1801 단계 내지 1803 단계와 동일하므로 이에 대한 자세한 설명은 생략한다.
1904 단계에서 컨텐츠 재생 장치(1200)는 디스플레이 장치(1000)의 화면을 통해, 선택된 사용자의 예측된 연령에 대한 확인을 요청한다. 예를 들어, 컨텐츠 재생 장치(1200)는 선택된 사용자의 예측된 연령이 선택된 사용자의 실제 연령과 일치하는지를 묻는 내용의 팝업 메시지를 디스플레이 장치(1000)의 화면에 표시할 수 있다.
1905 단계에서 사용자 입력을 수신한 결과 선택된 사용자의 예측된 연령이 정확하다면, 1906 단계로 진행하여 컨텐츠 재생 장치(1200)는 확인된 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다.
하지만, 1905 단계에서 사용자 입력을 수신한 결과 선택된 사용자의 예측된 연령이 정확하지 않다면, 1907 단계로 진행하여 컨텐츠 재생 장치(1200)는 사용자로부터 선택된 사용자의 정확한 연령을 입력받는다. 이어서, 1906 단계로 진행하여 컨텐츠 재생 장치(1200)는 확인된 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 20은 본 발명의 실시예에 따른 사용자의 연령 예측 실패시 사용자로부터 입력받은 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 설명하기 위한 도면이다.
도 20을 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들에 대한 얼굴 인식을 수행한다. 얼굴 인식의 수행 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
복수의 사용자들에 대한 얼굴 인식이 완료되면, 컨텐츠 재생 장치(1200)는 얼굴 인식 결과를 이용하여 사용자들의 연령을 예측할 수 있다. 예를 들어, 컨텐츠 재생 장치(1200)는 얼굴 인식을 수행한 결과 추출한 각 사용자들의 얼굴의 특징을 미리 저장된 연령대별 얼굴의 특징과 비교하여 매칭되는 연령대를 찾는 방식으로 연령을 예측할 수 있다.
하지만, 이와 같이 컨텐츠 재생 장치(1200)가 얼굴 인식 결과를 분석하여 사용자의 연령을 예측하는 경우, 일부 사용자에 대해서는 연령 예측에 실패할 수도 있다. 이러한, 연령 예측의 실패는 부정확한 얼굴 인식 또는 미리 저장된 연령대별 얼굴 특징과의 매칭 실패 등의 다양한 요인으로 인해 발생할 수 있다.
도 20을 참조하면, 컨텐츠 재생 장치(1200)는 사용자 A 및 사용자 B에 대해서는 각각 약 35세 및 약 20세로 연령을 예측하였으나, 사용자 C에 대해서는 연령 예측에 실패했다. 따라서, 컨텐츠 재생 장치(1200)는 디스플레이 장치(1000)의 화면(2000)에 가장 어린 시청자의 연령 입력을 요청하는 팝업(2010)을 표시한다. 도 20에 도시된 바와 같이 사용자가 가장 어린 시청자의 연령이 6세라고 입력하면, 컨텐츠 재생 장치(1200)는 6세를 선택된 사용자의 연령으로 판단하고 컨텐츠의 재생을 제어한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다.
한편, 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 21은 본 발명의 실시예에 따른 사용자의 연령 예측 실패시 사용자로부터 입력받은 연령 정보를 이용하고, 최소 연령자를 선택하는 컨텐츠의 재생 제어 방법을 나타내는 순서도이다.
도 21을 참조하면, 2101 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들의 얼굴 인식을 수행한다. 예를 들어, 사용자 인식 장치(1100)가 컨텐츠를 시청하는 복수의 사용자들을 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하면, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
2102 단계에서 컨텐츠 재생 장치(1200)는 사용자들의 얼굴 인식 결과를 분석하여 사용자들의 연령을 예측한다. 예를 들어, 컨텐츠 재생 장치(1200)는 얼굴 인식을 수행한 결과 추출한 각 사용자들의 얼굴의 특징을 미리 저장된 연령대별 얼굴의 특징과 비교하여 매칭되는 연령대를 찾는 방식으로 연령을 예측할 수 있다.
2103 단계에서 컨텐츠 재생 장치(1200)는 연령 예측에 실패한 시청자가 존재하는지를 판단한다. 컨텐츠 재생 장치(1200)가 얼굴 인식 결과를 분석하여 사용자의 연령을 예측하는 경우, 일부 사용자에 대해서는 연령 예측에 실패할 수도 있다. 이러한, 연령 예측의 실패는 부정확한 얼굴 인식 또는 미리 저장된 연령대별 얼굴 특징과의 매칭 실패 등의 다양한 요인으로 인해 발생할 수 있다.
2103 단계에서의 판단 결과, 연령 예측에 실패한 시청자가 존재하지 않는다면, 2104 단계로 진행하여 컨텐츠 재생 장치(1200)는 예측된 연령이 최소인 시청자를 선택한다.
2105 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 예측된 연령에 따라 컨텐츠 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
한편, 2103 단계에서의 판단 결과, 연령 예측에 실패한 시청자가 존재한다면, 2106 단계로 진행하여 컨텐츠 재생 장치(1200)는 최소 연령의 입력을 요청하고, 사용자로부터 최소 연령을 입력받는다. 예를 들어, 컨텐츠 재생 장치(1200)는 화면에 가장 어린 시청자의 연령 입력을 요청하는 팝업을 표시할 수 있다.
2107 단계에서 컨텐츠 재생 장치(1200)는 사용자로부터 입력받은 최소 연령을 선택된 사용자의 연령으로 판단하고, 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 22 내지 도 23은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자가 추가되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 22를 참조하면, 사용자 A 및 사용자 B가 함께 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있는 도중에, 사용자 C가 시청자로 추가되었다. 한편, 디스플레이 장치(1000)는 컨텐츠를 시청하는 사용자를 인식하기 위한 사용자 인식 장치(1100) 및 컨텐츠의 재생을 제어하기 위한 컨텐츠 재생 장치(1200)와 연결되어 있을 수 있다.
사용자 C가 추가되기 전에는, 컨텐츠 재생 장치(1200)는 사용자 A와 사용자 B 중 낮은 연령인 사용자 B를 선택하고, 사용자 B를 기준으로 컨텐츠의 재생을 제어한다. 사용자 C가 시청자로 추가되면, 사용자 인식 장치(1100)는 새로운 시청자가 추가되었음을 인식하여 사용자의 영상을 촬영하고, 촬영 영상을 컨텐츠 재생 장치(1200)로 전송한다.
이때, 컨텐츠 재생 장치(1200)는 사용자 A 및 사용자 B의 연령을 알고 있다고 가정한다. 따라서, 컨텐츠 재생 장치(1200)는 새로 추가된 사용자 C의 연령만 확인하면, 이를 기존에 선택된 사용자인 사용자 B의 연령과 비교하여 새롭게 사용자를 선택할 수 있다. 자세한 내용은 아래에서 도 23을 참조하여 설명한다.
도 23을 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 새로 추가된 시청자인 사용자 C의 얼굴 인식을 수행한다. 얼굴 인식을 수행하는 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
사용자 C에 대한 얼굴 인식이 완료되면, 컨텐츠 재생 장치(1200)는 미리 저장된 사용자 연령 정보에 기초하여 사용자 C의 연령을 판단한다. 컨텐츠 재생 장치(1200) 내부에 구비된 저장부에는 적어도 하나의 사용자에 대한 연령 정보가 미리 저장되어 있을 수 있다. 사용자 연령 정보는 도 23의 테이블(2310)에 도시된 바와 같이 각각의 사용자의 사진에 해당 사용자의 연령이 맵핑되어 저장되어 있는 형태일 수 있다.
사용자 C의 연령 판단이 완료되면, 컨텐츠 재생 장치(1200)는 사용자 C의 연령을 이미 알고 있는 사용자 B의 연령과 비교하여 사용자를 다시 선택한다. 즉, 기존에 선택된 사용자의 연령과 새로 추가된 사용자의 연령을 비교하여, 기존에 선택된 사용자의 연령이 더 낮다면 기존에 선택된 사용자를 다시 선택하고, 새로 추가된 사용자의 연령이 더 낮다면 새로 추가된 사용자를 새롭게 선택한다. 도 23에서는 새로 추가된 사용자인 사용자 C의 연령(6세)이 기존에 선택된 사용자인 사용자 B의 연령(17세)보다 낮으므로, 사용자 C가 새롭게 선택되었다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 C에 따라서 컨텐츠의 재생을 제어한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 비교하여 시청 가능 여부를 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다. 또한, 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 24는 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자가 추가되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 24를 참조하면, 2401 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 시청자의 추가를 인식한다. 즉, 컨텐츠를 시청하는 사용자가 추가되면, 사용자 인식 장치(1100)는 사용자를 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하고, 컨텐츠 재생 장치(1200)는 수신한 영상을 통해 컨텐츠를 시청하는 사용자가 추가되었음을 인식한다.
2402 단계에서 컨텐츠 재생 장치(1200)는 추가된 시청자의 얼굴을 인식한다. 예를 들어, 사용자 인식 장치(1100)가 추가된 시청자를 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하면, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 추가된 시청자의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
2403 단계에서 컨텐츠 재생 장치(1200)는 인식된 추가 시청자의 얼굴을 미리 저장된 사용자 연령 정보와 비교하여 추가 시청자의 연령을 판단한다. 이때, 사용자 연령 정보는 각 사용자의 사진에 해당 사용자의 연령이 맵핑된 테이블의 형태로 컨텐츠 재생 장치(1200)에 미리 저장되어 있을 수 있다.
추가 사용자의 연령이 판단되었으면, 2404 단계에서 컨텐츠 재생 장치(1200)는 추가 시청자의 연령이 기존에 선택된 사용자의 연령보다 낮은지 여부를 판단한다.
2404 단계에서의 판단 결과, 추가 시청자의 연령이 기존에 선택된 사용자의 연령보다 낮다면, 2405 단계로 진행하여 컨텐츠 재생 장치(1200)는 추가 사용자를 새롭게 선택하고, 2406 단계로 진행한다.
하지만, 2404 단계에서의 판단 결과, 추가 시청자의 연령이 기존에 선택된 사용자의 연령보다 높다면, 2407 단계로 진행하여 컨텐츠 재생 장치(1200)는 기존에 선택된 사용자를 유지하고, 2406 단계로 진행한다.
이어서 2406 단계에서, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 25 내지 도 26은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자 중 일부가 이탈하고, 컨텐츠 재생 장치가 기존 사용자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 25를 참조하면, 사용자 A, 사용자 B 및 사용자 C가 함께 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있는 도중에, 사용자 C가 이탈하였다. 한편, 디스플레이 장치(1000)는 컨텐츠를 시청하는 사용자를 인식하기 위한 사용자 인식 장치(1100) 및 컨텐츠의 재생을 제어하기 위한 컨텐츠 재생 장치(1200)와 연결되어 있을 수 있다.
사용자 C가 이탈하기 전에는, 컨텐츠 재생 장치(1200)는 사용자 A, 사용자 B 및 사용자 C 중 최소 연령자인 사용자 C를 선택하고, 사용자 C를 기준으로 컨텐츠의 재생을 제어한다. 사용자 C가 이탈하면, 사용자 인식 장치(1100)는 일부 시청자가 이탈하였음을 인식하여 사용자의 영상을 촬영하고, 촬영 영상을 컨텐츠 재생 장치(1200)로 전송한다.
이때, 컨텐츠 재생 장치(1200)는 사용자 A, 사용자 B 및 사용자 C의 연령을 알고 있다고 가정한다. 따라서, 사용자 C가 이탈한 경우에, 컨텐츠 재생 장치(1200)는 이미 알고 있는 사용자 A와 사용자 B의 연령을 비교하여 새롭게 사용자를 선택할 수 있다. 자세한 내용은 아래에서 도 26을 참조하여 설명한다.
도 26을 참조하면, 컨텐츠 재생 장치(1200)는 사용자 C가 이탈한 뒤 남은 시청자들인 사용자 A와 사용자 B의 연령을 비교하여 사용자를 다시 선택한다. 이때, 앞서 가정한 바와 같이 컨텐츠 재생 장치(1200)는 이미 사용자 A 및 사용자 B의 연령을 알고 있으므로 별도의 얼굴 인식 및 연령 판단 과정 없이 사용자들의 연령을 비교할 수 있다. 도 26에서는 사용자 B의 연령(17세)이 사용자 A의 연령(34세)보다 낮으므로, 컨텐츠 재생 장치(1200)는 사용자 B를 새롭게 선택한다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 B의 연령(17세)에 따라서 컨텐츠의 시청을 제한한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 비교하여 시청 가능 여부를 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다. 또한, 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 27은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자 중 일부가 이탈하고, 컨텐츠 재생 장치가 기존 사용자들의 연령을 알고 있는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 27을 참조하면, 2701 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 시청자의 이탈을 인식한다. 즉, 컨텐츠를 시청하는 사용자 중 일부가 이탈하면, 사용자 인식 장치(1100)는 사용자를 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하고, 컨텐츠 재생 장치(1200)는 수신한 영상을 통해 컨텐츠를 시청하는 사용자 중 일부가 이탈했음을 인식한다.
2702 단계에서 컨텐츠 재생 장치는 이탈한 시청자가 기존에 선택된 사용자인지 여부를 판단한다.
판단 결과, 이탈한 시청자가 기존에 선택된 사용자가 아니라면, 남은 시청자들 중에서도 기존에 선택된 사용자가 최소 연령의 사용자에 해당되므로 2705 단계로 진행하여 컨텐츠 재생 장치(1200)는 선택된 사용자를 유지한다.
하지만, 판단 결과 이탈한 시청자가 기존에 선택된 사용자라면, 2703 단계로 진행하여 컨텐츠 재생 장치(1200)는 남은 시청자들의 연령을 비교하여 사용자를 다시 선택한다. 남은 시청자들의 연령은 컨텐츠 재생 장치(1200)가 이미 알고 있을 수도 있고, 또는 컨텐츠 재생 장치(1200)가 다시 사용자의 얼굴 인식 및 연령 판단을 수행하여 확인할 수도 있다.
2704 단계에서 컨텐츠 재생 장치는 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 28 내지 도 31은 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자의 수가 변동되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알지 못하는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
먼저, 도 28 내지 도 29를 참조하여, 컨텐츠를 시청하는 사용자가 추가된 경우의 실시예를 설명한다.
도 28을 참조하면, 사용자 A 및 사용자 B가 함께 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있는 도중에, 사용자 C가 시청자로 추가되었다. 한편, 디스플레이 장치(1000)는 컨텐츠를 시청하는 사용자를 인식하기 위한 사용자 인식 장치(1100) 및 컨텐츠의 재생을 제어하기 위한 컨텐츠 재생 장치(1200)와 연결되어 있을 수 있다.
사용자 C가 추가되기 전에는, 컨텐츠 재생 장치(1200)는 사용자 B를 선택하고, 사용자 B를 기준으로 컨텐츠의 재생을 제어한다. 사용자 C가 시청자로 추가되면, 사용자 인식 장치(1100)는 새로운 시청자가 추가되었음을 인식하여 사용자의 영상을 촬영하고, 촬영 영상을 컨텐츠 재생 장치(1200)로 전송한다.
이때, 컨텐츠 재생 장치(1200)는 사용자 A 및 사용자 B의 연령을 알고 있지 않다고 가정한다. 따라서, 컨텐츠 재생 장치(1200)는 새로 추가된 사용자 C와 기존의 시청자인 사용자 A 및 사용자 B의 연령을 모두 확인하고, 서로 비교하여 새롭게 사용자를 선택한다. 자세한 내용은 아래에서 도 29를 참조하여 설명한다.
도 29를 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 기존의 시청자인 사용자 A 및 사용자 B와, 새로 추가된 사용자 C에 대한 얼굴 인식을 수행한다. 얼굴 인식의 수행 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
사용자들에 대한 얼굴 인식이 완료되면, 컨텐츠 재생 장치(1200)는 미리 저장된 사용자 연령 정보에 기초하여 인식된 사용자들의 연령을 판단한다. 컨텐츠 재생 장치(1200)의 내부에 구비된 저장부에는 적어도 하나의 사용자에 대한 연령 정보가 미리 저장되어 있을 수 있다. 사용자 연령 정보는 도 29의 테이블(2910)에 도시된 바와 같이 각각의 사용자의 사진에 해당 사용자의 연령이 맵핑되어 저장되어 있는 형태일 수 있다.
컨텐츠 재생 장치(1200)는 인식된 복수의 사용자들의 얼굴을 테이블(2910)에 저장된 사용자들의 사진과 비교하여 각 사용자의 연령을 판단할 수 있다. 도 29의 테이블(2910)을 참조하면, 컨텐츠 재생 장치(1200)는 사용자 A의 연령은 34세, 사용자 B의 연령은 17세, 그리고 사용자 C의 연령은 6세로 판단할 수 있다.
복수의 사용자들에 대한 연령 판단이 완료되면, 컨텐츠 재생 장치(1200)는 사용자들 중에서 최소 연령인 사용자를 새롭게 선택한다. 도 29에서는 사용자 C가 최소 연령이므로 컨텐츠 재생 장치(1200)는 사용자 C를 선택한다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 C의 연령(6세)에 따라서 컨텐츠의 시청을 제한한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 비교하여 시청 가능 여부를 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다. 또한, 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
다음으로, 도 30 내지 도 31을 참조하여, 컨텐츠를 시청하는 사용자가 이탈한 경우의 실시예를 설명한다.
도 30을 참조하면, 사용자 A, 사용자 B 및 사용자 C가 함께 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있는 도중에, 사용자 C가 이탈하였다. 한편, 디스플레이 장치(1000)는 컨텐츠를 시청하는 사용자를 인식하기 위한 사용자 인식 장치(1100) 및 컨텐츠의 재생을 제어하기 위한 컨텐츠 재생 장치(1200)와 연결되어 있을 수 있다.
사용자 C가 이탈하기 전에는, 컨텐츠 재생 장치(1200)는 사용자 A, 사용자 B 및 사용자 C 중 최소 연령인 사용자 C를 선택하고, 사용자 C를 기준으로 컨텐츠의 재생을 제어한다. 사용자 C가 이탈하면, 사용자 인식 장치(1100)는 일부 시청자가 이탈하였음을 인식하여 사용자의 영상을 촬영하고, 촬영 영상을 컨텐츠 재생 장치(1200)로 전송한다.
이때, 컨텐츠 재생 장치(1200)는 사용자 A 및 사용자 B의 연령을 알고 있지 않다고 가정한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 C가 이탈한 뒤 남은 사용자 A 및 사용자 B의 연령을 모두 확인하고, 서로 비교하여 새롭게 사용자를 선택한다. 자세한 내용은 아래에서 도 31을 참조하여 설명한다.
도 31을 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 남은 시청자인 사용자 A 및 사용자 B에 대한 얼굴 인식을 수행한다. 얼굴 인식의 수행 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
사용자들에 대한 얼굴 인식이 완료되면, 컨텐츠 재생 장치(1200)는 미리 저장된 사용자 연령 정보에 기초하여 인식된 사용자들의 연령을 판단한다. 컨텐츠 재생 장치(1200)의 내부에 구비된 저장부에는 적어도 하나의 사용자에 대한 연령 정보가 미리 저장되어 있을 수 있다. 사용자 연령 정보는 도 31의 테이블(3110)에 도시된 바와 같이 각각의 사용자의 사진에 해당 사용자의 연령이 맵핑되어 저장되어 있는 형태일 수 있다.
컨텐츠 재생 장치(1200)는 인식된 복수의 사용자들의 얼굴을 테이블(3110)에 저장된 사용자들의 사진과 비교하여 각 사용자의 연령을 판단할 수 있다. 도 31의 테이블(3110)을 참조하면, 컨텐츠 재생 장치(1200)는 사용자 A의 연령은 34세, 그리고 사용자 B의 연령은 17세로 판단할 수 있다.
복수의 사용자들에 대한 연령 판단이 완료되면, 컨텐츠 재생 장치(1200)는 사용자들 중에서 최소 연령인 사용자를 새롭게 선택한다. 도 31에서는 사용자 B가 최소 연령이므로 컨텐츠 재생 장치(1200)는 사용자 B를 새롭게 선택한다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 B의 연령(17세)에 따라서 컨텐츠의 시청을 제한한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 비교하여 시청 가능 여부를 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다. 또한, 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 32는 본 발명의 실시예에 따른 컨텐츠를 시청하는 사용자의 수가 변동되고, 컨텐츠 재생 장치가 기존 시청자들의 연령을 알지 못하는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 32를 참조하면, 3201 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 시청자 수의 변동을 감지한다. 즉, 컨텐츠를 시청하는 사용자의 수가 변동되면, 사용자 인식 장치(1100)는 사용자를 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하고, 컨텐츠 재생 장치(1200)는 수신한 영상을 통해 컨텐츠를 시청하는 사용자가 추가되거나, 또는 컨텐츠를 시청하는 사용자 중 일부가 이탈하였음을 인식한다.
3202 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 시청자들의 얼굴을 인식한다. 예를 들어, 사용자 인식 장치(1100)가 추가된 시청자를 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)로 전송하면, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
3203 단계에서 컨텐츠 재생 장치(1200)는 인식된 시청자들의 얼굴을 미리 저장된 사용자 연령 정보와 비교하여 시청자들의 연령을 판단한다. 이때, 사용자 연령 정보는 각 사용자의 사진에 해당 사용자의 연령이 맵핑된 테이블의 형태로 컨텐츠 재생 장치(1200)에 미리 저장되어 있을 수 있다.
복수의 시청자들의 연령이 판단되었으면, 3204 단계에서 컨텐츠 재생 장치(1200)는 최소 연령인 시청자를 선택한다.
3205 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 33 내지 도 34는 본 발명의 실시예에 따른 시청자들의 대화 분석을 통해 추가될 시청자를 예측하는 경우의 컨텐츠 재생 제어 방법을 설명하기 위한 도면들이다.
도 33을 참조하면, 사용자 A 및 사용자 B는 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있지만, 사용자 C는 컨텐츠를 시청하고 있지 않다. 따라서, 사용자 인식 장치(1100)는 사용자 A 및 사용자 B만을 시청자로 인식하고, 컨텐츠 재생 장치(1200)는 둘 중 최소 연령자인 사용자 B를 선택하여 사용자 B를 기준으로 컨텐츠의 재생을 제어하고 있다.
그런데, 도 33에 도시된 바와 같이, 컨텐츠의 시정 충에 사용자 B가 사용자 C에게 컨텐츠의 시청을 권유하는 대화를 한다. 이때, 사용자 인식 장치(1100)는 음성을 인식할 수 있는 기능을 가지고 있으며, 예를 들어 사용자 인식 장치(1100)는 음성을 인식할 수 있는 마이크(microphone)를 포함하고 있다고 가정한다. 컨텐츠 재생 장치(1200)는 사용자 인식 장치(1100)로부터 수신한 사용자 B의 대화 음성을 인식하고 분석하여 사용자 C가 곧 시청자에 추가될 것임을 예측할 수 있다. 그리고, 컨텐츠 재생 장치(1200)는 사용자 C의 추가 예측에 따라서 컨텐츠의 재생을 제어한다. 대화 분석을 통한 사용자의 추가 예측 및 그에 따른 컨텐츠 재생 제어의 구체적인 과정에 대해서는 아래에서 도 34를 참조하여 자세히 설명한다.
도 34를 참조하면, 컨텐츠 재생 장치(1200)는 사용자 B가 사용자 C에게 컨텐츠의 시청을 권유하는 대화 음성을 분석하여 사용자 C가 추가될 것임을 예측한다. 예측이 완료되면, 컨텐츠 재생 장치(1200)는 추가가 예측된 사용자 C의 연령을 판단한다.
컨텐츠 재생 장치(1200)가 사용자 C의 연령을 예측하는 방법은 다음과 같다. 사용자 C는 아직 시청자로 추가되지 않은 상태이므로, 사용자 인식 장치(1100)는 사용자 C의 얼굴 인식을 수행할 수 없다. 하지만, 컨텐츠 재생 장치(1200)는 음성 인식을 통해 사용자 C의 이름을 확인했으므로, 확인된 사용자 C의 이름을 미리 저장된 사용자 연령 정보와 비교하여 사용자 C의 연령을 판단할 수 있다. 이를 위해, 사용자 연령 정보는 도 34의 테이블(3410)에 도시된 바와 같이 각각의 사용자의 이름에 해당 사용자의 연령이 맵핑되어 있는 형태일 수 있다. 컨텐츠 재생 장치(1200)는 인식된 사용자 C의 이름을 사용자 연령 정보의 테이블(3410)과 비교하여, 사용자 C의 연령을 6세라고 판단할 수 있다.
추가가 예측된 사용자 C의 연령 판단이 완료되면, 컨텐츠 재생 장치(1200)는 기존에 선택된 사용자인 사용자 B와 추가가 예측되는 사용자인 사용자 C의 연령을 비교하여 새롭게 사용자를 선택할 수 있다. 비교 결과, 사용자 C의 연령이 더 낮으므로 사용자 C를 선택한다.
사용자의 선택이 완료되면, 컨텐츠 재생 장치(1200)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 따라서, 컨텐츠 재생 장치(1200)는 사용자 C의 연령(6세)에 따라서 컨텐츠의 재생을 제어한다.
이때, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령을 컨텐츠의 시청 등급과 비교하여 시청 가능 여부를 판단하고, 시청 가능 여부에 따라서 컨텐츠의 재생을 제어할 수 있는데, 자세한 내용은 앞서 도 5를 참조하여 설명한 바와 같다. 또한, 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 35는 본 발명의 실시예에 따른 시청자들의 대화 분석을 통해 추가될 시청자를 예측하는 경우의 컨텐츠 재생 제어 방법을 나타내는 순서도이다.
도 35를 참조하면, 3501 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 시청자들의 음성 인식을 수행한다. 즉, 사용자 인식 장치(1100)는 사용자의 대화 음성을 수신하고, 수신한 음성을 컨텐츠 재생 장치(1000)에 전송한다.
3502 단계에서 컨텐츠 재생 장치(1200)는 인식된 음성을 분석하여 추가 시청자를 예측한다. 예를 들어, 기존의 시청자들의 대화 음성에 새로운 사용자에게 컨텐츠의 시청을 권유하는 내용이 포함되었다면, 해당 사용자가 시청자에 추가될 것으로 예측한다.
3503 단계에서 컨텐츠 재생 장치(1200)는 미리 저장된 사용자 연령 정보에 기초하여 추가가 예측되는 사용자의 연령을 판단한다. 이때, 추가가 예측되는 사용자의 얼굴 인식은 수행할 수 없으므로, 음성 분석을 통해 확인된 추가가 예측되는 사용자의 이름을 사용자 연령 정보와 비교하여 연령을 판단한다. 이때, 사용자 연령 정보는 각각의 사용자의 이름에 해당 사용자의 연령이 맵핑되어 있는 형태일 수 있다.
3504 단계에서 컨텐츠 재생 장치(1200)는 추가가 예측되는 사용자가 기존에 선택된 사용자보다 연령이 낮은지 여부를 판단한다. 판단 결과, 추가가 예측되는 사용자가 기존에 선택된 사용자보다 연령이 낮다면, 3505 단계로 진행하여 컨텐츠 재생 장치(1200)는 추가가 예측되는 사용자를 새롭게 선택한다. 하지만 판단 결과, 추가가 예측되는 사용자가 기존에 선택된 사용자보다 연령이 높다면, 3507 단계로 진행하여 컨텐츠 재생 장치(1200)는 기존에 선택된 사용자를 유지한다.
사용자의 재선택이 완료되면, 3506 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 36 내지 도 37은 본 발명의 실시예에 따른 재생 컨텐츠의 변경시 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 설명하기 위한 도면들이다.
도 36을 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 제1 컨텐츠(3600a)를 시청하는 복수의 사용자들을 인식하고, 최소 연령자인 사용자 C를 선택한다. 컨텐츠 재생 장치(1200)는 선택된 사용자인 사용자 C의 연령(6세)에 따라 제1 컨텐츠(3600a)의 재생을 제어한다.
한편, 컨텐츠 재생 장치(1200)에서 재생되는 컨텐츠가 제1 컨텐츠(3600a)에서 제2 컨텐츠(3600b)로 변경되면, 컨텐츠 재생 장치(1200)는 시청자 인식 및 사용자의 선택을 다시 수행한다. 즉, 컨텐츠 재생 장치(1200)는 제2 컨텐츠(3600b)를 시청하는 사용자 A 및 사용자 B를 인식하여 연령을 판단하고, 최소 연령자인 사용자 B를 선택한다.
도 37을 참조하면, 컨텐츠 재생 장치(1200)는 새로 선택된 사용자인 사용자 B의 연령과 제2 컨텐츠(3600b)의 시청 등급 비교를 통해 시청을 제한한다. 컨텐츠 재생 장치(1200)는 컨텐츠 제공자로부터 제2 컨텐츠(3600b)의 시청 등급(15세 이상 관람가)을 수신하고, 이를 선택된 사용자인 사용자 B의 연령(17세)과 비교한다. 선택된 사용자의 연령(17세)이 제2 컨텐츠(3600b)의 시청 등급 연령(15세) 이상이므로, 컨텐츠 재생 장치(1200)는 제2 컨텐츠(3600b)의 시청이 가능한 것으로 판단한다. 따라서, 컨텐츠 재생 장치(1200)는 제한 없이 제2 컨텐츠(3600b)를 재생한다.
도 38은 본 발명의 실시예에 따른 재생 컨텐츠의 변경시 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 나타내는 순서도이다.
도 38을 참조하면, 3801 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들을 인식하고, 복수의 사용자들 중에서 어느 하나의 사용자를 선택한다. 복수의 사용자들을 인식하고 연령에 기초하여 사용자를 선택하는 구체적인 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
3802 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라서 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
3803 단계에서 컨텐츠 재생 장치(1200)는 재생 중인 컨텐츠가 변경되었는지 여부를 판단한다.
판단 결과, 재생 중인 컨텐츠가 변경되었다면 3804 단계로 진행하여 컨텐츠 재생 장치(1200)는 시청자 인식 및 사용자의 선택을 다시 수행한다. 이때, 컨텐츠 재생 장치(1200)가 시청자를 인식하고, 사용자를 선택하는 방법은 3801 단계에서와 동일하다.
사용자의 재선택이 완료되면, 3805 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 39 내지 도 40은 본 발명의 실시예에 따른 주기적으로 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 설명하기 위한 도면들이다.
도 39를 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들을 인식하고, 최소 연령자인 사용자 C를 선택한다. 컨텐츠 재생 장치(1200)는 선택된 사용자인 사용자 C의 연령(6세)에 따라 컨텐츠의 재생을 제어한다.
그 후, 미리 설정된 일정한 시간이 경과하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 시청자 인식 및 사용자의 선택을 다시 수행한다. 즉, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 주기적으로 시청자를 인식하고 사용자를 선택한다. 이때, 시청자 인식 및 사용자를 선택하는 주기는 사용자가 임의로 설정할 수 있다. 예를 들어, 사용자는 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)가 10분 간격으로 시청자 인식 및 사용자를 선택하도록 설정할 수도 있다. 도 39에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 일정 시간 경과 후 컨텐츠를 시청하고 있는 사용자 A 및 사용자 B를 인식하고, 최소 연령자인 사용자 B를 선택한다.
도 40을 참조하면, 컨텐츠 재생 장치(1200)는 새로 선택된 사용자인 사용자 B의 연령과 컨텐츠의 시청 등급 비교를 통해 시청을 제한한다. 컨텐츠 재생 장치(1200)는 컨텐츠 제공자로부터 컨텐츠의 시청 등급(19세 이상 관람가)을 수신하고, 이를 선택된 사용자인 사용자 B의 연령(17세)과 비교한다. 선택된 사용자의 연령(17세)이 컨텐츠의 시청 등급 연령(19세) 미만이므로, 컨텐츠 재생 장치(1200)는 컨텐츠의 시청이 불가한 것으로 판단한다. 따라서, 컨텐츠 재생 장치(1200)는 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 41은 본 발명의 실시예에 따른 주기적으로 시청자 인식을 수행하고 컨텐츠의 재생을 제어하는 방법을 나타내는 순서도이다.
도 41을 참조하면, 4101 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들을 인식하고, 복수의 사용자들 중에서 어느 하나의 사용자를 선택한다. 복수의 사용자들을 인식하고 연령에 기초하여 사용자를 선택하는 구체적인 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
4102 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라서 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
4103 단계에서 컨텐츠 재생 장치(1200)는 미리 설정된 일정 시간이 경과하였는지 여부를 판단한다.
판단 결과, 미리 설정된 일정 시간이 경과하였다면 4104 단계로 진행하여 사용자 인식 장치(11000 및 컨텐츠 재생 장치(1200)는 시청자 인식 및 사용자의 선택을 다시 수행한다. 이때, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)가 시청자를 인식하고, 사용자를 선택하는 방법은 4101 단계에서와 동일하다.
사용자의 재선택이 완료되면, 4105 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령에 따라 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
도 42a는 본 발명의 실시예에 따른 연령을 기준으로 선택된 사용자에 따라 검색 채널을 제한하는 방법을 설명하기 위한 도면이다.
도 42a를 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들을 인식하고, 최소 연령자인 사용자 C를 선택한다. 컨텐츠 재생 장치(1200)는 선택된 사용자인 사용자 C의 연령(6세)에 따라 컨텐츠의 재생을 제어한다. 또한, 컨텐츠 재생 장치(1200)는 채널 검색 요청이 있을 경우, 선택된 사용자인 사용자 C의 연령(6세)에 따라 검색 가능한 채널을 제한한다.
예를 들면, 디스플레이 장치(1000)에 제1 화면(4200a)이 표시된 상태에서 채널 검색 요청이 수신되면, 컨텐츠 재생 장치(1200)는 선택된 사용자의 연령(6세)에 따라 채널 검색을 제한한다. 즉, 컨텐츠 재생 장치(1200)는 선택된 사용자가 시청할 수 없는 채널들은 제외한 나머지 채널들만을 검색 결과로써 디스플레이 장치(1000)의 화면에 표시한다. 도 42a를 참조하면, 컨텐츠 재생 장치(1200)는 제2 화면(4200b)에 검색이 제한된 채널들이 필터링된 채널 검색 결과(4210)를 표시한다.
도 42b는 본 발명의 실시예에 따른 연령을 기준으로 선택된 사용자에 따라 검색 채널을 제한하는 방법을 나타내는 순서도이다.
도 42b를 참조하면, 4201 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 시청자들의 얼굴 인식을 수행한다. 예를 들어, 사용자 인식 장치(1100)는 컨텐츠를 시청하는 복수의 사용자들을 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)에 전송하고, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
4202 단계에서 컨텐츠 재생 장치(1200)는 인식된 얼굴을 미리 저장된 사용자 연령 정보와 비교하여 사용자들의 연령을 판단한다. 이때, 사용자 연령 정보는 각 사용자의 사진에 해당 사용자의 연령이 맵핑된 테이블의 형태로 컨텐츠 재생 장치(1200)에 미리 저장되어 있을 수 있다.
컨텐츠를 시청하는 복수의 사용자들의 얼굴을 인식하고, 연령을 판단하는 구체적인 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
사용자들의 연령이 판단되었으면, 4203 단계에서 컨텐츠 재생 장치(1200)는 최소 연령인 사용자를 선택한다.
4204 단계에서 컨텐츠 재생 장치(1200)는 채널 검색 요청을 수신하면 선택된 사용자의 연령에 따라서 검색 가능 채널을 제한한다. 즉, 컨텐츠 재생 장치(1200)는 선택된 사용자가 시청할 수 없는 채널들은 제외한 나머지 채널들만을 검색 결과로써 디스플레이 장치(1000)의 화면에 표시한다.
도 43a는 본 발명의 실시예에 따른 채널 변경시 연령을 기준으로 선택된 사용자에 따라 컨텐츠 재생을 제어하는 방법을 설명하기 위한 도면이다.
도 43a를 참조하면, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 사용자들을 인식하고, 최소 연령자인 사용자 C를 선택한다. 컨텐츠 재생 장치(1200)는 선택된 사용자인 사용자 C의 연령(6세)에 따라 채널 변경시 컨텐츠의 재생을 제어한다.
구체적으로, 컨텐츠 재생 장치(1200)는 디스플레이 장치(1000)에 표시되는 채널이 변경되면, 변경된 채널에 사용자 C의 시청이 제한되는 컨텐츠가 재생 중인지 여부를 판단한다. 변경된 채널에 재생 중인 컨텐츠가 사용자 C의 시청이 제한되는 컨텐츠라면, 컨텐츠 재생 장치(1200)는 컨텐츠의 시청을 제한하거나, 또는 해당 채널을 건너뛰고 사용자 C가 시청 가능한 컨텐츠를 재생 중인 채널로 변경한다.
도 43a에서 사용자 C가 시청 가능한 제1 화면(4300a)을 재생하는 채널에서, 사용자 C의 시청이 제한되는 제2 화면(4300b)을 재생하는 채널로 변경된 경우, 컨텐츠 재생 장치(1200)는 도시된 바와 같이 화면의 일부를 모자이크 처리하여 컨텐츠의 시청을 제한한다. 컨텐츠 재생 장치(1200)가 컨텐츠의 시청을 제한하는 구체적인 방법은 앞서 도 6 내지 도 13을 참조하여 설명한 바와 같다.
또는, 컨텐츠 재생 장치(1200)는 사용자 C의 시청이 제한되는 컨텐츠를 재생하는 채널을 건너뛰고, 제3 화면(4300c)와 같이 사용자 C의 시청이 가능한 컨텐츠를 재생하는 다른 채널로 변경할 수도 있다.
도 43b은 본 발명의 실시예에 따른 채널 변경시 연령을 기준으로 선택된 사용자에 따라 컨텐츠 재생을 제어하는 방법을 나타내는 순서도이다.
도 43b를 참조하면, 4301 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 컨텐츠를 시청하는 복수의 시청자들의 얼굴 인식을 수행한다. 예를 들어, 사용자 인식 장치(1100)는 컨텐츠를 시청하는 복수의 사용자들을 촬영하여 촬영 영상을 컨텐츠 재생 장치(1200)에 전송하고, 컨텐츠 재생 장치(1200)는 수신한 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 특징을 추출하는 방식으로 얼굴 인식을 수행할 수 있다.
4302 단계에서 컨텐츠 재생 장치(1200)는 인식된 얼굴을 미리 저장된 사용자 연령 정보와 비교하여 사용자들의 연령을 판단한다. 이때, 사용자 연령 정보는 각 사용자의 사진에 해당 사용자의 연령이 맵핑된 테이블의 형태로 컨텐츠 재생 장치(1200)에 미리 저장되어 있을 수 있다.
컨텐츠를 시청하는 복수의 사용자들의 얼굴을 인식하고, 연령을 판단하는 구체적인 방법은 앞서 도 4를 참조하여 설명한 바와 같다.
사용자들의 연령이 판단되었으면, 4303 단계에서 컨텐츠 재생 장치(1200)는 최소 연령인 사용자를 선택한다.
4304 단계에서 디스플레이 장치(1000)의 채널이 변경되면, 4305 단계에서 컨텐츠 재생 장치(1200)는 변경된 채널에서 선택된 사용자의 시청이 제한되는 컨텐츠가 재생 중인지 여부를 판단한다.
판단 결과, 변경된 채널에서 선택된 사용자의 시청이 제한되는 컨텐츠가 재생 중이라면, 4306 단계로 진행하여 컨텐츠 재생 장치(1200)는 컨텐츠의 시청을 제한하거나, 또는 변경된 채널을 건너뛰어 선택된 사용자가 시청 가능한 컨텐츠를 재생 중인 다른 채널로 변경한다.
도 44 내지 도 45는 본 발명의 실시예에 따른 사용자의 동작 인식 결과에 기초하여 선택된 사용자에 따라 선호 채널을 표시하는 방법을 설명하기 위한 도면들이다.
도 44를 참조하면, 사용자 A 및 사용자 B는 함께 디스플레이 장치(1000)에서 재생되는 컨텐츠를 시청하고 있다. 본 실시예에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 복수의 사용자들의 동작을 인식하고, 미리 설정된 특정 동작을 수행하는 사용자를 선택한다. 특히, 도 44에 도시된 실시예에서 컨텐츠 재생 장치(1200)는 리모트 컨트롤러(4410)를 조작하는 사용자 A를 선택한다. 왜냐하면, 디스플레이 장치(1000)의 채널을 조작하는 사용자의 기호에 따른 피드백 결과를 제공하기 위함이다. 이외에도 다양한 동작들을 기준으로 사용자를 선택할 수도 있다.
사용자가 선택되었으면, 선택된 사용자의 기호에 따른 피드백 결과를 제공한다. 도 45를 참조하면, 컨텐츠 재생 장치(1200)에는 복수의 사용자들에 대한 선호 채널 목록(4510)이 미리 저장되어 있다. 선호 채널 목록(4510)에는 각각의 사용자의 사진에 해당 사용자가 선호하는 채널이 맵핑되어 저장되어 있을 수 있다. 이때, 선호 채널 목록(4510)에는 도 45에 도시된 바와 같이 채널의 카테고리가 저장되어 있을 수도 있고, 또는 구체적인 각각의 채널들이 저장되어 있을 수도 있다. 앞서 도 44에서 사용자 A가 선택되었으므로, 컨텐츠 재생 장치(1200)는 선호 채널 목록(4510)을 참조하여 사용자 A의 선호 채널은 스포츠, 영화, 뉴스임을 확인한다. 그리고, 컨텐츠 재생 장치(1200)는 도시된 바와 같이 화면에 사용자 A의 선호 채널 목록(4520)을 표시한다.
도 46은 본 발명의 실시예에 따른 사용자의 동작 인식 결과에 따라 선택된 사용자에 따라 선호 채널을 표시하는 방법을 나타내는 순서도이다.
도 46을 참조하면, 4601 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 재생되는 컨텐츠를 시청하는 복수의 사용자들의 동작 인식을 수행한다. 이때, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 동작 인식뿐만 아니라, 각 사용자를 식별하기 위한 얼굴 인식도 함께 수행할 수 있다.
4602 단계에서 컨텐츠 재생 장치(1200)는 미리 설정된 특정 동작을 수행하는 사용자를 선택한다. 예를 들어, 리모트 컨트롤러를 조작하는 사용자를 선택할 수 있다. 이외에도 다양한 동작들을 기준으로 사용자를 선택할 수도 있다.
4603 단계에서 컨텐츠 재생 장치(1200)는 미리 등록된 선택된 사용자의 선호 채널을 확인한다. 이를 위해, 컨텐츠 재생 장치(1200)에는 복수의 사용자들에 대한 선호 채널 목록이 미리 저장되어 있을 수 있다.
4604 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 선호 채널 목록을 화면에 표시한다.
도 47은 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 채널을 판단하고 표시하는 방법을 설명하기 위한 도면이다.
우선, 도 44에 도시된 바와 같이 리모트 컨트롤러(4410)를 조작하는 사용자 A가 선택되었다고 가정한다. 한편, 도 45에서는 사용자 각각에 대한 선호 채널 목록이 컨텐츠 재생 장치(1200)에 미리 저장되어 있어, 이에 기초하여 컨텐츠 재생 장치(1200)가 선택된 사용자의 선호 채널을 확인하였다. 하지만, 본 실시예에서는 각 사용자의 시청 히스토리를 분석하여 각 사용자의 선호 채널을 판단한다.
도 47을 참조하면, 컨텐츠 재생 장치(1200)는 복수의 사용자들의 시청 채널 목록(4710)을 분석한다. 이때, 시청 채널 목록(4710)에는 각각의 사용자의 사진에 해당 사용자가 시청한 채널의 목록이 맵핑되어 저장되어 있다. 시청 채널 목록(4710)에 저장되는 시청 채널들은 미리 설정된 일정 시간 동안 각 사용자가 시청한 채널들일 수도 있고, 또는 미리 설정된 일정 개수의 각 사용자가 시청한 채널들일 수도 있다. 이외에도, 각 사용자의 시간대별 시청한 채널의 목록을 이용할 수도 있는 등, 시청 채널 목록을 구성하는 방법은 다양하게 구현이 가능하다.
컨텐츠 재생 장치(1200)는 시청 채널 목록(4710)을 분석한 결과, 사용자 A가 시청한 횟수가 일정값 이상인 ESPN 및 BBC를 사용자 A의 선호 채널로 판단한다. 그리고, 컨텐츠 재생 장치(1200)는 사용자 A의 선호 채널 목록(4720)을 화면에 표시한다.
도 48은 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 채널을 판단하고 표시하는 방법을 나타내는 순서도이다.
도 48을 참조하면, 4801 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 재생되는 컨텐츠를 시청하는 복수의 사용자들의 동작 인식을 수행한다. 이때, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 동작 인식뿐만 아니라, 각 사용자를 식별하기 위한 얼굴 인식도 함께 수행할 수 있다.
4802 단계에서 컨텐츠 재생 장치(1200)는 미리 설정된 특정 동작을 수행하는 사용자를 선택한다. 예를 들어, 리모트 컨트롤러를 조작하는 사용자를 선택할 수 있다. 이외에도 다양한 동작들을 기준으로 사용자를 선택할 수도 있다.
4803 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 시청 히스토리를 분석하여, 선택된 사용자의 선호 채널을 판단한다. 자세하게는, 컨텐츠 재생 장치(1200)는 선택된 사용자가 시청한 채널들의 목록을 분석하여, 선택된 사용자가 시청한 횟수가 일정값 이상인 채널을 선택된 사용자의 선호 채널로 판단할 수 있다.
4804 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 선호 채널 목록을 디스플레이 장치(1000)의 화면에 표시한다.
도 49는 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 컨텐츠를 판단하고 표시하는 방법을 설명하기 위한 도면이다.
우선, 도 44에 도시된 바와 같이 리모트 컨트롤러(4410)를 조작하는 사용자 A가 선택되었다고 가정한다. 한편, 도 47에서 컨텐츠 재생 장치(1200)는 사용자가 시청한 채널 목록을 분석하여 선택된 사용자의 선호 채널을 판단하고 표시하였다. 하지만, 본 실시예에서 컨텐츠 재생 장치(1200)는 사용자가 시청한 컨텐츠 목록을 분석하여 선택된 사용자가 선호하는 컨텐츠의 장르를 분석하고, 해당 장르의 다른 컨텐츠들을 추천하는 목록을 디스플레이 장치(1000)에 표시한다.
도 49를 참조하면, 컨텐츠 재생 장치(1200)는 복수의 사용자들의 시청 컨텐츠 목록(4910)을 분석한다. 이때, 시청 컨텐츠 목록(4910)에는 각각의 사용자의 사진에 해당 사용자가 시청한 컨텐츠의 목록이 맵핑되어 저장되어 있다. 시청 컨텐츠 목록(4910)에 저장되는 시청 컨텐츠들은 미리 설정된 일정 시간 동안 각 사용자가 시청한 컨텐츠들일 수도 있고, 또는 미리 설정된 일정 개수의 각 사용자가 시청한 컨텐츠들일 수도 있다. 이외에도, 각 사용자의 시간대별 시청한 컨텐츠의 목록을 이용할 수도 있는 등, 시청 컨텐츠 목록을 구성하는 방법은 다양하게 구현이 가능하다.
컨텐츠 재생 장치(1200)는 시청 컨텐츠 목록(4910)을 분석한 결과, 사용자 A의 선호 컨텐츠 장르를 액션이라고 판단한다. 그리고, 컨텐츠 재생 장치(1200)는 액션 장르의 다른 컨텐츠들을 검색하여 디스플레이 장치(1000)의 화면에 추천 목록(4920)을 표시한다.
도 50은 본 발명의 실시예에 따른 사용자의 시청 히스토리에 기초하여 선호 컨텐츠를 판단하고 표시하는 방법을 나타내는 순서도이다.
도 50을 참조하면, 5001 단계에서 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 재생되는 컨텐츠를 시청하는 복수의 사용자들의 동작 인식을 수행한다. 이때, 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)는 동작 인식뿐만 아니라, 각 사용자를 식별하기 위한 얼굴 인식도 함께 수행할 수 있다.
5002 단계에서 컨텐츠 재생 장치(1200)는 미리 설정된 특정 동작을 수행하는 사용자를 선택한다. 예를 들어, 리모트 컨트롤러를 조작하는 사용자를 선택할 수 있다. 이외에도 다양한 동작들을 기준으로 사용자를 선택할 수도 있다.
5003 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 시청 히스토리를 분석하여, 선택된 사용자의 선호 장르를 판단한다. 자세하게는, 컨텐츠 재생 장치(1200)는 선택된 사용자가 시청한 컨텐츠들의 목록을 분석하여, 선택된 사용자가 선호하는 컨텐츠의 장르를 판단한다.
5004 단계에서 컨텐츠 재생 장치(1200)는 선택된 사용자의 선호 장르의 컨텐츠 추천 목록을 디스플레이 장치(1000)의 화면에 표시한다.
도 51은 본 발명의 실시예에 따른 컨텐츠 재생 제어 기능을 지원하는 디스플레이 장치의 구성을 도시한 도면이다. 앞서 설명한 바와 같이 지금까지 설명한 컨텐츠 재생 제어를 위한 프로세스들은 디스플레이 장치와는 별도로 구비된 컨텐츠 재생 장치에서 수행될 수도 있으나, 디스플레이 장치에서 모든 프로세스를 수행할 수도 있다. 이 경우 하나의 단일 장치만으로 컨텐츠의 재생 제어가 가능하다.
도 51을 참조하면, 본 발명의 실시예에 따른 디스플레이 장치(1000)는 사용자 인식 장치(1100), 사용자 인터페이스부(1010), 통신부(1040), 저장부(1050), 출력부(1030) 및 제어부(1020)를 포함할 수 있다.
사용자 인식 장치(1100)는 컨텐츠를 시청하는 복수의 사용자들을 인식할 수 있다. 이때, 인식(recognition)이란 대상의 존재를 확인하거나, 대상의 특징을 추출 및 분석하는 동작을 의미한다. 사용자 인식 장치(1100)는 영상 또는 음성 검출을 위한 검출부(미도시)와, 검출된 영상 또는 음성을 분석하기 위한 분석부(미도시)를 포함할 수 있다. 검출부는 디스플레이 장치(1000)에 구비된 카메라 또는 마이크 등으로 구현될 수 있고, 분석부는 영상 또는 음성 분석이 가능한 프로세서 등으로 구현될 수 있다.
사용자 인터페이스부(1010)는 사용자로부터 각종 입력을 수신하기 위한 구성으로, 장치에 구비된 조작 버튼 또는 리모트 컨트롤러 등이 이에 해당된다.
통신부(1040)는 데이터의 송수신을 수행하기 위한 구성이며, 유무선 통신을 통해 외부의 서버 등으로부터 컨텐츠를 수신할 수 있다.
저장부(1050)는 데이터를 저장하기 위한 공간으로, 외부로부터 수신한 컨텐츠, 사용자 연령 정보 및 사용자별 선호 채널 목록 등이 저장될 수 있다.
출력부(1030)는 영상 출력부(1031) 및 음성 출력부(1032)를 포함할 수 있다. 디스플레이 장치(1000)에서 재생되는 컨텐츠의 영상 및 음성은 각각 영상 출력부(1031) 및 음성 출력부(1032)를 통해 출력된다.
제어부(1020)는 디스플레이 장치(1000)에 포함된 구성들의 전체적인 동작을 제어한다. 제어부(1020)는 마이크로 프로세서 등으로 구현될 수 있다. 제어부(1020)는 인식 관리자(1021) 및 제한 관리자(1022)를 포함할 수 있다.
인식 관리자(1021)는 사용자 인식 장치(1100)로부터 수신한 사용자 촬영 영상 또는 사용자 음성을 이용하여 사용자 인식을 수행하고, 인식된 복수의 사용자들 중에서 미리 정해진 기준에 따라 적어도 하나의 사용자를 선택할 수 있다. 구체적으로, 인식 관리자(1021)는 촬영 영상에서 인물의 얼굴에 해당되는 부분을 파악한 후 얼굴의 대칭적 구도, 생김새, 머리카락, 눈의 색상 및 얼굴 근육의 움직임 등을 분석하여 얼굴의 특징을 추출한다. 이어서, 인식 관리자(1021)는 추출된 얼굴의 특징을 저장부(1050)에 미리 저장된 사용자 연령 정보와 비교하여 사용자들의 연령을 판단할 수 있다. 이때, 사용자 연령 정보는 각각의 사용자의 사진에 해당 사용자의 연령이 맵핑되어 저장되어 있는 형태일 수 있다.
또는, 인식 관리자(1021)는 사용자 인식 장치(1100)로부터 수신한 촬영 영상에서 인물의 체형을 분석하거나, 사용자 인식 장치(1100)로부터 수신한 사용자의 음성을 분석하여 미리 저장된 사용자 연령 정보와 비교하여 사용자들의 연령을 판단할 수도 있다. 이때, 사용자 연령 정보는 각각의 사용자의 체형 또는 음성에 해당 사용자의 연령이 맵핑되어 저장되어 있는 형태일 수 있다.
또는, 인식 관리자(1021)는 사용자 인식 장치(1100)로부터 수신한 촬영 영상 또는 사용자 음성을 분석하고, 분석 결과를 저장부(1050)에 미리 저장된 연령대별 얼굴, 체형 또는 음성의 특징과 비교하여 사용자들의 연령을 예측할 수도 있다.
또는, 인식 관리자(1021)는 사용자 인식 장치(1100)로부터 수신한 촬영 영상으로부터 사용자들의 동작을 분석할 수도 있다.
또는, 인식 관리자(1021)는 컨텐츠를 시청하는 사용자의 수에 변경이 있는 경우 이를 감지할 수도 있으며, 사용자들의 대화 음성을 분석하여 컨텐츠를 시청하는 사용자의 추가를 예측할 수도 있다.
한편, 인식 관리자(1021)는 일정한 기준에 따라서 사용자를 선택할 수 있는데, 예를 들어 최소 연령의 사용자를 선택하거나, 특정 동작을 수행하는 사용자를 선택할 수 있다. 이외에도 인식 관리자(1021)는 다양한 기준에 따라서 사용자를 선택할 수 있다.
제한 관리자(1022)는 선택된 사용자에 따라 컨텐츠의 재생을 제어한다. 예를 들어, 제한 관리자(1022)는 최소 연령의 사용자가 선택된 경우, 선택된 사용자의 연령과 컨텐츠의 시청 등급을 비교하여 선택된 사용자의 시청이 허용되지 않는 컨텐츠의 재생을 제한할 수 있다. 이때, 제한 관리자(1022)는 컨텐츠 제공자로부터 컨텐츠의 시청 등급을 수신할 수도 있지만, 시청 등급이 제공되지 않는 경우 컨텐츠를 분석하여 시청 등급을 판단할 수도 있다.
한편, 상기 디스플레이 장치(1000)에 포함된 구성들은, 비록 도 51을 참조하여 설명하지 않은 동작일지라도, 앞서 도 1 내지 도 50을 참조하여 설명한 컨텐츠 재생 제어 방법을 실시하기 위한 동작들을 수행할 수 있다.
한편, 도 51에서는 컨텐츠의 재생을 제어하는 모든 프로세스를 디스플레이 기능을 갖는 TV 등과 같은 디스플레이 장치(1000)에서 직접 수행하는 실시예에 대해서 설명하였으나, 이와 다르게 사용자의 인식, 컨텐츠의 제한 여부 판단 및 컨텐츠 제한 등의 프로세스는 별도의 디바이스 또는 외부의 서버에서 수행할 수도 있다.
이하에서는 컨텐츠 재생 제어에 필요한 프로세스들을 디스플레이 장치와 연결된 디바이스 및 서버 등에서 수행하는 실시예들에 대해서 도 52 내지 도 58을 참조하여 설명한다.
도 52는 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템을 도시한 도면이다. 도 52를 참조하면, 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템은, 디스플레이 장치(1000), 사용자 인식 장치(1100), 컨텐츠 재생 장치(1200) 및 서버(1300)를 포함할 수 있다. 각 디바이스의 구체적인 구성 및 동작은 도 53 및 도 54를 참조하여 설명한다.
도 53은 일 실시예에 따라 도 52에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다. 다만, 도 53에는 본 실시예를 수행하기 위해 필요한 필수적인 구성들만을 도시하였으므로, 각 디바이스는 이외에도 일반적인 구성들을 더 포함할 수 있다.
도 53에 도시된 시스템에서는, 컨텐츠 재생 장치(1200)가 사용자 인식, 컨텐츠 제한 여부 판단 및 컨텐츠 제한 등의 프로세스를 모두 수행한다. 이때, 서버(1300)는 컨텐츠 재생 장치(1200)에 재생할 컨텐츠를 제공하며, 사용자 인식 장치(1100)는 사용자의 촬영 영상을 컨텐츠 재생 장치(1200)로 전송한다.
도 53을 참조하면, 디스플레이 장치(1000)는 통신부(1040) 및 출력부(1030)를 포함할 수 있으며, 출력부(1030)는 영상 출력부(1031) 및 음성 출력부(1032)를 포함할 수 있다. 영상 출력부(1031)는 컨텐츠 재생 화면을 디스플레이 할 수 있는 LCD, OLED 패널 등과 같은 구성에 해당된다. 음성 출력부(1032)는 스피커 등과 같은 구성에 해당된다. 디스플레이 장치(1000)는 통신부(1040)를 통해서 컨텐츠 재생 장치(1200)로부터 컨텐츠를 재생하기 위한 데이터를 수신하고, 이를 출력부(1030)에 영상 및 음성으로 출력할 수 있다.
사용자 인식 장치(1100)는 영상 촬영을 위한 카메라(1110) 및 촬영된 영상의 전송을 위한 통신부(1120)를 포함할 수 있다. 또한, 사용자 인식 장치(1100)는 사용자의 음성을 검출하기 위한 음성 검출부(미도시)를 더 포함할 수도 있다. 이러한 사용자 인식 장치(1100)는 도 52 및 53에 도시된 바와 같이 디스플레이 장치(1000)와 분리된 별도의 디바이스로 구현될 수도 있고, 또는 디스플레이 장치(1000)에 내장된 카메라 모듈로 대체될 수도 있다. 이러한 실시예에 대해서는 아래의 도 55 및 56에 도시된 실시예를 참고한다.
컨텐츠 재생 장치(1200)는 통신부(1210), 제어부(1220) 및 저장부(1230)를 포함할 수 있으며, 제어부(1220)는 인식 관리자(1221) 및 제한 관리자(1222)를 포함할 수 있다.
통신부(1210)는 사용자 인식 장치(1100)로부터 촬영 영상을 수신하여 이를 제어부(1220)로 전달하고, 또한 서버(1300)로부터 컨텐츠를 수신하여 이를 제어부(1220)로 전달한다.
제어부(1220)는 사용자 인식, 컨텐츠 제한 여부 판단 및 컨텐츠 제한을 수행할 수 있다. 인식 관리자(1221)는 사용자 인식 장치(1100)로부터 컨텐츠를 시청하는 사용자들에 대한 촬영 영상을 수신하면, 수신한 촬영 영상으로부터 복수의 사용자들의 얼굴 또는 체형 등을 인식할 수 있다. 또는, 인식 관리자(1221)는 사용자 인식 장치(1100)로부터 수신한 사용자 음성을 분석할 수도 있다.
복수의 사용자들의 인식이 완료되면, 인식 관리자(1221)는 일정한 기준에 따라서 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 예를 들어, 인식 관리자(1221)는 최소 연령의 사용자를 선택할 수도 있고, 또는 특정 동작을 수행하는 사용자를 선택할 수도 있다.
인식 관리자(1221)가 사용자의 선택을 완료하면, 제한 관리자(1222)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 예를 들어, 제한 관리자(1222)는 선택된 사용자의 연령과 컨텐츠의 시청 등급을 비교하여 시청 가능 여부를 판단하고, 시청 불가로 판단되면 컨텐츠의 재생을 중지하거나 컨텐츠를 가공하여 디스플레이 장치(1000)에 전송할 수 있다.
제어부(1220)는 사용자 인식, 컨텐츠 제한 여부 판단 및 컨텐츠 제한 등의 프로세스를 수행함에 있어서, 필요한 정보들을 저장부(1230)에 접근하여 이용할 수 있다. 저장부(1230)에는 사용자의 인식 및 기준 사용자의 선택을 위해 필요한 사용자 정보들이 저장되어 있을 수 있으며, 또한 컨텐츠 제한 여부를 판단하기 위해 필요한 컨텐츠 관련 정보들이 저장되어 있을 수 있다.
서버(1300)는 통신부(1330), 제어부(1320) 및 저장부(1310)를 포함할 수 있다. 서버(1300)의 통신부(1330)는 인터넷 등과 같은 네트워크를 통해 컨텐츠 재생 장치(1200)의 통신부(1210)에 연결될 수 있다.
서버(1300)의 제어부(1320)는 컨텐츠 재생 장치(1200)로부터 컨텐츠 요청을 수신하면, 저장부(1310)에 저장된 컨텐츠 중에서 요청받은 컨텐츠를 추출하여 컨텐츠 재생 장치(1200)로 전송한다.
한편, 컨텐츠 재생 장치(1200)는 통신부(1210)를 통해서 제어된 컨텐츠 재생 데이터를 디스플레이 장치(1000)의 통신부(1040)로 전송하고, 디스플레이 장치(1000)는 수신한 컨텐츠 데이터를 변환하여 출력부(1030)에 영상 및 음성을 출력할 수 있다.
도 54는 다른 실시예에 따라 도 52에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다. 다만, 도 54에는 본 실시예를 수행하기 위해 필요한 필수적인 구성들만을 도시하였으므로, 각 디바이스는 이외에도 일반적인 구성들을 더 포함할 수 있다.
도 54에 도시된 시스템에서는, 컨텐츠 재생 장치(1200) 및 서버(1300)가 컨텐츠 재생 제어를 위한 프로세스들을 분담하여 수행한다. 구체적으로, 컨텐츠 재생 장치(1200)는 사용자 인식을 수행하고, 서버(1300)는 사용자 인식 결과에 기초하여 컨텐츠 제한 여부 판단 및 컨텐츠 제한을 수행한다. 이때, 사용자 인식 장치(1100)는 사용자의 촬영 영상을 컨텐츠 재생 장치(1200)로 전송한다.
도 54를 참조하면, 디스플레이 장치(1000)는 통신부(1040) 및 출력부(1030)를 포함할 수 있으며, 출력부(1030)는 영상 출력부(1031) 및 음성 출력부(1032)를 포함할 수 있다. 영상 출력부(1031)는 컨텐츠 재생 화면을 디스플레이 할 수 있는 LCD, OLED 패널 등과 같은 구성에 해당된다. 음성 출력부(1032)는 스피커 등과 같은 구성에 해당된다. 디스플레이 장치(1000)는 통신부(1040)를 통해서 컨텐츠 재생 장치(1200)로부터 컨텐츠를 재생하기 위한 데이터를 수신하고, 이를 출력부(1030)에 영상 및 음성으로 출력할 수 있다.
사용자 인식 장치(1100)는 영상 촬영을 위한 카메라(1110) 및 촬영된 영상의 전송을 위한 통신부(1120)를 포함할 수 있다. 또한, 사용자 인식 장치(1100)는 사용자의 음성을 검출하기 위한 음성 검출부(미도시)를 더 포함할 수도 있다. 이러한 사용자 인식 장치(1100)는 도 52 및 54에 도시된 바와 같이 디스플레이 장치(1000)와 분리된 별도의 디바이스로 구현될 수도 있고, 또는 디스플레이 장치(1000)에 내장된 카메라 모듈로 대체될 수도 있다. 이러한 실시예에 대해서는 아래의 도 55 및 56에 도시된 실시예를 참고한다.
컨텐츠 재생 장치(1200)는 통신부(1210), 제어부(1220) 및 저장부(1230)를 포함할 수 있으며, 제어부(1220)는 인식 관리자(1221)를 포함할 수 있다.
통신부(1210)는 사용자 인식 장치(1100)로부터 촬영 영상을 수신하여 이를 제어부(1220)로 전달하고, 또한 서버(1300)로부터 컨텐츠를 수신하여 이를 제어부(1220)로 전달한다.
제어부(1220)는 사용자 인식 및 사용자 선택을 수행할 수 있다. 인식 관리자(1221)는 사용자 인식 장치(1100)로부터 컨텐츠를 시청하는 사용자들에 대한 촬영 영상을 수신하면, 수신한 촬영 영상으로부터 복수의 사용자들의 얼굴 또는 체형 등을 인식할 수 있다. 또는, 인식 관리자(1221)는 사용자 인식 장치(1100)로부터 수신한 사용자 음성을 분석할 수도 있다.
복수의 사용자들의 인식이 완료되면, 인식 관리자(1221)는 일정한 기준에 따라서 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 예를 들어, 인식 관리자(1221)는 최소 연령의 사용자를 선택할 수도 있고, 또는 특정 동작을 수행하는 사용자를 선택할 수도 있다. 인식 관리자(1221)가 사용자의 선택을 완료하면, 제어부(1220)는 사용자 인식 및 사용자 선택 결과를 통신부(1210)를 통해 서버(1300)로 전송한다.
제어부(1220)는 사용자 인식 및 사용자 선택 등의 프로세스를 수행함에 있어서, 필요한 정보들을 저장부(1230)에 접근하여 이용할 수 있다. 저장부(1230)에는 사용자의 인식 및 사용자의 선택을 위해 필요한 사용자 정보들이 저장되어 있을 수 있다.
서버(1300)는 통신부(1330), 제어부(1320) 및 저장부(1310)를 포함할 수 있으며, 제어부(1320)는 제한 관리자(1322)를 포함할 수 있다. 서버(1300)의 통신부(1330)는 인터넷 등과 같은 네트워크를 통해 컨텐츠 재생 장치(1200)의 통신부(1210)에 연결될 수 있다.
서버(1300)의 제어부(1320)는 컨텐츠 재생 장치(1200)로부터 컨텐츠 요청을 수신하면, 저장부(1310)에 저장된 컨텐츠 중에서 요청받은 컨텐츠를 추출하여 컨텐츠 재생 장치(1200)로 전송한다.
이때, 서버(1300)의 제어부(1320)에 포함된 제한 관리자(1322)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 예를 들어, 제한 관리자(1322)는 선택된 사용자의 연령과 컨텐츠의 시청 등급을 비교하여 시청 가능 여부를 판단하고, 시청 불가로 판단되면 컨텐츠의 재생을 중지하거나 컨텐츠를 가공하여 컨텐츠 재생 장치(1200)에 전송할 수 있다.
한편, 컨텐츠 재생 장치(1200)는 통신부(1210)를 통해서 제어된 컨텐츠 재생 데이터를 디스플레이 장치(1000)의 통신부(1040)로 전송하고, 디스플레이 장치(1000)는 수신한 컨텐츠 데이터를 변환하여 출력부(1030)에 영상 및 음성을 출력할 수 있다.
도 55는 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템을 도시한 도면이다. 도 55를 참조하면, 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템은, 디스플레이 장치(1000) 및 서버(1300)를 포함할 수 있다. 또한, 디스플레이 장치(1000)는 사용자 인식 장치(1100)를 구비하고 있다. 각 디바이스의 구체적인 구성 및 동작은 도 56을 참조하여 설명한다.
도 56은 일 실시예에 따라 도 55에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다. 다만, 도 56에는 본 실시예를 수행하기 위해 필요한 필수적인 구성들만을 도시하였으므로, 각 디바이스는 이외에도 일반적인 구성들을 더 포함할 수 있다.
도 56에 도시된 시스템에서는, 컨텐츠를 재생하는 별도의 디바이스를 포함하지 않고, 서버(1300)가 사용자 인식, 사용자 선택, 컨텐츠 제한 여부 판단 및 컨텐츠 제한 등의 프로세스를 모두 수행한다.
도 56을 참조하면, 디스플레이 장치(1000)는 도 53에서와 같이 통신부(1040) 및 출력부(1030)를 포함할 뿐만 아니라, 추가적으로 사용자 인식 장치(1100)도 포함한다. 따라서, 사용자 인식 장치(1100)는 복수의 사용자들에 대한 영상을 촬영하고, 촬영된 영상은 통신부(1040)를 통해 서버(1300)로 전송된다.
디스플레이 장치(1000)의 통신부(1040) 및 출력부(1030)가 수행하는 동작은 앞서 도 53을 참조하여 설명한 바와 동일하므로, 여기에서는 자세한 설명은 생략한다.
서버(1300)는 통신부(1330), 제어부(1320) 및 저장부(1310)를 포함할 수 있으며, 제어부(1320)는 인식 관리자(1321) 및 제한 관리자(1322)를 포함할 수 있다. 서버(1300)의 통신부(1330)는 인터넷 등과 같은 네트워크를 통해 디스플레이 장치(1000)의 통신부(1040)에 연결될 수 있다.
제어부(1320)는 디스플레이 장치(1000)로부터 컨텐츠 전송 요청을 수신하면 저장부(1310)에서 요청에 대응되는 컨텐츠를 추출하여 통신부(1330)를 통해 디스플레이 장치(1000)로 전송한다. 이때, 제어부(1330)의 인식 관리자(1321) 및 제한 관리자(1322)는 디스플레이 장치(1000)로부터 수신한 복수의 촬영자에 대한 촬영 영상을 이용하여 사용자 인식, 사용자 선택, 컨텐츠 제한 여부 판단 및 컨텐츠 제한을 수행한다.
인식 관리자(1321)는 디스플레이 장치(1000)로부터 컨텐츠를 시청하는 사용자들에 대한 촬영 영상을 수신하면, 수신한 촬영 영상으로부터 복수의 사용자들의 얼굴 또는 체형 등을 인식할 수 있다. 또는, 인식 관리자(1321)는 디스플레이 장치(1100)로부터 수신한 사용자 음성을 분석할 수도 있다.
복수의 사용자들의 인식이 완료되면, 인식 관리자(1321)는 일정한 기준에 따라서 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 예를 들어, 인식 관리자(1321)는 최소 연령의 사용자를 선택할 수도 있고, 또는 특정 동작을 수행하는 사용자를 선택할 수도 있다.
인식 관리자(1321)가 사용자의 선택을 완료하면, 제한 관리자(1322)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 예를 들어, 제한 관리자(1322)는 선택된 사용자의 연령과 컨텐츠의 시청 등급을 비교하여 시청 가능 여부를 판단하고, 시청 불가로 판단되면 컨텐츠의 재생을 중지하거나 컨텐츠를 가공하여 디스플레이 장치(1000)로 전송할 수 있다.
제어부(1320)는 사용자 인식, 사용자 선택, 컨텐츠 제한 여부 판단 및 컨텐츠 제한 등의 프로세스를 수행함에 있어서, 필요한 정보들을 저장부(1310)에 접근하여 이용할 수 있다. 저장부(1310)에는 사용자의 인식 및 기준 사용자의 선택을 위해 필요한 사용자 정보들이 저장되어 있을 수 있으며, 또한 컨텐츠 제한 여부를 판단하기 위해 필요한 컨텐츠 관련 정보들이 저장되어 있을 수 있다.
도 57은 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템을 도시한 도면이다. 도 57을 참조하면, 본 발명의 실시예에 따른 컨텐츠 재생 제어를 수행하기 위한 시스템은, 디스플레이 장치(1000), 사용자 인식 장치(1100) 및 컨텐츠 재생 장치(1200)를 포함할 수 있다. 도 57에 도시된 시스템에서는 서버를 포함하지 않고, 컨텐츠 재생 디바이스(1200)가 직접 컨텐츠를 제공하는 동시에 컨텐츠의 재생 제어를 수행한다. 각 디바이스의 구체적인 구성 및 동작은 도 58을 참조하여 설명한다.
도 58은 일 실시예에 따라 도 57에 도시된 시스템에 포함된 디바이스들의 상세 구성을 도시한 도면이다. 다만, 도 58에는 본 실시예를 수행하기 위해 필요한 필수적인 구성들만을 도시하였으므로, 각 디바이스는 이외에도 일반적인 구성들을 더 포함할 수 있다.
도 58에 도시된 시스템에서는, 서버를 포함하지 않고, 컨텐츠 재생 장치(1200)가 직접 컨텐츠를 제공하는 동시에 컨텐츠의 재생 제어를 수행한다. 즉, 컨텐츠 재생 장치(1200)는 외부의 서버로부터 컨텐츠를 제공받을 필요 없이 컨텐츠 재생 드라이버(1240)를 이용하여 직접 컨텐츠를 제공한다. 이때, 컨텐츠 재생 드라이버(1240)는 CD/DVD 드라이버 또는 USB 드라이버 등과 같이 저장매체에 기록된 컨텐츠를 재생하기 위한 구성에 해당된다.
도 53을 참조하면, 디스플레이 장치(1000)는 통신부(1040) 및 출력부(1030)를 포함할 수 있으며, 출력부(1030)는 영상 출력부(1031) 및 음성 출력부(1032)를 포함할 수 있다. 영상 출력부(1031)는 컨텐츠 재생 화면을 디스플레이 할 수 있는 LCD, OLED 패널 등과 같은 구성에 해당된다. 음성 출력부(1032)는 스피커 등과 같은 구성에 해당된다. 디스플레이 장치(1000)는 통신부(1040)를 통해서 컨텐츠 재생 장치(1200)로부터 컨텐츠를 재생하기 위한 데이터를 수신하고, 이를 출력부(1030)에 영상 및 음성으로 출력할 수 있다.
사용자 인식 장치(1100)는 영상 촬영을 위한 카메라(1110) 및 촬영된 영상의 전송을 위한 통신부(1120)를 포함할 수 있다. 또한, 사용자 인식 장치(1100)는 사용자의 음성을 검출하기 위한 음성 검출부(미도시)를 더 포함할 수도 있다. 이러한 사용자 인식 장치(1100)는 도 52 및 53에 도시된 바와 같이 디스플레이 장치(1000)와 분리된 별도의 디바이스로 구현될 수도 있고, 또는 디스플레이 장치(1000)에 내장된 카메라 모듈로 대체될 수도 있다. 이러한 실시예에 대해서는 아래의 도 55 및 56에 도시된 실시예를 참고한다.
컨텐츠 재생 장치(1200)는 통신부(1210), 제어부(1220) 및 저장부(1230)를 포함할 수 있으며, 제어부(1220)는 인식 관리자(1221) 및 제한 관리자(1222)를 포함할 수 있다.
통신부(1210)는 사용자 인식 장치(1100)로부터 촬영 영상을 수신하여 이를 제어부(1220)로 전달하고, 또한 서버(1300)로부터 컨텐츠를 수신하여 이를 제어부(1220)로 전달한다.
제어부(1220)는 사용자 인식, 컨텐츠 제한 여부 판단 및 컨텐츠 제한을 수행할 수 있다. 인식 관리자(1221)는 사용자 인식 장치(1100)로부터 컨텐츠를 시청하는 사용자들에 대한 촬영 영상을 수신하면, 수신한 촬영 영상으로부터 복수의 사용자들의 얼굴 또는 체형 등을 인식할 수 있다. 또는, 인식 관리자(1221)는 사용자 인식 장치(1100)로부터 수신한 사용자 음성을 분석할 수도 있다.
복수의 사용자들의 인식이 완료되면, 인식 관리자(1221)는 일정한 기준에 따라서 복수의 사용자들 중에서 적어도 하나의 사용자를 선택한다. 예를 들어, 인식 관리자(1221)는 최소 연령의 사용자를 선택할 수도 있고, 또는 특정 동작을 수행하는 사용자를 선택할 수도 있다.
인식 관리자(1221)가 사용자의 선택을 완료하면, 제한 관리자(1222)는 선택된 사용자에 따라서 컨텐츠의 재생을 제어한다. 예를 들어, 제한 관리자(1222)는 선택된 사용자의 연령과 컨텐츠의 시청 등급을 비교하여 시청 가능 여부를 판단하고, 시청 불가로 판단되면 컨텐츠의 재생을 중지하거나 컨텐츠를 가공하여 디스플레이 장치(1000)에 전송할 수 있다.
제어부(1220)는 사용자 인식, 컨텐츠 제한 여부 판단 및 컨텐츠 제한 등의 프로세스를 수행함에 있어서, 필요한 정보들을 저장부(1230)에 접근하여 이용할 수 있다. 저장부(1230)에는 사용자의 인식 및 기준 사용자의 선택을 위해 필요한 사용자 정보들이 저장되어 있을 수 있으며, 또한 컨텐츠 제한 여부를 판단하기 위해 필요한 컨텐츠 관련 정보들이 저장되어 있을 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명에 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 예컨데 롬, 플로피 디스크, 하드디스크 등과 같은 마그네틱 저장매체, 예컨데 씨디롬, 디브이디 등과 같은 광학적 판독매체, 및 예컨데 인터넷을 통한 전송과 같은 캐리어 웨이브와 같은 저장매체를 포함한다.

Claims (15)

  1. 컨텐츠 재생 장치에 있어서,
    영상 및 음성이 출력되는 출력부;
    상기 출력부를 통해 재생되는 컨텐츠를 시청하는 복수의 사용자들을 인식하는 사용자 인식부; 및
    상기 인식된 복수의 사용자들 중에서 미리 정해진 기준을 이용하여 적어도 하나의 사용자를 선택하고, 상기 선택된 사용자에 따라서 컨텐츠의 재생을 제어하는 제어부를 포함하는 컨텐츠 재생 장치.
  2. 제1항에 있어서,
    상기 사용자 인식부는 상기 복수의 사용자들의 얼굴, 음성 또는 체형 중 적어도 하나를 인식하여 상기 복수의 사용자들 각각의 연령을 판단하고,
    상기 제어부는 상기 복수의 사용자들 중 최소 연령의 사용자를 선택하고, 상기 선택된 사용자의 시청이 허용되지 않는 컨텐츠의 재생을 제한하는 것을 특징으로 하는 컨텐츠 재생 장치.
  3. 제2항에 있어서,
    상기 제어부는 상기 컨텐츠를 분석하여 시청 등급을 판단하고, 상기 판단된 시청 등급을 상기 선택된 사용자의 연령과 비교하여 시청 허용 여부를 판단하는 것을 특징으로 하는 컨텐츠 재생 장치.
  4. 제1항에 있어서,
    상기 사용자 인식부는 상기 재생되는 컨텐츠를 시청하는 사용자 수의 변경을 감지하고,
    상기 제어부는 상기 사용자 수의 변경이 감지되면 다시 적어도 하나의 사용자를 선택하는 것을 특징으로 하는 컨텐츠 재생 장치.
  5. 제1항에 있어서,
    상기 제어부는 상기 재생되는 컨텐츠를 시청하는 복수의 사용자들의 대화 음성을 분석하여, 상기 컨텐츠를 시청하는 사용자의 추가를 예측하고, 상기 추가가 예측되는 사용자 및 상기 복수의 사용자들 중에서 적어도 하나의 사용자를 선택하는 것을 특징으로 하는 컨텐츠 재생 장치.
  6. 제1항에 있어서,
    상기 출력부를 통해서 재생되는 컨텐츠가 변경되는 경우,
    상기 사용자 인식부는 컨텐츠를 시청하는 복수의 사용자들을 다시 인식하고,
    상기 제어부는 상기 인식된 복수의 사용자들 중에서 다시 적어도 하나의 사용자를 선택하는 것을 특징으로 하는 컨텐츠 재생 장치.
  7. 제1항에 있어서,
    상기 사용자 인식부 및 상기 제어부는 각각 복수의 사용자들의 인식 및 적어도 하나의 사용자의 선택을 주기적으로 수행하는 것을 특징으로 하는 컨텐츠 장치.
  8. 제1항에 있어서,
    상기 사용자 인식부는 상기 복수의 사용자들의 동작을 인식하고,
    상기 제어부는 상기 복수의 사용자들 중에서 미리 설정된 동작을 수행하는 적어도 하나의 사용자를 선택하고, 상기 선택된 사용자의 기호(preference)에 따라 컨텐츠의 재생을 제어하는 것을 특징으로 하는 컨텐츠 재생 장치.
  9. 제8항에 있어서,
    상기 제어부는 상기 선택된 사용자의 선호 채널 목록 또는 선호 컨텐츠 목록을 상기 출력부에 표시하는 것을 특징으로 하는 컨텐츠 재생 장치.
  10. 컨텐츠의 재생 제어 방법에 있어서,
    컨텐츠를 시청하는 복수의 사용자들을 인식하는 단계;
    상기 인식된 복수의 사용자들 중에서 미리 정해진 기준을 이용하여 적어도 하나의 사용자를 선택하는 단계; 및
    상기 선택된 사용자에 따라서 상기 컨텐츠의 재생을 제어하는 단계를 포함하는 방법.
  11. 제10항에 있어서,
    상기 인식하는 단계는 상기 복수의 사용자들의 얼굴, 음성 또는 체형 중 적어도 하나를 인식하여 상기 복수의 사용자들 각각의 연령을 판단하고,
    상기 선택하는 단계는 상기 복수의 사용자들 중 최소 연령의 사용자를 선택하고,
    상기 제어하는 단계는 상기 선택된 사용자의 시청이 허용되지 않는 컨텐츠의 재생을 제한하는 것을 특징으로 하는 방법.
  12. 제11항에 있어서,
    상기 제어하는 단계는,
    상기 컨텐츠를 분석하여 시청 등급을 판단하는 단계;
    상기 판단된 시청 등급을 상기 선택된 사용자의 연령과 비교하여 시청 허용 여부를 판단하는 단계; 및
    판단 결과 상기 선택된 사용자에게 상기 컨텐츠의 시청이 허용되지 않는다면, 상기 컨텐츠의 적어도 일부를 제한하여 상기 컨텐츠를 재생하는 단계를 포함하는 것을 특징으로 하는 방법.
  13. 제10항에 있어서,
    상기 인식하는 단계 및 선택하는 단계는 상기 컨텐츠를 시청하는 사용자의 수가 변경될 때마다 수행되는 것을 특징으로 하는 방법.
  14. 제10항에 있어서,
    상기 인식하는 단계는 상기 복수의 사용자들의 대화 음성을 분석하여, 상기 컨텐츠를 시청하는 사용자의 추가를 예측하고,
    상기 선택하는 단계는 상기 추가가 예측되는 사용자 및 상기 복수의 사용자들 중에서 적어도 하나의 사용자를 선택하는 것을 특징으로 하는 방법.
  15. 제10항에 있어서,
    상기 인식하는 단계 및 선택하는 단계는 재생되는 컨텐츠가 변경될 때마다 수행되는 것을 특징으로 하는 방법.
PCT/KR2015/002537 2014-03-16 2015-03-16 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치 WO2015142016A1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020167007420A KR102271854B1 (ko) 2014-03-16 2015-03-16 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치
US14/783,228 US10887654B2 (en) 2014-03-16 2015-03-16 Control method of playing content and content playing apparatus performing the same
EP15736370.6A EP2966874B1 (en) 2014-03-16 2015-03-16 Method for controlling content playback and content playback apparatus for executing same
CN201580014504.1A CN106134211B (zh) 2014-03-16 2015-03-16 播放内容的控制方法及执行所述方法的内容播放设备
IN2382MUN2015 IN2015MN02382A (ko) 2014-03-16 2015-03-16
US17/124,294 US11902626B2 (en) 2014-03-16 2020-12-16 Control method of playing content and content playing apparatus performing the same

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2014-0030675 2014-03-16
KR20140030675 2014-03-16
KR10-2014-0098586 2014-07-31
KR1020140098586A KR20150108028A (ko) 2014-03-16 2014-07-31 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/783,228 A-371-Of-International US10887654B2 (en) 2014-03-16 2015-03-16 Control method of playing content and content playing apparatus performing the same
US17/124,294 Continuation US11902626B2 (en) 2014-03-16 2020-12-16 Control method of playing content and content playing apparatus performing the same

Publications (1)

Publication Number Publication Date
WO2015142016A1 true WO2015142016A1 (ko) 2015-09-24

Family

ID=54246169

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/002537 WO2015142016A1 (ko) 2014-03-16 2015-03-16 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치

Country Status (6)

Country Link
US (2) US10887654B2 (ko)
EP (1) EP2966874B1 (ko)
KR (2) KR20150108028A (ko)
CN (1) CN106134211B (ko)
IN (1) IN2015MN02382A (ko)
WO (1) WO2015142016A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105872617A (zh) * 2015-12-28 2016-08-17 乐视致新电子科技（天津）有限公司 基于人脸识别的节目分级播放方法和装置

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9190110B2 (en) 2009-05-12 2015-11-17 JBF Interlude 2009 LTD System and method for assembling a recorded composition
US11232458B2 (en) 2010-02-17 2022-01-25 JBF Interlude 2009 LTD System and method for data mining within interactive multimedia
US9653115B2 (en) 2014-04-10 2017-05-16 JBF Interlude 2009 LTD Systems and methods for creating linear video from branched video
US9792957B2 (en) 2014-10-08 2017-10-17 JBF Interlude 2009 LTD Systems and methods for dynamic video bookmarking
US11412276B2 (en) 2014-10-10 2022-08-09 JBF Interlude 2009 LTD Systems and methods for parallel track transitions
CN104268267A (zh) * 2014-10-13 2015-01-07 英华达（上海）科技有限公司 社群媒体分享系统及方法
US10820051B2 (en) 2014-10-21 2020-10-27 At&T Mobility Ii Llc Inhibiting display of advertisements with age-inappropriate content
US9992553B2 (en) * 2015-01-22 2018-06-05 Engine Media, Llc Video advertising system
US10460765B2 (en) 2015-08-26 2019-10-29 JBF Interlude 2009 LTD Systems and methods for adaptive and responsive video
US11164548B2 (en) 2015-12-22 2021-11-02 JBF Interlude 2009 LTD Intelligent buffering of large-scale video
US20170188093A1 (en) * 2015-12-28 2017-06-29 Le Holdings (Beijing) Co., Ltd. Method and electronic device for grading-based program playing based on face recognition
WO2017120469A1 (en) 2016-01-06 2017-07-13 Tvision Insights, Inc. Systems and methods for assessing viewer engagement
US11540009B2 (en) 2016-01-06 2022-12-27 Tvision Insights, Inc. Systems and methods for assessing viewer engagement
US10616693B2 (en) * 2016-01-22 2020-04-07 Staton Techiya Llc System and method for efficiency among devices
US11856271B2 (en) 2016-04-12 2023-12-26 JBF Interlude 2009 LTD Symbiotic interactive video
US10349126B2 (en) 2016-12-19 2019-07-09 Samsung Electronics Co., Ltd. Method and apparatus for filtering video
US11050809B2 (en) 2016-12-30 2021-06-29 JBF Interlude 2009 LTD Systems and methods for dynamic weighting of branched video paths
CN106658179B (zh) * 2016-12-30 2019-12-31 合一智能科技（深圳）有限公司 一种基于智能电视摄像头的app控制方法及装置
WO2018195391A1 (en) * 2017-04-20 2018-10-25 Tvision Insights, Inc. Methods and apparatus for multi-television measurements
US10038938B1 (en) * 2017-06-02 2018-07-31 Rovi Guides, Inc. Systems and methods for controlling permissions to change parental control settings based on vocal characteristics of a user
US11205254B2 (en) 2017-08-30 2021-12-21 Pxlize, Llc System and method for identifying and obscuring objectionable content
US10904615B2 (en) * 2017-09-07 2021-01-26 International Business Machines Corporation Accessing and analyzing data to select an optimal line-of-sight and determine how media content is distributed and displayed
CN107484028B (zh) * 2017-09-15 2020-01-31 青岛海信电器股份有限公司 视频播放方法及设备
CN107948754A (zh) * 2017-11-29 2018-04-20 成都视达科信息技术有限公司 一种视频推荐方法和系统
US10257578B1 (en) 2018-01-05 2019-04-09 JBF Interlude 2009 LTD Dynamic library display for interactive videos
US11601721B2 (en) * 2018-06-04 2023-03-07 JBF Interlude 2009 LTD Interactive video dynamic adaptation and user profiling
US11605242B2 (en) * 2018-06-07 2023-03-14 Motorola Mobility Llc Methods and devices for identifying multiple persons within an environment of an electronic device
CN108737872A (zh) * 2018-06-08 2018-11-02 百度在线网络技术（北京）有限公司 用于输出信息的方法和装置
US11336968B2 (en) * 2018-08-17 2022-05-17 Samsung Electronics Co., Ltd. Method and device for generating content
US20200288204A1 (en) * 2019-03-05 2020-09-10 Adobe Inc. Generating and providing personalized digital content in real time based on live user context
US11146843B2 (en) * 2019-06-17 2021-10-12 Accenture Global Solutions Limited Enabling return path data on a non-hybrid set top box for a television
WO2020263671A1 (en) * 2019-06-27 2020-12-30 Raitonsa Dynamics Llc Modifying existing content based on target audience
WO2021014934A1 (ja) * 2019-07-19 2021-01-28 ソニー株式会社 情報処理装置、及び情報処理方法
US11589094B2 (en) * 2019-07-22 2023-02-21 At&T Intellectual Property I, L.P. System and method for recommending media content based on actual viewers
US11190840B2 (en) * 2019-07-23 2021-11-30 Rovi Guides, Inc. Systems and methods for applying behavioral-based parental controls for media assets
US11490047B2 (en) 2019-10-02 2022-11-01 JBF Interlude 2009 LTD Systems and methods for dynamically adjusting video aspect ratios
US11245961B2 (en) 2020-02-18 2022-02-08 JBF Interlude 2009 LTD System and methods for detecting anomalous activities for interactive videos
EP3903501A2 (en) * 2020-03-13 2021-11-03 Google LLC Media content casting in network-connected television devices
JP7359770B2 (ja) 2020-03-13 2023-10-11 グーグル エルエルシー 知識ベースのメディアコンテンツの推奨および統合ユーザインターフェイスを有する、ネットワーク接続されたテレビ装置
US11317150B2 (en) * 2020-06-17 2022-04-26 Netflix, Inc. Video blurring systems and methods
CN111787387A (zh) * 2020-06-30 2020-10-16 百度在线网络技术（北京）有限公司 内容显示方法、装置、设备以及存储介质
KR20220032899A (ko) * 2020-09-08 2022-03-15 삼성전자주식회사 전자 장치 및 그 제어 방법
WO2022066460A1 (en) * 2020-09-25 2022-03-31 Arris Enterprises Llc System and method for the access and routing of content on the basis of facial recognition
US11442753B1 (en) * 2020-10-14 2022-09-13 Wells Fargo Bank, N.A. Apparatuses, computer-implemented methods, and computer program products for displaying dynamic user interfaces to multiple users on the same interface
CN112261471B (zh) * 2020-10-14 2022-12-20 深圳康佳电子科技有限公司 一种基于节目内容级别播放节目的方法、电子设备及存储介质
US20220124407A1 (en) * 2020-10-21 2022-04-21 Plantronics, Inc. Content rated data stream filtering
US20220132208A1 (en) * 2020-10-23 2022-04-28 AVAST Software s.r.o. Predictive parental controls for networked devices
US11503090B2 (en) * 2020-11-30 2022-11-15 At&T Intellectual Property I, L.P. Remote audience feedback mechanism
US11837221B2 (en) * 2021-02-26 2023-12-05 Rovi Guides, Inc. Age-sensitive automatic speech recognition
US11882337B2 (en) 2021-05-28 2024-01-23 JBF Interlude 2009 LTD Automated platform for generating interactive videos
CN113395535B (zh) * 2021-06-15 2023-04-07 北京沃东天骏信息技术有限公司 一种直播处理方法、装置、系统、存储介质及电子设备
US20230019723A1 (en) * 2021-07-14 2023-01-19 Rovi Guides, Inc. Interactive supplemental content system
US11558664B1 (en) * 2021-08-24 2023-01-17 Motorola Mobility Llc Electronic device that pauses media playback based on interruption context
US11837062B2 (en) 2021-08-24 2023-12-05 Motorola Mobility Llc Electronic device that pauses media playback based on external interruption context
US11934477B2 (en) 2021-09-24 2024-03-19 JBF Interlude 2009 LTD Video player integration within websites
KR20230096766A (ko) * 2021-12-23 2023-06-30 삼성전자주식회사 전자 장치 및 그 동작 방법
WO2023167687A1 (en) * 2022-03-04 2023-09-07 Mabiala Kibabou Bleck Gaetan Systems and methods for user recognition
US11856261B1 (en) * 2022-09-29 2023-12-26 Motorola Solutions, Inc. System and method for redaction based on group association

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110023496A (ko) * 2009-08-31 2011-03-08 엘지전자 주식회사 사용자를 인식하여 기능을 제공하는 방송 수신기의 제어 방법 및 그 방법을 채용한 방송 수신기
JP2011205353A (ja) * 2010-03-25 2011-10-13 Yamaha Corp 視聴状況認識装置および視聴状況認識システム
KR20120042314A (ko) * 2010-10-25 2012-05-03 주식회사 케이티 얼굴 영상 정보에 기초하여 콘텐츠를 추천하는 시스템 및 방법
KR20120051210A (ko) * 2010-11-12 2012-05-22 엘지전자 주식회사 멀티미디어 장치에서 빔포밍을 이용한 최적 시청환경 제공 방법 및 장치
KR20140010673A (ko) * 2012-07-16 2014-01-27 삼성전자주식회사 디스플레이장치 및 그 제어 방법

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7134130B1 (en) * 1998-12-15 2006-11-07 Gateway Inc. Apparatus and method for user-based control of television content
US20030028875A1 (en) 2001-05-02 2003-02-06 Koninklijke Philips Electronics N.V. Television access control system
KR20060071173A (ko) 2004-12-21 2006-06-26 주식회사 대우일렉트로닉스 영상물의 시청 제한 방법
US20080092156A1 (en) * 2006-09-29 2008-04-17 United Video Properties, Inc. Systems and methods for automatically identifying a user profile
US20080271078A1 (en) 2007-04-30 2008-10-30 Google Inc. Momentary Electronic Program Guide
US20080317346A1 (en) 2007-06-21 2008-12-25 Microsoft Corporation Character and Object Recognition with a Mobile Photographic Device
CN101925915B (zh) * 2007-11-21 2016-06-22 高通股份有限公司 设备访问控制
JP2011504710A (ja) * 2007-11-21 2011-02-10 ジェスチャー テック，インコーポレイテッド メディア嗜好
KR20090083521A (ko) 2008-01-30 2009-08-04 엘지전자 주식회사 디스플레이장치 및 영상재생 방법
US20100205628A1 (en) * 2009-02-12 2010-08-12 Davis Bruce L Media processing methods and arrangements
KR101552335B1 (ko) 2009-02-03 2015-09-10 삼성전자 주식회사 유해영상 재생차단장치 및 그 방법
JP2011081763A (ja) * 2009-09-09 2011-04-21 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
US20110072452A1 (en) * 2009-09-23 2011-03-24 Rovi Technologies Corporation Systems and methods for providing automatic parental control activation when a restricted user is detected within range of a device
KR101626159B1 (ko) * 2009-11-25 2016-05-31 엘지전자 주식회사 사용자 적응형 디스플레이 장치 및 디스플레이 방법
US8523667B2 (en) * 2010-03-29 2013-09-03 Microsoft Corporation Parental control settings based on body dimensions
US8938669B1 (en) * 2011-03-15 2015-01-20 Google Inc. Inline user addressing in chat and document editing sessions
US8836530B1 (en) * 2011-06-21 2014-09-16 Google Inc. Proximity wakeup
US20130120243A1 (en) * 2011-11-16 2013-05-16 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US20130219417A1 (en) * 2012-02-16 2013-08-22 Comcast Cable Communications, Llc Automated Personalization
US20130218885A1 (en) * 2012-02-22 2013-08-22 Salesforce.Com, Inc. Systems and methods for context-aware message tagging
US8978158B2 (en) * 2012-04-27 2015-03-10 Google Inc. Privacy management across multiple devices
US9699485B2 (en) * 2012-08-31 2017-07-04 Facebook, Inc. Sharing television and video programming through social networking
US9288387B1 (en) * 2012-09-11 2016-03-15 Amazon Technologies, Inc. Content display controls based on environmental factors
US9092415B2 (en) * 2012-09-25 2015-07-28 Rovi Guides, Inc. Systems and methods for automatic program recommendations based on user interactions
US9398335B2 (en) * 2012-11-29 2016-07-19 Qualcomm Incorporated Methods and apparatus for using user engagement to provide content presentation
US8848026B2 (en) * 2013-02-01 2014-09-30 Maitland M. DeLand Video conference call conversation topic sharing system
US20140270243A1 (en) * 2013-03-15 2014-09-18 Commercial Vehicle Group, Inc. Mobile device to vehicle integration
US9491033B1 (en) * 2013-04-22 2016-11-08 Amazon Technologies, Inc. Automatic content transfer
WO2015042472A1 (en) * 2013-09-20 2015-03-26 Interdigital Patent Holdings, Inc. Verification of ad impressions in user-adptive multimedia delivery framework
US9432612B2 (en) * 2013-09-20 2016-08-30 Echostar Technologies L.L.C. Environmental adjustments to perceive true content
CN104579909B (zh) * 2013-10-28 2020-01-17 阿里巴巴集团控股有限公司 一种用户信息的分类、用户分组信息的获取方法和设备
CA3125558C (en) * 2014-02-14 2023-09-26 Pluto Inc. Methods and systems for generating and providing program guides and content

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110023496A (ko) * 2009-08-31 2011-03-08 엘지전자 주식회사 사용자를 인식하여 기능을 제공하는 방송 수신기의 제어 방법 및 그 방법을 채용한 방송 수신기
JP2011205353A (ja) * 2010-03-25 2011-10-13 Yamaha Corp 視聴状況認識装置および視聴状況認識システム
KR20120042314A (ko) * 2010-10-25 2012-05-03 주식회사 케이티 얼굴 영상 정보에 기초하여 콘텐츠를 추천하는 시스템 및 방법
KR20120051210A (ko) * 2010-11-12 2012-05-22 엘지전자 주식회사 멀티미디어 장치에서 빔포밍을 이용한 최적 시청환경 제공 방법 및 장치
KR20140010673A (ko) * 2012-07-16 2014-01-27 삼성전자주식회사 디스플레이장치 및 그 제어 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105872617A (zh) * 2015-12-28 2016-08-17 乐视致新电子科技（天津）有限公司 基于人脸识别的节目分级播放方法和装置

Also Published As

Publication number Publication date
US10887654B2 (en) 2021-01-05
EP2966874A4 (en) 2017-03-01
US11902626B2 (en) 2024-02-13
CN106134211A (zh) 2016-11-16
KR102271854B1 (ko) 2021-07-01
KR20150108028A (ko) 2015-09-24
EP2966874A1 (en) 2016-01-13
US20160057497A1 (en) 2016-02-25
US20210105535A1 (en) 2021-04-08
KR20160132809A (ko) 2016-11-21
EP2966874B1 (en) 2020-07-08
CN106134211B (zh) 2021-04-27
IN2015MN02382A (ko) 2015-10-09

Similar Documents

Publication Publication Date Title
WO2015142016A1 (ko) 컨텐츠의 재생 제어 방법 및 이를 수행하기 위한 컨텐츠 재생 장치
WO2014107102A1 (en) Display apparatus and method of controlling display apparatus
WO2016017945A1 (en) Mobile device and method of pairing the same with electronic device
WO2011090264A2 (en) Video communication method and digital television using the same
WO2013022221A2 (en) Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
WO2014014308A1 (en) Method and system for sharing content, device and computer-readable recording medium for performing the method
WO2014107101A1 (en) Display apparatus and method for controlling the same
WO2016099141A2 (ko) 멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체
WO2013022218A2 (en) Electronic apparatus and method for providing user interface thereof
WO2013069936A1 (en) Electronic apparatus and method for controlling thereof
WO2014042445A1 (en) Display apparatus and method for controlling display apparatus thereof
WO2016126048A1 (ko) 디스플레이 장치
WO2014129803A1 (en) Video display apparatus and operating method thereof
WO2016175467A1 (en) Source device and control method thereof, and sink device and image quality improvement processing method thereof
WO2014182043A1 (en) System and method for providing content to an apparatus based on location of the apparatus
WO2012030055A1 (en) Image display apparatus and image displaying method thereof
WO2015046747A1 (ko) Tv 및 그 동작 방법
WO2013065930A1 (en) Media apparatus, content server and method for operating the same
WO2018088667A1 (en) Display device
WO2014200248A1 (ko) 영상 표시 장치 및 그 동작 방법
WO2018032680A1 (zh) 音视频播放方法及系统
WO2023163322A1 (ko) 영상표시장치, 및 서버
WO2019031676A1 (ko) 이미지 처리 방법 및 그에 따른 장치
WO2013062213A1 (en) Media card, media apparatus, content server and method for operating the same
WO2016035983A1 (ko) 영상제공장치, 및 그 동작방법

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 2015736370

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 14783228

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15736370

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20167007420

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE