WO2023234430A1 - 멀티미디어 디바이스 및 그 제어 방법 - Google Patents

멀티미디어 디바이스 및 그 제어 방법 Download PDF

Info

Publication number
WO2023234430A1
WO2023234430A1 PCT/KR2022/007673 KR2022007673W WO2023234430A1 WO 2023234430 A1 WO2023234430 A1 WO 2023234430A1 KR 2022007673 W KR2022007673 W KR 2022007673W WO 2023234430 A1 WO2023234430 A1 WO 2023234430A1
Authority
WO
WIPO (PCT)
Prior art keywords
color
multimedia device
representative
clause
menu
Prior art date
Application number
PCT/KR2022/007673
Other languages
English (en)
French (fr)
Inventor
민선기
이재경
김태준
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to PCT/KR2022/007673 priority Critical patent/WO2023234430A1/ko
Publication of WO2023234430A1 publication Critical patent/WO2023234430A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Definitions

  • the technical field of the present invention relates to various multimedia devices (eg, television, mobile phone, tablet personal computer (PC), laptop or wearable device, etc.).
  • multimedia devices eg, television, mobile phone, tablet personal computer (PC), laptop or wearable device, etc.
  • embodiments of the present invention can be applied to any type of device that can provide at least one menu or the like on a screen.
  • One embodiment of the present invention seeks to propose a solution for changing the color of a menu in real time and adaptively based on usage history information using an arbitrary multimedia device.
  • Another embodiment of the present invention seeks to provide a process for automatically extracting a representative color when the representative color does not exist in memory during the process of implementing the above-described solution.
  • another embodiment of the present invention seeks to provide feedback information to the user according to the accuracy of the extracted representative color.
  • a method of controlling a multimedia device includes receiving a first command for executing a specific menu of the multimedia device at a first time, and according to the received first command, a first color Displaying a specific menu composed of (color), storing a usage history of the multimedia device in a memory, and receiving a second command for executing a specific menu of the multimedia device at a second time, and displaying a specific menu composed of a second color with reference to the received second command and the usage history stored in the memory.
  • the method for controlling the multimedia device further includes analyzing at least one of, for example, search history or viewing history.
  • the method for controlling the multimedia device is the most used in search. It further includes a step of extracting representative keywords.
  • the method of controlling the multimedia device further includes, for example, determining whether a representative color corresponding to the extracted representative keyword exists in the memory.
  • the control method of the multimedia device further includes, for example, if the representative color exists as a result of the determination, allocating the representative color to the second color.
  • the saturation of the second color is fixed at 100%.
  • the control method of the multimedia device includes, for example, when the representative color does not exist as a result of the determination, performing web crawling based on the representative keyword, and as a result of performing the web crawling, the searched top exposed image M and assigning the average color of the dog to the second color.
  • the saturation of the second color corresponds to a value less than 100% and is variable.
  • the multimedia device corresponds to, for example, at least one of a television, a mobile phone, a tablet PC, a laptop, or a wearable device.
  • the multimedia device corresponds to a television
  • the specific menu is displayed together with a broadcast program.
  • a multimedia device includes a receiving module that receives a first command for executing a specific menu of the multimedia device at a first time, and, according to the received first command, a first color (color) ), a display for displaying a specific menu consisting of, a memory for storing a usage history of the multimedia device, and when a second command for executing a specific menu of the multimedia device is received at a second time, the received first command 2 and a controller that controls to display a specific menu composed of a second color, referring to the command and the usage history stored in the memory.
  • a receiving module that receives a first command for executing a specific menu of the multimedia device at a first time, and, according to the received first command, a first color (color) ), a display for displaying a specific menu consisting of, a memory for storing a usage history of the multimedia device, and when a second command for executing a specific menu of the multimedia device is received at a second time, the received first command 2 and a controller that
  • Figure 1 shows components inside a TV according to an embodiment of the present invention.
  • Figure 2 shows components inside a TV and an external device according to another embodiment of the present invention.
  • FIG. 3 is a diagram showing detailed components of a controller in a multimedia device according to an embodiment of the present invention.
  • FIG. 4 is a flow chart showing the operations of some components 310 shown in FIG. 3 in time series.
  • FIG. 5 is a flow chart showing the operation of some other components 320 shown in FIG. 3 in time series.
  • FIG. 6 is a flow chart showing the operation of some other components 330 shown in FIG. 3 in time series.
  • Figure 7 shows a process for automatically setting a representative color of a menu through web crawling, according to an embodiment of the present invention.
  • Figure 8 shows a process for automatically setting a representative color of a menu based on the rating of an image (video), according to an embodiment of the present invention.
  • Figure 9 illustrates a process for automatically setting a representative color of a menu based on login information, according to an embodiment of the present invention.
  • Figure 10 shows a process for automatically setting a representative color of a menu based on login information, according to another embodiment of the present invention.
  • Figure 11 illustrates a process for additionally providing feedback information according to the accuracy of a set menu color, according to an embodiment of the present invention.
  • FIG. 12 is a diagram for explaining saturation related to feedback information shown in FIG. 11.
  • Figure 13 is a diagram for explaining a memory storing representative colors corresponding to representative keywords, according to an embodiment of the present invention.
  • Figure 14 is a diagram for comparing a case in which keyword searches are accumulated and a case in which keyword searches are not accumulated, according to an embodiment of the present invention.
  • Figure 1 shows components inside a TV according to an embodiment of the present invention.
  • the present invention is applicable to various TV products, for example, the European standard DVB (Digital Video Broadcasting) standard or the North American/Korean standard ATSC (Advanced Television Systems Committee) 3.0 standard.
  • European standard DVB Digital Video Broadcasting
  • North American/Korean standard ATSC Advanced Television Systems Committee 3.0 standard.
  • the tuner 110 determines whether a signal exists using a predefined frequency list. When a signal is detected at a given frequency, the baseband processor 120 extracts the L1 signaling of the preamble.
  • the baseband processor 120 transmits PLP (Physical Layer Pipe) data including link layer signaling and LLS (Low Level Signaling) to the middleware 130, and the middleware 130 receives the PLP data from the PLP data.
  • PLP Physical Layer Pipe
  • LLS Low Level Signaling
  • the middleware 130 includes a signaling manager 140 and a channel manager 150.
  • the middleware 130 receives PLP data including link layer signaling and LLS from the baseband processor 120 and then passes the data to an appropriate parser.
  • the middleware 130 extracts a Link Mapping Table (LMT) from the link layer signaling and passes the LMT to the LMT parser 141. Furthermore, the middleware 130 extracts a Service List Table (SLT) from the LLS and passes the SLT to the SLT parser 142.
  • LMT Link Mapping Table
  • SLT Service List Table
  • the LMT parser 141 parses the LMT and extracts first information (eg, PLPID, session information (IP address and port number), etc.) needed to create a channel map.
  • first information eg, PLPID, session information (IP address and port number), etc.
  • the SLT parser 142 parses the SLT and extracts second information (eg, service id, service name, etc.) required to create a channel map.
  • second information eg, service id, service name, etc.
  • the extracted first information and second information are stored in the channel map 151.
  • Figure 2 shows components inside a TV and external devices together according to another embodiment of the present invention.
  • Those skilled in the art may implement the present invention by combining some components with reference to FIGS. 1 and 2 .
  • the baseband processor 120 and middleware 130 shown in FIG. 1 may be included in the controller 209 shown in FIG. 2.
  • the TV 200 shown in FIG. 2 includes various components, but the scope of rights of the present invention is not limited thereto, and the scope of rights must be confirmed according to the matters stated in the patent claims.
  • components inside the TV 200 shown in FIG. 2 may be controlled through the controller 209, and each component may be connected directly or indirectly. That is, although not shown in FIG. 2, all components inside the TV 200 of FIG. 2 are designed to transmit and receive control signals and/or data directly or indirectly.
  • the tuner 201 receives a broadcast signal through an antenna, etc., and the demux or demultiplexer 202 demultiplexes the audio data and video data included in the broadcast signal.
  • the audio decoder 203 decodes audio data (encoded state) included in the broadcast signal
  • the video decoder 204 decodes video data (encoded state) included in the broadcast signal.
  • the decoded audio data is output through the audio output unit 207.
  • the audio output unit 207 may be a speaker attached to the TV 200 or a speaker separated from the TV 200.
  • the decoded video data is directly output through the video output unit 208.
  • the mixer 205 mixes the menu data and video data generated by the OSD generator 206 and then transmits the mixture to the video output unit 208.
  • the memory 215 stores various control data and commands for controlling the TV 200, and the controller 209 can control all components within the TV by referring to the memory 215.
  • the TV 200 transmits and receives data through communication with various external devices around it.
  • video/audio data is received from STB 220 via wired interface 212, and these are processed in audio decoder 203 and video decoder 204, respectively.
  • the received video/audio data it is possible for the received video/audio data to be output directly through the audio output unit 207 and video output unit 208 without going through the decoders 203 and 204.
  • the wireless communication module 213 various data are transmitted and received with the mobile device 230 (e.g., mobile phone/wearable device, etc.), and the IR infrared signal of the remote control 240 is received through the infrared sensor 214. do.
  • the remote control 240 capable of Bluetooth communication such as BT transmits and receives various data to and from the TV via the wireless communication module 213.
  • FIG. 3 is a diagram showing detailed components of a controller in a multimedia device according to an embodiment of the present invention.
  • FIG. 3 The components shown in FIG. 3 are detailed components of the controller 209 previously shown in FIG. 2, and may be implemented as one piece of hardware/software or may be implemented as separate hardware/software.
  • Some components 310 shown in FIG. 3 play a role in analyzing the usability of users using multimedia devices.
  • Number 310 shown in FIG. 3 may be referred to as a usability analysis unit, and for example, the controller 209 shown in FIG. 2 performs the corresponding function.
  • Number 320 shown in FIG. 3 may be referred to as a color analysis unit, and for example, the controller 209 shown in FIG. 2 performs the corresponding function.
  • Number 330 shown in FIG. 3 may be referred to as a color application unit, and for example, the controller 209 shown in FIG. 2 performs the corresponding function.
  • the usability analysis unit 310 additionally includes a content viewing analysis module 311, a content search analysis module 312, and an account information analysis module 313.
  • the content viewing analysis module 311 analyzes channels watched by users of multimedia devices, broadcast programs, and information about VOD content provided by CP (Contents Provider).
  • the content search analysis module 312 analyzes the results of a search (for example, using a voice recognition function or a search application) by a user of a multimedia device.
  • the account information analysis module 313 analyzes account information (eg, Google account, etc.) logged in by the user of the multimedia device.
  • the color analysis unit 320 additionally includes a keyword-specific color module 321, a video grade color module 322, a web crawling-based color module 323, and an account-linked color module 324.
  • the color module 321 for each keyword builds and manages a database (DB) for color data for each keyword. For example, the color module 321 for each keyword stores information that the color corresponding to the “BTS” keyword is purple and the color corresponding to the “Lim Young-woong” keyword is light blue.
  • DB database
  • the video content rating color module 322 stores color data for each video content rating and extracts color data for use in a menu based on the rating extracted from metadata of the current content of the multimedia device.
  • the web crawling-based color module 323 extracts representative color values from the top exposure images found by performing web crawling and uses them as the colors of the menu.
  • the account-linked color module 324 analyzes the color information of the profile used in the account logged in by the user of the multimedia device.
  • the color application unit 330 additionally includes a theme color application module 331 and a search result color application module 332.
  • the theme color application module 331 performs a function of applying the color analyzed by the color analysis unit 320 as the color of an arbitrary menu. Additionally, the search result color application module 332 is designed to additionally change the transparency, brightness, saturation, etc. of the color applied to the menu according to the search accuracy.
  • FIG. 4 is a flow chart showing the operations of some components 310 shown in FIG. 3 in time series. Of course, the operations shown in FIG. 4 can be implemented in the controller of the multimedia device.
  • the multimedia device analyzes the viewing history of channels, broadcast programs, and contents watched by the user (S401). For example, the user's preferred keywords (for example, performer information, etc.) are extracted through EPG (electronic program guide) information of a broadcast program.
  • EPG electronic program guide
  • the multimedia device analyzes the history of content searched by the user (eg, through a voice recognition function or search application) (S402). It also falls within the scope of the present invention if steps S401 and S402 shown in FIG. 4 are performed simultaneously or in reverse order.
  • the multimedia device is designed to determine whether the search has been performed more than N times (a natural number) in step S402 and to extract the most frequently used keyword (S403).
  • step S403 If the search is not performed more than N times in step S403 described above, usability is determined based on the results of the viewing history analysis in step S401 (S406).
  • step S403 it is determined whether to extract representative keywords based on the viewing history analysis result in step S401 or based on the search history analysis result in step S402.
  • the multimedia device according to an embodiment of the present invention is designed to complete the usability analysis (S405).
  • FIG. 5 is a flow chart showing the operation of some other components 320 shown in FIG. 3 in time series.
  • the operations shown in FIG. 5 can be implemented in the controller of the multimedia device.
  • Figure 5 assumes the case where all steps in Figure 4 are completed, but it is also applicable when only some steps in Figure 4 are completed.
  • the multimedia device determines whether a representative keyword can be extracted based on the usability analysis result in step S401 or step S402 described above (S501). For example, if a specific keyword is used more than 50% of all extracted keywords, it can be considered a representative keyword.
  • the multimedia device As a result of the determination (S501), if a representative keyword can be extracted, the multimedia device according to an embodiment of the present invention additionally determines whether information about a specific color corresponding to the representative keyword is stored in the memory (S502) ).
  • the multimedia device determines the specific color as the color to be applied to the menu (S505).
  • the multimedia device determines whether the content (broadcast program) currently being viewed includes video rating information. Do it (S503).
  • the color of the indicator that displays the video rating on the screen e.g., viewing prohibited for ages 15 and older, etc.
  • the color to be applied to the menu S505
  • FIG. 6 is a flow chart showing the operation of some other components 330 shown in FIG. 3 in time series.
  • the operations shown in FIG. 6 can be implemented in the controller of the multimedia device.
  • Figure 6 assumes the case where all steps in Figure 5 are completed, but it is also applicable when only some steps in Figure 5 are completed.
  • the multimedia device applies the determined representative color as the theme color of the multimedia device (S601).
  • applying a theme color means applying the same color to at least one menu provided by a multimedia device.
  • red color is applied to the entire menu of all menus provided by the multimedia device, or only the border portion of all menus is applied to red color.
  • a red color is applied to the entire color of a specific menu provided by the multimedia device, or a red color is applied to only the border of a specific menu.
  • the multimedia device determines whether the search function has been additionally used (S602).
  • the multimedia device uses the color used in the menu, etc. as is without changing it (S601).
  • the multimedia device determines the transparency, brightness, and transparency of the color of the menu used based on the search history information after step S601. It is designed to additionally change at least one of saturation (S603).
  • the saturation of the color applied to the menu increases proportionally, which has the advantage of delivering feedback to the user.
  • the multimedia device analyzes content viewing history and search history. Then, according to the analysis results, a specific color corresponding to a specific keyword is extracted. Finally, the specific extracted color is automatically applied to the menu.
  • a multimedia device stores information in a representative color corresponding to the extracted keyword (for example, the representative color corresponding to the BTS keyword is purple, and the Lim Young-woong keyword
  • the representative color corresponding to is designed to be stored in mint color, etc.
  • the multimedia device may provide different menus depending on the age and gender of the multimedia device user, or may provide menus of different colors based on login information.
  • the multimedia device can be designed to set the color, theme, contrast, transparency, etc. of the menu differently depending on weather information (for example, cloudy/clear, etc.).
  • weather information for example, cloudy/clear, etc.
  • Figure 7 shows a process for automatically setting a representative color of a menu through web crawling, according to an embodiment of the present invention.
  • representative keywords can be extracted through viewing history analysis (S401) or search history analysis (S402) of the multimedia device.
  • the representative color corresponding to the extracted representative keyword is stored in the memory of the multimedia device (an embodiment related to this will be described later in FIG. 13), it is possible to immediately apply the representative color stored in the memory to the menu. do.
  • Colors and themes that match specific keywords that have been searched a lot within a specific period are calculated by the multimedia device or server and are designed to be automatically applied to at least one or more menus.
  • the multimedia device can estimate that the representative image corresponding to the BTS keyword is purple through web crawling, as shown in (a) of FIG. 7.
  • web crawling refers to the act of automatically searching for data existing on the Internet, and depending on those skilled in the art, it may be expressed as spidering rather than web crawling.
  • the multimedia device displays an arbitrary menu 702, as shown in (b) of FIG. 7, the representative image extracted by web crawling in (a) of FIG. 7 Designed to display a menu colored purple.
  • Figure 8 shows a process for automatically setting a representative color of a menu based on the rating of an image (video), according to an embodiment of the present invention.
  • the processing process when it is impossible to estimate a representative color corresponding to a keyword even through web-crawling or spidering in FIG. 7 will be described in detail with reference to FIG. 8 below. I will do it.
  • the age range for viewing video products e.g., broadcast programs, etc.
  • a representative color indicating the age range (grade) for viewing is determined.
  • a rating that allows viewing for all without age restrictions is expressed in a green square box
  • a rating that allows viewing for ages 12 and older is expressed in a yellow square box
  • a rating that allows viewing for ages 15 and older is expressed in an orange box. It is expressed in a square box
  • the rating for those aged 18 or older is expressed in a red square box.
  • the multimedia device is currently displaying a broadcast program that can only be viewed by those aged 12 or older (801).
  • Figure 9 illustrates a process for automatically setting a representative color of a menu based on login information, according to an embodiment of the present invention.
  • Previous embodiments are techniques for automatically changing the color of a menu based on usage history information of the multimedia device.
  • the color of the menu can be changed through linkage with other devices or login information.
  • the menu 902 of the other device is also displayed in yellow, as shown in (b) of FIG. 9.
  • a color that can symbolize an individual is applied based on the thumbnail color and image of the account logged in to use the device.
  • the default color is applied.
  • the average color value of the photo is automatically set as the representative color to be applied to the menu.
  • Figure 10 shows a process for automatically setting a representative color of a menu based on login information, according to another embodiment of the present invention.
  • the multimedia device As shown in (a) of FIG. 10, based on login information (e.g., date of birth information), the multimedia device according to an embodiment of the present invention displays the logged in user's lucky color 1010 (ex: It is possible to extract red).
  • login information e.g., date of birth information
  • the multimedia device displays the logged in user's lucky color 1010 (ex: It is possible to extract red).
  • the multimedia device when the user executes an arbitrary menu, as shown in (b) of FIG. 10, the multimedia device according to an embodiment of the present invention displays a menu 1020 to which red, which has been extracted as the lucky color, is applied. Designed to display.
  • Figure 11 illustrates a process for additionally providing feedback information according to the accuracy of a set menu color, according to an embodiment of the present invention.
  • the embodiment shown in FIG. 11 has the advantage of reflecting the user's feedback in real time by continuously changing the saturation of the representative color, etc., taking into account the accuracy of the process determined by the representative color.
  • the embodiment shown in (a) of FIG. 11 assumes that representative color information corresponding to an arbitrary keyword (derived as a result of usability analysis) is stored in the memory of the multimedia device. Accordingly, the multimedia device displays the menu 1110 with the representative color stored in the memory, and in this case, since the accuracy is 100%, there is no need to change the color set in the menu 1110.
  • representative color information corresponding to any keyword is not stored in the memory of the multimedia device, so representative colors are selected using web crawling techniques, etc. Assume the estimated case. Accordingly, the multimedia device displays a menu 1120 in which saturation is adjusted for the corresponding color. For example, by lowering the saturation, feedback is provided that the color information of the menu reflecting the user's usability may not be 100% accurate.
  • a menu 1130 with an S value of saturation of 100% is displayed.
  • a menu 1140 with a saturation S value of 80% is displayed. Furthermore, if the accuracy of representative color information corresponding to the keyword is 50%, a menu 1150 with a saturation S value of 50% is displayed. Additionally, when the accuracy of the representative color information corresponding to the keyword is 10%, a menu 1160 with a saturation S value of 10% is displayed. And, when the accuracy of the representative color information corresponding to the keyword is 5%, a menu 1170 with a saturation S value of 5% is displayed. Matters related to saturation will be described in more detail in Figure 12 below.
  • FIG. 12 is a diagram for explaining saturation related to feedback information shown in FIG. 11.
  • 11 and 12 illustrate an embodiment in which saturation can be changed according to the accuracy of representative color information corresponding to a keyword, but changing transparency or contrast instead of saturation also falls within the scope of the present invention.
  • the accuracy of color information corresponding to a specific keyword is not high, the color applied to the menu may not 100% meet user needs by designing the menu color to increase transparency or contrast in inverse proportion to the accuracy. There is a technical effect that can visually show that it exists.
  • saturation is one of the three main properties of color, along with hue and value.
  • a more vivid color means higher saturation, and closer to an achromatic color such as gray, white, or black means lower saturation.
  • the X value means hue
  • the Y value means saturation
  • the Z value means brightness (Value).
  • the brightness value is fixed at 80.
  • the saturation value S becomes 0, it becomes achromatic.
  • the multimedia device is designed to display a menu with the saturation (S) value adjusted according to the accuracy of the information even when representative color (Hue) information is determined.
  • Figure 13 is a diagram for explaining a memory storing representative colors corresponding to representative keywords, according to an embodiment of the present invention.
  • the multimedia device extracts, for example, keywords used most often by users as a result of usability analysis.
  • the multimedia device displays an arbitrary menu in the detected representative color.
  • the saturation (S) value is fixed at 100%.
  • the saturation value of the color applied to the menu is set to less than 100% and can be changed depending on accuracy.
  • Figure 14 is a diagram for comparing a case in which keyword searches are accumulated and a case in which keyword searches are not accumulated, according to an embodiment of the present invention.
  • the multimedia device is also capable of displaying arbitrary content (eg, VOD, etc.) in addition to broadcast programs received in real time.
  • the multimedia device displays the content video 1410 on the entire screen and displays the menu 1420 on a portion of the screen.
  • the representative color corresponding to the keyword most searched by the user is red
  • the color of the menu 1420 shown in (a) of FIG. 14 is red.
  • the video 1410 displayed on the entire screen corresponds to a VOD and is paused at 1 minute and 30 seconds of playback.
  • the color of the menu 1421 shown in (b) of FIG. 14 and the color of the menu 1420 shown in (a) of FIG. 14 are different. This is because users using multimedia devices searched for other keywords (for example, BTS) the most between January 1, 2022 and March 31, 2022, and therefore the representative color corresponding to the keyword (BTS) The menu (1421) automatically changes to purple.
  • BTS keyword sequence
  • the color of the menu 1422 shown in (c) of FIG. 14 is the same as the color of the menu 1420 shown in (a) of FIG. 14. This is because users using multimedia devices did not search with other keywords between January 1, 2022 and March 31, 2022.
  • the multimedia device receives a first command for executing a specific menu at a first time, and according to the received first command, a first command Displays a specific menu composed of colors.
  • the multimedia device stores the usage history in memory (eg, FIG. 13, etc.).
  • the multimedia device When a second command for executing the specific menu is received at a second time, the multimedia device displays a specific menu composed of a second color by referring to the received second command and the usage history stored in the memory.
  • the menu displayed at the first viewpoint and the second viewpoint is the same, but even for the same menu, the first color at the first viewpoint and the second color at the second viewpoint are different from each other (in particular, , according to the usage history information of the multimedia device, etc.).
  • the multimedia device is designed to analyze at least one of search history or viewing history.
  • the multimedia device performs the search in the search. Extract the most frequently used representative keywords.
  • the multimedia device determines whether a representative color corresponding to the extracted representative keyword exists in the memory.
  • the multimedia device is designed to allocate the representative color to the second color. At this time, since there is no possibility of error, the saturation of the second color is fixed to 100%.
  • the multimedia device performs web crawling based on the representative keyword, and, as a result of the web crawling, determines the average color of the searched top exposed images M (natural number). Assigned to the second color.
  • the saturation of the second color is set to a value less than 100% and can be changed according to accuracy information.
  • the multimedia device 200 controlled by the remote controller 240 has a receiving module (in FIG. 2) that receives a first command for executing a specific menu of the multimedia device at a first time.
  • a controller controller 209 shown in FIG. 2) that controls to display a specific menu composed of a second color, with reference to the received second command and the usage history stored in the memory.
  • Computer-readable media includes all types of recording devices that store data that can be read by a computer system. Examples of computer-readable media include HDD (Hard Disk Drive), SSD (Solid State Disk), SDD (Silicon Disk Drive), ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc. It also includes those implemented in the form of carrier waves (e.g., transmission via the Internet). Additionally, the computer may include a control unit. Accordingly, the above detailed description should not be construed as restrictive in all respects and should be considered illustrative. The scope of the present invention should be determined by reasonable interpretation of the appended claims, and all changes within the equivalent scope of the present invention are included in the scope of the present invention.
  • the present invention can be applied to any type of multimedia device that provides a menu (eg, television, mobile phone, tablet PC, laptop, or wearable device, etc.), its industrial applicability is recognized.
  • a menu eg, television, mobile phone, tablet PC, laptop, or wearable device, etc.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 일실시예에 따른 멀티미디어 디바이스의 제어 방법은, 제1 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하는 단계와, 상기 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 하는 단계와, 상기 멀티미디어 디바이스의 사용 히스토리를 메모리에 저장하는 단계와, 제2 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제2 커맨드를 수신하는 단계와, 상기 수신된 제2 커맨드 및 상기 메모리에 저장된 사용 히스토리를 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 하는 단계를 포함한다.

Description

멀티미디어 디바이스 및 그 제어 방법
본 발명의 기술 분야는 다양한 멀티미디어 디바이스(예를 들어, 텔레비전(television), 휴대폰, 태블릿(tablet) PC(personal computer), 랩탑(laptop) 또는 웨어러블 디바이스(wearable device) 등등)에 대한 것이다. 특히, 스크린(screen) 상에 적어도 하나 이상의 메뉴 (menu) 등을 제공 가능한 어떤 타입의 디바이스에도 본 발명의 일실시예들이 적용 가능하다.
현대에는 삶의 다양성이 증대되면서 감성적인 감각을 자극하려는, 제조사들의 노력 및 시도가 증가하고 있다. 예를 들어, 애플의 아이폰이 성공할 수 있었던 이유도 기술을 기능적인 면과 더불어 감성적으로 해석하기 위해 많은 노력을 하였기에 가능했다고 평가되고 있다.
다만, 종래 기술에 의하면, 멀티미디어 디바이스의 하드웨어적인 외관 디자인에만 포커싱되어 연구가 진행되어 왔다.
그러나, 임의의 사용자가, 최초 구매시점에 특정 멀티미디어 디바이스의 외관 디자인이나 칼라가 마음에 들어서 상기 특정 멀티미디어 디바이스를 구매한 경우에도, 구매 시점 이후에 사용자의 디자인이나 칼라 선호도 변화 등을 멀티미디어 디바이스가 반영할 수 없는 문제점이 있었다.
본 발명의 일실시예는, 임의의 멀티미디어 디바이스를 사용하는 사용 히스토리 정보에 기초하여, 메뉴의 칼라를 실시간으로 그리고 적응적으로 변경하는 솔루션을 제안하고자 한다.
본 발명의 다른 일실시예는, 전술한 솔루션을 구현하는 과정에서, 메모리에 대표 칼라가 존재하지 않는 경우 자동으로 대표 칼라를 자동으로 추출하는 프로세스를 제공하고자 한다.
그리고, 본 발명의 또 다른 일실시예는, 추출된 대표 칼라의 정확도에 따라 사용자에게 피드백 정보를 제공하고자 한다.
본 발명의 일실시예에 의한 멀티미디어 디바이스의 제어 방법은, 제1 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하는 단계와, 상기 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 하는 단계와, 상기 멀티미디어 디바이스의 사용 히스토리를 메모리에 저장하는 단계와, 제2 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제2 커맨드를 수신하는 단계와, 상기 수신된 제2 커맨드 및 상기 메모리에 저장된 사용 히스토리를 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 하는 단계를 포함한다.
상기 멀티미디어 디바이스의 제어 방법은, 예를 들어, 검색 히스토리 또는 시청 히스토리 중 적어도 하나를 분석하는 단계를 더 포함한다.
상기 멀티미디어 디바이스의 제어 방법은, 예를 들어, 상기 검색 히스토리를 분석한 결과, 상기 제1 시점 및 상기 제2 시점 사이에, 검색을 N번 이상 수행한 조건을 만족한 경우, 검색에서 가장 많이 사용된 대표 키워드를 추출하는 단계를 더 포함한다.
상기 멀티미디어 디바이스의 제어 방법은, 예를 들어, 상기 메모리에 상기 추출된 대표 키워드에 대응하는 대표 칼라가 존재하는지 여부를 판단하는 단계를 더 포함한다.
상기 멀티미디어 디바이스의 제어 방법은, 예를 들어, 상기 판단 결과 상기 대표 칼라가 존재하는 경우, 상기 대표 칼라를 상기 제2 칼라로 할당하는 단계를 더 포함한다. 여기서, 상기 제2 칼라의 채도(saturation)는 100%로 고정되어 있는 것을 특징으로 한다.
상기 멀티미디어 디바이스의 제어 방법은, 예를 들어, 상기 판단 결과 상기 대표 칼라가 존재하지 않는 경우, 상기 대표 키워드를 기초로 웹 크롤링을 수행하는 단계와, 그리고 상기 웹 크롤링 수행 결과, 검색된 상위 노출 이미지 M개의 평균 칼라를 상기 제2 칼라로 할당하는 단계를 더 포함한다. 여기서, 상기 제2 칼라의 채도(saturation)는 100% 보다 작은 값에 해당하고, 변동 가능한 것을 특징으로 한다.
상기 멀티미디어 디바이스는, 예를 들어, 텔레비전, 휴대폰, 태블릿 PC, 랩탑 또는 웨어러블 디바이스 중 적어도 하나에 대응한다.
상기 멀티미디어 디바이스가 텔레비전에 대응하는 경우, 상기 특정 메뉴는 방송 프로그램과 함께 디스플레이 되는 것을 특징으로 한다.
본 발명의 일실시예에 의한 멀티미디어 디바이스는, 제1 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하는 수신모듈과, 상기 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 하는 디스플레이와, 상기 멀티미디어 디바이스의 사용 히스토리를 저장하는 메모리와, 그리고 제2 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제2 커맨드가 수신된 경우, 상기 수신된 제2 커맨드 및 상기 메모리에 저장된 사용 히스토리를 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 하도록 제어하는 컨트롤러를 포함한다.
본 발명의 일실시예에 의하면, 임의의 멀티미디어 디바이스를 사용하는 사용 히스토리 정보에 기초하여, 메뉴의 칼라를 실시간으로 그리고 적응적으로 변경하는 솔루션을 제공할 수 있는 기술적 효과가 있다.
본 발명의 다른 일실시예에 의하면, 전술한 솔루션을 구현하는 과정에서, 메모리에 대표 칼라가 존재하지 않는 경우 자동으로 대표 칼라를 자동으로 추출하는 프로세스를 제공하는 기술적 효과가 있다.
그리고, 본 발명의 또 다른 일실시예에 의하면, 추출된 대표 칼라의 정확도에 따라 사용자에게 피드백 정보를 제공하는 기술적 효과가 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일실시예에 의한 TV 내부의 구성요소들을 도시하고 있다.
도 2는 본 발명의 다른 일실시예에 의한 TV 내부의 구성요소들과 외부 장치를 함께 도시하고 있다.
도 3은 본 발명의 일실시예에 의한 멀티미디어 디바이스내 컨트롤러의 세부 구성요소들을 도시한 도면이다.
도 4는 도 3에 도시된 일부 구성요소(310)의 동작을 시계열적으로 도시한 플로우 차트이다.
도 5는 도 3에 도시된 다른 일부 구성요소(320)의 동작을 시계열적으로 도시한 플로우 차트이다.
도 6은 도 3에 도시된 또 다른 일부 구성요소(330)의 동작을 시계열적으로 도시한 플로우 차트이다.
도 7은 본 발명의 일실시예에 따라, 웹 크롤링을 통해 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
도 8은 본 발명의 일실시예에 따라, 영상물(비디오)의 등급에 기초하여 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
도 9는 본 발명의 일실시예에 따라, 로그인 정보에 기초하여 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
도 10은 본 발명의 다른 일실시예에 따라, 로그인 정보에 기초하여 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
도 11은 본 발명의 일실시예에 따라, 설정된 메뉴 칼라의 정확도에 따라 피드백 정보를 추가적으로 제공하는 프로세스를 도시하고 있다.
도 12는 도 11에 도시된 피드백 정보와 관련된 채도(Saturation)를 설명하기 위한 도면이다.
도 13은 본 발명의 일실시예에 따라, 대표 키워드에 대응하는 대표 칼라를 저장하고 있는 메모리를 설명하기 위한 도면이다.
그리고, 도 14는 본 발명의 일실시예에 따라, 키워드 검색이 누적된 경우와 그렇지 않은 경우를 비교하여 설명하기 위한 도면이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
도 1은 본 발명의 일실시예에 의한 TV 내부의 구성요소들을 도시하고 있다.
본 발명은 다양한 TV 제품들에 적용 가능하며, 예를 들어 유럽 표준인 DVB (Digital Video Broadcasting) 표준 또는 북미/한국 표준인 ATSC (Advanced Television Systems Committee) 3.0 표준 등에도 적용 가능하다.
다만, 도 1에서는 ATSC 3.0 표준에 따라, TV(100)가 최초 서비스 스캔 동작을 수행하는 과정을 예시적으로 설명하겠으나, 본 발명의 권리범위는 특허청구범위에 기재된 사항에 따라 결정되어야 한다.
튜너(110)는 기정의된 주파수 리스트를 이용하여 신호가 존재하는 지 여부를 판단한다. 주어진 주파수에서 신호가 디텍트 되면, 베이스밴드 프로세서(Baseband processor)(120)는 프리엠블의 L1 시그널링을 추출한다.
나아가, 상기 베이스밴드 프로세서(120)는 링크 레이어 시그널링 및 LLS (Low Level Signaling)를 포함하는 PLP (Physical Layer Pipe) 데이터를 미들웨어(130)에 전송하고, 상기 미들웨어(130)는 상기 PLP 데이터로부터 상기 링크 레이어 시그널링 및 LLS 를 추출할 수 있다.
한편, 상기 미들웨어(130)는, 시그널링 매니저(140) 및 채널 매니저(150) 등을 포함하고 있다.
상기 미들웨어(130)는, 링크 레이어 시그널링 및 LLS 를 포함하는 PLP 데이터를 상기 베이스밴드 프로세서(120)로부터 수신한 후, 적절한 파서로 데이터를 패스한다.
예를 들어, 상기 미들웨어(130)는, 상기 링크 레이어 시그널링으로부터 LMT (Link Mapping Table) 를 추출하고, 상기 LMT 를 LMT 파서(141)로 패스한다. 나아가, 상기 미들웨어(130)는, 상기 LLS 로부터 SLT (Service List Table)를 추출하고, 상기 SLT 를 SLT 파서(142)로 패스한다.
상기 LMT 파서(141)는 상기 LMT를 파스(parse)하고, 채널 맵을 생성하기 위해 필요한 제1정보(예를 들어, PLPID, 세션 정보(IP 어드레스 및 포트 넘버) 등등)를 추출한다.
상기 SLT 파서(142)는 상기 SLT 를 파스(parse)하고, 채널 맵을 생성하기 위해 필요한 제2정보(예를 들어, 서비스 id, 서비스 네임 등등)를 추출한다.
상기 추출된 제1정보 및 제2정보는, 채널맵(151)에 저장된다.
도 2는 본 발명의 다른 일실시예에 의한 TV 내부의 구성요소들과 외부 장치를 함께 도시하고 있다. 당업자는 도 1 및 도 2를 참조하여, 일부 구성요소들을 결합하여 본 발명을 구현하는 것도 가능하다. 예를 들어, 도 1에 도시된 베이스밴드 프로세서(120) 및 미들웨어(130)는 도 2에 도시된 컨트롤러(209)에 포함될 수 있다.
한편, 도 2에 도시된 TV(200)는 다양한 구성요소들을 포함하고 있으나, 본 발명의 권리범위가 이에 한정되는 것은 아니며, 특허청구범위에 기재된 사항에 따라 권리범위가 확정되어야 한다.
나아가, 도 2에 도시된 TV(200) 내부의 구성요소들은 컨트롤러(209)를 통해 제어될 수 있고, 각 구성요소들은 직접 또는 간접적으로 연결될 수도 있다. 즉, 도 2에 도시하지는 않았으나, 도 2의 TV(200) 내부의 모든 구성요소들은 컨트롤 신호 및/또는 데이터를 직접 또는 간접적으로 송수신 할 수 있도록 설계된다.
우선, 튜너(201)는 안테나 등을 통해 방송 신호를 수신하고, 디먹서(Demux 또는 Demultiplexer)(202)는 상기 방송 신호에 포함된 오디오 데이터 및 비디오 데이터를 역다중화 한다.
오디오 디코더(203)는, 방송 신호에 포함된 오디오 데이터(인코딩된 상태)를 디코딩 하고, 비디오 디코더(204)는, 방송 신호에 포함된 비디오 데이터(인코딩된 상태)를 디코딩 한다.
디코딩된 오디오 데이터는 오디오 출력부(207)를 통해 출력된다. 상기 오디오 출력부(207)는 예를 들어, TV(200)에 부착된 스피커 또는 이격한 스피커가 될 수 있다.
한편, 디코딩된 비디오 데이터는 비디오 출력부(208)를 통해 바로 출력된다. 또는, 믹서(205)가 OSD 생성부(206)에 의해 생성된 메뉴 데이터 및 비디오 데이터를 믹싱한 후 비디오 출력부(208)로 전달한다.
메모리(215)는 TV(200)를 제어하기 위한 다양한 컨트롤 데이터 및 커맨드 등을 저장하고 있으며, 컨트롤러(209)는 메모리(215)를 참조하여, TV내 모든 구성요소들을 제어하는 것이 가능하다.
나아가, TV(200)는 주변의 다양한 외부 디바이스들과 통신을 통해 데이터를 송수신 한다. 예를 들어, 유선 인터페이스(212)를 경유하여, STB(220)로부터 비디오/오디오 데이터를 수신하고, 이들은 오디오 디코더(203) 및 비디오 디코더(204)에서 각각 처리된다. 또는, 수신된 비디오/오디오 데이터가 디코더들(203, 204)를 경유하지 않고, 오디오 출력부(207) 및 비디오 출력부(208)를 통해 바로 출력되는 것도 가능하다.
무선 통신 모듈(213)을 경유하여, 모바일 디바이스(230)(예를 들어, 휴대폰/웨어러블 디바이스 등)와 다양한 데이터를 송수신하고, 리모컨(240)의 IR 적외선 신호는 적외선 센서(214)를 통해 수신한다. 또는, BT 등 블루투스 통신이 가능한 리모컨(240)은, 상기 무선 통신 모듈(213)을 경유하여, TV와 다양한 데이터를 송수신한다.
도 3은 본 발명의 일실시예에 의한 멀티미디어 디바이스내 컨트롤러의 세부 구성요소들을 도시한 도면이다.
도 3에 도시된 구성요소들은 이전 도 2에 도시된 컨트롤러(209)의 세부 구성요소들로서, 하나의 하드웨어/소프트웨어로 구현할 수도 있고, 또는 각각 별개의 하드웨어/소프트웨어로 구현할 수도 있다.
도 3에 도시된 일부 구성요소(310)는 멀티미디어 디바이스를 사용하는 유저의 사용성을 분석하는 역할을 수행한다. 도 3에 도시된 310번을 사용성 분석부라고 지칭할 수도 있고, 예를 들어 도 2에 도시된 컨트롤러(209)에서 해당 기능을 수행한다.
또한, 도 3에 도시된 다른 일부 구성요소(320)는 유저의 사용성 정보에 따라, 대표 칼라를 분석하는 역할을 수행한다. 도 3에 도시된 320번을 칼라(color) 분석부라고 지칭할 수도 있고, 예를 들어 도 2에 도시된 컨트롤러(209)에서 해당 기능을 수행한다.
그리고, 도 3에 도시된 또 다른 일부 구성요소(330)는 대표 칼라를 임의의 메뉴 등에 적용하는 역할을 수행한다. 도 3에 도시된 330번을 칼라 적용부라고 지칭할 수도 있고, 예를 들어 도 2에 도시된 컨트롤러(209)에서 해당 기능을 수행한다.
사용성 분석부(310)는, 추가적으로 컨텐츠 시청 분석 모듈(311), 컨텐츠 검색 분석 모듈(312) 및 계정 정보 분석 모듈(313) 등을 포함하고 있다. 컨텐츠 시청 분석 모듈(311)은, 멀티미디어 디바이스의 사용자가 시청한 채널, 방송 프로그램, CP(Contents Provider)가 제공하는 VOD 컨텐츠에 대한 정보 등을 분석한다. 컨텐츠 검색 분석 모듈(312)은, 멀티미디어 디바이스의 사용자가 검색(예를 들어, 음성 인식 기능을 이용하거나 또는 검색 어플리케이션 등을 통해)한 결과를 분석한다. 그리고, 계정 정보 분석 모듈(313)은, 멀티미디어 디바이스의 유저가 로그인한 계정 정보(예를 들어, 구글 계정 등)를 분석한다.
칼라 분석부(320)는, 추가적으로 키워드별 칼라 모듈(321), 영상물 등급 칼라 모듈(322), 웹 크롤링 기반 칼라 모듈(323) 및 계정 연계 칼라 모듈(324) 등을 포함하고 있다. 키워드별 칼라 모듈(321)은, 키워드별 칼라 데이터에 대한 데이터베이스(DB)를 구축 및 관리하고 있다. 예를 들어, 키워드별 칼라 모듈(321)은, “BTS” 키워드에 대응하는 칼라가 보라색이고, “임영웅” 키워드에 대응하는 칼라가 하늘색이라는 정보를 저장하고 있다.
영상물 등급 칼라 모듈(322)은, 영상물 등급별 칼라 데이터를 저장하고 있다가, 멀티미디어 디바이스의 현재 컨텐츠의 메타데이터에서 추출한 등급에 기초하여 메뉴에 사용하기 위한 칼라 데이터를 추출한다.
웹 크롤링 기반 칼라 모듈(323)은, 웹 크롤링을 수행하여 검색된 상위 노출 이미지로부터 대표 칼라값을 추출하여, 메뉴의 칼라로 사용한다.
그리고, 계정 연계 칼라 모듈(324)은, 멀티미디어 디바이스의 유저가 로그인한 계정에서 사용하였던 프로필의 칼라 정보를 분석한다.
칼라 적용부(330)는, 추가적으로 테마 칼라 적용 모듈(331) 및 검색 결과 칼라 적용 모듈(332) 등을 포함하고 있다.
테마 칼라 적용 모듈(331)은, 칼라 분석부(320)에서 분석된 칼라를 임의의 메뉴의 칼라로 적용하는 기능을 수행한다. 그리고, 검색 결과 칼라 적용 모듈(332)은, 검색 정확도에 따라 메뉴에 적용된 칼라의 투명도, 명도, 채도 등을 추가적으로 변경하는 역할을 수행하도록 설계한다.
도 3에 도시된 사용성 분석부(310)의 보다 구체적인 동작에 대해서는, 이하 도 4를 참조하여 상세히 후술하도록 하겠다.
도 4는 도 3에 도시된 일부 구성요소(310)의 동작을 시계열적으로 도시한 플로우 차트이다. 물론, 도 4에 도시된 동작들은 멀티미디어 디바이스의 컨트롤러에서 구현 가능하다.
본 발명의 일실시예에 의한 멀티미디어 디바이스는, 사용자가 시청한 채널, 방송 프로그램, 컨텐츠 등의 시청 히스토리를 분석한다(S401). 예를 들어, 방송 프로그램의 EPG (electronic program guide) 정보 등을 통해 사용자가 선호하는 키워드(예를 들어, 출연자 정보 등)를 추출한다.
나아가, 멀티미디어 디바이스는, 사용자가 검색(예를 들어, 음성 인식 기능이나 검색 어플리케이션 등을 통해)한 컨텐츠의 히스토리를 분석한다(S402). 도 4에 도시된 S401 단계 및 S402 단계가 동시에 이루어 지거나 또는 역순으로 수행되는 것도 본 발명의 권리범위에 속한다.
또한, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, S402 단계에서 검색이 N번(자연수) 이상 이루어 졌는지 여부를 판단하고, 그리고 가장 많이 사용된 키워드를 추출하도록 설계된다(S403).
전술한 S403 단계에서 검색이 N번 이상 이루어 지지 않은 경우, S401 단계에서의 시청 이력 분석 결과로 사용성을 결정한다(S406).
반면, 전술한 S403 단계에서 검색이 N번 이상 이루어 진 경우에는, 검색에서 가장 많이 사용된 키워드로 사용성을 결정한다(S404).
즉, S403 단계에서 검색의 횟수를 기준으로 S401 단계의 시청 이력 분석 결과에 기초하여 대표 키워드를 추출할지 또는 S402 단계의 검색 이력 분석 결과에 기초하여 대표 키워드를 추출할지 여부를 결정한다. 이와 같이 설계함으로써, 사용자의 1회성 검색만으로 사용자의 사용성(선호도)을 분석하는 오류를 줄일 수 있는 기술적 효과가 기대된다.
그리고, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 사용성 분석을 완료하도록 설계한다(S405).
도 5는 도 3에 도시된 다른 일부 구성요소(320)의 동작을 시계열적으로 도시한 플로우 차트이다. 물론, 도 5에 도시된 동작들은 멀티미디어 디바이스의 컨트롤러에서 구현 가능하다. 그리고, 도 5는 도 4의 모든 단계가 종료된 경우를 가정하고 있으나, 도 4의 일부 단계만 종료된 경우에도 적용 가능하다.
우선, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 전술한 S401 단계 또는 S402 단계에서의 사용성 분석 결과에 기초하여, 대표 키워드를 추출할 수 있는지 여부를 판단한다(S501). 예를 들어, 추출된 모든 키워드 중에서 특정 키워드가 50% 이상 사용된 경우, 이를 대표 키워드로 간주할 수 있다.
상기 판단 결과(S501), 대표 키워드를 추출 가능한 경우, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 상기 대표 키워드에 대응하는 특정 칼라에 대한 정보가 메모리에 저장되어 있는지 여부를 추가적으로 판단한다(S502).
상기 판단 결과(S502), 대표 키워드에 대응하는 특정 칼라에 대한 정보가 메모리에 저장되어 있는 경우, 멀티미디어 디바이스는, 메뉴에 적용할 칼라로 상기 특정 칼라를 결정한다(S505).
반면, 상기 판단 결과(S501), 대표 키워드를 추출할 수 없는 경우에는, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 현재 시청중인 컨텐츠(방송 프로그램)에 영상물 등급 정보가 포함되어 있는지 여부를 판단한다(S503).
상기 판단 결과(S503), 영상물 등급 정보가 포함되어 있는 경우에는, 영상물 등급을 화면에 표시하는 인디케이터(예를 들어, 15세 이상 시청 금지 등)의 칼라를, 메뉴에 적용할 칼라로 결정한다(S505). 이와 관련된 보다 구체적인 실시예는, 이하 도 8을 참조하여 보다 상세히 설명하도록 하겠다.
반면, 상기 판단 결과(S503), 영상물 등급 정보가 포함되어 있지 않은 경우에는, 사용자가 가장 많이 사용한 키워드에 대하여 웹 크롤링에 기초하여 대표 칼라를 추출하도록 설계한다(S504). 이와 관련된 보다 구체적인 실시예는, 이하 도 7을 참조하여 보다 상세히 설명하도록 하겠다.
도 6은 도 3에 도시된 또 다른 일부 구성요소(330)의 동작을 시계열적으로 도시한 플로우 차트이다. 물론, 도 6에 도시된 동작들은 멀티미디어 디바이스의 컨트롤러에서 구현 가능하다. 그리고, 도 6은 도 5의 모든 단계가 종료된 경우를 가정하고 있으나, 도 5의 일부 단계만 종료된 경우에도 적용 가능하다.
우선, 전술한 실시예들 중 어느 하나에 의해, 멀티미디어 디바이스를 사용하는 유저가 가장 많이 사용한 키워드 및 대표 칼라가 결정된 것을 가정한다(S505).
나아가, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 결정된 대표 칼라를 멀티미디어 디바이스의 테마 칼라로 적용한다(S601).
당해 명세서에서, 테마 칼라로 적용한다는 의미는, 멀티미디어 디바이스가 제공하는 적어도 하나 이상의 메뉴에 동일한 칼라를 적용한다는 것을 의미한다.
보다 구체적으로 예를 들면, 대표 칼라로 레드(Red) 칼라가 결정되면, 멀티미디어 디바이스가 제공하는 모든 메뉴의 전체 칼라를 레드 칼라로 적용하거나 또는 모든 메뉴의 테두리 부분만 레드 칼라를 적용한다.
또는, 멀티미디어 디바이스가 제공하는 특정 메뉴의 전체 칼라를 레드 칼라로 적용하거나 또는 특정 메뉴의 테두리 부분만 레드 칼라를 적용한다.
한편, S601 단계 이후에도, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 검색 기능이 추가적으로 사용되었는지 여부를 판단한다(S602).
상기 판단 결과(S602), 검색 기능이 추가적으로 사용되지 않은 경우에는, 본 발명의 일실시예에 의한 멀티미디어 디바이스는 메뉴 등에 기적용된 칼라를 변경하지 않고 그대로 사용한다(S601).
반면, 상기 판단 결과(S602), 검색 기능이 추가적으로 사용된 경우에는, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, S601 단계 이후의 검색 히스토리 정보에 기초하여 기적용된 메뉴의 칼라의 투명도, 명도, 채도(saturation) 중 적어도 하나를 추가적으로 변경하도록 설계된다(S603).
예를 들어, 특정 키워드에 대한 검색 횟수가 증가할수록, 이에 비례하여 메뉴에 적용된 칼라의 채도가 증가하도록 설계함으로써, 사용자에게 피드백을 전달할 수 있는 장점이 있다.
이와 관련된 실시예는, 이하 도 11 및 도 12를 참조하여 보다 상세히 후술하도록 하겠다.
한편, 이전에 설명한 실시예들을 간단히 요약해 정리해 보면, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 컨텐츠 시청 이력 및 검색 이력을 분석한다. 그리고, 분석 결과에 따라, 특정 키워드에 대응하는 특정 칼라를 추출한다. 마지막으로, 추출된 특정 칼라를 메뉴에 자동으로 적용한다.
이를 구현하기 위하여, 예를 들어, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 추출된 키워드에 대응하는 대표 칼라에 정보를 메모리(예를 들어, BTS 키워드에 대응하는 대표 칼라는 보라색, 임영웅 키워드에 대응하는 대표 칼라는 민트색 등)에 저장하고 있도록 설계한다.
나아가, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 멀티미디어 디바이스 사용자의 나이, 성별에 따라 다른 메뉴를 제공하거나 또는, 로그인 정보에 기초하여 다른 칼라의 메뉴를 제공하는 것도 가능하다.
그리고, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 날씨 정보(예를 들어, 흐림/맑음 등)에 따라, 메뉴의 칼라, 테마, 명암, 투명도 등을 다르게 설정하도록 설계하는 것도 가능하다.
도 7은 본 발명의 일실시예에 따라, 웹 크롤링을 통해 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
이전 도 4에서 전술한 바와 같이, 멀티미디어 디바이스의 시청 이력 분석(S401) 또는 검색 이력 분석(S402) 등을 통해 대표 키워드(예를 들어, 가장 많이 사용된) 추출이 가능함을 설명하였다.
그리고, 추출된 대표 키워드에 대응하는 대표 칼라가 멀티미디어 디바이스의 메모리(이와 관련된 실시예는 이하 도 13에서 후술하도록 하겠다)에 저장되어 있는 경우에는, 즉시 메뉴에 메모리에 저장된 대표 칼라를 적용하는 것이 가능하다.
그러나, 추출된 대표 키워드에 대응하는 대표 칼라에 대한 정보가 메모리에 저장되어 있지 않은 경우, 이를 해결하기 위한 별도의 솔루션이 요구되며, 이와 관련된 실시예를 도 7을 참조하여 설명하겠다.
특정 기간내 많이 검색한 특정 키워드에 매칭이 되는 칼라 및 테마를 멀티미디어 디바이스 또는 서버에서 계산 후 적어도 하나 이상의 메뉴 등에 자동으로 적용되도록 설계한다.
도 7에서는, 멀티미디어 디바이스의 사용자가 “BTS” 키워드를 가장 많이 사용한 것으로 가정한다. 다만, 멀티미디어 디바이스가 내부 메모리를 참조한 결과, BTS 키워드에 대응하는 대표 칼라에 대한 정보가 저장되어 있지 않은 상태이다.
이 때, 본 발명의 일실시예에 의한 멀티미디어 디바이스는 도 7의 (a)에 도시된 바와 같이, 웹 크롤링을 통해 BTS 키워드에 대응하는 대표 이미지가 보라색이란 것을 추정할 수가 있다.
여기서, 웹 크롤링은 인터넷 상에 존재하는 데이터를 자동으로 탐색하는 행위를 의미하고, 당업자에 따라 웹 크롤링이 아니고 스파이더링(Spidering) 이라고 표현할 수도 있다.
그리고, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 도 7의 (b)에 도시된 바와 같이, 임의의 메뉴(702)를 디스플레이 할 때, 도 7의 (a)에서 웹 크롤링으로 추출된 대표 칼라인 보라색의 메뉴를 디스플레이 하도록 설계한다.
도 8은 본 발명의 일실시예에 따라, 영상물(비디오)의 등급에 기초하여 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다. 반드시 한정되는 것은 아니지만, 도 7의 웹 크롤링(web-crawling) 또는 스파이더링(spidering)을 통해서도 키워드에 대응하는 대표 칼라를 추정하는 것이 불가능한 경우의 처리 프로세스에 대하여, 이하 도 8을 참조하여 상세히 설명하도록 하겠다.
도 8의 (a)에 도시된 바와 같이, 영상물(예를 들어, 방송 프로그램 등)은 내용에 따라 시청할 수 있는 연령대가 정해져 있고, 시청 가능한 연령대(등급)를 표시하는 대표 칼라가 정해져 있다.
예를 들어, 나이 제한 없이 모두 시청할 수 있는 등급은, 초록색의 네모 박스로 표현되고, 12세 이상 시청할 수 있는 등급은, 노란색의 네모 박스로 표현되고, 15세 이상 시청할 수 있는 등급은, 주황색의 네모 박스로 표현되며, 그리고 18세 이상 시청할 수 있는 등급은 빨간색의 네모 박스로 표현된다.
본 발명의 일실시예에 의한 멀티미디어 디바이스가, 현재 12세 이상(801)만 시청할 수 있는 방송 프로그램을 디스플레이 하고 있는 것으로 가정해 보겠다.
이 때, 만약 임의의 메뉴를 시작하는 커맨드가 수신되면, 도 8의 (b)에 도시된 바와 같이, 현재 영상 등급을 표시하는 대표 칼라와 동일한 칼라의 메뉴(802)가 디스플레이 되도록 설계한다.
이와 같이 설계할 경우, 영상물 등급을 표시하는 숫자를 포함하는 인디케이터를 종래 기술과 달리 항상 스크린 상단 오른쪽에 표시하지 않아도 되는 장점이 있다. 그리고, 종래 기술에 따른, 작은 인디케이터에 비해, 메뉴의 사이즈가 상대적으로 더 크기 때문에, 사용자에게 워닝 효과를 보다 확실하게 전달할 수 있는 장점도 기대된다.
도 9는 본 발명의 일실시예에 따라, 로그인 정보에 기초하여 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
이전 실시예들은, 해당 멀티미디어 디바이스의 사용 히스토리 정보에 기초하여 메뉴의 칼라를 자동 변경하는 기술이다. 반면, 도 9에 도시된 실시예는 다른 디바이스와의 연동 또는 로그인 정보 등을 통해 메뉴의 칼라를 변경할 수가 있다.
도 9의 (a)에 도시된 바와 같이, 모바일 디바이스를 사용하는 유저가 임의의 웹 사이트(예를 들어, 구글 등)에 로그인한 것을 가정한다. 그리고, 사용자가 로그인된 계정을 표시하는 이미지(901)에 특정 칼라(예를 들어, 노란색)를 설정한 것으로 가정해 보겠다.
나아가, 모바일 디바이스가 아닌 다른 디바이스를 통해 동일한 웹사이트에 로그인한 경우, 도 9의 (b)에 도시된 바와 같이, 다른 디바이스의 메뉴(902)도 노란색으로 디스플레이 된다.
즉, 도 9에 도시된 실시예에 의하면, 개인을 상징화 할 수 있는 색상을 디바이스를 이용하기 위해 로그인된 계정의 썸네일 컬러 및 이미지를 기반으로 적용한다.
로그인한 계정 기반으로 이루어 지기 때문에, 모든 기기(모바일 디바이스 TV 등등)에서 통일된 자신만의 색상이 적용된 일관성 있어 보이는 메뉴, UI 등을 느낄 수 있는 장점이 기대된다.
만약, 사용자가 계정 생성시 이미지를 선택하지 않은 경우, 디폴트로 설정된 칼라가 적용되도록 한다. 반면, 사용자가 계정 생성시, 이미지(예를 들어, 자신의 얼굴 사진 등)를 업로드한 경우에는, 해당 사진의 평균 칼라값을 메뉴에 적용할 대표 칼라로 자동 설정한다.
도 10은 본 발명의 다른 일실시예에 따라, 로그인 정보에 기초하여 메뉴의 대표 칼라를 자동으로 설정하는 프로세스를 도시하고 있다.
사용자가 임의의 웹에 가입하기 위한 로그인 정보 입력시, 생년월일 등을 입력하는 경우가 있다.
도 10의 (a)에 도시된 바와 같이, 로그인 정보(예를 들어, 생년월일 정보)에 기초하여, 본 발명의 일실시예에 의한 멀티미디어 디바이스는 로그인한 사용자의 행운의 색(1010)(ex: 빨간색)을 추출하는 것이 가능하다.
그리고, 사용자가 임의의 메뉴를 실행시킨 경우, 도 10의 (b)에 도시된 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 행운의 색으로 추출되었던 빨간색이 적용된 메뉴(1020)를 디스플레이 하도록 설계한다.
도 11은 본 발명의 일실시예에 따라, 설정된 메뉴 칼라의 정확도에 따라 피드백 정보를 추가적으로 제공하는 프로세스를 도시하고 있다.
이전 실시예들은, 대표 칼라로 한번 결정진 경우 추후 칼라에 대한 어떠한 변화도 없는 경우를 가정하고 설명하였다. 반면, 도 11에 도시된 실시예는, 대표 칼라로 결정된 프로세스의 정확도 등을 고려하여, 대표 칼라의 채도 등을 지속적으로 변경함으로써, 사용자의 피드백을 실시간으로 반영하는 장점이 있다.
예를 들어, 도 11의 (a)에 도시된 실시예는, 멀티미디어 디바이스의 메모리에 임의의 키워드(사용성 분석 결과 도출된)에 대응하는 대표 칼라 정보가 저장되어 있는 경우를 가정한다. 따라서, 멀티미디어 디바이스는, 메모리에 저장된 대표 칼라로 메뉴(1110)를 디스플레이 하고, 이 경우 정확도가 100% 이기 때문에, 메뉴(1110)에 설정된 칼라에 어떠한 변화도 발생시킬 필요가 없다.
반면, 도 11의 (b)에 도시된 실시예는, 멀티미디어 디바이스의 메모리에 임의의 키워드(사용성 분석 결과 도출된)에 대응하는 대표 칼라 정보가 저장되어 있지 않아서, 웹 크롤링 기법 등으로 대표 칼라를 추정한 경우를 가정한다. 따라서, 멀티미디어 디바이스는, 해당 칼라에 채도를 조정한 메뉴(1120)를 디스플레이 한다. 예컨대, 채도를 낮춤으로써, 사용자의 사용성을 반영한 메뉴의 칼라 정보가 100% 정확하지 않을 수도 있다는 피드백을 제공한다.
나아가, 도 11의 (c)에 도시된 바와 같이, 사용자가 많이 사용한 키워드에 대응하는 대표 칼라 정보의 정확도에 따라, 채도값이 조정된 메뉴를 디스플레이 한다.
예를 들어, 키워드에 대응하는 대표 칼라 정보의 정확도가 100%인 경우, 채도(saturation)인 S값이 100%인 메뉴(1130)를 디스플레이 한다.
한편, 키워드에 대응하는 대표 칼라 정보의 정확도가 80%인 경우, 채도(saturation)인 S값이 80%인 메뉴(1140)를 디스플레이 한다. 나아가, 키워드에 대응하는 대표 칼라 정보의 정확도가 50%인 경우, 채도(saturation)인 S값이 50%인 메뉴(1150)를 디스플레이 한다. 또한, 키워드에 대응하는 대표 칼라 정보의 정확도가 10%인 경우, 채도(saturation)인 S값이 10%인 메뉴(1160)를 디스플레이 한다. 그리고, 키워드에 대응하는 대표 칼라 정보의 정확도가 5%인 경우, 채도(saturation)인 S값이 5%인 메뉴(1170)를 디스플레이 한다. 채도 관련된 사항은, 이하 도 12에서 보다 상세히 후술하도록 하겠다.
도 12는 도 11에 도시된 피드백 정보와 관련된 채도(Saturation)를 설명하기 위한 도면이다. 도 11 및 도 12에서는 키워드에 대응하는 대표 칼라 정보의 정확도에 따라 채도를 변경 가능한 실시예를 설명하였으나, 채도 대신 투명도나 명암 등을 변경하는 것도 본 발명의 권리범위에 속한다. 예를 들어, 특정 키워드에 대응하는 칼라 정보의 정확도가 높지 않다면, 정확도에 반비례하여 메뉴 칼라의 투명도를 높이거나 명암을 높이는 방향으로 설계함으로써, 메뉴에 적용된 칼라가 사용자 니즈에 100% 충족되지 않을 수도 있음을 시각적으로 보여줄 수 있는 기술적 효과가 있다.
한편, 채도(Saturation)는 색상(Hue), 명도(Value)와 함께 색의 주요한 세가지 속성 중 하나이다. 색이 보다 선명할수록 채도가 높을 것을 의미하고, 회색이나 흰색 또는 검정과 같은 무채색에 가까울수록 채도가 낮은 것을 의미한다.
도 12에 도시된 (X, Y, Z) 좌표에서, X값은 색상(Hue)을 의미하고, Y값은 채도(Saturation)를 의미하고, Z 값은 명도(Value)를 의미한다. 특히, 도 12에서는 명도값이 80으로 고정된 것으로 가정하였다. 채도값 S가 0이 되면 무채색이 된다.
즉, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 대표 칼라(Hue) 정보가 정해진 경우에도, 그 정보의 정확도에 따라 채도(S)값을 조정한 상태로 메뉴를 디스플레이 하도록 설계된다.
도 13은 본 발명의 일실시예에 따라, 대표 키워드에 대응하는 대표 칼라를 저장하고 있는 메모리를 설명하기 위한 도면이다.
전술한 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 사용성 분석 결과 예를 들어, 사용자가 가장 많이 사용한 키워드를 추출한다.
그리고, 도 13에 도시된 메모리(멀티미디어디 디바이스 내부 또는 외부 서버 등)를 참조하여, 추출된 키워드에 대응하는 대표 칼라 정보를 디텍트 한다. 마지막으로, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 디텍트된 대표 칼라로 임의의 메뉴를 디스플레이 한다.
이 때는, 키워드 및 대표 칼라 매칭 과정에서 오류가 발생할 가능성이 없기 때문에, 채도(S)값을 100%로 고정시킨다. 반면, 메모리에 대표 칼라 정보가 존재하지 않아서, 웹 크롤링으로 키워드의 대표 칼라를 추정하는 경우에는, 메뉴에 적용된 칼라의 채도값을 100% 보다 작게 설정하고 이는 정확도에 따라 변동 가능하다.
그리고, 도 14는 본 발명의 일실시예에 따라, 키워드 검색이 누적된 경우와 그렇지 않은 경우를 비교하여 설명하기 위한 도면이다.
전술하여 설명한 멀티미디어 디바이스가 TV에 해당하는 경우, 방송 프로그램과 함께 메뉴가 디스플레이 된다.
다만, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 실시간으로 수신되는 방송 프로그램 이외에 임의의 컨텐츠(예를 들어, VOD 등)를 디스플레이 하는 것도 가능하다. 이 때, 도 14의 (a)에 도시된 바와 같이, 멀티미디어 디바이스는 전체 화면에 컨텐츠의 비디오(1410)를 디스플레이 하고 일부 화면에 메뉴(1420)를 디스플레이 한다. 이 때, 사용자가 가장 많이 검색한 키워드에 대응하는 대표 칼라가 레드(red) 칼라이기 때문에, 도 14의 (a)에 도시된 메뉴(1420)의 칼라는 레드 칼라인 것으로 가정한다. 또한, 전체 화면에 표시된 비디오(1410)는 VOD에 해당하여, 1분 30초 재생 시점에서 일시 정지된 상태임을 가정한다.
한편, 도 14의 (a)가 이루어진 2022년 1월 1일 이후, 사용자가 멀티미디어 디바이스를 이용하여 다른 키워드를 검색한 경우(도 14의 (b))와 그렇지 않은 경우(도 14의 (c))의 시나리오를 나누어 설명하도록 하겠다.
도 14의 (b)에 도시된 바와 같이, 도 14의 (a)에 도시된 동일한 비디오 컨텐츠(1411)가 1분 30초 재생 시점에서 일시 정지된 경우를 가정한다. 따라서, 도 14의 (a)에 도시된 비디오 컨텐츠(1410)의 칼라와 도 14의 (b)에 도시된 비디오 컨텐츠(1411)의 칼라는 동일하다.
그러나, 도 14의 (b)에 도시된 메뉴(1421)의 칼라와 도 14의 (a)에 도시된 메뉴(1420)의 칼라는 다르다. 왜냐하면, 멀티미디어 디바이스를 사용하는 유저가 다른 키워드(예를 들어, BTS)를 2022년 1월 1일부터 2022년 3월 31일 사이에 가장 많이 검색하였고, 따라서 해당 키워드(BTS)에 대응하는 대표 칼라인 보라색으로 메뉴(1421)가 자동 변경된다.
한편, 도 14의 (c)에 도시된 바와 같이, 도 14의 (a)에 도시된 동일한 비디오 컨텐츠(1412)가 1분 30초 재생 시점에서 일시 정지된 경우를 가정한다. 따라서, 도 14의 (a)에 도시된 비디오 컨텐츠(1410)의 칼라와 도 14의 (c)에 도시된 비디오 컨텐츠(1412)의 칼라는 동일하다.
그리고, 도 14의 (b)와 달리, 도 14의 (c)에 도시된 메뉴(1422)의 칼라는 도 14의 (a)에 도시된 메뉴(1420)의 칼라와도 동일하다. 왜냐하면, 멀티미디어 디바이스를 사용하는 유저가 2022년 1월 1일부터 2022년 3월 31일 사이에 다른 키워드로 검색을 하지 않았기 때문이다.
전술한 실시예들을 다시 정리하여 설명하면, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 제1 시점에 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하고, 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 한다.
한편, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 사용 히스토리를 메모리(예를 들어, 도 13 등)에 저장하고 있다.
제2 시점에 상기 특정 메뉴를 실행하기 위한 제2 커맨드를 수신한 경우, 멀티미디어 디바이스는 수신된 제2 커맨드 및 메모리에 저장된 사용 히스토리 등을 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 한다.
특히, 전술한 바와 같이, 제1 시점 및 제2 시점에서 디스플레이된 메뉴는 동일하지만, 동일한 메뉴에 대해서도 제1 시점에서의 제1 칼라와 제2 시점에서의 제2 칼라는 서로 달라지게 된다(특히, 멀티미디어 디바이스의 사용 히스토리 정보 등에 따라).
도 4에서 설명한 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 검색 히스토리 또는 시청 히스토리 중 적어도 하나를 분석하도록 설계된다.
상기 검색 히스토리를 분석한 결과, 상기 제1 시점 및 상기 제2 시점 사이에, 검색을 N번(자연수) 이상 수행한 조건을 만족한 경우, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 검색에서 가장 많이 사용된 대표 키워드를 추출한다.
나아가, 멀티미디어 디바이스는, 메모리에 상기 추출된 대표 키워드에 대응하는 대표 칼라가 존재하는지 여부를 판단한다.
상기 판단 결과 상기 대표 칼라가 존재하는 경우, 멀티미디어 디바이스는, 상기 대표 칼라를 상기 제2 칼라로 할당하도록 설계된다. 이 때는, 에러 가능성이 없으므로, 상기 제2 칼라의 채도(saturation)를 100%로 고정시킨다.
반면 상기 판단 결과 상기 대표 칼라가 존재하지 않는 경우, 멀티미디어 디바이스는, 상기 대표 키워드를 기초로 웹 크롤링을 수행하고, 그리고 상기 웹 크롤링 수행 결과, 검색된 상위 노출 이미지 M개(자연수)의 평균 칼라를 상기 제2 칼라로 할당한다. 다만, 이 때는, 정확도가 상대적으로 작기 때문에, 상기 제2 칼라의 채도(saturation)를 100% 보다 작은 값으로 설정하고, 정확도 정보에 따라 변동 가능하다.
이를 도 2를 참조하여 설명하면, 리모컨(240)에 의해 제어되는 멀티미디어 디바이스(200)는, 제1 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하는 수신모듈(도 2에 도시된 적외선 센서(214) 또는 무선 통신 모듈(213))과, 상기 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 하는 디스플레이(도 2에 도시된 비디오 출력부(208))와, 상기 멀티미디어 디바이스의 사용 히스토리를 저장하는 메모리(도 2에 도시된 메모리(215))와, 그리고 제2 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제2 커맨드가 수신된 경우, 상기 수신된 제2 커맨드 및 상기 메모리에 저장된 사용 히스토리를 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 하도록 제어하는 컨트롤러(도 2에 도시된 컨트롤러(209)) 등을 포함한다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 제어부를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.
이전 목차인 "발명의 실시를 위한 최선의 형태"에서 본 발명의 다양한 실시예들을 설명하였고, 당업자가 필요에 따라 둘 이상의 도면들에 기재된 실시예들을 결합하는 것도 본 발명의 권리범위에 속함은 당연하다.
본 발명은 메뉴가 제공되는 어떤 형태의 멀티미디어 디바이스(예를 들어, 텔레비전, 휴대폰, 태블릿 PC, 랩탑 또는 웨어러블 디바이스 등)에도 적용 가능하므로, 산업상 이용가능성이 인정된다.

Claims (20)

  1. 멀티미디어 디바이스의 제어 방법에 있어서,
    제1 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하는 단계;
    상기 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 하는 단계;
    상기 멀티미디어 디바이스의 사용 히스토리를 메모리에 저장하는 단계;
    제2 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제2 커맨드를 수신하는 단계;
    상기 수신된 제2 커맨드 및 상기 메모리에 저장된 사용 히스토리를 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 하는 단계
    를 포함하되,
    상기 제1 칼라와 상기 제2 칼라는 서로 다른 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  2. 제1항에 있어서,
    검색 히스토리 또는 시청 히스토리 중 적어도 하나를 분석하는 단계
    를 더 포함하는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  3. 제2항에 있어서,
    상기 검색 히스토리를 분석한 결과,
    상기 제1 시점 및 상기 제2 시점 사이에, 검색을 N번 이상 수행한 조건을 만족한 경우, 검색에서 가장 많이 사용된 대표 키워드를 추출하는 단계
    를 더 포함하는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  4. 제3항에 있어서,
    상기 메모리에 상기 추출된 대표 키워드에 대응하는 대표 칼라가 존재하는지 여부를 판단하는 단계
    를 더 포함하는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  5. 제4항에 있어서,
    상기 판단 결과 상기 대표 칼라가 존재하는 경우, 상기 대표 칼라는 상기 제2 칼라로 할당하는 단계
    를 더 포함하는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  6. 제4항에 있어서,
    상기 판단 결과 상기 대표 칼라가 존재하지 않는 경우, 상기 대표 키워드를 기초로 웹 크롤링(web-crawling)을 수행하는 단계; 그리고
    상기 웹 크롤링 수행 결과, 검색된 상위 노출 이미지 M개의 평균 칼라를 상기 제2 칼라로 할당하는 단계
    를 더 포함하는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  7. 제5항에 있어서,
    상기 제2 칼라의 채도(saturation)는 100%로 고정되어 있는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  8. 제6항에 있어서,
    상기 제2 칼라의 채도(saturation)는 100% 보다 작은 값에 해당하고, 변동 가능한 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  9. 제1항에 있어서,
    상기 멀티미디어 디바이스는,
    텔레비전, 휴대폰, 태블릿 PC, 랩탑 또는 웨어러블 디바이스 중 적어도 하나에 대응하는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  10. 제9항에 있어서,
    상기 멀티미디어 디바이스가 텔레비전에 대응하는 경우,
    상기 특정 메뉴는 방송 프로그램과 함께 디스플레이 되는 것을 특징으로 하는 멀티미디어 디바이스의 제어 방법.
  11. 리모컨에 의해 제어되는 멀티미디어 디바이스에 있어서,
    제1 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제1 커맨드를 수신하는 수신 모듈;
    상기 수신된 제1 커맨드에 따라, 제1 칼라(color)로 구성된 특정 메뉴를 디스플레이 하는 디스플레이;
    상기 멀티미디어 디바이스의 사용 히스토리를 저장하는 메모리; 그리고
    제2 시점에 상기 멀티미디어 디바이스의 특정 메뉴를 실행하기 위한 제2 커맨드가 수신된 경우, 상기 수신된 제2 커맨드 및 상기 메모리에 저장된 사용 히스토리를 참조하여, 제2 칼라로 구성된 특정 메뉴를 디스플레이 하도록 제어하는 컨트롤러
    를 포함하되,
    상기 제1 칼라와 상기 제2 칼라는 서로 다른 것을 특징으로 하는 멀티미디어 디바이스.
  12. 제11항에 있어서,
    상기 컨트롤러는,
    검색 히스토리 또는 시청 히스토리 중 적어도 하나를 분석하는 것을 특징으로 하는 멀티미디어 디바이스.
  13. 제12항에 있어서,
    상기 컨트롤러는,
    상기 검색 히스토리를 분석한 결과,
    상기 제1 시점 및 상기 제2 시점 사이에, 검색을 N번 이상 수행한 조건을 만족한 경우, 검색에서 가장 많이 사용된 대표 키워드를 추출하는 것을 특징으로 하는 멀티미디어 디바이스.
  14. 제13항에 있어서,
    상기 컨트롤러는,
    상기 메모리에 상기 추출된 대표 키워드에 대응하는 대표 칼라가 존재하는지 여부를 판단하는 것을 특징으로 하는 멀티미디어 디바이스.
  15. 제14항에 있어서,
    상기 컨트롤러는,
    상기 판단 결과 상기 대표 칼라가 존재하는 경우, 상기 대표 칼라를 상기 제2 칼라로 할당하는 것을 특징으로 하는 멀티미디어 디바이스.
  16. 제14항에 있어서,
    상기 컨트롤러는,
    상기 판단 결과 상기 대표 칼라가 존재하지 않는 경우, 상기 대표 키워드를 기초로 웹 크롤링을 수행하고, 그리고
    상기 웹 크롤링 수행 결과, 검색된 상위 노출 이미지 M개의 평균 칼라를 상기 제2 칼라로 할당하는 것을 특징으로 하는 멀티미디어 디바이스.
  17. 제15항에 있어서,
    상기 제2 칼라의 채도(saturation)는 100%로 고정되어 있는 것을 특징으로 하는 멀티미디어 디바이스.
  18. 제16항에 있어서,
    상기 제2 칼라의 채도(saturation)는 100% 보다 작은 값에 해당하고, 변동 가능한 것을 특징으로 하는 멀티미디어 디바이스.
  19. 제11항에 있어서,
    상기 디스플레이는,
    전체 화면에 컨텐츠의 비디오를 디스플레이 하고, 일부 화면에 상기 특정 메뉴를 디스플레이 하는 것을 특징으로 하는 멀티미디어 디바이스.
  20. 제19항에 있어서,
    일시 정지된 특정 시점의 상기 컨텐츠의 비디오의 칼라는 고정되어 있는 반면,
    상기 특정 메뉴의 칼라는 상기 메모리에 저장된 사용 히스토리에 기초하여 변경되는 것을 특징으로 하는 멀티미디어 디바이스.
PCT/KR2022/007673 2022-05-30 2022-05-30 멀티미디어 디바이스 및 그 제어 방법 WO2023234430A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2022/007673 WO2023234430A1 (ko) 2022-05-30 2022-05-30 멀티미디어 디바이스 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2022/007673 WO2023234430A1 (ko) 2022-05-30 2022-05-30 멀티미디어 디바이스 및 그 제어 방법

Publications (1)

Publication Number Publication Date
WO2023234430A1 true WO2023234430A1 (ko) 2023-12-07

Family

ID=89025033

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/007673 WO2023234430A1 (ko) 2022-05-30 2022-05-30 멀티미디어 디바이스 및 그 제어 방법

Country Status (1)

Country Link
WO (1) WO2023234430A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090068501A (ko) * 2007-12-24 2009-06-29 브로드밴드미디어주식회사 Ｉｐｔｖ 서비스에서의 사용자 인터페이스 방법 및 셋탑박스
US20140082516A1 (en) * 2012-08-01 2014-03-20 Tencent Technology (Shenzhen) Company Limited Method and apparatus for switching software interface of a mobile terminal
US20160117849A1 (en) * 2014-03-28 2016-04-28 Huawei Device Co., Ltd. Method, apparatus, and terminal device for determining color of interface control
KR20160066969A (ko) * 2014-12-03 2016-06-13 삼성전자주식회사 그래픽 유저 인터페이스 표시 방법 및 그 전자 장치
US20170083217A1 (en) * 2014-09-08 2017-03-23 Hewlett Packard Enterprise Development Lp User interface components load time visualization

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090068501A (ko) * 2007-12-24 2009-06-29 브로드밴드미디어주식회사 Ｉｐｔｖ 서비스에서의 사용자 인터페이스 방법 및 셋탑박스
US20140082516A1 (en) * 2012-08-01 2014-03-20 Tencent Technology (Shenzhen) Company Limited Method and apparatus for switching software interface of a mobile terminal
US20160117849A1 (en) * 2014-03-28 2016-04-28 Huawei Device Co., Ltd. Method, apparatus, and terminal device for determining color of interface control
US20170083217A1 (en) * 2014-09-08 2017-03-23 Hewlett Packard Enterprise Development Lp User interface components load time visualization
KR20160066969A (ko) * 2014-12-03 2016-06-13 삼성전자주식회사 그래픽 유저 인터페이스 표시 방법 및 그 전자 장치

Similar Documents

Publication Publication Date Title
WO2013012107A1 (ko) 전자 기기 및 그 제어 방법
WO2012176993A2 (en) Method for displaying program information and image display apparatus thereof
WO2014025219A1 (en) Portable terminal device and method for operating the same
WO2018080180A1 (en) System and method for providing augmented reality service associated with broadcasting
WO2014073823A1 (en) Display apparatus, voice acquiring apparatus and voice recognition method thereof
EP3759617A1 (en) Electronic apparatus and controlling method thereof
EP3195601A1 (en) Method of providing visual sound image and electronic device implementing the same
WO2019054791A1 (ko) 컨텐트를 실행하는 방법 및 장치
WO2018131806A1 (en) Electronic apparatus and method of operating the same
WO2019117547A1 (ko) 전자 장치 및 그의 제어방법
WO2019184436A1 (zh) 视频推送方法、装置及计算机可读存储介质
WO2020071870A1 (en) Image display device and method of providing broadcast program information
WO2015041402A1 (en) Image display apparatus, driving method thereof, and image display method
WO2014189289A1 (ko) 연관 서비스 제공 방법 및 장치
WO2020213884A1 (ko) 텍스트를 제공하는 전자 장치 및 그 제어 방법.
WO2023234430A1 (ko) 멀티미디어 디바이스 및 그 제어 방법
WO2020111744A1 (ko) 전자 장치 및 그 제어 방법
WO2020241973A1 (en) Display apparatus and control method thereof
WO2018016760A1 (ko) 전자 장치 및 그의 제어 방법
WO2020060070A1 (en) Electronic device and control method thereof
WO2021029453A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2019182255A1 (ko) 영상 표시 장치 및 그것의 제어 방법
WO2018143765A1 (en) Method and apparatus for processing content from plurality of external content sources
WO2019112265A1 (ko) 전자 장치 및 그의 제어방법
WO2023042927A1 (ko) 영상표시장치 및 그 동작방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22944969

Country of ref document: EP

Kind code of ref document: A1