WO2007125648A1 - マルチメディア再生装置および背景画像表示方法 - Google Patents

マルチメディア再生装置および背景画像表示方法 Download PDF

Info

Publication number
WO2007125648A1
WO2007125648A1 PCT/JP2007/000439 JP2007000439W WO2007125648A1 WO 2007125648 A1 WO2007125648 A1 WO 2007125648A1 JP 2007000439 W JP2007000439 W JP 2007000439W WO 2007125648 A1 WO2007125648 A1 WO 2007125648A1
Authority
WO
WIPO (PCT)
Prior art keywords
playback
content
screen
icon
menu screen
Prior art date
Application number
PCT/JP2007/000439
Other languages
English (en)
French (fr)
Inventor
Ryuji Nakayama
Takahiro Fujii
Original Assignee
Sony Computer Entertainment Inc.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment Inc. filed Critical Sony Computer Entertainment Inc.
Priority to US12/299,170 priority Critical patent/US20100313166A1/en
Priority to EP07737096A priority patent/EP2017709A4/en
Publication of WO2007125648A1 publication Critical patent/WO2007125648A1/ja

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons

Definitions

  • the present invention relates to a multimedia playback device and a background image display method.
  • a hard disk recorder for example, a hard disk recorder, a DVD (digital multipurpose disk) recorder, or a combination of these devices can be used to record TV programs.
  • DVD digital multipurpose disk
  • various methods such as playback of compressed data recorded on various memory cards and hard disks are disclosed.
  • Digital home appliances especially devices that play video and music, are expected to be used by multiple people at the same time, so they are often installed in a common space such as a living room, unlike a PC (personal computer).
  • the TV screen is viewed from a certain distance, and fine character strings and movements of small boyfriends that are made on the PC screen are not suitable for display on the TV screen. Therefore, the user interface of digital home appliances using TV screens is strongly required to have good visual quality and easy operation. For non-PC users in particular, it is not always easy to use the operation methods normally used on PCs.
  • the inventor has made the present invention based on the above recognition, and an object of the present invention is to provide a technique for enhancing a sense of immersion in a virtual space realized by a multimedia playback device.
  • One embodiment of the present invention is an apparatus capable of reproducing digital content.
  • This device includes a menu screen generation unit that generates image data of a menu screen that includes a list of playback items of digital content, and a playback screen that processes the playback of digital content and includes information about the playback content.
  • a playback screen generation unit that generates image data
  • a background generation unit that generates and displays a background image in which a decorative object floating in the three-dimensional space is drawn as the background of the menu screen and playback screen
  • user operations And an operation unit that obtains an instruction regarding content reproduction via the operation unit.
  • the background generation unit When the playback instruction is received from the fuser by the operation unit, the background generation unit follows the transition from the menu screen to the playback screen and visually enters the back of the three-dimensional space from the user's viewpoint.
  • the background image is changed using a video that produces a special effect.
  • content refers to information content including moving images, still images, audio, text, and programs that are played, displayed, or executed through multiple types of information transmission means. May be included.
  • content item refers to data such as video data, still image data, audio data, text data, and program data as content. It may indicate the unit of each file.
  • acquisition of content item may indicate an operation of acquiring data such as a list of content names or a list of file names as “content item”.
  • “Playback” may indicate playback of an image or sound, or may indicate execution of a program.
  • the background image using the video that gives the user a three-dimensional visual effect is provided, the three-dimensional provided by the various contents played back by the multimedia playback device At the transition of the screen Are less likely to be damaged, and can enhance the user's sense of immersion in the virtual space.
  • Another aspect of the present invention is also an apparatus capable of reproducing digital content.
  • This device includes a menu screen generation unit that generates image data of a menu screen that includes a list of playback items of digital content, and a playback screen that processes the playback of digital content and includes information about the playback content.
  • a playback screen generation unit that generates image data
  • a background generation unit that generates and displays a background image including a decorative object floating in a three-dimensional space
  • an operation unit that obtains instructions related to content playback via user operations And.
  • the background generation unit deforms the decoration object according to the output feature amount of the content or the user operation during the reproduction of the digital content.
  • Output feature value is the spectrum of audio data and the length of audio data in the case of music content and video content, and photo content in the case of photo content, video content, and game content. Data, frame size, spatial frequency, values obtained by applying a predetermined filter to the image, etc.
  • both world views can be made continuous. Therefore, even if there is a switch from the menu screen to the content playback screen, the user is easily immersed in the content.
  • Another aspect of the present invention is a background image display method.
  • image data for a menu screen including a list of playback items for digital content is generated, and image data for a playback screen including information about the playback content when digital content is played back.
  • the display step has a visual effect of entering the back of the 3D space from the user's viewpoint according to the transition from the menu screen to the playback screen when playback of the content is instructed by the user.
  • the background image is changed using the obtained video.
  • FIG. 1 is a diagram showing a basic configuration of a multimedia playback system.
  • FIG. 2 is a functional block diagram showing a configuration of a multimedia playback device.
  • FIG. 3 is a diagram showing a configuration of a menu screen generated by the multimedia playback device.
  • FIG. 4 is a diagram schematically showing the process of transition of menu screen contents.
  • FIG. 5 is a diagram schematically showing the process of transition of the menu screen contents.
  • FIG. 6 is a diagram schematically showing the transition of the screen when a content item is selected.
  • FIG. 7 is a diagram schematically showing the transition of a screen when a content item is selected.
  • FIG. 8 is a diagram schematically showing the process of transition of the menu screen contents.
  • FIG. 9 A diagram showing an example of content items and views associated with each item.
  • FIG. 10 is a diagram schematically showing the process of transition of the menu screen contents in another embodiment.
  • FIG. 1 1 A diagram schematically showing the process of transition of the contents of a menu screen in another embodiment.
  • FIG. 12 is a flowchart showing the operation process of the multimedia playback device. Explanation of symbols
  • the multimedia playback system in the present invention example is a composite device that can play back or execute a plurality of contents such as still images, moving images, music, broadcasts, and games.
  • the screen of the television receiver is used as the display screen, and the display contents on the screen and the operation buttons of the controller are used as the operation means. If multiple contents are played back on PC, it is necessary to use a separate program such as a viewer corresponding to the type of content.
  • These individual programs are produced by different vendors, and usually do not have a common interface, and there is no sense of unity in their operation methods. Also, even if these are integrated into a common interface such as a so-called portal screen, it is just a gathering, and it takes a little time to start each program, so you can not get comfort in switching programs .
  • the multimedia playback system integrates a plurality of content playbacks under a common interface, and gives the user a common operability.
  • a common interface that gives the user a view of the world in which the menu screen is virtually assumed to have a three-dimensional space and the user enters and operates in this three-dimensional space, Improve the sense of immersion in the content world.
  • FIG. 1 shows a basic configuration of a multimedia playback system.
  • the multimedia playback system 10 functions mainly with the multimedia playback device 20.
  • a television receiver 30 and a controller 42 are connected to the multimedia player 20.
  • the television receiver 30 has a function of displaying or outputting video and audio output from the multimedia playback device 20 and is externally connected to the multimedia playback device 20.
  • the controller 42 is a device that acquires various instructions related to recontent playback when operated by a user, and functions as a part of the multimedia playback system 10.
  • This controller 42 may be realized by a game controller as shown in the figure. It may be realized by a remote controller used for controlling various functions of the multimedia playback device 20.
  • Information is input to the multimedia playback device 20 through various recording media and various cables.
  • content held in the external devices 3 7 and 3 9 connected to the L A N 3 5 is input to the multimedia playback device 20 via the network cable 3 4.
  • the input content is played back after being stored or buffered in the multimedia playback device 20.
  • the multimedia playback device 20 includes a data reading function and a writing function for an optical disk 36 such as a DVD and a CD, and a data reading function and a writing function for a removable memory card 38. And.
  • the multimedia playback device 20 may read data such as movies and music albums from the optical disk 36, and may read data such as shot images and shot videos from the memory card 38.
  • the multimedia playback device 20 displays a menu screen for instructing content playback on the television receiver 30.
  • the content items held in the multimedia playback device 20 and the content items held in the external devices 37 and 39 are displayed, and each content is multimedia based on the user's instructions. Playback by the playback device 20 can be performed.
  • FIG. 2 is a functional block diagram showing the configuration of the multimedia playback device.
  • the multimedia playback device 20 includes an operation unit 40, an input / output unit 44, a display output unit 46, a display control unit 48, a storage unit 80, and a game execution unit 82.
  • the multimedia playback device 20 can be realized with hardware, CPU, hard disk, RAM, ROM, drawing circuit, etc., and software can be used for data input function, data holding function, image processing function, drawing function.
  • Figure 2 shows the functional blocks that are realized by linking them. Therefore, these functional blocks can be realized in various forms depending on the combination of hardware and software.
  • the operation unit 40 gives instructions regarding any of the four directions of up, down, left, and right.
  • Direction determination unit 9 2 obtained through operation of controller 4 2 by means of an instruction
  • instruction determination unit 9 2 which obtains instructions such as content playback, playback stop, and menu screen call through operation of controller 4 2 by the user 9 4 and operations for controlling each of the input / output unit 4 4, the display output unit 4 6, the display control unit 4 8, and the game execution unit 8 2 based on the instructions acquired by the direction determination unit 9 2 and the instruction determination unit 9 4 And a control unit 9 5.
  • the input / output unit 44 is stored in a network control unit 8 6 and an optical disc 36 that process content input and various data output held by an external device via the network cable 34.
  • a disk control unit 8 8 for controlling data input and data writing to the optical disk 36, and a memory card control unit 90 for inputting / outputting data to / from the memory card 38.
  • the network control unit 86 detects an external device connected to L A N 3 5.
  • Network control unit 86, disk control unit 88, memory card control unit 90 are external device 37, 39, optical disk 36, memory card 38, content item name, content Acquire each data such as icon data and data size corresponding to the item and save it in the storage unit 80.
  • Data input through each unit constituting the input / output unit 44 is sent to the display output unit 46, the display control unit 48, the storage unit 80, and the game execution unit 82.
  • the storage unit 80 includes an external device input via the network cable 34.
  • the storage unit 80 includes a plurality of function icon data symbolizing the types of playback functions, content played back by the display output unit 46, content executed by the game execution unit 82, and storage unit 8 Data of a plurality of content icons symbolizing each content item stored in 0 and data of a semi-transparent folder icon symbolizing a content display unit are further stored. In addition, content icons that symbolize content items stored in external devices 3 7 and 3 9, optical disc 3 6 and memory card 3 8 are networked.
  • the data is acquired from the external devices 37, 39, the optical disk 36, and the memory card 38 by the control unit 86, the disk control unit 88, and the memory card control unit 90, and stored in the storage unit 80.
  • These function icons, content icons, and folder icons are used to display items on the menu screen.
  • the function icon, content icon, and folder icon may be an uncompressed image such as a bitmap image or a compressed image such as JPEG, or may be an object that is configured by pasting a texture onto a polygon. Also good. In the latter case, the position in the vertical axis direction of the screen in the virtual three-dimensional space in the screen can be changed by manipulating the Z value.
  • the display output unit 46 is a reproduction screen generation unit 96 that decodes and reproduces the encoded data of the content, and an output buffer that temporarily stores the reproduction data to be output to the television receiver 30 before the output. 1 0 0, on-screen buffer for temporarily storing image data for on-screen display display to be output to television set 30 before output, and synthesis processing unit for combining playback data and image data 9 8 including.
  • the playback screen generation unit 96 decodes encoded content data such as a movie or music received from the input / output unit 44 or the storage unit 80 based on a user instruction acquired by the operation unit 40. And store it in the output buffer 1 0 0.
  • the image data of the menu screen and the background screen generated by the display control unit 48 are stored as image data for on-screen display.
  • the synthesis processing unit 98 synthesizes the playback data stored in the output buffer 100 and the menu screen and background image data stored in the on-screen buffer 100, and converts this into an analog signal. And output to the television receiver 30.
  • the display control unit 48 is a menu management unit 10 that manages the types of playback functions and content items corresponding to the respective playback functions as menu items, and a content control unit 1 that controls playback or execution of each content.
  • 0 6 Effect processing unit that processes the operation of icons on the menu screen 1 0 8 ⁇ Image data on the menu screen
  • the menu management unit 10 4 stores the content item stored in the storage unit 80 and the content item input via the input / output unit 44, and the currently selected playback function and content.
  • the playback functions here include, for example, a still image playback function, a music playback function, a video playback function, a broadcast display function, and a game execution function, and further include various setting functions and a network device selection function.
  • the menu management unit 104 also associates the content item with the content playback function type and a plurality of folder icons.
  • the content control unit 10 6 is based on the user's instruction acquired by the operation unit 40 0, switching the playback function, starting and stopping the content playback, inputting data by the input / output unit 44, and data from the storage unit 80. Reading and controlling the processing by the game execution unit 82.
  • the menu screen generation unit 110 generates a menu screen including an arrangement in which a plurality of function icons are arranged in a horizontal direction and an arrangement in which a plurality of folder icons are arranged in a vertical direction. These two arrays intersect near the center of the screen to form a cross array.
  • the menu screen generation unit 110 highlights the function icon and the folder icon displayed at and near the crossing position of the cross array so that the icon can be distinguished from other icons. Further, the menu screen generation unit 110 obtains one of the content icons symbolizing the related contents from the storage unit 80 as a folder paste image for each of the plurality of folder icons, and the folder paste image becomes the folder icon.
  • the folder pasted image and the folder icon are superimposed and displayed so as to be included.
  • the effect processing unit 108 processes the scroll display of the function icon, the folder icon, and the arrangement of the content icons, and the highlighted function icon, the folder icon, and the content icon.
  • Icon highlighting is displayed in a format that is different from other icons, for example, display and change in colors different from other icons, enlarged display of icons, and movement to transition to that state. Appear.
  • the background generation unit 1 1 2 generates a background image in which a decoration object that is deformed in a virtual three-dimensional space configured in the screen is drawn as the background of the menu screen and the playback screen.
  • the game execution unit 82 executes a game program read from the optical disc 36 by the disk control unit 88 or a game program read from the storage unit 80.
  • the game execution unit 82 2 processes the operation of the game program based on the user instruction acquired by the operation unit 40 and sends the video and audio of the game to the display output unit 46.
  • FIG. 3 shows a configuration of a menu screen generated by the multimedia playback device 20.
  • a folder icon array with multiple function icons arranged in the horizontal direction 70 and a folder icon array with multiple folder icons 1 2 0 and the folder pasted image 1 2 2 arranged in the vertical direction 7 2 A two-dimensional array intersecting with is displayed.
  • the function icon array 70 as a symbol symbolizing the type of playback function of the multimedia playback device 20, the photo icon 5 2, music icon 5 4, video icon 5 6, game icon 6 2, setting icon 6 0 Is included.
  • the folder icon array 72 includes folder icons for sorting a plurality of contents stored in the storage unit 80 into predetermined display units and displaying them on the menu screen.
  • the menu screen composed of the function icon array 70 and the folder icon array 72 is an on-screen display and is displayed superimposed on the front of the content video.
  • the effect processing unit 1 0 8 displays the appearance of the background image in the entire area of the function icon array 70 and the folder icon array 72. Coloring may be applied to facilitate the distinction, and the appearance may be facilitated by a method such as adjusting the brightness of the content video.
  • the folder icon 1 2 0 is texture data representing a translucent case such as a real world CD or DVD
  • the folder pasted image 1 2 2 is a content icon of content related to the folder icon, for example. Of these, the first one when sorted by name. The user You may make it possible to select what to display as a folder pasted image from the computer.
  • the content icon is, for example, a thumbnail of a jacket image attached to the case.
  • the function icons located in the area where the function icon array 70 and the folder icon array 72 intersect are enlarged and displayed in a color different from that of the other function icons as shown.
  • the intersection area 7 6 is deferred at a predetermined position on the menu screen 50, and the entire function icon array 70 moves in the left-right direction in response to a user's left-right direction instruction via the operation unit 40.
  • Function located at 6 Icon color and icon size change. Therefore, the user can select a desired playback function simply by giving the left and right direction instructions, and there is no need for a decision instruction such as a mouse click operation normally performed on the PC.
  • the effect processing unit 10 8 realizes the movement of the function icons in the left-right direction by scrolling the entire area of the function icon array 70 in the left-right direction.
  • the effect processing unit 108 displays the function icons in the same color and size while moving each function icon to the left and right, but changes the color and size of only the function icons located in the intersection area 76.
  • the effect processing unit 10 8 may change elements such as brightness, saturation, and hue of the function icon as the color change, or may change the color by blinking display. As described above, since the function icons located in the intersection area 76 are displayed in a display mode different from the other function icons, the user can easily select the media.
  • the effect processing unit 10 8 does not display the folder icon array 72 when the function icon is moving in the left-right direction and no function icon is located in the intersection area 76.
  • the effect processing unit 1 0 8 expands and displays the folder icon array 7 2 so that it is extended vertically from the intersection area 76 when any function icon is positioned in the intersection area 76.
  • the folder icon array 7 2 already used may be fed into the menu screen 50. This fade-in will gradually make the unclear image that blurs the icon in the expanded folder icon array 72 2 clearer. That is The filter strength applied to the icon is gradually reduced over time. Or, if the folder icon and the image attached to the folder are objects that are constructed by pasting a texture to a polygon, the expanded Z folder is made larger or smaller from the initial value to expand the folder.
  • the icon array 72 may be displayed so that the menu screen descends or rises from the front or back of the screen vertical axis to the defined level. Alternatively, by gradually increasing the Of value of the texture from the initial value, the expanded folder icon array 72 may be displayed gradually becoming opaque from the transparent state. Furthermore, the display may be such that the folder icon array 72 expanded from the right end or the left end of the screen moves to the intersection area 76. A plurality of the above display modes may be combined.
  • the user can recognize the content corresponding to the playback function only by scrolling the function icon left and right with the intersection area 76 as the target point. Conversely, if there is an instruction in the horizontal direction with the folder icon array 7 2 displayed, the effect processing unit 1 0 8 stores the expanded folder icon array 7 2 toward the intersection area 7 6. Or display the expanded folder icon array 7 2 from the menu screen 50.
  • the fade-out method is the same as that for fade-in.
  • the attention area 77 located near the center of the menu screen 50 is an area where an icon to be operated by the user is to be displayed.
  • the menu screen generation unit 110 displays the function icon array 70 so that the intersection area 76 is positioned near the attention area 77, that is, immediately above the attention area 77.
  • the attention area 7 7 constitutes a part of the folder icon array 72.
  • each folder icon 120 and the folder pasted image 12 2 move in the vertical direction in response to the instruction.
  • the effect processing unit 1 0 8 moves the folder icon 1 2 0 and the folder pasted image 1 2 2 up and down in the area of the folder icon array 7 2. This is realized by scrolling the whole in the vertical direction.
  • the effect processor 1 0 8 displays each folder icon 1 2 0 and the folder pasted image 1 2 2 in the same size while moving them up and down, but the folder icon located in the attention area 7 7 And the folder pasted image 1 2 2 are enlarged as attention icons.
  • the F-Q processing unit 10 8 may further change elements such as brightness, saturation, hue, etc. of the icon of interest, or may display it blinking.
  • Other folder icons 1 2 0 and folder pasted images 1 2 2 are displayed in a size smaller than the icon of interest.
  • Folder information 74 related to the view of the folder icon 1220 is displayed in the vicinity of the attention area 77, that is, on the right side.
  • the menu screen generation unit 1 1 0 displays the function icon array 70 at slightly above the center in the vertical direction of the menu screen 50, and displays the folder icon array 72 in the horizontal direction of the menu screen 50. Display slightly to the left of the center.
  • the photo icon 52 represents the still image playback function, and is an icon to be selected when playing back a still image.
  • the image to be played back is a still image taken mainly by a digital camera, for example, read from a memory card 38.
  • the folder pasted image 1 2 2 displayed when the photo icon 52 is positioned in the intersection area 76 is, for example, a thumbnail of a still image. If there is no suitable image to use as a folder pasted image, the photo icon 52 may be used instead of the folder pasted image.
  • Folder information 7 4 View information such as month, year, album, 50 0 order, all photos taken as still images is displayed, and the number of still images is displayed.
  • Content information includes shooting information such as shooting date and file size. Is displayed.
  • the music icon 54 represents the music playback function, and is an icon to be selected when playing music data.
  • the music data to be reproduced is generated, for example, by encoding data read from the optical disk 36 in a specific compression format.
  • the folder pasted image 1 2 2 is, for example, a thumbnail of a jacket image of a song distributed with music data by a vendor or a thumbnail of a visual effect image generated according to a predetermined process from a part of music data. is there. If there is no appropriate image to use as a folder pasted image, the music icon 54 may be used instead of the folder pasted image.
  • Folder information 7 4 Displays the genre, album, artist, recording year, 50-sound order, view information such as all music, and the number of music data, and content information such as song name, album title, and playback time Information is displayed.
  • the moving image icon 56 symbolizes the moving image reproduction function, and is an icon to be selected when a moving image is reproduced.
  • the moving image to be played back is a recorded video shot by a digital video camera, a video read from an optical disk 36 or an external device, and is encoded in a specific compression format.
  • the folder pasted image 1 2 2 displayed when the video icon 5 6 is positioned in the crossing area 7 6 is, for example, a thumbnail of a jacket image distributed together with a moving image by a vendor, or an arbitrary image that constitutes a moving image. This is a thumbnail of the frame. The thumbnail may be a moving image. If there is no appropriate image to use as a folder pasted image, the video icon 56 may be used instead of the folder pasted image.
  • Folder information 7 4 Displays the genre, artist, video, month, year, 50th order, view information such as the order of all videos, and the number of videos. Contents information includes video name, recording date, and playback. Information such as time is displayed.
  • the game icon 62 represents a game execution function and is an icon to be selected when executing a game program.
  • the execution target is a game program stored in the storage unit 80 or a game program read from the optical disc 36.
  • the folder pasted image 1 2 2 that is displayed when the game icon 6 2 is located in the intersection area 7 6 is, for example, a thumbnail of a jacket image distributed with a game program by a vendor, an icon that symbolizes a game program, Arbitrary frames that make up the video provided in the game And thumbnails of game characters and game character images.
  • the thumbnail may be a moving image. If there is no appropriate image to use as a folder pasted image, the game icon 62 may be used instead of the folder pasted image.
  • View information such as genre, 50-sound order, all programs, and the number of programs are displayed as folder information 74, and information such as the title of the game program and program installation information is displayed as content information.
  • the setting icon 60 represents an icon of various setting functions, and is an icon to be selected when changing various settings of the multimedia playback device 20.
  • the background image generated by the background generation unit 1 1 2 is displayed in the background area 160.
  • the background generation unit 1 1 2 superimposes the decorative object 1 6 2 that deforms in accordance with a predetermined rule in the virtual three-dimensional space on the screen and the background object that is the other part to superimpose one object.
  • the background generation unit 1 1 2 may generate a background image that changes according to a predetermined condition without using the decoration object I 1 2.
  • FIG. 4 schematically shows a state in which the content of the menu screen 50 changes.
  • the effect processing unit 1 0 8 starts from the folder icon 1 2 0 in the attention area 7 7 and displays a folder superimposed on the inside. Operate the pasted image 1 2 2 to pull it out in the direction that intersects the folder icon array 7 2.
  • the folder pasted image 1 2 2 is pulled out to the right.
  • the effect processing unit 1 0 8 displays the folder pasted image 1 2 2 while moving it to the right, while maintaining the function icon array 70 and the folder icon array 7 2 while maintaining the intersection of the two. Move it slightly to the left. Only the folder pasted image may be moved to the right, and the function icon array 70 and the folder icon array 72 may not be moved.
  • FIG. 5 is a continuation of the transition of the menu screen 50 from FIG. 3, and shows the result of the user's instruction to select the folder icon 1 2 0. Function as shown in Figure 5 Because the icon array 70 has moved to the left, some of the setting icons 60 are no longer displayed on the menu screen 50. Also, the attention area 7 7 is displayed away from the center of the menu screen 50 in the left direction. The folder pasted image 1 2 2 extracted from the folder icon 1 2 0 is located on the right side of the attention area 7 7. This position becomes the second attention area 79.
  • a content icon array 78 is arranged on the right side of the folder icon array 72.
  • a content icon 1 2 4 symbolizing the content item associated with the folder icon 1 2 0 of the attention area 7 7 is acquired from the storage unit 80 and displayed on the menu screen 50.
  • the content icon array 7 8 may be expanded and displayed so that the folder pasted image 1 2 2 is drawn out in the right direction and then extended up and down from the position of the second attention area 79. It is preferable to display the content icon array 7 8 expanded in parallel with the array 7 2 so as to fade in as the folder pasted image 1 2 2 moves to the right. In the latter case, the time until the content icon array 78 is displayed can be shortened.
  • since there are few movements that occur on the menu screen 50 it is difficult to draw the user's attention, and the user's attention is easily collected in the second attention area 79.
  • Fade-in gradually makes an unclear image obtained by blurring the icons of the content icon array 78 in a state of being developed vertically.
  • the strength of the filter applied to the icon is gradually reduced over time.
  • the content icon is an object constructed by pasting a texture onto a polygon
  • the content icon array in the expanded state is created by gradually increasing or decreasing the Z value of the polygon from the initial value.
  • 7 8 may be displayed so that the menu screen is lowered or raised from the front or back of the screen vertical axis to the level where the menu screen is defined.
  • the expanded content icon array 7 8 is displayed so that it gradually becomes opaque from the transparent state. Also good.
  • the expanded content icon array 7 8 may be displayed so as to move to the right side of the folder icon array 7 2.
  • a plurality of the above display modes may be combined.
  • the folder pasted image 1 2 2 extracted from the folder icon 1 2 0 is represented as one of the content icons 1 2 4. This is because the folder pasted image 1 2 2 was originally selected from the content icon of the content associated with the folder icon 1 2 0. When any content icon 1 2 4 is selected in the content icon array 78, the corresponding content item is played.
  • the content icon 1 2 4 located in the second attention area 7 9 is also highlighted by the effect processing unit 1 0 8 as in the attention area 7 7.
  • the operation unit 4 0 obtains an up / down direction instruction from the user
  • the content icon array 7 8 is moved up and down by the effect processing unit 10 8, and the content icon 1 2 4 entering the second attention area 7 9 Is highlighted.
  • a song title and performance time are displayed as information 1 4 0 regarding the corresponding content item.
  • the effect processing unit 1 0 8 is selected by the user with the function icons 5 2 to 6 2 included in the function icon array 70 and the folder icon array 72.
  • Apply a predetermined filter to the folder icon 1 2 0 other than the selected folder icon and the folder pasted image 1 2 2 superimposed on the folder icon 1 2 0 to give a processing effect that makes the image inconspicuous. It is preferable to display the obtained image instead of the icon or image before selecting the folder icon.
  • This filter gives, for example, the effect of reducing the image size, the effect of reducing the luminance value of the pixel to make the display thinner, the effect of unfocusing by blurring, etc., and these may be used in combination. .
  • the target function icon, folder icon, and folder pasted image are displayed on the polygon. If the object is configured by pasting a texture, make the texture Of value small to make it translucent, or manipulate the Z value to move the object in the depth direction of the screen vertical axis. Also good.
  • the image obtained by applying the filter to the target function icon, folder icon, and folder pasted image is replaced with the image before applying the filter.
  • the menu screen after selecting the folder icon may be generated.
  • the icons and folder pasted images included in the function icon array 70 and the folder icon array 7 2 are those before the folder selection except for the folder icon 1 2 0 of the attention area 7 7. It is smaller than the one and is displayed lighter. By displaying in this way, an icon that is not currently selected by the user and does not need to be noticed by the user for the time being can be made inconspicuous. You can concentrate on nine. Note that the function icon (music icon 5 4 in FIG. 4) located in the intersection area 76 is currently selected, so the size may not be changed before and after the folder icon selection. Alternatively, the function icon located in the intersection area 76 and the folder icon located in the attention area 77 may be displayed in a reduced size together with other icons when the folder icon is selected.
  • buttons other than the selected one are displayed in a small and unfocused manner, so that the icons other than the selected icon are displayed by the user.
  • Visual effects such as moving to the far side of the screen vertical axis from the viewpoint can be obtained.
  • the menu screen generation unit 1 1 0 stores the image data of the menu screen. Then, the content control unit 106 controls the start of reproduction of the selected content.
  • FIG. 6 is a diagram schematically showing the transition of the screen when the content item is selected.
  • the background generation unit 1 1 2 transitions from the menu screen 50 to the content playback screen 51, the function icon array 70, the folder icon array 72, and the content icon array 78 are hidden.
  • the decorative object 1 6 2 already displayed on the menu screen 50 continues to be displayed on the content playback screen 51 as it is. This makes it possible to express a seamless sequence between the menu screen and the content playback screen. Therefore, it is difficult for the user to see the disconnection between both screens, and it is easier to concentrate on the content item being played.
  • the background generation unit 1 1 2 displays the content icon 1 2 4 of the selected content item in the lower left corner of the content playback screen 5 1 and displays information 1 4 6 of the selected content item on the right side. To do.
  • the background generation unit 112 operates the decoration object 16 2 in the background region 160 according to the parameters obtained from the output feature amount of the content being played back.
  • the background generation unit 1 1 2 sees from the user's viewpoint when transitioning from the menu screen 50 to the content reproduction screen 51. Then, the background image is changed using a video that produces a visual effect that enters the back of the three-dimensional space or a visual effect that returns to the front. For example, the size is changed by multiplying the control parameter of the decorative object 1 6 2 by a factor, or the background screen sinks in the depth direction or moves so that it rises toward you. In this way, the user is given a view of the world that moves in the virtual three-dimensional space in the back or the front, making it easy for the user to be immersed in the content.
  • the background generation unit 1 1 2 extracts the color tone of the content icon 1 2 4 corresponding to the content item that the user has decided to play, and the background image has the same color tone as that color tone. You may adjust the color of the decorative objects 1 6 2 or background objects that make up the object. Since the color tone of each content is reflected in the background image, especially when a thumbnail of a video content frame is used as a content icon, the atmosphere and content of the screen when the menu screen 50 is displayed The continuity with the atmosphere of the playback screen 5 1 can be achieved. Therefore, even when the menu screen is switched to the content playback screen, the user is easily immersed in the content.
  • the background generation unit 1 1 2 transitions the color tone of the decoration object 1 6 2 or the background object ⁇ constituting the background image when the operation unit 40 0 receives a playback instruction from the fuser. You may let them.
  • the background generation unit 1 1 2 may deform the decoration object 1 6 2 in accordance with the output feature amount of the content or the button operation of the controller 4 2 by the user during the reproduction of the content. For example, when playing back music content or video content, the decoration object ⁇ 1 6 2 is transformed using the spectrum of audio data as a parameter. Alternatively, the control parameter of the decoration object I-C 1 2 may be changed in accordance with a button operation such as determination, cancellation, or movement by the user. In this way, by using the same decorative object for the menu screen and the content playback screen, both world views can be made continuous. This makes it easy for the user to be immersed in the content even when the menu screen is switched to the content playback screen.
  • the playback screen generation unit 96 plays the content, stops, pauses, fast forwards, rewinds, etc. Fade in the operation panel image 1 4 8 to operate the content playback screen 5 1 (see Fig. 7).
  • the method used for fading in is the same as described above.
  • the decoration object 1 6 2 continues to operate according to the control parameter.
  • the menu screen is displayed superimposed on the screen during content reproduction. The menu screen displayed here reproduces the state when the content is determined to be played.
  • FIG. 8 schematically shows a state in which an option menu is displayed in accordance with a user instruction.
  • the menu screen generation unit 1 1 0 When the instruction for displaying the option menu from the fuser is acquired by the operation unit 40, the menu screen generation unit 1 1 0 generates the option menu 1 4 2.
  • the effect processor 1 0 8 displays the option menu 1 4 2 to fade in the menu screen 50. Fade-in gradually blurs an unclear image that blurs the image in the option menu 1 4 2 with items arranged vertically. In other words, the strength of the filter applied to the image is gradually reduced over time.
  • the option menu 1 4 2 is an object that is configured by pasting a texture on a polygon, the option menu 1 4 2 can be changed to a vertical screen by gradually increasing or decreasing the Z value of the polygon from the initial value.
  • the display may be such that the menu screen descends or rises from the front or back of the axis to the defined level.
  • the option menu 14 2 may be displayed so that it gradually becomes opaque from the transparent state.
  • the option menu 1 4 2 may be moved from the right or left edge of the screen to the right side of the folder icon array 7 2.
  • the effect processing unit 10 8 has a predetermined processing effect that makes the image inconspicuous with respect to the icons included in the function icon array 70, the folder icon array 72, and the content icon array 78.
  • the image obtained by applying the filter is displayed instead of the icon or image before the option menu 1 4 2 is displayed.
  • This filter provides, for example, an effect of reducing the image size, an effect of reducing the luminance value of the pixel to make the display thin, an effect of unfocusing by blurring, and the like. Good.
  • the texture Of value is reduced to make it semi-transparent You may change the state or move the object in the depth direction of the screen vertical axis by manipulating the Z value.
  • the menu screen generation unit 1 1 0 displays the second option menu 1 4 4 Generate.
  • the effect processing unit 1 0 8 makes the second option menu 1 4 4 gradually clear from the blurred state and feeds it into the menu screen 50. Display on the right side of 2.
  • the effect processing unit 10 8 applies a predetermined filter that gives a processing effect that makes the image inconspicuous with respect to the icons included in the function icon array 70, the folder icon array 72, and the content icon array 78.
  • the image obtained by applying is displayed in place of the icon or image before the second option menu 1 4 4 is displayed.
  • the option menu 1 4 2 and the second option menu 1 4 4 are on-screen displays, which are displayed superimposed on the front of the content video or the background image.
  • the effect processing unit 1 0 8 may color the entire area of the option menu 1 4 2 and the second option menu 1 4 4 to make the appearance distinction from the background image easy. The appearance may be easily distinguished by adjusting the brightness of the content video.
  • FIG. 9 is a diagram showing an example of content items and views.
  • a folder icon serves as a display unit for content items corresponding to one content playback function.
  • the view also shows how to categorize or clip content items.
  • the menu management unit 104 associates the content items with different folder icons for each genre. That is, the content items “ aaa ”, “bbb”, “ eee ” are associated with the “J_POP” folder icon, and the content items “fff”, “ggg”, “hhh” are associated with the “Country” folder icon. .
  • These folder icons are displayed on the menu screen 50 as the folder icon array 72 shown in FIG.
  • the menu management unit 104 associates the content item with a different folder icon for each album.
  • the content items ⁇ fff ”,“ ggg ”, and“ hhh ” are associated with the folder icon“: ”this time. Therefore, in this case, “ ⁇ ”, ⁇ ⁇ ⁇ ”, r r ”, rs”, “”, “:” folder icons,
  • the menu management unit 104 associates the content item with a folder icon that is different for each artist. For example, the content items “g g g” and “h h h” are now associated with the folder icon “F”. The same applies to the recording year view. In this way, the same content items ⁇ f f f ”,“ g g g ”, and“ h h h ”are associated with a common folder icon or another folder icon depending on the view.
  • the menu management unit 104 searches for content in the storage unit 80, external device 37, 39, optical disc 36, etc., and sets each content item as a folder icon according to the currently selected view. Perform the work associated with.
  • the type of view is not limited to the above.
  • FIG. 10 schematically shows a menu screen when the photograph icon 52 is moved to the intersection area 76 from the function icon array 70.
  • the photo icon 5 2 is highlighted, and the folder icon 1 3 0 and the folder pasted image 1 3 2 are superimposed on the bottom.
  • the folder pasted image 1 3 2 is a thumbnail of any of the form data associated with the folder icon 1 3 0.
  • the folder icon 1 3 0 is a horizontally long rectangle in accordance with the thumbnail of the photo data.
  • folder information 1 3 4 On the right side of the folder icon 1 3 0, the view and the number of data are displayed as folder information 1 3 4.
  • Fig. 10 “All” is selected as the view, so all the form data is associated with one folder icon 1 3 0, so only one folder icon 1 3 0 is the folder icon array. 7 Displayed as 2.
  • FIG. 11 schematically shows a process of transition of the menu screen shown in FIG.
  • the menu management unit 10 4 separates the content items according to the switched view and associates them with a plurality of folder icons 13 30.
  • the menu screen generation unit 1 1 0 has a plurality of folder icons 1 3 that are associated with the content items sorted according to the month of shooting. 0 is arranged in the vertical direction of the intersection area 7 6 to form a folder icon array 7 2.
  • One content item content icon associated with the folder icon 1 3 0 is selected and superimposed on the folder icon 1 3 0 as a folder pasted image 1 3 2.
  • the folder icon 1 3 0 and the folder pasted image 1 3 2 in the attention area 7 7 are highlighted, and the view and the number of data are displayed as folder information 1 3 4 on the right side. View information, that is, the month of shooting, is also displayed on the right side of the other folder icons 1 3 0.
  • Character information 1 3 6 relating to the view may be displayed superimposed on the folder icon 1 3 0.
  • “1 2 2 0 0 5” is displayed as the view information by the menu screen generator 1 1 0 on the folder icon 1 3 0 of the attention area 7 7. It is. This allows the user to easily recognize the nature of the content associated with the folder icon 130.
  • FIG. 12 is a flowchart showing an operation process of the multimedia playback device.
  • the network control unit 86 detects an external device on the LAN 35 via the network cable 34 (S6), and the content item from the external device and the storage unit 80 is detected. Is detected (S8).
  • the menu screen generation unit 1 1 0 acquires items such as function icons and content icons from the storage unit 80 and generates a menu screen, which is displayed on the television receiver 30 by the display output unit 46 (S 1 0 )
  • the operation unit 40 obtains the left or right direction instruction from the user (S 1 2Y)
  • the effect processing unit 108 moves the function icon in either the left or right direction according to the instruction (S 14).
  • the function icon located in the intersection area 76 is highlighted (S 16), and the folder icon and the folder pasted image corresponding to the playback function are acquired from the storage unit 80 and the external device, and these are displayed upward and downward. Expand and display (S 1 8). S 14 is skipped (S 1 2 N) while there is no left / right direction from the user.
  • the effect processing unit 108 moves the folder icon in either the up / down direction according to the instruction (S22).
  • the folder icon and the folder pasted image located in the attention area 77 immediately below the intersection area 76 are highlighted (S 24), and the folder information 140 is displayed on the right side (S 26).
  • S22 is skipped (S20N) as long as there is no instruction from the user in the vertical direction.
  • the effect processing unit 108 moves the folder pasted image from the folder icon to the right according to the instruction (S30), The content icon of the content item associated with the selected folder is expanded and displayed in the vertical direction (S32). Furthermore, the content icon located in the second attention area 79 is highlighted, and information about each content item 1 40 is displayed on the right side. (S34). Until the user's instruction for selecting a folder is obtained, the processing of S12 to S26 is repeated (S28N).
  • the processing of S12 to S34 is repeated (S36N).
  • the operation unit 40 obtains a content reproduction decision instruction (S36Y)
  • content control is performed.
  • the section 106 starts playing the content highlighted in the attention area 77 (S38).
  • the background generation unit 1 1 2 displays an effect having a visual effect that enters the back side from the user's viewpoint according to the transition from the menu screen to the content playback screen (S40).
  • the operation unit 40 obtains an instruction to call the menu screen by the user during the content reproduction (S42Y)
  • the process jumps to S10 and executes the processes of S10 to S40 again.
  • the content playback is continued (S42N).
  • the operation unit 40 obtains a content playback stop instruction by the user during the content playback
  • the content control unit 106 stops the content playback.
  • the multimedia playback device 20 of the present embodiment displays a menu image composed of an array of playback functions and an array of folder icons on the menu screen 50.
  • the function icon array 70 and the folder icon array 72 that are actually displayed are each in one row or one column, but different folder icons or content icons corresponding to different playback functions are displayed one after another by scrolling up, down, left, or right.
  • the user can select the content as if the user wants to focus on the desired content while freely moving the matrix in which many content are arranged.
  • the number of icons actually displayed on the screen is small, a complicated impression is not given to the user.
  • the unselected icon is converted into an image so that it is not visually noticeable and displayed on the menu screen. Therefore, the user can easily recognize the hierarchy and operation selected by the user in the menu screen.
  • other screen displays can be reduced and unfocused and displayed on the menu screen, allowing the user to feel the depth in the vertical axis direction of the screen. You can feel as if you are operating a menu in a virtual three-dimensional space.
  • the user can search for the content item to be reproduced from various cut-offs, and it is quicker and less stressful. Search is realized.
  • the menu screen is configured so that the intersecting region 76 is located immediately above the attention region 77.
  • the menu screen is displayed so that, for example, the intersection area 76 is located directly below or around the attention area 77. May be configured.
  • the function icon array 70 and the folder icon array 72 are displayed on the menu screen 50 in the horizontal direction and the vertical direction, respectively.
  • the function icon array 70 and the folder icon array 72 may be arranged using the depth of the screen. For example, if the function icon array 70 and folder icon array 72 are placed on a virtual spherical surface in the screen, the icons rotate along the spherical surface according to the user's up / down / left / right directions. It is good also as composition to do.
  • the icon located in the attention area is displayed so that it is closest to the screen along the vertical axis, and the other icons are displayed so that they are on the back side of the screen vertical axis.
  • menu operations can be performed in a virtual three-dimensional space. The user can plant a feeling that he is doing.
  • the multimedia playback device 20 is configured such that the intersection area 76 and the attention area 77 are located near the center of the menu screen 50.
  • the display position of the intersection area 76 and the attention area 77 can be set freely by the user.
  • the multimedia playback device 20 displays a menu screen for instructing content playback on the externally connected television receiver 30.
  • the multimedia playback device may be a portable composite device comprising a display that is integrated with the device.
  • a multimedia playback device may be realized by executing a computer program for performing various functions described in the embodiments on a personal computer.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

　メニュー画面生成部は、ディジタルコンテンツの再生項目の一覧が含まれるメニュー画面５０の画像データを生成する。再生画面生成部は、ディジタルコンテンツの再生を処理し、その再生内容に関する情報が含まれる再生画面の画像データを生成する。背景生成部は、メニュー画面および再生画面の背景として三次元空間に漂う装飾オブジェクト１６２が描かれた背景領域１６０を生成して表示する。背景生成部は、ユーザからの再生指示が取得されたとき、メニュー画面から再生画面への遷移にしたがい、ユーザの視点から見て三次元空間の奥側に入り込むような視覚的効果が得られる映像を用いて背景領域１６０を変化させる。

Description

明 細 書
マルチメディァ再生装置および背景画像表示方法
技術分野
[0001 ] この発明は、 マルチメディア再生装置および背景画像表示方法に関する。
背景技術
[0002] 近年、 いわゆるディジタル家電の多様化が進んでいる。 例えば、 テレビ番 組を録画するにも、 ハードディスクレコーダや D V D (ディジタル多目的デ イスク） レコーダ、 これらの複合機器などを利用できる。 音楽再生に関して も、 従来の C D (コンパクトディスク） の再生に加えて、 各種メモリカード やハードディスクに記録された圧縮データの再生など、 その方式は多彩にな 発明の開示
発明が解決しょうとする課題
[0003] ディジタル家電、 特に映像や音楽を再生する機器は、 複数人による同時利 用の機会が想定されるため、 多くの場合 P C (パーソナルコンピュータ） と 異なりリビングなど家庭内の共用スペースに設置される。 ディジタル家電の 操作パネルやコントローラはポタン数が少なく表示領域も狭いため、 本体以 外の領域、 例えばテレビ画面に操作内容を表示することがある。 テレビ画面 はある程度離れた位置から見るものであり、 P Cの画面上でなされるような 細かな文字列や小さなボインタの移動などはテレビ画面での表示に向かない 。 したがって、 テレビ画面を用いたディジタル家電のユーザインタフェース は、 視覚的な良好さと操作の簡単さが強く求められる。 特に非 P Cユーザに とっては、 P C上で通常用いられるような操作方法では必ずしも使い勝手が 良好に感じるとはいえない。
[0004] また、 マルチメディア再生装置では、 コンテンツによリューザに提供され る仮想世界の感覚が、 ユーザィンタフェースによリできるだけ損なわれない ようにすることが重要である。 [0005] 本発明者は以上の認識に基づき本発明をなしたもので、 その目的は、 マル チメディア再生装置によって実現される仮想空間への没入感を高める技術を 提供することにある。
課題を解決するための手段
[0006] 本発明のある態様は、 ディジタルコンテンツを再生可能な装置である。 こ の装置は、 ディジタルコンテンッの再生項目の一覧が含まれるメニュー画面 の画像データを生成するメニュー画面生成部と、 ディジタルコンテンツの再 生を処理し、 その再生内容に関する情報が含まれる再生画面の画像データを 生成する再生画面生成部と、 メニュー画面および再生画面の背景として三次 元空間に漂う装飾ォブジ Xク卜が描かれた背景画像を生成して表示する背景 生成部と、 ユーザの操作を介してコンテンツ再生に関する指示を取得する操 作部と、 を備える。 背景生成部は、 操作部によリューザからの再生指示が取 得されたとき、 メニュー画面から再生画面への遷移にしたがい、 ユーザの視 点から見て三次元空間の奥側に入り込むような視覚的効果が得られる映像を 用いて背景画像を変化させる。
[0007] ここで、 「コンテンツ」 は、 複数種の情報伝達手段を通じて再生、 表示、 または実行される動画、 静止画、 音声、 テキスト、 プログラムを含む情報内 容をいい、 特に娯楽目的の情報を含んでもよい。 なお、 「コンテンツ」 の語 は再生対象全体を抽象的に示すのに対し、 「コンテンツの項目」 というとき は、 コンテンツとしての動画データ、 静止画データ、 音声データ、 テキスト データ、 プログラムデータなど、 データファイル一つ一つの単位を示しても よい。 また 「コンテンツの項目を取得」 というときは、 コンテンツ名の一覧 やファイル名の一覧などのデータを 「コンテンツの項目」 として取得する動 作を示してもよい。 「再生」 は、 画像や音声の再生を示すほか、 プログラム の実行を示してもよい。
[0008] この態様によると、 ユーザに対して三次元的な視覚的効果を与える映像を 用いた背景画像を提供するので、 マルチメディア再生装置によって再生され る各種コンテンッによリ提供される三次元的な世界観が、 画面の遷移の際に も損なわれにくく、 ユーザの仮想空間への没入感を高めることができる。
[0009] 本発明の別の態様も、 ディジタルコンテンツを再生可能な装置である。 こ の装置は、 ディジタルコンテンッの再生項目の一覧が含まれるメニュー画面 の画像データを生成するメニュー画面生成部と、 ディジタルコンテンツの再 生を処理し、 その再生内容に関する情報が含まれる再生画面の画像データを 生成する再生画面生成部と、 三次元空間に漂う装飾オブジェク卜を含む背景 画像を生成して表示する背景生成部と、 ユーザの操作を介してコンテンツ再 生に関する指示を取得する操作部と、 を備える。 背景生成部は、 操作部によ リューザからの再生指示が取得されたとき、 ディジタルコンテンツの再生中 はそのコンテンツの出力特徴量またはユーザ操作に応じて装飾オブジェク卜 を変形させる。
[0010] 「出力特徴量」 は、 音楽コンテンツや動画コンテンツの場合は、 音声デー タのスぺクトル、 音声データの長さなどであり、 写真コンテンツや動画コン テンッ、 ゲームコンテンツの場合は、 写真データやフレームのサイズ、 空間 周波数、 画像に所定のフィルタを適用して得られる値などである。
この態様によると、 メニュー画面とコンテンツ再生画面とで同じ装飾ォブ ジェク卜を用いることで、 両者の世界観に連続性をもたせることができる。 したがって、 メニュー画面からコンテンツ再生画面への切り替えがあっても 、 ユーザがコンテンツの内容に没頭しやすくなる。
[0011 ] 本発明の別の態様は、 背景画像表示方法である。 この方法は、 ディジタル コンテンツの再生項目の一覧が含まれるメニュー画面の画像データを生成す るステップと、 ディジタルコンテンツが再生されるときにその再生内容に関 する情報が含まれる再生画面の画像データを生成するステップと、 メニュー 画面および再生画面の背景として三次元空間に漂う装飾ォブジ Iク卜が描か れた背景画像を生成して表示するステップと、 を有する。 表示するステップ は、 ユーザからのコンテンツの再生が指示されたとき、 メニュー画面から再 生画面への遷移にしたがい、 ユーザの視点から見て三次元空間の奥側に入り 込むような視覚的効果が得られる映像を用いて背景画像を変化させる。 [0012] この態様においても、 ユーザの仮想空間への没入感を高めることができる 発明の効果
[0013] 本発明によれば、 マルチメディア再生装置によって再生される各種コンテ ンッにより提供される仮想空間への没入感を高めることができる。
図面の簡単な説明
[0014] [図 1 ]マルチメディア再生システムの基本的な構成を示す図である。
[図 2]マルチメディア再生装置の構成を示す機能ブロック図である。
[図 3]マルチメディァ再生装置によリ生成されるメニュー画面の構成を示す図 である。
[図 4]メニュー画面の内容が遷移する過程を模式的に示す図である。
[図 5]メニュー画面の内容が遷移する過程を模式的に示す図である。
[図 6]コンテンッ項目を選択したときの画面の遷移を模式的に示す図である。
[図 7]コンテンッ項目を選択したときの画面の遷移を模式的に示す図である。
[図 8]メニュー画面の内容が遷移する過程を模式的に示す図である。
[図 9]コンテンツの項目と、 各項目に対応づけられるビューの一例を示す図で める。
[図 10]別の実施例においてメニュー画面の内容が遷移する過程を模式的に示 す図である。
[図 1 1 ]別の実施例においてメニュー画面の内容が遷移する過程を模式的に示 す図である。
[図 12]マルチメディア再生装置の動作過程を示すフローチヤ一卜である。 符号の説明
[0015] 2 0 マルチメディア再生装置、 4 0 操作部、 4 6 表示出力部、
4 8 表示制御部、 5 0 メニュー画面、 7 0 機能アイコン配列、 7 2 フォルダアイコン配列、 7 8 コンテンツアイコン配列、 8 0 格納部、 9 6 再生画面生成部、 1 1 0 メニュー画面生成部、 1 1 2 背景生成部、 1 2 0 フォルダアイコン、 1 2 2 フォルダ貼付 画像。
発明を実施するための最良の形態
[0016] 本発明例におけるマルチメディア再生システムは、 静止画、 動画、 音楽、 放送、 ゲームなどの複数のコンテンツを再生または実行できる複合機器であ る。 表示画面としてはテレビジョン受像機の画面を利用し、 操作手段として は画面上の表示内容とコン卜ローラの操作ボタンを用いる。 もし複数のコン テンッを P C上で再生する場合、 コンテンツの種類に応じたビューァなど個 別のプログラムを用いる必要がある。 これら個別のプログラムはそれぞれ異 なるベンダーにより制作されたものであり、 通常、 共通したインタフェース を有しておらず、 それぞれの操作方法に統一感はない。 またこれらをいわゆ るポータル画面のような共通インタフェースに統合したとしてもいわば寄せ 集めにすぎず、 また各プログラムの起動には少なからず時間を要するため、 プログラム切替における操作の快適さは得られない。
[0017] 本実施例に係るマルチメディア再生システムは、 複数のコンテンツ再生を 共通インタフェースの下に統合し、 共通の操作性をユーザに与える。 また、 メニュー画面を三次元空間を有するものと仮想し、 この三次元空間内にユー ザが入り込んで操作をしているような世界観を与える直感的なユーザインタ フェースを提供することにより、 ユーザのコンテンッ世界への没入感を向上 させる。
[0018] 図 1は、 マルチメディア再生システムの基本的な構成を示す。 マルチメデ ィァ再生システム 1 0は、 マルチメディア再生装置 2 0を中心に機能する。 マルチメディァ再生装置 2 0には、 テレビジョン受像機 3 0とコントローラ 4 2が接続される。 テレビジョン受像機 3 0は、 マルチメディア再生装置 2 0から出力される映像や音声を表示または出力する機能を有し、 マルチメデ ィァ再生装置 2 0に外部接続される。 コントローラ 4 2は、 ユーザによって 操作されることによリコンテンッ再生に関する各種の指示を取得する装置で あり、 マルチメディア再生システム 1 0の一部として機能する。 このコント ローラ 4 2は、 図示するようなゲーム用のコントローラで実現してもよいし 、 マルチメディア再生装置 2 0がもつ各種機能の制御に用いられるリモート コントローラで実現してもよい。
[0019] マルチメディア再生装置 2 0には、 各種記録媒体や各種ケーブルを通じて 情報が入力される。 例えば、 L A N 3 5に接続された外部機器 3 7、 3 9に 保持されるコンテンツがネッ卜ワークケーブル 3 4を介してマルチメディア 再生装置 2 0に入力される。 入力されたコンテンツは、 マルチメディア再生 装置 2 0に保存またはバッファされた後に再生される。
[0020] マルチメディア再生装置 2 0は、 D V Dや C Dなどの光ディスク 3 6に対 するデータの読取機能および書込機能と、 着脱可能なメモリカード 3 8に対 するデータの読出機能および書込機能と、 を有する。 マルチメディア再生装 置 2 0は、 光ディスク 3 6からは映画や音楽アルバムなどのデータを読み出 してもよいし、 メモリカード 3 8からは撮影画像や撮影映像などのデータを 読み出してもよい。
[0021 ] マルチメディア再生装置 2 0は、 テレビジョン受像機 3 0にコンテンツ再 生指示のためのメニュー画面を表示させる。 そのメニュー画面において、 マ ルチメディア再生装置 2 0に保持されるコンテンツの項目と、 外部機器 3 7 、 3 9に保持されるコンテンツの項目が表示され、 ユーザの指示に基づいて 各コンテンッをマルチメディァ再生装置 2 0によリ再生することができる。
[0022] 図 2は、 マルチメディア再生装置の構成を示す機能ブロック図である。 マ ルチメディア再生装置 2 0は、 操作部 4 0、 入出力部 4 4、 表示出力部 4 6 、 表示制御部 4 8、 格納部 8 0、 およびゲーム実行部 8 2を含む。 マルチメ ディア再生装置 2 0は、 ハードウェア的には、 C P U、 ハードディスク、 R A M、 R O M. 描画回路などの構成で実現でき、 ソフトウェア的にはデータ 入力機能、 データ保持機能、 画像処理機能、 描画機能などの諸機能を発揮す るプログラムで実現されるが、 図 2ではそれらの連携によって実現される機 能ブロックを描いている。 したがって、 これらの機能ブロックはハードゥエ ァ、 ソフトウエアの組合せによって様々な形で実現できる。
[0023] 操作部 4 0は、 上、 下、 左、 右の 4方向のいずれかに関する指示をユーザ によるコントローラ 4 2の操作を介して取得する方向決定部 9 2と、 コンテ ンッの再生、 再生停止、 メニュー画面呼び出しなどの指示をユーザによるコ ントローラ 4 2の操作を介して取得する指示決定部 9 4と、 方向決定部 9 2 および指示決定部 9 4が取得した指示に基づいて入出力部 4 4、 表示出力部 4 6、 表示制御部 4 8、 ゲーム実行部 8 2の各部を制御する操作制御部 9 5 と、 を含む。
[0024] 入出力部 4 4は、 外部機器に保持されたコンテンツの入力や各種データの 出力をネッ卜ワークケーブル 3 4を介して処理するネッ卜ワーク制御部 8 6 、 光ディスク 3 6に格納されたデータの入力や光ディスク 3 6へのデータ書 込を制御するディスク制御部 8 8、 およびメモリカード 3 8との間でデータ を入出力するメモリカード制御部 9 0を含む。 ネッ卜ワーク制御部 8 6は、 L A N 3 5に接続された外部機器を検出する。 ネットワーク制御部 8 6、 デ イスク制御部 8 8、 メモリカード制御部 9 0は、 外部機器 3 7、 3 9、 光デ イスク 3 6、 メモリカード 3 8に保持されるコンテンツの項目名、 コンテン ッ項目に対応するアイコンのデータ、 データサイズなどの各情報を取得して 格納部 8 0へ保存する。 入出力部 4 4を構成する各部を介して入力されたデ ータは、 表示出力部 4 6、 表示制御部 4 8、 格納部 8 0、 およびゲーム実行 部 8 2へ送られる。
[0025] 格納部 8 0には、 ネットワークケーブル 3 4を介して入力された外部機器
3 7、 3 9のコンテンツ、 光ディスク 3 6から読み込まれた音楽や映画など のコンテンツ、 メモリカード 3 8から読み込まれた静止画や動画などのコン テンッが格納される。 格納部 8 0には、 再生機能の種類を象徴する複数の機 能アイコンのデータと、 表示出力部 4 6により再生されるコンテンツゃゲー ム実行部 8 2により実行されるコンテンツと、 格納部 8 0に格納された各コ ンテンッの項目を象徴する複数のコンテンツァイコンのデータと、 コンテン ッの表示単位を象徴する半透明のフォルダアイコンのデータがさらに格納さ れる。 また、 外部機器 3 7、 3 9、 光ディスク 3 6、 メモリカード 3 8に格 納されたコンテンッの項目を象徴するコンテンツァイコンがネッ卜ワーク制 御部 8 6、 ディスク制御部 8 8、 メモリカード制御部 9 0により外部機器 3 7、 3 9、 光ディスク 3 6、 メモリカード 3 8から取得され、 格納部 8 0に 保存される。 これら機能アイコン、 コンテンツアイコンおよびフォルダアイ コンは、 メニュー画面への項目表示に用いられる。
[0026] 機能アイコン、 コンテンツアイコン、 フォルダアイコンは、 ビットマップ 画像などの未圧縮画像や J P E Gなどの圧縮画像であってもよいし、 ポリゴ ンにテクスチャを貼り付けて構成されたォブジェク卜であってもよい。 後者 の場合、 Z値を操作することによって画面内の仮想的な三次元空間における 画面垂直軸方向の位置を変えることができる。
[0027] 表示出力部 4 6は、 コンテンツの符号化データを復号して再生する再生画 面生成部 9 6、 テレビジョン受像機 3 0へ出力する再生データをその出力前 に一時蓄積する出力バッファ 1 0 0、 テレビジョン受像機 3 0へ出力するォ ンスクリーンディスプレイ表示用の画像データを出力前に一時蓄積するオン スクリーンバッファ 1 0 2、 および再生データと画像データを合成する合成 処理部 9 8を含む。
[0028] 再生画面生成部 9 6は、 操作部 4 0が取得したユーザの指示に基づき、 入 出力部 4 4または格納部 8 0から受け取る映画、 音楽などの符号化されたコ ンテンッデータを復号して出力バッファ 1 0 0へ格納する。 オンスクリーン バッファ 1 0 2には、 例えば表示制御部 4 8で生成されたメニュー画面と背 景画面の画像データがオンスクリーン表示用の画像データとして格納される 。 合成処理部 9 8は、 出力バッファ 1 0 0に格納された再生データとオンス クリーンバッファ 1 0 2に格納されたメニュー画面および背景画像の画像デ 一タとを合成し、 これをアナログ信号に変換してテレビジョン受像機 3 0へ 出力する。
[0029] 表示制御部 4 8は、 再生機能の種類と各再生機能に対応するコンテンツの 項目をメニュー項目として管理するメニュー管理部 1 0 4、 各コンテンツの 再生または実行を制御するコンテンツ制御部 1 0 6、 メニュー画面における アイコンの動作を処理するエフェク卜処理部 1 0 8、 メニュー画面の画像デ ータを生成するメニュー画面生成部 1 1 0、 およびメニュー画面や再生画面 の背景に表示する背景画像を生成する背景生成部 1 1 2を含む。
[0030] メニュー管理部 1 0 4は、 格納部 8 0に保存されたコンテンツの項目と入 出力部 4 4経由で入力されるコンテンツの項目を記憶するとともに、 現在選 択中の再生機能およびコンテンツを記憶する。 ここでいう再生機能には、 例 えば静止画再生機能、 音楽再生機能、 動画再生機能、 放送表示機能、 ゲーム 実行機能があり、 さらに各種設定機能とネッ卜ワーク装置選択機能も含まれ る。 また、 メニュー管理部 1 0 4は、 コンテンツの項目を、 コンテンツ再生 機能の種類と複数のフォルダアイコンに関連づけする作業をする。 コンテン ッ制御部 1 0 6は、 操作部 4 0が取得したユーザの指示に基づき、 再生機能 の切替、 コンテンツの再生開始および停止、 入出力部 4 4によるデータ入力 、 格納部 8 0からのデータ読み出し、 ゲーム実行部 8 2による処理を制御す る。
[0031] メニュー画面生成部 1 1 0は、 複数の機能アイコンが水平方向に並んだ配 列と、 複数のフォルダアイコンが垂直方向に並んだ配列で構成されるメニュ 一画面を生成する。 これら二つの配列は画面中央近傍で交差して十字配列を 形成する。 メニュー画面生成部 1 1 0は、 十字配列の交差位置およびその近 傍に表示される機能アイコンとフォルダアイコンを他のアイコンと外観上区 別できるよう強調表示する。 さらに、 メニュー画面生成部 1 1 0は、 複数の フォルダアイコンそれぞれについて、 関連するコンテンツを象徴するコンテ ンッアイコンのひとつをフォルダ貼付画像として格納部 8 0から取得し、 フ オルダ貼付画像がフォルダアイコンに内包されるようにフォルダ貼付画像と フォルダアイコンとを重畳表示する。
[0032] エフェクト処理部 1 0 8は、 機能アイコン、 フォルダアイコン、 コンテン ッアイコンの配列のスクロール表示、 注目する機能アイコン、 フォルダアイ コンおよびコンテンツァイコンの強調表示を処理する。 アイコンの強調表示 は、 例えば他のアイコンと異なる色彩による表示とその変化、 アイコンの拡 大表示とその状態へ遷移する動きなど、 他のアイコンと異なる形式により表 現される。 背景生成部 1 1 2は、 メニュー画面と再生画面の背景として、 画 面内に構成される仮想的な三次元空間内で変形する装飾オブジェク卜が描画 された背景画像を生成する。
[0033] ゲーム実行部 8 2は、 ディスク制御部 8 8によって光ディスク 3 6から読 み出されるゲームプログラムまたは格納部 8 0から読み出されるゲームプロ グラムを実行する。 ゲーム実行部 8 2は、 操作部 4 0により取得されるユー ザの指示に基づいてゲームプログラムの動作を処理するとともに、 ゲームの 映像および音声を表示出力部 4 6へ送る。
[0034] 図 3は、 マルチメディア再生装置 2 0により生成されるメニュー画面の構 成を示す。 メニュー画面 5 0において、 水平方向に複数の機能アイコンが並 んだ機能アイコン配列 7 0と、 垂直方向に複数のフォルダアイコン 1 2 0お よびフォルダ貼付画像 1 2 2が並んだフォルダアイコン配列 7 2とが交差す る二次元配列が表示される。 機能アイコン配列 7 0には、 マルチメディア再 生装置 2 0の再生機能の種類を象徴するマークとして、 写真アイコン 5 2、 音楽アイコン 5 4、 動画アイコン 5 6、 ゲームアイコン 6 2、 設定アイコン 6 0が含まれる。 フォルダアイコン配列 7 2には、 格納部 8 0に格納された 複数のコンテンッを所定の表示単位に分別してメニュー画面に表示するため のフォルダアイコンが含まれる。 機能アイコン配列 7 0およびフォルダアイ コン配列 7 2で構成されるメニュー画面はオンスクリーン表示であり、 コン テンッ映像の前面に重ね合わされて表示される。 背景領域 1 6 0に現在再生 中のコンテンツ映像が表示される場合、 エフェク卜処理部 1 0 8は機能アイ コン配列 7 0とフォルダアイコン配列 7 2の領域全体に、 背景画像との外観 上の区別を容易にするための彩色を施してもよく、 またコンテンツ映像の明 るさを調整するなどの方法により外観上の区別を容易にしてもよい。
[0035] フォルダアイコン 1 2 0は、 現実世界の C Dや D V Dなどの半透明のケー スを表現したテクスチャデータであり、 フォルダ貼付画像 1 2 2は、 例えば フォルダアイコンに関連するコンテンツのコンテンツァイコンのうち、 名前 順にソートしたときに一番先頭にあるものである。 ユーザがコンテンツァイ コンの中からフォルダ貼付画像として表示するものを選択できるようにして もよい。 コンテンツアイコンは、 例えばケースに添付されるジャケット画像 のサムネイルである。
[0036] 機能アイコン配列 7 0とフォルダアイコン配列 7 2が交差する領域 （交差 領域 7 6 ) に位置する機能アイコンは、 図示するように他の機能アイコンと 異なる色彩にて拡大表示される。 交差領域 7 6は、 メニュー画面 5 0の所定 位置に据え置かれ、 操作部 4 0を介したユーザの左右方向の指示に応じて機 能アイコン配列 7 0全体が左右方向に移動し、 交差領域 7 6に位置した機能 アイコンの色彩とアイコンサイズが変化する。 したがって、 ユーザは左右の 方向指示をするだけで所望の再生機能を選択でき、 P C上で通常行われるマ ウスのクリック操作のような決定指示は不要である。
[0037] エフェク卜処理部 1 0 8は、 機能アイコンの左右方向の移動を、 機能アイ コン配列 7 0の領域全体を左右方向にスクロールすることによつて実現する 。 エフェクト処理部 1 0 8は、 各機能アイコンを左右に移動させる間はこれ らを同色、 同サイズで表示するが、 交差領域 7 6に位置する機能アイコンだ けその色彩とサイズを変化させる。 エフェク卜処理部 1 0 8は、 色彩の変化 として、 機能アイコンの明度、 彩度、 色相などの要素を変化させてもよいし 、 点滅表示することにより色彩を変化させてもよい。 このように、 交差領域 7 6に位置する機能アイコンをその他の機能アイコンと異なる表示態様で表 示するため、 ユーザは容易にメディアを選択できる。
[0038] エフェク卜処理部 1 0 8は、 機能アイコンが左右方向へ移動中であって交 差領域 7 6にいずれの機能アイコンも位置していないときにはフォルダアイ コン配列 7 2を表示させない。 エフェク卜処理部 1 0 8は、 いずれかの機能 アイコンが交差領域 7 6で位置したときに、 フォルダアイコン配列 7 2を交 差領域 7 6から上下方向に繰り出すように展開表示するか、 または展開済み のフォルダアイコン配列 7 2をメニュー画面 5 0にフエ一ドインさせてもよ い。 このフェードインは、 展開させた状態のフォルダアイコン配列 7 2のァ イコンにブラーをかけた不明瞭な画像を、 次第に明瞭にさせていく。 つまり 、 アイコンに適用するフィルタの強度を時間経過に応じて徐々に減少させて いく。 または、 フォルダアイコンとフォルダ添付画像が、 ポリゴンにテクス チヤを貼り付けて構成されたォブジェク卜である場合は、 ポリゴンの Z値を 初期値から次第に大きくまたは小さくすることによって、 展開させた状態の フォルダアイコン配列 7 2が画面垂直軸の手前または奥の方向からメニュー 画面が定義されているレベルまで下降または上昇していくような表示をして もよい。 または、 テクスチャの Of値を初期値から次第に大きくしていくこと によって、 展開させた状態のフォルダアイコン配列 7 2が透明な状態から徐 々に不透明になっていくような表示をしてもよい。 さらには、 画面の右端や 左端から展開させた状態のフォルダアイコン配列 7 2が交差領域 7 6まで移 動してくるような表示をしてもよい。 上記の表示態様を複数組み合わせても よい。
[0039] ユーザは、 交差領域 7 6を目標地点にして機能アイコンを左右にスクロー ル操作するだけでその再生機能に対応するコンテンツを認識することができ る。 逆に、 フォルダアイコン配列 7 2が表示された状態で左右方向の指示が あった場合、 エフェク卜処理部 1 0 8は展開されていたフォルダアイコン配 列 7 2を交差領域 7 6に向かって収納するような動きで表示するか、 または 展開されたフォルダアイコン配列 7 2をメニュー画面 5 0からフエ一ドアゥ 卜させる。 フェードアウトの方法は、 フェードインの場合と同様である。
[0040] メニュー画面 5 0の中央近傍に位置する注目領域 7 7は、 ユーザによる操 作の対象となるアイコンが表示されるべき領域である。 メニュー画面生成部 1 1 0は、 この注目領域 7 7の近傍位置、 すなわち注目領域 7 7の直上に交 差領域 7 6が位置するように機能アイコン配列 7 0を表示する。 注目領域 7 7はフォルダアイコン配列 7 2の一部を構成する。
[0041] 操作部 4 0がユーザによる上下方向の指示を取得する間は、 その指示に応 じて各フォルダアイコン 1 2 0およびフォルダ貼付画像 1 2 2が上下方向に 移動する。 エフェク卜処理部 1 0 8は、 フォルダアイコン 1 2 0およびフォ ルダ貼付画像 1 2 2の上下方向の移動を、 フォルダアイコン配列 7 2の領域 全体を上下方向にスクロールさせることにより実現する。
[0042] エフェクト処理部 1 0 8は、 各フォルダアイコン 1 2 0およびフォルダ貼 付画像 1 2 2を上下に移動させる間はこれらを同サイズで表示するが、 注目 領域 7 7に位置するフォルダアイコンとフォルダ貼付画像 1 2 2だけは注目 アイコンとしてサイズを拡大させる。 エフ Iク卜処理部 1 0 8は、 注目アイ コンの明度、 彩度、 色相などの要素をさらに変化させてもよいし、 点滅表示 してもよい。 その他のフォルダアイコン 1 2 0およびフォルダ貼付画像 1 2 2は、 注目アイコンより小さいサイズで表示される。 注目領域 7 7の近傍位 置、 すなわち右方には、 フォルダアイコン 1 2 0のビューに関するフォルダ 情報 7 4が表示される。
[0043] メニュー画面生成部 1 1 0は、 機能アイコン配列 7 0をメニュー画面 5 0 の垂直方向における中央よりやや上方に表示するとともに、 フォルダアイコ ン配列 7 2をメニュー画面 5 0の水平方向における中央よりやや左方に表示 する。
[0044] 写真アイコン 5 2は、 静止画再生機能を象徴し、 静止画を再生する場合に 選択されるべきアイコンである。 再生の対象となる画像は、 主にディジタル カメラで撮影された静止画であり、 例えばメモリカード 3 8から読み込まれ る。 写真アイコン 5 2が交差領域 7 6に位置したときに展開表示されるフォ ルダ貼付画像 1 2 2は、 例えば静止画のサムネイルである。 フォルダ貼付画 像として用いる適当な画像が存在しない場合は、 写真アイコン 5 2をフオル ダ貼付画像の代わリに使用してもよい。 フォルダ情報 7 4として静止画を撮 影した月、 年、 アルバム、 5 0音順、 すべての写真といったビュー情報ゃ静 止画の枚数が表示され、 コンテンツ情報として撮影日やファイルサイズなど の撮影情報が表示される。
[0045] 音楽アイコン 5 4は、 音楽再生機能を象徴し、 音楽データを再生する場合 に選択されるべきアイコンである。 再生の対象となる音楽データは、 例えば 光ディスク 3 6から読み込まれたデータが特定の圧縮形式で符号化されて生 成される。 音楽アイコン 5 4が交差領域 7 6に位置したときに展開表示され るフォルダ貼付画像 1 2 2は、 例えばベンダーにより音楽データとともに配 布される楽曲のジャケッ卜画像のサムネイルや、 音楽データの一部から所定 の処理にしたがって生成されるビジュアルエフェク卜画像のサムネイルなど である。 フォルダ貼付画像として用いる適当な画像が存在しない場合は、 音 楽アイコン 5 4をフォルダ貼付画像の代わリに使用してもよい。 フォルダ情 報 7 4としてジャンル、 アルバム、 アーティスト、 収録年、 5 0音順、 すべ ての音楽といったビュ一情報や音楽データの数が表示され、 コンテンツ情報 として楽曲名、 アルバムタイトル、 再生時間などの情報が表示される。
[0046] 動画アイコン 5 6は、 動画再生機能を象徴し、 動画像を再生する場合に選 択されるべきアイコンである。 再生の対象となる動画像は、 ディジタルビデ ォカメラで撮影された録画映像、 光ディスク 3 6や外部機器から読み出され た映像であり、 特定の圧縮形式で符号化されている。 動画アイコン 5 6が交 差領域 7 6に位置したときに展開表示されるフォルダ貼付画像 1 2 2は、 例 えばベンダーにより動画像とともに配布されるジャケッ卜画像のサムネイル や、 動画像を構成する任意のフレームのサムネイルなどである。 サムネイル は動画像であってもよい。 フォルダ貼付画像として用いる適当な画像が存在 しない場合は、 動画アイコン 5 6をフォルダ貼付画像の代わりに使用しても よい。 フォルダ情報 7 4としてジャンル、 アーティスト、 動画像を撮影した 月、 年、 5 0音順、 すべての映像といったビュー情報や動画像の数が表示さ れ、 コンテンツ情報として動画像名、 記録日、 再生時間などの情報が表示さ れる。
[0047] ゲームアイコン 6 2は、 ゲーム実行機能を象徴し、 ゲームプログラムを実 行する場合に選択されるべきアイコンである。 実行の対象は、 格納部 8 0に 格納されたゲームプログラムまたは光ディスク 3 6から読み込まれたゲーム プログラムである。 ゲームアイコン 6 2が交差領域 7 6に位置したときに展 開表示されるフォルダ貼付画像 1 2 2は、 例えばベンダーによりゲームプロ グラムとともに配布されるジャケッ卜画像のサムネイル、 ゲームプログラム を象徴するアイコン、 ゲーム内で提供される動画像を構成する任意のフレー ムのサムネイル、 ゲームキャラクタ画像のサムネイルなどである。 サムネィ ルは動画像であってもよい。 フォルダ貼付画像として用いる適当な画像が存 在しない場合は、 ゲームアイコン 6 2をフォルダ貼付画像の代わリに使用し てもよい。 フォルダ情報 7 4としてジャンル、 5 0音順、 すべてのプロダラ ムといったビュー情報やプログラムの数が表示され、 コンテンツ情報として ゲームプログラムのタイトル、 プログラムのインストール曰などの情報が表 示される。
[0048] 設定アイコン 6 0は、 各種設定機能を象徴し、 マルチメディア再生装置 2 0の各種設定を変更する場合に選択されるべきアイコンである。
[0049] メニュー画面の背景には、 背景生成部 1 1 2により生成された背景画像を 背景領域 1 6 0に表示する。 背景生成部 1 1 2は、 画面内の仮想的な三次元 空間内で所定の法則にしたがって変形する装飾オブジェク卜 1 6 2と、 それ 以外の部分である背景オブジェク卜とを重ね合わせてひとつの背景画像を生 成する。 背景生成部 1 1 2は、 装飾ォブジ Iク卜 1 6 2を使用せずに所定の 条件にしたがって変化する背景画像を生成してもよい。
[0050] 図 4は、 メニュー画面 5 0の内容が遷移する状態を模式的に示す。 図 3の 状態から、 操作部 4 0がユーザによる選択指示を取得すると、 エフェクト処 理部 1 0 8は、 注目領域 7 7にあるフォルダアイコン 1 2 0から、 その内部 に重畳表示されているフォルダ貼付画像 1 2 2を、 フォルダアイコン配列 7 2と交差する方向に引き出すように動作させる。 図 4では、 フォルダ貼付画 像 1 2 2は右方向に引き出されている。 エフェク卜処理部 1 0 8は、 フオル ダ貼付画像 1 2 2を右方向に移動させて表示する一方で、 機能アイコン配列 7 0とフォルダアイコン配列 7 2とを、 両者の交差を維持した状態でわずか に左方向に移動させる。 フォルダ貼付画像のみを右方向に移動させて、 機能 アイコン配列 7 0とフォルダアイコン配列 7 2は移動させないようにしても よい。
[0051] 図 5は、 図 3からのメニュー画面 5 0の遷移の続きであり、 ユーザによる フォルダアイコン 1 2 0の選択指示の結果を示す。 図 5に示すように、 機能 アイコン配列 7 0が左方向に移動したために、 設定アイコン 6 0の一部がメ ニュー画面 5 0に表示されなくなつている。 また、 注目領域 7 7もメニュー 画面 5 0の中心から左方向に遠ざかって表示されている。 フォルダアイコン 1 2 0から引き出されたフォルダ貼付画像 1 2 2は、 注目領域 7 7の右側に 位置する。 この位置は、 新たに第 2注目領域 7 9となる。
[0052] フォルダアイコン配列 7 2の右側には、 コンテンツァイコン配列 7 8が配 置される。 注目領域 7 7のフォルダアイコン 1 2 0に関連づけされているコ ンテンッ項目を象徴するコンテンツアイコン 1 2 4が、 格納部 8 0から取得 されてメニュー画面 5 0に表示される。 コンテンツアイコン配列 7 8は、 フ オルダ貼付画像 1 2 2が右方向に引き出された後に、 第 2注目領域 7 9の位 置から上下方向に繰り出すように展開表示されてもよいが、 フォルダアイコ ン配列 7 2と平行に展開済みのコンテンツァイコン配列 7 8を、 フォルダ貼 付画像 1 2 2の右方向への移動とともにフエ一ドインするように表示させる ほうが好ましい。 後者であれば、 コンテンツアイコン配列 7 8が表示される までの時間を短縮することができる。 また、 メニュー画面 5 0に生じる動き が少ないためユーザの注意を引きにくく、 ユーザの注意を第 2注目領域 7 9 に集めやすくなる。
[0053] フェードインは、 上下方向に展開させた状態のコンテンツアイコン配列 7 8のアイコンにブラーをかけた不明瞭な画像を、 次第に明瞭にさせていく。 つまリ、 アイコンに適用するフィルタの強度を時間経過に応じて徐々に減少 させていく。 または、 コンテンツアイコンがポリゴンにテクスチャを貼り付 けて構成されたォブジェク卜である場合は、 ポリゴンの Z値を初期値から次 第に大きくまたは小さくすることによって、 展開させた状態のコンテンツァ ィコン配列 7 8が画面垂直軸の手前または奥の方向からメニュー画面が定義 されているレベルまで下降または上昇していくような表示をしてもよい。 ま たは、 テクスチャのひ値を初期値から次第に大きくしていくことによって、 展開させた状態のコンテンツアイコン配列 7 8が透明な状態から徐々に不透 明になっていくような表示をしてもよい。 さらには、 画面の右端や左端から 展開させた状態のコンテンツアイコン配列 7 8がフォルダアイコン配列 7 2 の右側まで移動してくるような表示をしてもよい。 上記の表示態様を複数組 み合わせてもよい。
[0054] 図 5の段階では、 フォルダアイコン 1 2 0から引き出されたフォルダ貼付 画像 1 2 2は、 コンテンツアイコン 1 2 4のひとつとして表される。 フオル ダ貼付画像 1 2 2は、 もともとフォルダアイコン 1 2 0に関連づけられたコ ンテンッのコンテンツアイコンから選択されたものだからである。 コンテン ッアイコン配列 7 8においていずれかのコンテンツアイコン 1 2 4を選択す ると、 対応するコンテンツ項目が再生される。
[0055] 第 2注目領域 7 9に位置するコンテンツアイコン 1 2 4も、 注目領域 7 7 と同じように、 エフェク卜処理部 1 0 8により強調表示される。 操作部 4 0 がユーザによる上下方向指示を取得すると、 エフェク卜処理部 1 0 8によつ てコンテンツアイコン配列 7 8が上下に移動し、 第 2注目領域 7 9に入った コンテンツアイコン 1 2 4が強調表示される。 さらに、 コンテンツアイコン 1 2 4の右側には、 対応するコンテンツの項目に関する情報 1 4 0として、 例えば曲名や演奏時間が表示される。
[0056] ユーザの選択指示に応じてフォルダアイコン 1 2 0からフォルダ貼付画像
1 2 2が引き出された後、 またはその間に、 エフェク卜処理部 1 0 8は、 機 能アイコン配列 7 0およびフォルダアイコン配列 7 2に含まれる機能アイコ ン 5 2〜6 2、 ユーザにより選択されたフォルダアイコン以外のフォルダァ イコン 1 2 0、 およびフォルダアイコン 1 2 0と重畳表示されているフオル ダ貼付画像 1 2 2に対して、 画像を目立たなくする処理効果を与える所定の フィルタを適用して得られた画像を、 フォルダアイコン選択前のアイコンま たは画像の代わりに表示させることが好ましい。 このフィルタは、 例えば画 像サイズを縮小する効果、 画素の輝度値を小さくして表示を薄くする効果、 ブラーをかけてアンフォーカスさせる効果などを与えるものであり、 これら を組み合わせて用いてもよい。 フィルタを適用する代わりに、 対象となる機 能アイコン、 フォルダアイコン、 およびフォルダ貼付画像が、 ポリゴンにテ クスチヤを貼り付けて構成されたォブジェク卜である場合は、 テクスチャの Of値を小さくして半透明状態にしたり、 Z値を操作してオブジェク卜を画面 垂直軸の奥方向に移動させたりしてもよい。
[0057] 画像を目立たなくするフィルタを適用する際、 対象となる機能アイコン、 フォルダアイコン、 およびフォルダ貼付画像に対してそれぞれフィルタを適 用して得られた画像を、 フィルタ適用前の画像と置換することによって、 フ オルダアイコン選択後のメニュー画面を生成してもよい。 または、 フォルダ アイコン選択前にメニュー画面生成部 1 1 0により生成されたメニュー画面 5 0全体に対して画像を目立たなくするフィルタを適用して得られたものを
、 フォルダアイコン選択後のメニュー画面として使用してもよい。
[0058] 図 5の例では、 機能アイコン配列 7 0とフォルダアイコン配列 7 2に含ま れるアイコンおよびフォルダ貼付画像は、 注目領域 7 7のフォルダアイコン 1 2 0以外は、 フォルダ選択前である図 4のものよりもサイズが小さく、 か つ薄く表示されている。 このような表示をすることによって、 現時点でユー ザにより選択されておらず、 さしあたってユーザにより注目される必要のな いアイコンを目立たなくさせることができ、 したがってユーザの注目を第 2 注目領域 7 9に集中させることができる。 なお、 交差領域 7 6に位置する機 能アイコン （図 4では音楽アイコン 5 4 ) が現在選択中であることを示すた め、 フォルダアイコン選択の前後でサイズを変更しないようにしてもよい。 または、 交差領域 7 6に位置する機能アイコンと、 注目領域 7 7に位置する フォルダアイコンとを、 フォルダアイコンが選択されたときに他のアイコン とともにサイズを縮小して表示してもよい。
[0059] また、 このようにユーザによる選択指示がなされるときに、 選択されたも の以外のアイコンを小さくかつアンフォーカスして表示することで、 選択さ れたアイコン以外のアイコンが、 ユーザの視点から見て画面垂直軸の奥側に 移動するような視覚的効果を得ることができる。 こうすることで、 メニュー 画面 5 0内に仮想的に構成された三次元空間内でメニュー操作をしているよ うな感覚をユーザに与えることができ、 ユーザの没入感を高めることができ る。
[0060] 第 2注目領域 7 9に表示されたコンテンツアイコン 1 2 4に対応するコン テンッの再生決定を操作部 4 0が取得すると、 メニュー画面生成部 1 1 0は メニュー画面の画像データを非表示にし、 コンテンツ制御部 1 0 6は選択さ れたコンテンツの再生を開始制御する。
[0061 ] 図 6は、 コンテンツ項目を選択したときの画面の遷移を模式的に示す図で ある。 背景生成部 1 1 2は、 メニュー画面 5 0からコンテンツ再生画面 5 1 へと遷移するとき、 機能アイコン配列 7 0、 フォルダアイコン配列 7 2、 コ ンテンツァイコン配列 7 8を非表示とするが、 メニュー画面 5 0で既に表示 されていた装飾オブジェク卜 1 6 2についてはそのままコンテンツ再生画面 5 1でも表示し続ける。 これによつて、 メニュー画面とコンテンツ再生画面 との間でシームレスに連続するさまを表現できる。 したがって、 ユーザは両 画面の間の断絶を看取しにくくなリ、 再生されるコンテンツ項目に集中しや すくなる。 背景生成部 1 1 2は、 選択されたコンテンツ項目のコンテンツァ イコン 1 2 4をコンテンツ再生画面 5 1の左下隅に表示し、 その右側には、 選択されたコンテンツ項目の情報 1 4 6を表示する。 コンテンツの再生が開 始されると、 背景生成部 1 1 2は、 再生中のコンテンツの出力特徴量などか ら得られるパラメータにしたがって、 装飾オブジェクト 1 6 2を背景領域 1 6 0で動作させる。
[0062] 操作部 4 0がユーザによるコンテンツの再生決定を取得したとき、 背景生 成部 1 1 2は、 メニュー画面 5 0からコンテンツ再生画面 5 1へと遷移する 際に、 ユーザの視点から見て三次元空間の奥に入リ込むような視覚的効果ま たは手前側に戻るような視覚的効果が得られる映像を用いて背景画像を変化 させる。 例えば、 装飾オブジェク卜 1 6 2の制御パラメータに係数を乗じる ことによってサイズを変更させたり、 背景画面が奥行方向に沈んだりまたは 手前に盛り上がるような動きをさせる。 こうすることで、 ユーザが仮想的な 三次元空間内を奥または手前側に移動するような世界観を与えて、 ユーザが コンテンツの内容に没頭しやすくする。 [0063] また、 背景生成部 1 1 2は、 ユーザが再生を決定したコンテンツの項目に 対応するコンテンツアイコン 1 2 4の色調を抽出し、 その色調と同系統の色 調となるように背景画像を構成する装飾オブジェク卜 1 6 2または背景ォブ ジェク卜の色彩を調整してもよい。 コンテンツ毎の色調が背景画像に反映さ れるため、 特に動画コンテンッのフレームのサムネイルをコンテンツアイコ ンに利用していた場合などに、 メニュー画面 5 0が表示されているときの画 面の雰囲気とコンテンツ再生画面 5 1の雰囲気との連続性を出すことができ る。 したがって、 メニュー画面からコンテンツ再生画面への切り替えがあつ ても、 ユーザがコンテンツの内容に没頭しやすくなる。
[0064] さらに、 背景生成部 1 1 2は、 操作部 4 0によリューザからの再生指示が 取得されたとき、 背景画像を構成する装飾オブジェク卜 1 6 2または背景ォ ブジェク卜の色調を遷移させてもよい。
[0065] 背景生成部 1 1 2は、 コンテンツの再生中にそのコンテンツの出力特徴量 や、 ユーザによるコントローラ 4 2のポタン操作に応じて装飾オブジェク卜 1 6 2を変形させてもよい。 例えば、 音楽コンテンツや動画コンテンツを再 生する場合は、 音声データのスぺクトルをパラメータとして装飾オブジェク 卜 1 6 2を変形させる。 または、 ユーザによる決定、 キャンセル、 移動など のポタン操作に応じて装飾ォブジ Iク卜 1 6 2の制御パラメータを変化させ てもよい。 このように、 メニュー画面とコンテンツ再生画面とで同じ装飾ォ ブジェク卜を用いることで、 両者の世界観に連続性をもたせることができる 。 これにより、 メニュー画面からコンテンツ再生画面への切り替えがあって も、 ユーザがコンテンツの内容に没頭しやすくなる。
[0066] コンテンツ再生中に、 操作部 4 0によリューザからの操作パネル表示指示 が取得されると、 再生画面生成部 9 6は、 コンテンツの再生、 停止、 一時停 止、 早送り、 巻き戻しなどを操作するための操作パネル画像 1 4 8を、 コン テンッ再生画面 5 1にフェードインさせる （図 7参照） 。 フェードインの際 に用いる手法は上述したのと同様である。 このときも、 装飾オブジェクト 1 6 2は制御パラメータにしたがって動作を続ける。 [0067] コンテンツ再生中に、 ユーザが操作部 4 0を介してメニュー画面の呼び出 しを指示すると、 コンテンツ再生中の画面にメニュー画面が重ね合わされて 表示される。 ここで表示されるメニュー画面には、 コンテンツが再生決定さ れたときの状態が再現される。
[0068] 図 8は、 ユーザの指示に応じてオプションメニューを表示させた状態を模 式的に示す。 操作部 4 0によリューザからのオプションメニュー表示の指示 が取得されると、 メニュー画面生成部 1 1 0はオプションメニュー 1 4 2を 生成する。 エフェク卜処理部 1 0 8は、 オプションメニュー 1 4 2をメニュ 一画面 5 0にフェードインするように表示する。 フェードインは、 上下方向 に項目を配置したオプションメニュー 1 4 2の画像にブラーをかけた不明瞭 な画像を、 次第に明瞭にさせていく。 つまり、 画像に適用するフィルタの強 度を時間経過に応じて徐々に減少させていく。 または、 オプションメニュー 1 4 2がポリゴンにテクスチャを貼り付けて構成されたォブジェク卜である 場合は、 ポリゴンの Z値を初期値から次第に大きくまたは小さくすることに よって、 オプションメニュー 1 4 2が画面垂直軸の手前または奥の方向から メニュー画面が定義されているレベルまで下降または上昇していくような表 示をしてもよい。 または、 テクスチャのひ値を初期値から次第に大きくして いくことによって、 オプションメニュー 1 4 2が透明な状態から徐々に不透 明になっていくような表示をしてもよい。 さらには、 画面の右端や左端から オプションメニュー 1 4 2がフォルダアイコン配列 7 2の右側まで移動して くるような表示をしてもよい。 上記の表示態様を複数組み合わせてもよい。
[0069] このとき、 エフェクト処理部 1 0 8は、 機能アイコン配列 7 0、 フォルダ アイコン配列 7 2、 およびコンテンツアイコン配列 7 8に含まれるアイコン に対し、 画像を目立たなくする処理効果を与える所定のフィルタを適用して 得られた画像を、 オプションメニュー 1 4 2の表示前のアイコンまたは画像 の代わりに表示させる。 このフィルタは、 例えば画像サイズを縮小する効果 、 画素の輝度値を小さくして表示を薄くする効果、 ブラーをかけてアンフォ 一カスさせる効果などを与えるものであり、 これらを組み合わせて用いても よい。 フィルタを適用する代わりに、 対象となる機能アイコン、 フォルダァ イコン、 およびフォルダ貼付画像が、 ポリゴンにテクスチャを貼り付けて構 成されたオブジェク卜である場合は、 テクスチャの Of値を小さくして半透明 状態にしたり、 Z値を操作してオブジェク卜を画面垂直軸の奥方向に移動さ せたりしてもよい。
[0070] オプションメニュー 1 4 2において表示される項目のうち、 ユーザによる いずれかの選択指示が操作部 4 0により取得されると、 メニュー画面生成部 1 1 0は第 2オプションメニュー 1 4 4を生成する。 エフェク卜処理部 1 0 8は、 第 2オプションメニュー 1 4 4を、 ブラーのかけられた状態から徐々 に明瞭になるようにして、 メニュー画面 5 0にフエ一ドインするようにして オプションメニュー 1 4 2の右側に表示する。 このとき、 エフェクト処理部 1 0 8は、 機能アイコン配列 7 0、 フォルダアイコン配列 7 2、 およびコン テンッアイコン配列 7 8に含まれるアイコンに対し、 画像を目立たなくする 処理効果を与える所定のフィルタを適用して得られた画像を、 第 2ォプショ ンメニュー 1 4 4の表示前のアイコンまたは画像の代わりに表示させる。
[0071] オプションメニュー 1 4 2および第 2オプションメニュー 1 4 4はオンス クリーン表示であり、 コンテンッ映像や背景画像の前面に重ね合わされて表 示される。 エフェク卜処理部 1 0 8は、 オプションメニュー 1 4 2および第 2オプションメニュー 1 4 4の領域全体に、 背景画像との外観上の区別を容 易にするための彩色を施してもよく、 またコンテンツ映像の明るさを調整す るなどの方法によリ外観上の区別を容易にしてもよい。
[0072] このように、 フォルダやオプションメニューにおいて階層を下るたびに、 それ以前に表示されているアイコンはよリ目立たなくなるように小さく、 よ リ不明瞭な画像として表示される。 つまり、 現在の操作に関係の少ないアイ コンほど、 画面上の仮想的な三次元空間において画面垂直軸の奥方向に沈ん でいくように表示される。 逆に、 階層を上がると、 アイコンはより大きく、 より明瞭な画像として表示される。
[0073] オプションメニュー 1 4 2中の 「ビュー切り替え」 を選択すると、 フオル ダアイコンに関連づけられるコンテンツのビューが変更される。 図 8におい て、 第 2注目領域 7 9に位置するコンテンツアイコンは音楽データであるか ら、 ビューの種類として第 2オプションメニュー 1 4 4に 「ジャンル」 、 Γ アルバム」 、 「アーティスト」 、 「すべて」 の 4つのビューが示されている 。 第 2注目領域 7 9に位置するコンテンツアイコンが例えばフォ卜データで あれば、 ビューの種類として、 「月」 、 「年」 、 「アルバム」 、 「5 0音順 」 、 「すべて」 のビューが第 2オプションメニュー 1 4 4に表示されてもよ い。
[0074] 図 9は、 コンテンツの項目とビューの一例を示す図である。 本明細書にお いて、 フォルダアイコンは、 あるひとつのコンテンツ再生機能に対応するコ ンテンッ項目の表示単位としての役割を有する。 また、 ビューは、 コンテン ッ項目の分類または切リ出し方を表している。
[0075] 表 1 5 0において、 コンテンツ列 1 5 2は、 音楽データのコンテンツ項目
(すなわち楽曲データ） の名称を表し、 ジャンル列 1 5 4、 アーティスト列 1 5 6、 アルバム列 1 5 8、 収録年列 1 5 9は、 それぞれコンテンッ列 1 5 2におけるコンテンツ項目のジャンル、 アーティスト、 収録アルバム、 収録 年を著している。 ここで、 ジャンル、 アーティスト、 アルバムが 「ビュー」 に相当する。 したがって、 ジャンルビューが選択されている場合、 メニュー 管理部 1 0 4は、 コンテンツ項目をジャンル毎に異なるフォルダアイコンに 関連づける。 すなわち、 コンテンツ項目 「a a a」 、 「b b b」 、 「e e e 」 は 「J _ P O P」 フォルダアイコンに関連づけられ、 コンテンツ項目 「f f f 」 、 「g g g」 、 「h h h」 は 「C o u n t r y」 フォルダアイコンに 関連づけられる。 これらのフォルダアイコンが、 図 3で示したフォルダアイ コン配列 7 2としてメニュー画面 5 0に表示される。 ユーザにより異なるビ ユー、 例えばアルバムビューが選択されると、 メニュー管理部 1 0 4は、 コ ンテンッ項目をアルバム毎に異なるフォルダアイコンに関連づける。 例えば 、 コンテンツ項目 Γ f f f 」 、 「g g g」 、 「h h h」 は、 今度は 「 ：」 の フォルダアイコンに関連づけられる。 したがって、 この場合であれば、 「α 」 、 Γ ^β」 、 r r」 、 r s」 、 「 」 、 「 ：」 の各フォルダアイコンが、 図
3で示したフォルダアイコン配列 7 2としてメニュー画面 5 0に表示される 。 ユーザによりアーティストビューが選択されると、 メニュー管理部 1 0 4 は、 コンテンツ項目をアーティスト毎に異なるフォルダアイコンに関連づけ る。 例えば、 コンテンツ項目 「g g g」 、 「h h h」 は、 今度は 「F」 のフ オルダアイコンに関連づけられる。 収録年ビューについても同様である。 こ のように、 同一のコンテンツ項目 Γ f f f 」 、 「g g g」 、 「h h h」 が、 ビューに応じて共通のフォルダアイコンに関連づけられたり、 別のフォルダ アイコンに関連づけられたりする。
[0076] コンテンツ再生機能の種類によっては、 フォルダアイコンに関連づけるコ ンテンッがひとつしかない場合もあることに注意すべきである。 例えば、 マ ルチメディァ再生装置 2 0にひとまとまりの映像データのみが格納されてい る光ディスク 3 6を揷入した場合には、 動画アイコン 5 6の下側にひとつの フォルダアイコンが表示され、 そのアイコンを注目領域に配置しても、 第 2 注目領域 7 9にひとつのコンテンツアイコンしか表示されない。
[0077] また、 本明細書において、 フォルダアイコンに関連づけされるコンテンツ 項目の切リ分けは、 コンテンッ項目の格納場所とは無関係であることに注意 されたい。 メニュー管理部 1 0 4は、 格納部 8 0や外部機器 3 7、 3 9、 光 ディスク 3 6などにあるコンテンツを検索し、 その時点で選択されているビ ユーにしたがって各コンテンツ項目をフォルダアイコンに関連づける作業を 実行する。
[0078] なお、 ビューの種類は上記に限られるわけではない。 例えば、 写真コンテ ンッゃ動画コンテンッのに関連づけられるフォルダアイコンのビューとして 、 「ジャンル」 や 「撮影者」 を定義したり、 または音楽コンテンツに関連づ けられるフォルダアイコンのビューとして、 記録した月や年などのビューを 定義してもよい。
[0079] 図 3〜9では、 機能アイコンとして音楽アイコン 5 4を選択した場合を説 明したが、 その他の機能アイコンを選択した場合も同様である。 [0080] 図 1 0は、 機能アイコン配列 7 0の中から写真アイコン 5 2を交差領域 7 6に移動させたときのメニュー画面を模式的に示す。 写真アイコン 5 2が強 調表示され、 その下部にフォルダアイコン 1 3 0とフォルダ貼付画像 1 3 2 とが重畳表示されている。 フォルダ貼付画像 1 3 2は、 フォルダアイコン 1 3 0に関連づけられたいずれかのフォ卜データのサムネイルである。 フオル ダアイコン 1 3 0は、 図 3〜 5の正方形のフォルダアイコン 1 2 0と異なり 、 フォトデータのサムネイルにあわせて横長の長方形である。 フォルダアイ コン 1 3 0の右側には、 フォルダ情報 1 3 4としてビューとデータ数が表示 される。 図 1 0では、 ビューとして 「すべて」 が選択されているので、 すべ てのフォ卜データがひとつのフォルダアイコン 1 3 0に関連づけられており 、 したがってひとつのフォルダアイコン 1 3 0のみがフォルダアイコン配列 7 2として表示される。
[0081 ] 図 1 1は、 図 1 0に示したメニュー画面が遷移する過程を模式的に示す。
操作部 4 0がユーザからビュ一切リ替えの指示を取得すると、 メニュー管理 部 1 0 4は、 切り替えられたビューにしたがってコンテンツの項目を切り分 け、 複数のフォルダアイコン 1 3 0に関連づける。 図 1 1では、 「月」 のビ ユーが選択されたものとし、 したがって、 メニュー画面生成部 1 1 0は、 撮 影の月別にコンテンツの項目を分別して関連づけられた複数のフォルダアイ コン 1 3 0を交差領域 7 6の上下方向に配置し、 フォルダアイコン配列 7 2 を形成する。 フォルダアイコン 1 3 0に関連づけられたコンテンツ項目のコ ンテンッアイコンがひとつ選択され、 フォルダ貼付画像 1 3 2としてフオル ダアイコン 1 3 0に重畳表示される。 注目領域 7 7におけるフォルダアイコ ン 1 3 0とフォルダ貼付画像 1 3 2とは強調表示され、 その右側にフォルダ 情報 1 3 4としてビューとデータ数が表示される。 その他のフォルダアイコ ン 1 3 0の右側にも、 ビューの情報、 すなわち撮影の月が表示される。
[0082] フォルダアイコン 1 3 0に重畳してビューに関する文字情報 1 3 6が表示 されてもよい。 例えば、 注目領域 7 7のフォルダアイコン 1 3 0には、 メニ ユー画面生成部 1 1 0によりビュー情報として 「1 2 2 0 0 5」 が表示さ れる。 これにより、 ユーザはフォルダアイコン 1 30に関連づけられたコン テンッの性質を容易に認識することができる。
[0083] 図 1 2は、 マルチメディア再生装置の動作過程を示すフローチャートであ る。 ユーザがマルチメディア再生装置 20の電源を投入すると、 ネットヮー ク制御部 86はネッ卜ワークケーブル 34を介して LAN 35上の外部機器 を検出し （S6) 、 外部機器および格納部 80からコンテンツの項目を検出 する （S8) 。 メニュー画面生成部 1 1 0は機能アイコンやコンテンツアイ コンなどのアイテムを格納部 80から取得してメニュー画面を生成し、 これ を表示出力部 46がテレビジョン受像機 30へ表示させる （S 1 0) 。 操作 部 40がユーザによる左右いずれかの方向指示を取得すると （S 1 2Y) 、 その指示に応じてエフェク卜処理部 1 08は機能アイコンを左右いずれかの 方向へ移動させ （S 1 4) 、 交差領域 76に位置した機能アイコンを強調表 示させるとともに （S 1 6) 、 その再生機能に対応するフォルダアイコンお よびフォルダ貼付画像を格納部 80や外部機器から取得してこれらを上下方 向に展開表示させる （S 1 8) 。 ユーザによる左右方向の指示がない間は、 S 1 4はスキップされる （S 1 2 N) 。
[0084] 操作部 40がユーザによる上下いずれかの方向指示を取得すると （S 20 Y) 、 その指示に応じてエフェクト処理部 1 08はフォルダアイコンを上下 いずれかの方向へ移動させ （S 22) 、 交差領域 76直下の注目領域 77に 位置したフォルダアイコンおよびフォルダ貼付画像を強調表示させ （S 24 ) 、 フォルダに関する情報 1 40を右方に表示させる （S 26) 。 ユーザに よる上下方向の指示がない間は、 S 22はスキップされる （S 20N) 。
[0085] 操作部 40がユーザによるフォルダ選択の指示を取得すると （S 28Y) 、 その指示に応じてエフェクト処理部 1 08は、 フォルダアイコンからフォ ルダ貼付画像を右方向に移動させ （S30) 、 選択されたフォルダに関連つ けられているコンテンツ項目のコンテンツァイコンを上下方向に展開表示さ せる （S32) 。 さらに、 第 2注目領域 79に位置したコンテンツアイコン を強調表示させ、 各コンテンツ項目に関する情報 1 40を右方に表示させる (S34) 。 ユーザによるフォルダ選択の指示を取得するまでは、 S 1 2〜 S 26の処理を繰り返す （S 28N) 。
[0086] 操作部 40がユーザによるコンテンツ再生決定指示を取得するまでは S 1 2〜S 34の処理を繰り返し （S36N) 、 操作部 40がコンテンツ再生決 定指示を取得すると （S36Y) 、 コンテンツ制御部 1 06は注目領域 77 にて強調表示されたコンテンツの再生を開始させる （S38) 。 また、 背景 生成部 1 1 2は、 メニュー画面からコンテンツの再生画面への遷移にしたが い、 ユーザの視点から見て奥側に入り込むような視覚的効果をもつ演出を表 示する （S40) 。 コンテンツ再生中に操作部 40がユーザによるメニュー 画面の呼び出し指示を取得したとき （S42Y) 、 S 1 0へジャンプし、 S 1 0〜S 40の処理を再度実行する。 ユーザによるメニュー画面の呼び出し 指示がなければコンテンツの再生は継続され （S42N) 、 そのコンテンツ 再生中に操作部 40がユーザによるコンテンッ再生停止の指示を取得すると 、 コンテンツ制御部 1 06はコンテンツ再生を停止させる （S44Y) 。
[0087] 以上説明したように、 本実施形態のマルチメディア再生装置 20は、 メニ ュ一画面 50に再生機能の配列とフォルダアイコンの配列からなるメニュー 画像を表示する。 実際に表示される機能アイコン配列 70とフォルダアイコ ン配列 72はそれぞれ 1行または 1列であるが、 上下左右のスクロールによ リ次々に異なる再生機能に対応する異なるフォルダアイコンまたはコンテン ッアイコンが表示される。 したがって、 あたかも画面全面にわたって多数の コンテンツがマトリクス状に並べられているかのような感覚をユーザに与え ることができる。 ユーザは多数のコンテンツが並べられたマトリクスを自在 に動かしながら所望のコンテンツにフォーカスを当てるような感覚でコンテ ンッを選択できる。 ただし、 実際に画面表示されるアイコン数は少ないため 、 煩雑な印象をユーザに与えることはない。
[0088] また、 フォルダアイコンを選択すると、 重畳表示されていたフォルダ貼付 画像がフォルダアイコンから引き出される動作が生じるので、 現実世界にお ける CDや DVDのパッケージからディスクを取り出すような感覚をユーザ に与えることができる。
[0089] ユーザによリフォルダアイコンが選択されたリまたはオプションメニュー 表示が選択されると、 選択されていないアイコンは視覚的に目立たないよう に画像変換されてメニュー画面に表示される。 したがって、 ユーザは自らが 選択している階層や操作をメニュー画面内で容易に認識することができる。 また、 フォルダアイコンを選択したリオプションメニューを表示するときに 、 それ以外の画面表示を小さくまたアンフォーカスしてメニュー画面に表示 することで、 ユーザは画面垂直軸方向に奥行を感じることができ、 仮想的な 三次元空間内でメニュ一操作をしているような感覚が得られる。
[0090] また、 フォルダアイコンに関連づけられるコンテンツ項目をビュー切リ替 えによって容易に変更できるため、 ユーザは再生したいコンテンツ項目を様 々な切リロから検索することができ、 より迅速かつストレスの少ない検索が 実現される。
[0091 ] 以上、 本発明を実施例をもとに説明した。 この実施例は例示であり、 その 各構成要素や各処理プロセスの組合せにいろいろな変形が可能なこと、 また そうした変形例も本発明の範囲にあることは当業者に理解されるところであ る。 以下、 変形例について述べる。
[0092] 実施例では、 注目領域 7 7の直上に交差領域 7 6が位置するようにメニュ 一画面を構成した。 変形例においては、 ユーザが注目アイコンに視点を置き ながら機能アイコンを容易に確認できるような配置関係であれば、 例えば注 目領域 7 7の直下や周辺に交差領域 7 6が位置するようメニュー画面を構成 してもよい。
[0093] 実施例では、 メニュー画面 5 0上で機能アイコン配列 7 0とフォルダアイ コン配列 7 2とをそれぞれ水平方向と垂直方向に表示する構成とした。 変形 例においては、 機能アイコン配列 7 0とフォルダアイコン配列 7 2とを画面 の奥行を利用した配置としてもよい。 例えば、 機能アイコン配列 7 0とフォ ルダアイコン配列 7 2を画面内の仮想的な球面上に貼リ付けるように配置し て、 ユーザの上下左右方向の指示にしたがい、 アイコンが球面に沿って回転 する構成としてもよい。 あるいは、 注目領域に位置するアイコンを画面垂直 軸に沿って最も手前になるように表示し、 それ以外のアイコンは画面垂直軸 の奥側になるように表示し、 ユーザの上下左右方向の指示にしたがい、 注目 領域に移動したアイコンが手前に飛び上がって来るような態様で表示しても よい。 機能アイコン配列 7 0やフォルダアイコン配列 7 2の奥行を持たせた 表示態様と、 選択したアイコン以外を縮小やアンフォーカスする表示態様と を組み合わせることで、 仮想的な三次元空間内でメニュー操作をしているよ うな感覚を、 ユーザにより植え付けることができる。
[0094] 実施例では、 交差領域 7 6および注目領域 7 7がメニュー画面 5 0の中央 近傍に位置するようマルチメディァ再生装置 2 0を構成した。 変形例におい ては、 交差領域 7 6および注目領域 7 7の表示位置をユーザが自由に設定で きる構成としてもよい。
[0095] 実施例では、 マルチメディア再生装置 2 0は、 外部接続されたテレビジョ ン受像機 3 0にコンテンツ再生指示のためのメニュー画面を表示させた。 変 形例では、 マルチメディア再生装置は、 装置と一体に構成されたディスプレ ィを備える携帯型の複合機器であってもよい。 また、 実施例で述べた各種の 機能を発揮せしめるコンピュータプログラムをパーソナルコンピュータで実 行させて、 マルチメディア再生装置を実現してもよい。
産業上の利用可能性
[0096] 本発明によれば、 マルチメディア再生装置によって再生される各種コンテ ンッにより提供される仮想空間への没入感を高めることができる。

Claims

請求の範囲
[1] ディジタルコンテンツを再生可能な装置であって、
前記ディジタルコンテンツの再生項目の一覧が含まれるメニュー画面の画 像データを生成するメニュー画面生成部と、
前記ディジタルコンテンツの再生を処理し、 その再生内容に関する情報が 含まれる再生画面の画像データを生成する再生画面生成部と、
前記メニュー画面および前記再生画面の背景となる背景画像を生成して表 示する背景生成部と、
ユーザの操作を介してコンテンツ再生に関する指示を取得する操作部と、 を備え、
前記背景生成部は、 前記操作部によリ前記ユーザからの再生指示が取得さ れたとき、 前記メニュー画面から前記再生画面への遷移にしたがい、 ユーザ の視点から見て三次元空間の奥側に入り込むような視覚的効果が得られる映 像を用いて前記背景画像を変化させることを特徴とするマルチメディァ再生 装置。
[2] 前記メニュー画面生成部は、 前記操作部により取得されたユーザの指示に 応じて前記メニュー画面に含まれるいずれかのアイコンが選択されたとき、 前記選択されたアイコン以外のアイコンを、 ユーザの視点から見て前記三次 元空間の奥側に移動させるような視覚的効果が得られるように変化させるこ とを特徴とする請求項 1に記載のマルチメディア再生装置。
[3] ディジタルコンテンツを再生可能な装置であって、
前記ディジタルコンテンツの再生項目の一覧が含まれるメニュー画面の画 像データを生成するメニュー画面生成部と、
前記ディジタルコンテンツの再生を処理し、 その再生内容に関する情報が 含まれる再生画面の画像データを生成する再生画面生成部と、
三次元空間に漂う装飾ォブジェクトを含む背景画像を生成して表示する背 景生成部と、
ユーザの操作を介してコンテンツ再生に関する指示を取得する操作部と、 を備え、
前記背景生成部は、 前記操作部によリ前記ユーザからの再生指示が取得さ れたとき、 前記ディジタルコンテンッの再生中はそのコンテンッの出力特徴 量またはユーザ操作に応じて前記装飾オブジェク卜を変形させることを特徴 とするマルチメディァ再生装置。
[4] 前記背景生成部は、 前記メニュー画面から前記再生画面への遷移の際に、 前記メニュー画面で表示されていた装飾オブジェク卜をそのまま前記再生画 面で使用することを特徴とする請求項 3に記載のマルチメディァ再生装置。
[5] 前記背景生成部は、 前記メニュー画面から前記再生画面への遷移にしたが つて前記背景画像の色調を遷移させることを特徴とする請求項 3に記載のマ ルチメディア再生装置。
[6] 前記背景生成部は、 前記メニュー画面において表示されている前記ディジ タルコンテンッの再生項目を示すアイコンの色調を抽出し、 その色調と同系 統の色調となるよう前記背景画像の色彩を調整することを特徴とする請求項 3に記載のマルチメディァ再生装置。
[7] ディジタルコンテンッの再生項目の一覧が含まれるメニュー画面の画像デ ータを生成するステップと、
前記ディジタルコンテンツが再生されるときにその再生内容に関する情報 が含まれる再生画面の画像データを生成するステップと、
前記メニュー画面および前記再生画面の背景として三次元空間に漂う装飾 オブジェク卜が描かれた背景画像を生成して表示するステップと、 を有し、 前記表示するステップは、 ユーザからのコンテンツの再生が指示されたと き、 前記メニュー画面から前記再生画面への遷移にしたがい、 ユーザの視点 から見て前記三次元空間の奥側に入り込むような視覚的効果が得られる映像 を用いて前記背景画像を変化させることを特徴とする背景画像表示方法。
[8] コンピュータで実行され、 画像をディスプレイに表示させるプログラムで あって、
ディジタルコンテンッの再生項目の一覧が含まれるメニュー画面の画像デ ータを生成する機能と、
前記ディジタルコンテンツが再生されるときにその再生内容に関する情報 が含まれる再生画面の画像データを生成する機能と、
前記メニュー画面および前記再生画面の背景として三次元空間に漂う装飾 オブジェク卜が描かれた背景画像を生成して表示する機能と、 を有し、 前記表示する機能は、 ユーザからのコンテンツの再生が指示されたとき、 前記メニュー画面から前記再生画面への遷移にしたがい、 ユーザの視点から 見て前記三次元空間の奥側に入リ込むような視覚的効果が得られる映像を用 いて前記背景画像を変化させることを特徴とするコンピュータプログラム。 請求項 8に記載のコンピュータプログラムを格納した、 コンピュータにて 読取可能な記録媒体。
PCT/JP2007/000439 2006-05-03 2007-04-23 マルチメディア再生装置および背景画像表示方法 WO2007125648A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US12/299,170 US20100313166A1 (en) 2006-05-03 2007-04-23 Multimedia reproducing device and background image display method
EP07737096A EP2017709A4 (en) 2006-05-03 2007-04-23 MULTIMEDIA REPRODUCTION DEVICE AND BACKGROUND IMAGE DISPLAY METHOD

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006128750A JP4737539B2 (ja) 2006-05-03 2006-05-03 マルチメディア再生装置および背景画像表示方法
JP2006-128750 2006-05-03

Publications (1)

Publication Number Publication Date
WO2007125648A1 true WO2007125648A1 (ja) 2007-11-08

Family

ID=38655189

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2007/000439 WO2007125648A1 (ja) 2006-05-03 2007-04-23 マルチメディア再生装置および背景画像表示方法

Country Status (4)

Country Link
US (1) US20100313166A1 (ja)
EP (1) EP2017709A4 (ja)
JP (1) JP4737539B2 (ja)
WO (1) WO2007125648A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013035217A1 (ja) * 2011-09-06 2013-03-14 株式会社ソニー・コンピュータエンタテインメント クラウドコンピューティングシステムおよびアプリケーション提供方法
US8407622B2 (en) * 2006-06-09 2013-03-26 Samsung Electronics Co., Ltd. Portable device and method of providing menu icons
CN103513926A (zh) * 2012-06-25 2014-01-15 威盛电子股份有限公司 动态桌布显示方法及新视频信息显示方法与手持移动系统
CN106200898A (zh) * 2016-06-24 2016-12-07 张睿卿 虚拟现实软件平台系统

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7966577B2 (en) 2005-10-11 2011-06-21 Apple Inc. Multimedia control center
US9627006B2 (en) 2007-08-07 2017-04-18 Samsung Electronics Co., Ltd. Content information display method and apparatus
KR101431534B1 (ko) * 2007-08-07 2014-08-19 삼성전자주식회사 컨텐츠 정보 표시 방법 및 그 방법을 수행하는 장치
US8549402B2 (en) * 2007-12-29 2013-10-01 Joseph Harold Moore System and method for providing internet radio service
JP2009205302A (ja) * 2008-02-26 2009-09-10 Tokai Rika Co Ltd シームレス表示式操作装置
JP2010140116A (ja) * 2008-12-09 2010-06-24 Ricoh Co Ltd ファイル管理装置、ファイル管理方法及びファイル管理プログラム
EP2211279A3 (en) * 2009-01-14 2014-10-01 Samsung Electronics Co., Ltd. Apparatus and method for playing of multimedia item
KR20110024262A (ko) * 2009-09-01 2011-03-09 엘지전자 주식회사 데이터 표시 장치 및 그 방법
US8782562B2 (en) * 2009-12-02 2014-07-15 Dell Products L.P. Identifying content via items of a navigation system
US20110131531A1 (en) * 2009-12-02 2011-06-02 Deborah Russell Touch Friendly Applications in an Information Handling System Environment
JP2011145386A (ja) * 2010-01-13 2011-07-28 Fuji Xerox Co Ltd 表示制御装置、表示装置及びプログラム
US9185326B2 (en) * 2010-06-11 2015-11-10 Disney Enterprises, Inc. System and method enabling visual filtering of content
US9053103B2 (en) * 2010-11-23 2015-06-09 Nokia Technologies Oy Method and apparatus for interacting with a plurality of media files
CN102622163B (zh) * 2011-03-14 2018-06-05 小米科技有限责任公司 一种图标生成方法
US9779097B2 (en) * 2011-04-28 2017-10-03 Sony Corporation Platform agnostic UI/UX and human interaction paradigm
US10482121B2 (en) 2011-04-28 2019-11-19 Sony Interactive Entertainment LLC User interface for accessing games
AU2011202182B1 (en) * 2011-05-11 2011-10-13 Frequency Ip Holdings, Llc Creation and presentation of selective digital content feeds
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
CN104471521B (zh) 2012-05-09 2018-10-23 苹果公司 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
EP3096218B1 (en) 2012-05-09 2018-12-26 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
EP2741176A3 (en) * 2012-12-10 2017-03-08 Samsung Electronics Co., Ltd Mobile device of bangle type, control method thereof, and UI display method
TW201423551A (zh) * 2012-12-14 2014-06-16 Hon Hai Prec Ind Co Ltd 顯示設備及其菜單顯示裝置和方法
AU2013368441B2 (en) 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
USD776089S1 (en) * 2013-07-12 2017-01-10 Flextronics Ap, Llc Remote control device with icons
USD786832S1 (en) * 2013-07-12 2017-05-16 Flextronics Ap, Llc Remote control device with an icon
USD745560S1 (en) * 2013-09-03 2015-12-15 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10345991B2 (en) * 2015-06-16 2019-07-09 International Business Machines Corporation Adjusting appearance of icons in an electronic device
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10534503B1 (en) * 2016-06-06 2020-01-14 Google Llc Motion stills experience
US10936163B2 (en) 2018-07-17 2021-03-02 Methodical Mind, Llc. Graphical user interface system
US11435875B2 (en) * 2020-09-08 2022-09-06 Dell Products L.P. Static dynamic on screen display menu
USD1028999S1 (en) * 2020-09-17 2024-05-28 Streamlayer, Inc. Display screen with transitional graphical user interface
JP2022150267A (ja) * 2021-03-26 2022-10-07 富士フイルムビジネスイノベーション株式会社 情報処理装置およびプログラム
JP2023067156A (ja) * 2021-10-29 2023-05-16 フォルシアクラリオン・エレクトロニクス株式会社 アイコン表示制御装置及びアイコン表示制御プログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11327723A (ja) * 1998-05-20 1999-11-30 Kenwood Corp ツリー構造操作画面式操作装置、スペクトラムアナライザ、音響メカ調整装置、及びｓｆｃレベル調整装置
JP2004007598A (ja) * 2002-04-26 2004-01-08 Toshiba Corp 情報機器、携帯電話、画像表示方法、及び画像送信方法
JP2004070829A (ja) * 2002-08-08 2004-03-04 Calsonic Kansei Corp 画面入力装置
US20050190199A1 (en) 2001-12-21 2005-09-01 Hartwell Brown Apparatus and method for identifying and simultaneously displaying images of musical notes in music and producing the music
JP2005339732A (ja) * 2004-05-28 2005-12-08 Sony Corp データ再生装置、情報配信サーバ及びコンテンツ再生システム
JP2005354245A (ja) * 2004-06-09 2005-12-22 Sony Computer Entertainment Inc マルチメディア再生装置およびメニュー画面表示方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276785A (en) * 1990-08-02 1994-01-04 Xerox Corporation Moving viewpoint with respect to a target in a three-dimensional workspace
US5555354A (en) * 1993-03-23 1996-09-10 Silicon Graphics Inc. Method and apparatus for navigation within three-dimensional information landscape
US5822123A (en) * 1993-09-09 1998-10-13 Davis; Bruce Electronic television program guide schedule system and method with pop-up hints
US5898435A (en) * 1995-10-02 1999-04-27 Sony Corporation Image controlling device and image controlling method
US6043818A (en) * 1996-04-30 2000-03-28 Sony Corporation Background image with a continuously rotating and functional 3D icon
US6016144A (en) * 1996-08-14 2000-01-18 Samsung Electronics Co., Ltd. Multi-layered television graphical user interface
CA2281229A1 (en) * 1999-08-31 2001-02-28 Nvision Software Systems Inc. Method and system for navigating a virtual environment
US6753892B2 (en) * 2000-11-29 2004-06-22 International Business Machines Corporation Method and data processing system for presenting items in a menu
AU2002324833A1 (en) * 2001-08-29 2003-03-18 Digeo, Inc. System and method for capturing video frames for focused navigation within a user interface
US6910191B2 (en) * 2001-11-02 2005-06-21 Nokia Corporation Program guide data selection device
US6966037B2 (en) * 2001-11-19 2005-11-15 Nokia Corporation Method and apparatus for scrollable cross-point navigation in a calendar user interface
EP1363457A3 (en) * 2002-04-26 2009-02-18 Kabushiki Kaisha Toshiba Information apparatus, picture display method, and picture transmitting method
GB0219122D0 (en) * 2002-08-16 2002-09-25 Hewlett Packard Co Graphical user computer interface
WO2004027672A1 (en) * 2002-09-09 2004-04-01 Apple Computer, Inc. A computer program comprising a plurality of calendars
JP2004172976A (ja) * 2002-11-20 2004-06-17 Nec Corp モバイル端末の表示方式
JP3846432B2 (ja) * 2003-02-26 2006-11-15 ソニー株式会社 表示装置、表示方法及びそのプログラム
US7681149B2 (en) * 2003-05-21 2010-03-16 Nokia Corporation User interface display for set-top box device
JP4333409B2 (ja) * 2004-02-27 2009-09-16 ソニー株式会社 情報処理装置および方法、並びにプログラム
US7853895B2 (en) * 2004-05-11 2010-12-14 Sony Computer Entertainment Inc. Control of background media when foreground graphical user interface is invoked
US8037421B2 (en) * 2005-10-11 2011-10-11 Research In Motion Limited System and method for organizing application indicators on an electronic device
US7546555B2 (en) * 2006-02-24 2009-06-09 Sony Ericsson Mobile Communications Ab Method and apparatus for matching a control with an icon

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11327723A (ja) * 1998-05-20 1999-11-30 Kenwood Corp ツリー構造操作画面式操作装置、スペクトラムアナライザ、音響メカ調整装置、及びｓｆｃレベル調整装置
US20050190199A1 (en) 2001-12-21 2005-09-01 Hartwell Brown Apparatus and method for identifying and simultaneously displaying images of musical notes in music and producing the music
JP2004007598A (ja) * 2002-04-26 2004-01-08 Toshiba Corp 情報機器、携帯電話、画像表示方法、及び画像送信方法
JP2004070829A (ja) * 2002-08-08 2004-03-04 Calsonic Kansei Corp 画面入力装置
JP2005339732A (ja) * 2004-05-28 2005-12-08 Sony Corp データ再生装置、情報配信サーバ及びコンテンツ再生システム
JP2005354245A (ja) * 2004-06-09 2005-12-22 Sony Computer Entertainment Inc マルチメディア再生装置およびメニュー画面表示方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2017709A4 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8407622B2 (en) * 2006-06-09 2013-03-26 Samsung Electronics Co., Ltd. Portable device and method of providing menu icons
WO2013035217A1 (ja) * 2011-09-06 2013-03-14 株式会社ソニー・コンピュータエンタテインメント クラウドコンピューティングシステムおよびアプリケーション提供方法
JP2013054680A (ja) * 2011-09-06 2013-03-21 Sony Computer Entertainment Inc クラウドコンピューティングシステムおよびアプリケーション提供方法
US9354793B2 (en) 2011-09-06 2016-05-31 Sony Corporation Cloud computing system and application provision method
US9993736B2 (en) 2011-09-06 2018-06-12 Sony Interactive Entertainment Inc. Cloud computing system and application provision method
CN103513926A (zh) * 2012-06-25 2014-01-15 威盛电子股份有限公司 动态桌布显示方法及新视频信息显示方法与手持移动系统
CN106200898A (zh) * 2016-06-24 2016-12-07 张睿卿 虚拟现实软件平台系统

Also Published As

Publication number Publication date
JP2007299335A (ja) 2007-11-15
JP4737539B2 (ja) 2011-08-03
EP2017709A1 (en) 2009-01-21
US20100313166A1 (en) 2010-12-09
EP2017709A4 (en) 2010-06-16

Similar Documents

Publication Publication Date Title
JP4737539B2 (ja) マルチメディア再生装置および背景画像表示方法
KR101006293B1 (ko) 멀티미디어 재생장치 및 메뉴화면 표시방법
US10691305B2 (en) Menu screen display method and menu screen display device
JP3897774B2 (ja) マルチメディア再生装置およびメニュー画面表示方法
JP4240293B2 (ja) マルチメディア再生装置およびマルチメディア再生方法
JP5511744B2 (ja) マルチメディア再生装置およびメニュー画面表示方法
JP3871684B2 (ja) コンテンツ再生装置およびメニュー画面表示方法
JP2006163647A (ja) マルチメディア再生装置およびメニュー画面表示方法
JP4772583B2 (ja) マルチメディア再生装置、メニュー画面表示方法、メニュー画面表示プログラム及びメニュー画面表示プログラムを記憶したコンピュータ読み取り可能な記憶媒体
JP5548249B2 (ja) メニュー画面表示装置および方法
JP5361846B2 (ja) マルチメディア再生装置および背景画像表示方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 07737096

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2007737096

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 12299170

Country of ref document: US