WO2014157360A1 - 外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機 - Google Patents

外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機 Download PDF

Info

Publication number
WO2014157360A1
WO2014157360A1 PCT/JP2014/058580 JP2014058580W WO2014157360A1 WO 2014157360 A1 WO2014157360 A1 WO 2014157360A1 JP 2014058580 W JP2014058580 W JP 2014058580W WO 2014157360 A1 WO2014157360 A1 WO 2014157360A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
cursor
pinp
display image
television
Prior art date
Application number
PCT/JP2014/058580
Other languages
English (en)
French (fr)
Inventor
滋宏 大谷
志生 高畑
賢司 渡辺
中澤 真康
和郎 阪田
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Publication of WO2014157360A1 publication Critical patent/WO2014157360A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438Window management, e.g. event handling following interaction with the user interface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06F3/0325Detection arrangements using opto-electronic means using a plurality of light emitters or reflectors or a plurality of detectors forming a reference frame from which to derive the orientation of the object, e.g. by triangulation or on the basis of reference deformation in the picked up image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Definitions

  • the present invention relates to an external device that provides an image to a display device capable of displaying PinP, a control method for the external device, a display system including the display device and the external device, the display device, and a television that functions as the display device.
  • a display device capable of displaying PinP
  • a control method for the external device a display system including the display device and the external device, the display device, and a television that functions as the display device.
  • terminals having a screen of about 10 inches such as smartphones and tablets
  • the screen is small at about 10 inches
  • the number of users who connect a smartphone or tablet to a display device such as a television having a larger screen and project the image of the smartphone or tablet on the television is increasing.
  • set-top boxes having no display device and having only the functions of a smartphone and a tablet have been developed.
  • the user can superimpose the television image on the image of the set-top box and display it as a PinP (Picture In Picture) display image in order to effectively use the large screen of the television.
  • the PinP function is used.
  • the PinP function is an operating device such as a mouse connected to the set top box that operates the cursor of the set top box among the images displayed on the television.
  • the television image that is a PinP display image is adjusted by a television operating device such as a television remote controller or a key provided on the main body.
  • Patent Document 1 discloses a video signal superimposing apparatus capable of supplying a video obtained by combining a TV video and a computer video signal and adjusting a TV video by operating a computer icon.
  • Patent Document 2 discloses a window display control device that displays a window corresponding to a locus by a mouse operation and executes a command selected by a user among a plurality of commands included in the window.
  • Japanese Patent Publication Japanese Patent Laid-Open No. 10-83171 (published March 31, 1998)” Japanese Patent Publication “Japanese Patent Laid-Open No. 10-307664 (published on November 17, 1998)”
  • Patent Document 1 a video acquired from a TV tuner included in a computer is displayed in an icon imitating a TV device by the computer.
  • the image to be displayed is only a computer image.
  • the present invention has been made to solve the above-described problem.
  • a display device having a PinP function displays a PinP display image superimposed on an image of an external device
  • the user can operate the display device.
  • the object is to realize an external device capable of improving convenience.
  • an external device is an external device that provides an image to a display device capable of PinP display, and the display is performed on an image provided by the external device.
  • a coordinate acquisition unit that acquires coordinates of a PinP display image that is superimposed and displayed by the apparatus; a determination unit that determines a relative movement of the cursor included in the image provided by the external device with respect to the PinP display image;
  • a selection unit that selects any one of a plurality of predetermined processes based on a determination result by the determination unit; a notification unit that notifies the display device to execute the process selected by the selection unit; It has.
  • a display device is a display device capable of PinP display that displays a second image superimposed on a first image, and the display device
  • the coordinate acquisition means for acquiring the coordinates of the second image displayed by the display, the determination means for determining the relative movement of the cursor included in the first image with respect to the second image, and the determination means
  • a selection unit that selects one of a plurality of predetermined processes based on the determination result, and an execution unit that executes the process selected by the selection unit are provided.
  • a display device having a PinP function displays a PinP display image superimposed on an image of an external device
  • the convenience of operation of the display device by the user can be improved.
  • FIG. 1 It is a block diagram which shows the structure of the display system which concerns on Embodiment 1 of this invention. It is a figure which shows the external appearance of the display system which concerns on Embodiment 1 of this invention. It is a sequence diagram which shows the flow of a process of the display system which concerns on Embodiment 1 of this invention.
  • the display system which concerns on Embodiment 1 of this invention when a cursor overlaps with a PinP display image, it is an image which a television displays.
  • the display system which concerns on Embodiment 2 of this invention when a cursor overlaps with a PinP display image, it is an image which a television displays.
  • FIG. 12 shows an image displayed on the TV when the MENU is displayed in the display system 1 according to the sixth embodiment of the present invention.
  • FIG. 12A shows the TV as a main screen (background of the PinP display image). It is a figure which shows the case where the television image is displayed and the image input from STB is displayed as a PinP display image, (b) is the image input from STB as a main screen (background of a PinP display image). Is displayed, and a television image is displayed as a PinP display image.
  • the display system which concerns on Embodiment 6 of this invention it is a figure which shows the coordinate system which a television has, (a) is a figure which shows the coordinate system in the image of STB, (b) is in a PinP display image.
  • FIG. 10 It is a sequence diagram which shows the flow of a process of the display system which concerns on Embodiment 10 of this invention.
  • the display system which concerns on Embodiment 10 of this invention it is an image which a television displays, (a) is a figure which shows the movement of the cursor which raises the channel of the broadcast wave which a television receives, (b) is ( It is the image of the television after the process of a) was performed.
  • the display system which concerns on Embodiment 10 of this invention it is an image which a television displays, (a) is a figure which shows the movement of the cursor which a television displays MENU, (b) is a process of (a). It is the image of the television after being executed.
  • the display system which concerns on Embodiment 11 of this invention it is an image which a television displays, (a) is an image by which the outer frame of the direction where the cursor entered the PinP display image is highlighted, (b ) Is an image in which the outer frame in the direction in which the cursor has come out from the PinP display image is highlighted, and (c) is an image in which the outer frame in the direction in which the cursor enters the PinP display image is highlighted. (D) is an image in which the cursor stops in the area of the PinP display image after (c) and the outer frame is highlighted in a different color. It is a block diagram which shows the structure of the television which concerns on Embodiment 12 of this invention.
  • Embodiment 13 of this invention it is a front view of the remote control apparatus which receives a user's operation.
  • (A) is a figure which shows the external appearance of the television or display apparatus in Embodiment 13 of this invention, and a remote control
  • (b) is an external appearance in case the light source 110 is arrange
  • FIG. It is a block diagram which shows the structure of the remote control apparatus in Embodiment 13 of this invention.
  • FIG. 1 is a block diagram showing a configuration of a display system 1 according to Embodiment 1 of the present invention.
  • the display system 1 includes a mouse 2, a television 10 (display device), and a set-top box 20 (hereinafter referred to as STB20, an external device).
  • STB20 an external device
  • the display system 1 is a system in which the user operates the STB 20 using the mouse 2 and the television 10 displays the image of the television 10 on the image output from the STB 20 and performs PinP display.
  • the mouse 2 is a device for the user to operate the STB 20.
  • the mouse 2 and the STB 20 are connected by radio such as wired or Bluetooth (registered trademark).
  • the television 10 has a function of PinP (Picture In Picture) for superimposing an image obtained by receiving a broadcast wave as an PinP display image on an image acquired from the outside. Further, the television 10 can execute the processing indicated by the processing information by acquiring the processing information from the STB 20.
  • the process indicated by the process information includes, for example, a process of changing a broadcast wave channel received by the television 10 and a process of changing the position of a PinP display image.
  • STB20 Since STB20 is equipped with OS (Operating System), it can execute applications and can be used like a smartphone or tablet. Further, the image and the processing information can be output to the television 10.
  • OS Operating System
  • the television 10 includes an input unit 11, a setting change unit 12, a control information communication unit 13, a PinP processing unit 14, a cursor position processing unit 15, an external image input unit 16, an image processing unit 17, and a display.
  • the unit 18 is configured.
  • the input unit 11 outputs information received from the user to the setting change unit 12.
  • As means for receiving input from the user there are input by a remote controller, input by a key provided in the main body of the television 10, and the like.
  • the setting changing unit 12 performs a process of changing the setting of the television 10.
  • the process of changing the setting of the television 10 includes, for example, a process of changing a broadcast wave channel received by the television 10 and a process of changing the position of a PinP display image.
  • the control information communication unit 13 outputs processing information related to the processing of the television 10 to an external device or obtains it from the external device.
  • the processing information is not limited to information related to the setting of the television 10 processed by the setting change unit 12 but also includes information related to an image displayed on the television 10.
  • the PinP processing unit 14 performs processing regarding the coordinate value of the position for displaying the PinP display image and the size of the PinP display image when PinP, which is a function of the television 10, is executed.
  • the cursor position processing unit 15 performs processing related to the cursor position when the information acquired by the control information communication unit 13 is information related to the cursor position of the STB 20.
  • the process related to the cursor position includes, for example, a process of converting a cursor coordinate value indicating the acquired cursor position into a coordinate value of a different coordinate system.
  • External image input unit 16 acquires an image from STB 20.
  • an interface for acquiring an image there is, for example, HDMI (registered trademark) (High Definition Multimedia Interface).
  • the image processing unit 17 performs processing for generating an image to be displayed on the television 10 from the acquired image and information.
  • the process of generating an image to be displayed on the television 10 is, for example, a process of superimposing a PinP display image on the STB 20 image or a process of displaying a cursor at a position indicated by the cursor coordinate value.
  • the display unit 18 displays the acquired image.
  • Examples of the device to be displayed include liquid crystal and organic EL (Electro Luminescence).
  • the STB 20 includes an external device connection unit 21, a cursor position processing unit 22 (determination unit, selection unit, button press detection unit), a control information communication unit 23 (coordinate acquisition unit, notification unit), image processing.
  • the unit 24 and the image output unit 25 are configured.
  • the external device connection unit 21 is an interface of an external device connected to the STB 20.
  • the interface for example, an interface compliant with USB (Universal Serial Bus) can be mentioned.
  • USB Universal Serial Bus
  • the cursor position processing unit 22 executes processing related to the cursor position of the STB 20.
  • the process related to the cursor position includes, for example, a process of outputting the cursor coordinate value and a process of converting the coordinate value performed by the cursor position processing unit 15 of the television 10 described above. Also included is a process of determining whether or not the cursor position is included in a predetermined position, and a process of selecting one of a plurality of processes based on the cursor position.
  • the control information communication unit 23 acquires processing information related to processing of the television 10 or outputs processing information to the television 10.
  • the image processing unit 24 processes the acquired image and information to generate an image to be displayed on an external display device.
  • the acquired information includes, for example, the coordinate value of the cursor and the coordinate value of the PinP display image.
  • the image output unit 25 outputs an image to be displayed on the television 10.
  • FIG. 2 is a diagram showing an appearance of the display system 1 according to the first embodiment of the present invention.
  • the display system 1 includes the mouse 2, the television 10, and the STB 20.
  • an image 31 of the STB 20, a PinP display image 32, and a cursor 33 are displayed.
  • the user can move the cursor 33 using the mouse 2.
  • the display system 1 is configured to accept an operation from a device other than the mouse 2 (for example, a remote operation device 2a in an embodiment described later)
  • the television 10 displays the cursor 33, so that the user's Operability is improved. That is, in the display system 1, unlike the configuration in which the screen of the television 10 is directly touched and input, the cursor is displayed on the television 10, so that the user can operate using the cursor 33. Improves.
  • FIG. 3 is a sequence diagram showing a processing flow of the display system 1 according to the first embodiment of the present invention. Processing of the display system 1 will be described with reference to FIG.
  • the processing of the display system 1 starts from a state where the television 10 can execute PinP, that is, a state where an image is acquired from the STB 20.
  • the image output from the STB 20 is output by the image output unit 25 and acquired by the external image input unit 16.
  • the setting changing unit 12 of the television 10 determines whether or not the setting for executing PinP is made (step S1). Since whether or not to execute PinP is set by the user, the setting change unit 12 can determine whether or not the setting to execute PinP is made based on information acquired from the input unit 11.
  • step S1 If it is determined in step S1 that “PinP is not set to be executed” (step S1: No), the television 10 continues to repeat step S1 to determine whether or not it is set to execute PinP. To do.
  • step S1 when it is determined in step S1 that “PinP is set to be executed” (step S1: Yes), the setting change unit 12 outputs the coordinates of the PinP display image to the control information communication unit 13. Outputs a signal indicating an instruction.
  • the control information communication unit 13 acquires a signal indicating a command for outputting the coordinates of the PinP display image
  • the control information communication unit 13 acquires the coordinate value of the PinP display image from the PinP processing unit 14.
  • the coordinate values to be acquired are the coordinate values at the four corners of the PinP display image so that the position and size at which the PinP display image is displayed can be seen.
  • the control information communication part 13 of the television 10 outputs the acquired coordinate value to STB20 (step S2).
  • the control information communication unit 23 of the STB 20 acquires the output coordinate value (step S3).
  • the information output by the control information communication unit 13 is, for example, the PinP display image such as the upper left coordinate value of the PinP display image and the size of the PinP display image, instead of the coordinate values of the four corners of the PinP display image described above. Any information can be used as long as it indicates the position and size at which is displayed.
  • the control information communication unit 23 of the STB 20 outputs the acquired coordinate value to the cursor position processing unit 22.
  • the cursor position processing unit 22 that has acquired the coordinate value indicates in which part of the image of the STB 20 output from the image output unit 25 the PinP display image displayed on the television 10 is displayed from the acquired coordinate value. I understand.
  • the cursor position processing unit 22 determines whether the PinP display image and the cursor overlap with each other from the acquired coordinate value and the cursor coordinate value indicating the cursor position (step S4).
  • step S4 determines that the coordinate value of the PinP display image, the PinP display image, and the cursor are A signal indicating the overlap is output to the image processing unit 24.
  • the image processing unit 24 highlights the outer frame of the area indicated by the coordinate value of the PinP display image. Then, the image is corrected so that the PinP display image is highlighted (step S5). Then, the image processing unit 24 outputs the generated image to the image output unit 25.
  • the image output unit 25 outputs the acquired image to the television 10 (step S6).
  • the external image input unit 16 of the television 10 acquires the output image (step S7).
  • step S4 determines whether “the PinP display image and the cursor do not overlap” (step S4: No). If it is determined in step S4 that “the PinP display image and the cursor do not overlap” (step S4: No), the process of STB 20 proceeds to step S6.
  • the external image input unit 16 of the television 10 that has acquired the image outputs the acquired image to the image processing unit 17.
  • the image processing unit 17 superimposes the image of the television 10 on the acquired image, executes PinP, and outputs it to the display unit 18.
  • the PinP processing unit 14 executes PinP
  • the PinP processing unit 14 outputs the coordinate value of the position of the PinP display image and the size of the PinP display image to the image processing unit 17, and the image processing unit 17 sets the position of the acquired coordinate value.
  • the PinP display image is superimposed with the acquired size.
  • the display unit 18 displays the acquired image (step S8).
  • control information communication unit 13 of the television 10 outputs setting information indicating whether or not the setting is to execute PinP to the STB 20 (step S9).
  • the control information communication unit 23 of the STB 20 acquires the output setting information (step S10).
  • control information communication unit 23 of the STB 20 outputs the acquired setting information to the cursor position processing unit 22.
  • the cursor position processing unit 22 acquires the setting information and determines whether or not it is set to execute PinP (step S11).
  • step S11 If it is determined in step S11 that “PinP is set to be executed” (step S11: Yes), the cursor position processing unit 22 determines again whether the PinP display image and the cursor overlap. Therefore, the process returns to step S4.
  • step S11 determines that “the setting is such that PinP is not executed” (step S11: No)
  • step S11: No the processing in FIG. 3 ends.
  • step S9 it is not necessary to output the PinP setting information every time, and the setting information may be output only when the setting is such that PinP is not executed. That is, the STB 20 may repeat step S4 while the television 10 is set to execute PinP, and may end the process when the setting is such that PinP is not executed.
  • FIG. 4 shows an image displayed on the television 10 when the cursor 33 and the PinP display image 32 overlap each other.
  • FIG. 4 is an image displayed on the television 10 when the cursor 33 overlaps the PinP display image 32 in the display system 1 according to the first embodiment of the present invention. As shown in FIG. 4, when the cursor 33 (not actually displayed) and the PinP display image 32 overlap, the cursor 33 is not displayed. However, by highlighting the outer frame of the PinP display image 32, the user can recognize that the cursor 33 and the PinP display image 32 overlap.
  • the STB 20 highlights the outer frame of the PinP display image when the PinP display image and the cursor overlap each other. Therefore, since the user can recognize that the PinP display image and the cursor overlap, even if the PinP display image and the cursor overlap and the cursor is not displayed, the position of the cursor is not lost.
  • step S5 of FIG. 3 in the first embodiment the STB 20 highlights the outer frame of the PinP display image. However, in the second embodiment, only the portion corresponding to the cursor coordinate value is highlighted.
  • step S5 the cursor position processing unit 22 sends a signal indicating that the cursor coordinate value, the coordinate value of the PinP display image, and the PinP display image and the cursor overlap each other to the image processing unit 24.
  • the cursor coordinate value is output.
  • the image processing unit 24 highlights the outer frame of the area indicated by the coordinate value of the PinP display image. Although it is displayed, only the portion corresponding to the cursor coordinate value is highlighted from the acquired cursor coordinate value.
  • FIG. 5 shows an image in which the outer frame is highlighted only in the portion corresponding to the cursor coordinate value by the above processing.
  • FIG. 5 is an image displayed on the television 10 when the cursor 33 overlaps the PinP display image 32 in the display system 1 according to the second embodiment of the present invention. As shown in FIG. 5, when the cursor 33 (not actually displayed) and the PinP display image 32 overlap, the cursor 33 is not displayed. However, only the portion corresponding to the coordinate value of the cursor 33 in the PinP display image 32 is highlighted.
  • the image processing unit 24 extends in the vertical direction of the PinP display area.
  • the vicinity of the portion where the vertical coordinate is Y0 is highlighted, and among the outer frames extending in the horizontal direction of the PinP display area, the vicinity of the portion where the horizontal coordinate is Y0 is highlighted.
  • the STB 20 highlights the outer frame only in the portion corresponding to the cursor coordinate value. Therefore, the user can recognize not only that the cursor is overlapped with the PinP display image but also where the cursor is in the PinP display image.
  • the STB 20 generates an image in which the outer frame of the PinP display image 32 is highlighted.
  • the television 10 performs this process.
  • Embodiment 3 will be described with reference to FIG.
  • FIG. 6 is a sequence diagram showing a processing flow of the display system 1 according to the first embodiment of the present invention.
  • Steps S1 to S4 for determining whether or not the cursor and the cursor are overlapped are the same as those described above, and will be omitted.
  • step S4 If it is determined in step S4 that “the PinP display image and the cursor overlap” (step S4: Yes), the cursor position processing unit 22 generates a signal indicating that the PinP display image and the cursor overlap. And output to the control information communication unit 23.
  • the control information communication unit 23 outputs the acquired signal to the television 10 (step S21).
  • the control information communication unit 13 of the television 10 acquires the output signal (step S22).
  • the control information communication unit 13 outputs the acquired signal to the PinP processing unit 14.
  • step S4 determines that “the PinP display image and the cursor do not overlap” (step S4: No)
  • the STB 20 proceeds to the process of step S23.
  • the image processing unit 24 of the STB 20 outputs an image to be output to the image output unit 25.
  • the image output unit 25 outputs the acquired image to the television 10 (step S23).
  • the external image input unit 16 of the television 10 acquires the output image (step S24).
  • the external image input unit 16 outputs the acquired image to the image processing unit 17.
  • the image processing unit 17 superimposes the PinP display image on the acquired image based on the coordinate value and the size acquired from the PinP processing unit 14. At that time, the PinP processing unit 14 outputs the PinP display image, the cursor, A signal indicating that is overlapped is also acquired. When acquiring a signal indicating that the PinP display image and the cursor overlap, the image processing unit 17 highlights the outer frame of the PinP display image and executes PinP. And the produced
  • the TV 10 outputs the PinP setting information, the STB 20 acquires the PinP setting information, and steps S9 to S11 for determining whether or not the setting for executing PinP is the same as the above-described processing. Omitted.
  • the television 10 acquires a signal indicating that the PinP display image and the cursor overlap from the STB 20
  • the user can input the PinP display image and the cursor, as in the first embodiment. Therefore, even if the PinP display image and the cursor overlap and the cursor is not displayed, the cursor position is not lost.
  • Embodiment 3 (Difference between Embodiment 1 and Embodiment 3) As described above, the effects of Embodiment 1 and Embodiment 3 are the same, but whether the highlighting of the outer frame of the PinP display image, that is, the main body for highlighting, is STB 20 or TV 10. It is different in point. This difference will be described.
  • the television 10 Since the television 10 is generally more expensive than the STB 20, it is considered that the user does not frequently replace it. Further, the television 10 mainly performs a process of displaying the acquired image, and therefore has a small memory capacity and is not versatile.
  • the STB 20 is generally cheaper than the television 10, and for example, when a high-spec STB 20 is released, the user may purchase it and replace it.
  • the processing is more complicated than that of the television 10, the capacity of the installed memory is also larger than that of the television 10.
  • the processing entity is the STB 20
  • the STB 20 is easier to replace than when the processing entity is the television 10, so that the user can realize the display system 1 at a low cost.
  • the STB 20 is equipped with more memory, there is an advantage that the processing speed is increased.
  • the TV 10 when the main body that performs highlighting is the TV 10, the TV 10 needs to have a graphic display function for displaying a highlight display, a cursor, and the like. However, when the main body that performs highlighting is the STB20, The TV 10 does not need to have such a graphic display function.
  • Embodiments 1 to 3 In the first to third embodiments described above, an example in which at least a part of the PinP display image 32 is highlighted is described. However, the first to third embodiments are not limited to this. For example, it is only necessary to display an image that highlights the PinP display image, such as increasing the brightness of the PinP display image or darkening other than the PinP display image.
  • the STB 20 or the television 10 highlights the PinP display image when the PinP display image and the cursor overlap each other.
  • the STB 20 overlaps the PinP display image with the cursor. Regulate not to be.
  • Embodiment 4 will be described with reference to FIG.
  • FIG. 7 is a sequence diagram showing a processing flow of the display system 1 according to the fourth embodiment of the present invention.
  • Steps S1 to S4 for determining whether or not the cursor and the cursor are overlapped are the same as those described above, and will be omitted.
  • step S4 If it is determined in step S4 that “the PinP display image and the cursor overlap” (step S4: Yes), the cursor position processing unit 22 does not update the coordinates of the cursor, and changes the coordinates of the cursor to the PinP display image. And the coordinates before the cursor overlap (step S31). That is, the cursor is regulated so as not to overlap the PinP display image. Then, the cursor position processing unit 22 outputs a signal indicating that the PinP display image and the cursor are overlapped to the image processing unit 24. When acquiring a signal indicating that the PinP display image and the cursor overlap each other, the image processing unit 24 generates an image in which the size of the cursor displayed in the image is reduced (step S32). The image processing unit 24 outputs the generated image to the image output unit 25.
  • step S4 determines that “the PinP display image and the cursor do not overlap” (step S4: No)
  • the STB 20 proceeds to the process of step S6.
  • the image output unit 25 outputs the image to the television 10, the steps S6 to S8 for outputting the image acquired by the television 10, and the television 10 outputs the PinP setting information, and the STB 20 acquires the PinP setting information.
  • Steps S9 to S11 for determining whether or not PinP is set to be executed are the same as those described above, and are therefore omitted.
  • An image in which the cursor size is reduced by the above processing is shown in FIG.
  • FIG. 8 is an image displayed by the television 10 in the display system 1 according to the fourth embodiment of the present invention, and (a) is an image including the cursor 34 whose size is reduced.
  • FIG. 8A when the user operates the cursor so as to overlap the PinP display image 32, the cursor is fixed and does not move so that the cursor does not overlap. Furthermore, a cursor 34 whose size has been reduced is displayed.
  • the image processing unit 24 changes the size of the cursor.
  • the color, shape, or blinking display method of the cursor may be changed, or these may be combined.
  • FIGS. 8B and 8C show images in which the color or shape of the cursor is changed.
  • FIG. 8B is an image including the cursor 35 whose color has been changed
  • FIG. 8C is an image including the cursor 36 whose shape has been changed.
  • FIGS. 8B and 8C as in FIG. 8A, when the user operates the cursor so as to overlap the PinP display image 32, the cursor is fixed and does not move so that the cursor does not overlap. . Further, a cursor 35 whose color has been changed and a cursor 36 whose shape has been changed are displayed.
  • the user since the PinP display image and the cursor do not overlap, the user does not lose sight of the cursor position.
  • the user by changing the size, color, shape, etc. of the cursor that has stopped moving, the user can recognize that the cursor has stopped moving as an operation to superimpose the cursor on the PinP display image. .
  • Embodiment 4 the cursor is fixed when the PinP display image and the cursor overlap, but in Embodiment 5, the STB 20 regulates the cursor so that the cursor moves along the PinP display image.
  • the fifth embodiment will be described with reference to FIG.
  • FIG. 9 is a sequence diagram showing a processing flow of the display system 1 according to the fifth embodiment of the present invention.
  • Steps S1 to S4 for determining whether or not the cursor and the cursor are overlapped are the same as those described above, and will be omitted.
  • step S4 When it is determined in step S4 that “the PinP display image and the cursor overlap” (step S4: Yes), the cursor position processing unit 22 determines which side of the PinP display image the cursor overlaps across. judge. Then, of the cursor coordinate values, the coordinate component perpendicular to the crossed side is not updated, and only the coordinate component parallel to the one side is updated (step S41). Then, the cursor position processing unit 22 outputs the cursor coordinate value to the image processing unit 24. The image processing unit 24 generates an image displaying the cursor based on the acquired cursor coordinate value, and outputs the generated image to the image output unit 25. The image output unit 25 outputs the acquired image to the television 10 (step S42).
  • step S4 determines whether “the PinP display image and the cursor do not overlap” (step S4: No). If it is determined in step S4 that “the PinP display image and the cursor do not overlap” (step S4: No), the STB 20 proceeds to the process of step S42.
  • FIG. 10 shows how the cursor moves along the PinP display image by the above processing.
  • FIG. 10 is an image displayed on the television 10 in the display system 1 according to the fifth embodiment of the present invention.
  • FIG. 10A is a diagram in which the user moves the cursor 33 to the PinP display image 32 across the upper side of the PinP display image 32. It is a figure which shows a mode that it overlaps, (b) is a figure which shows the cursor 33 actually displayed by operation of (a).
  • FIG. 10A when the user crosses the upper side of the PinP display image 32 and the cursor 33 is superimposed on the PinP display image 32, a component perpendicular to the upper side of the PinP display image 32 among the coordinates of the cursor, That is, since the vertical coordinate component of the television 10 is not updated, the vertical position does not change.
  • the component parallel to the upper side of the PinP display image 32 that is, the coordinate component in the horizontal direction of the television 10 is updated. That is, as shown in FIG. 10B, the cursor 33 moves only in the horizontal direction by the user's operation in FIG.
  • FIG. 11 is an image displayed on the television 10 in the display system 1 according to the fifth embodiment of the present invention.
  • FIG. 11A is a diagram in which the user moves the cursor 33 to the PinP display image 32 across the left side of the PinP display image 32. It is a figure which shows a mode that it overlaps, (b) is a figure which shows the cursor 33 actually displayed by operation of (a).
  • FIG. 11A when the user crosses the left side of the PinP display image 32 and the cursor 33 is superimposed on the PinP display image 32, the component perpendicular to the left side of the PinP display image 32 among the coordinates of the cursor, That is, since the horizontal coordinate component of the television 10 is not updated, the horizontal position does not change.
  • the component parallel to the left side of the PinP display image 32 that is, the coordinate component in the vertical direction of the television 10 is updated. That is, as shown in FIG. 11B, the cursor 33 moves only in the vertical direction by the user's operation in FIG.
  • FIG. 12 shows an image displayed on the television 10 when the MENU is displayed in the display system 1 according to the sixth embodiment of the present invention.
  • FIG. 12A shows the background of the main screen (PinP display image) on the television 10.
  • PinP display image Is a diagram showing a case where a television image is displayed, and an image input from the STB 20 is displayed as the PinP display image 31, and
  • (b) is a diagram showing the television 10 from the STB 20 as a main screen (background of the PinP display image). It is a figure which shows the case where the image input is displayed and a television image is displayed as the PinP display image 31.
  • FIG. In FIGS. 12A and 12B a MENU screen is displayed as a television image.
  • the TV 10 can determine whether the TV image is the main screen or the image acquired from the STB 20 is the main screen when PinP is executed. For example, when the television 10 uses the television image as the main screen, when the user displays the MENU of the television 10, the MENU is displayed on the main screen as shown in FIG. On the other hand, when the image acquired by the television 10 from the STB 20 is used as the main screen, when the user displays the MENU of the television 10, the MENU is displayed on the PinP display image 31 as shown in FIG.
  • the position where the MENU is displayed changes depending on whether the TV image is the main screen or the image acquired from the STB 20 is the main screen.
  • the television 10 is a coordinate system managed by the STB 20 side, and has a coordinate system in the image 31 of the STB 20 and a local coordinate system in the PinP display image 32. These two coordinate systems are shown in FIG.
  • FIG. 13 is a diagram showing a coordinate system of the television 10 in the display system 1 according to the sixth embodiment of the present invention
  • FIG. 13A is a diagram showing a coordinate system in the image 31 of the STB 20
  • FIG. () Is a diagram showing a local coordinate system in the PinP display image 32
  • (c) is a diagram showing an example of the coordinate system of (a).
  • each coordinate is expressed as follows.
  • Cursor coordinates (cxPinP, cyPinP)
  • the cursor position processing unit 15 of the television 10 calculates the coordinates (cxPinP, cyPinP) of the cursor in the local coordinate system in the PinP display image 32 by the following equation (1). Can be converted from
  • the cursor position processing unit 15 of the television 10 uses the coordinates (cxPinP, cyPinP) of the cursor in the PinP display image 32 in FIG. 13C as the coordinate system (x, y) in the image 31. Obtained from the values of each coordinate.
  • data of either coordinate system may be used.
  • This coordinate conversion is performed by the cursor position processing unit 15 of the television 10, but is also performed by the cursor position processing unit 22 of the STB 20.
  • FIG. 14 is a sequence diagram showing a processing flow of the display system 1 according to the sixth embodiment of the present invention.
  • the sixth embodiment will be described with reference to FIG.
  • the television 10 since the television 10 displays a television image as the main screen, it is not necessary to convert the coordinate system.
  • Steps S1 to S4 for determining whether or not the cursor and the cursor are overlapped are the same as those described above, and will be omitted.
  • step S4 when it is determined that “the PinP display image and the cursor overlap” (step S4: Yes), the cursor position processing unit 22 outputs the cursor coordinate value to the control information communication unit 23.
  • the control information communication unit 23 outputs the acquired cursor coordinate value to the television 10 (step S51).
  • the control information communication unit 13 of the television 10 acquires the output cursor coordinate value (step S52). Then, the control information communication unit 13 outputs the acquired cursor coordinate value to the cursor position processing unit 15.
  • the cursor position processing unit 15 outputs the acquired cursor coordinate value to the image processing unit 17 as it is.
  • step S4 determines whether “the PinP display image and the cursor do not overlap” (step S4: No). If it is determined in step S4 that “the PinP display image and the cursor do not overlap” (step S4: No), the STB 20 proceeds to the process of step S53.
  • the image processing unit 24 of the STB 20 outputs the generated image to the image output unit 25.
  • the image output unit 25 outputs the acquired image to the television 10 (step S53).
  • the external image input unit 16 of the television 10 acquires the output image (step S54).
  • the external image input unit 16 outputs the acquired image to the image processing unit 17.
  • the image processing unit 17 that has acquired the cursor coordinate value and the image first superimposes the PinP display image on the acquired image. Then, a cursor is displayed at the position of the acquired cursor coordinate value, an image is generated, and output to the display unit 18.
  • the display unit 18 displays the acquired image (step S55).
  • the TV 10 outputs the PinP setting information, the STB 20 acquires the PinP setting information, and steps S9 to S11 for determining whether or not the setting for executing PinP is the same as the above-described processing. Omitted.
  • FIG. 15 shows an image in which the cursor is displayed on the PinP display image by the above processing.
  • FIG. 15 is an image displayed on the television 10 when the cursor 33 overlaps the PinP display image 32 in the display system 1 according to the sixth embodiment of the present invention.
  • the television 10 displays the cursor 33 from above the PinP display image 32, so the cursor 33 overlaps with the PinP display image 32 and the cursor 33 There is no such thing as not being displayed.
  • the cursor is displayed on the PinP display image, so that the user does not lose sight of the cursor position.
  • the cursor since the cursor moves as operated by the user, the cursor is operated without worrying about the PinP display image without being aware that the cursor is not displayed when the PinP display image and the cursor overlap each other. be able to.
  • the television 10 displays a television image as a main screen, but in Embodiment 7, the television 10 displays an image acquired from the STB 20 as a main screen.
  • Embodiment 7 will be described with reference to FIG.
  • FIG. 16 is a sequence diagram showing a processing flow of the display system 1 according to the seventh embodiment of the present invention.
  • Steps S1 to S4 for determining whether or not the cursor and the cursor are overlapped are the same as those described above, and will be omitted.
  • step S4 when it is determined that “the PinP display image and the cursor overlap” (step S4: Yes), the cursor position processing unit 22 outputs the cursor coordinate value to the control information communication unit 23.
  • the control information communication unit 23 outputs the acquired cursor coordinate value to the television 10 (step S61).
  • the control information communication unit 13 of the television 10 acquires the output cursor coordinate value (step S62). Then, the control information communication unit 13 outputs the acquired cursor coordinate value to the cursor position processing unit 15.
  • the television 10 displays the image acquired from the STB 20 as the main screen. Since the cursor coordinate value acquired by the cursor position processing unit 15 is a coordinate value in the coordinate system in the STB 20 image, it needs to be converted into a coordinate value in the local coordinate system in the PinP display image. Therefore, the cursor position processing unit 15 converts the acquired cursor coordinate value into a coordinate value in the local coordinate system (step S63). Then, the converted cursor coordinate value is output to the image processing unit 17.
  • step S4 determines that “the PinP display image and the cursor do not overlap” (step S4: No)
  • the STB 20 proceeds to the process of step S64.
  • the image processing unit 24 of the STB 20 outputs the generated image to the image output unit 25.
  • the image output unit 25 outputs the acquired image to the television 10 (step S64).
  • the external image input unit 16 of the television 10 acquires the output image (step S65).
  • the external image input unit 16 outputs the acquired image to the image processing unit 17.
  • the image processing unit 17 that has acquired the cursor coordinate value and the image first superimposes the PinP display image on the acquired image. Then, a cursor is displayed at the position of the acquired cursor coordinate value, an image is generated, and output to the display unit 18.
  • the display unit 18 displays the acquired image (step S66).
  • the TV 10 outputs the PinP setting information, the STB 20 acquires the PinP setting information, and steps S9 to S11 for determining whether or not the setting for executing PinP is the same as the above-described processing. Omitted.
  • the PinP display image and the cursor overlap each other by converting the coordinate values as in the sixth embodiment.
  • the cursor is displayed on the PinP display image. Therefore, the user can operate the cursor without losing sight of the position of the cursor and without worrying about the PinP display image.
  • the above-described conversion of the cursor coordinate values may be executed by the cursor position processing unit 22 of the STB 20.
  • the cursor coordinate value output from the STB 20 is a coordinate value in the coordinate system in the image of the STB 20, so the cursor position processing unit 15 of the television 10 uses the acquired cursor coordinate value as an image. What is necessary is just to output to the process part 17.
  • the television 10 displays a cursor on the PinP display image only when the PinP display image and the cursor overlap.
  • the television 10 includes a cursor plane, and the PinP display image The TV 10 also displays a cursor other than the display image. Embodiment 8 will be described with reference to FIG.
  • FIG. 17 is a sequence diagram showing a processing flow of the display system 1 according to the eighth embodiment of the present invention.
  • the television 10 since the television 10 displays a television image as the main screen, there is no need to convert the coordinate system.
  • the cursor position processing unit 22 of the STB 20 outputs the cursor coordinate value to the control information communication unit 23.
  • the control information communication unit 23 outputs the acquired cursor coordinate value to the television 10 (step S71).
  • the control information communication unit 13 of the television 10 acquires the output cursor coordinate value (step S72). Then, the control information communication unit 13 outputs the acquired cursor coordinate value to the cursor position processing unit 15.
  • the cursor position processing unit 15 outputs the acquired cursor coordinate value to the image processing unit 17 as it is.
  • the image processing unit 24 of the STB 20 outputs the generated image to the image output unit 25.
  • the image output unit 25 outputs the acquired image to the television 10 (step S73).
  • the external image input unit 16 of the television 10 acquires the output image (step S74).
  • the external image input unit 16 outputs the acquired image to the image processing unit 17.
  • the image processing unit 17 that has acquired the cursor coordinate value and the image first superimposes the PinP display image on the acquired image. Then, a cursor is displayed at the position of the acquired cursor coordinate value, an image is generated, and output to the display unit 18.
  • the display unit 18 displays the acquired image (step S75).
  • the TV 10 outputs the PinP setting information, the STB 20 acquires the PinP setting information, and steps S9 to S11 for determining whether or not the setting for executing PinP is the same as the above-described processing. Omitted.
  • the STB 20 always outputs the cursor coordinate value and displays the cursor at the position of the cursor coordinate value acquired by the television 10, so that the television 10 always displays the cursor regardless of the PinP display image. indicate. Therefore, the user does not lose sight of the cursor position.
  • the television since the television always displays the cursor, even when the cursor overlaps the PinP display image, the cursor can be moved smoothly without changing the shape of the cursor.
  • the television 10 described above may display an image input from the STB 20 as a main screen.
  • the cursor position value output from the STB 20 is displayed by the cursor position processing unit 15 of the television 10 as an image of the STB 20.
  • the coordinate value in the internal coordinate system may be converted into the coordinate value in the coordinate system in the PinP display image.
  • the conversion of the cursor coordinate value may be executed in the cursor position processing unit 22 of the STB 20.
  • the cursor coordinate value output from the STB 20 is a coordinate value in the coordinate system in the image of the STB 20, so the cursor position processing unit 15 of the television 10 uses the acquired cursor coordinate value as it is. What is necessary is just to output to the image process part 17.
  • the television 10 displays the cursor
  • the STB 20 displays the cursor
  • the television 10 may include a television image output unit (not shown) that acquires a television image from the image processing unit 17 and outputs the acquired television image to the STB 20.
  • the STB 20 may include a television image acquisition unit (not shown) that acquires a television image from the television 10 and outputs the acquired television image to the image processing unit 17.
  • the image processing unit 24 of the STB 20 only needs to have a function of executing PinP. The processing of the ninth embodiment will be described.
  • the television image output unit outputs the television image acquired from the image processing unit 17 to the STB 20.
  • the TV image acquisition unit of the STB 20 acquires the output TV image and outputs it to the image processing unit 24.
  • the image processing unit 24 superimposes the acquired television image on the image of the STB 20 as a PinP display image, and further generates an image on which the cursor is displayed.
  • the generated image is output to the image output unit 25, and the image output unit 25 outputs the acquired image to the television 10.
  • the external image input unit 16 of the television 10 acquires the output image and outputs the acquired image to the image processing unit 17. Since the acquired image is already superimposed with the PinP display image, the image processing unit 17 outputs the acquired image to the display unit 18 as it is, and the display unit 18 displays the acquired image.
  • the cursor is displayed on the PinP display image. Therefore, the user can operate the cursor without losing sight of the position of the cursor and without worrying about the PinP display image.
  • the display system 1 performs processing related to the display of the cursor.
  • the STB 20 controls the television 10 using the cursor. The tenth embodiment will be described below with reference to FIG.
  • FIG. 18 is a sequence diagram showing a processing flow of the display system 1 according to the tenth embodiment of the present invention.
  • Steps S1 to S4 for determining whether or not the cursor and the cursor are overlapped are the same as those described above, and will be omitted.
  • step S4 determines how the cursor moves with respect to the PinP display image. And based on the determination result, one of predetermined processes is selected (step S81). Examples of the predetermined process and the process selected by the cursor movement will be described later. Then, the cursor position processing unit 22 outputs processing information indicating the selected processing to the control information communication unit 23.
  • the control information communication unit 23 outputs the acquired processing information to the television 10 (step S82).
  • the control information communication unit 13 of the television 10 acquires the output processing information (step S83) and outputs it to the setting change unit 12.
  • the setting change unit 12 executes the process indicated by the acquired process information (step S84).
  • the TV 10 outputs the PinP setting information, the STB 20 acquires the PinP setting information, and steps S9 to S11 for determining whether or not the setting for executing PinP is the same as the above-described processing. Omitted.
  • the cursor position processing unit 22 Select the process to increase the channel of the broadcast wave received by.
  • An image displayed on the television 10 in this case is shown in FIG.
  • FIG. 19 is an image displayed on the television 10 in the display system 1 according to the tenth embodiment of the present invention
  • FIG. 19A is a diagram showing the movement of the cursor that raises the channel of the broadcast wave received by the television 10.
  • (b) is an image of the television 10 after the processing of (a) is executed.
  • FIG. 19A when the cursor 33 straddles the area of the PinP display image 32 in the vertical direction from the bottom to the top, as shown in FIG.
  • the received broadcast wave channel image is displayed on the PinP display image 32.
  • the cursor 33 straddles the area of the PinP display image 32 from the top to the bottom, the channel of the broadcast wave received by the television 10 is lowered.
  • the cursor position processing unit 22 selects a process for displaying the MENU of the television 10. An image displayed on the television 10 in this case is shown in FIG.
  • FIG. 20 shows an image displayed on the television 10 in the display system 1 according to the tenth embodiment of the present invention.
  • FIG. 20A shows the movement of the cursor 33 on which the television 10 according to the tenth embodiment of the present invention displays MENU.
  • (B) is an image of the television 10 after the processing of (a) is executed.
  • the television 10 displays the PinP display image as shown in FIG. MENU is slid from the lower side of 32 and displayed.
  • the TV 10 may slide the MENU from the direction in which the cursor 33 enters. Good.
  • the cursor position processing unit 22 determines a side (one side of the region) that is crossed when the cursor 33 enters the region of the PinP display image 32.
  • the cursor position processing unit 22 outputs processing information indicating that the MENU of the television 10 is slid and displayed from the determined one side to the control information communication unit 23.
  • the setting changing unit executes the process indicated by the acquired process information. Therefore, since the STB 20 slides and displays the MENU of the television 10 in accordance with the movement of the cursor 33 entering the area of the PinP display image 32, the user operability is improved. Further, the STB 20 can suitably notify the user that the displayed MENU is processing for the user's operation.
  • the cursor position processing unit 22 determines the position of the PinP display image on the television 10 as the cursor. Select the process to move in the direction reached by. An image displayed on the television 10 in this case is shown in FIG.
  • FIG. 21 is an image displayed on the television 10 in the display system 1 according to the tenth embodiment of the present invention.
  • FIG. 21A is a diagram illustrating the movement of the cursor 33 that changes the position of the PinP display image 32 on the television.
  • (b) is an image of the television 10 after the processing of (a) is executed.
  • FIG. 21A when the cursor 33 straddles the PinP display image 32 from the left and reaches the right end of the display image 31 of the STB 20, the position of the PinP display image 32 is shown in FIG. To the right where the cursor arrives.
  • the cursor position processing unit 22 changes the size of the PinP display image of the television 10. Select a process. In this case, an image displayed on the television 10 is shown in FIG.
  • FIG. 22 is an image displayed on the television 10 in the display system 1 according to the tenth embodiment of the present invention
  • FIG. 22A is a diagram illustrating the movement of the cursor 33 for changing the size of the PinP display image 32 by the television.
  • (b) is an image of the television 10 after the processing of (a) is executed.
  • FIG. 22A when the cursor 33 crosses the PinP display image 32 from the right and stops at the left boundary of the PinP display image 32, the size of the PinP display image is shown in FIG. Make it smaller.
  • the cursor 33 straddles the PinP display image 32 from the left and stops at the right boundary of the PinP display image 32, the PinP display image 32 is enlarged.
  • the cursor position processing unit 22 selects a process for displaying the operation toolbar.
  • an image displayed on the television 10 is shown in FIG.
  • FIG. 23 is an image displayed on the television 10 in the display system 1 according to the tenth embodiment of the present invention.
  • FIG. 23A is a diagram illustrating the movement of the cursor 33 on which the television 10 displays the operation toolbar.
  • b) is an image of the television 10 after the processing of (a) is executed.
  • the operation toolbar is displayed outside the PinP display image as shown in FIG. To do.
  • This operation toolbar may be either an operation toolbar that can operate the television 10 or an operation toolbar that can operate the STB 20, and the user can use the operation toolbar by using the mouse 2 connected to the STB 20.
  • step S81 described above the cursor position processing unit 22 moves the cursor 33 with respect to the PinP display image 32 without referring to whether or not the user has pressed the button for inputting the operation. Based on the determination result of determining how the object moves, one of a plurality of predetermined processes is selected. That is, since the STB 20 can execute processing on the television 10 without causing the user to press a button, the convenience of the operation of the television 10 by the user can be improved.
  • the STB 20 may be configured to accept an operation from a device other than the mouse 2 (for example, a remote operation device 2a in an embodiment described later). In that case, an apparatus that does not include a button can be used as the operation reception apparatus.
  • the cursor position processing unit 22 selects a process for displaying a volume bar.
  • the cursor position processing unit 22 determines whether or not the button of the mouse 2 has been clicked based on a signal from the external device connection unit 21. In this case, images displayed on the television 10 are shown in FIGS.
  • FIG. 24 is an image displayed on the television 10 in the display system 1 according to the tenth embodiment of the present invention
  • FIG. 24A is a diagram illustrating the movement of the cursor 33 on which the television 10 displays a volume bar.
  • b) is an image of the television 10 after the processing of (a) is executed.
  • FIG. 24A when the cursor 33 enters the area of the PinP display image 32 and further clicks the button of the mouse 2, a volume bar is displayed as shown in FIG.
  • FIG. 24C and FIG. 24D show an operation for raising the volume and an operation for turning off the volume bar when the volume bar is displayed.
  • FIG. 24C is a diagram showing the movement of the cursor 33 that increases the volume after the process of FIG. 24B is executed
  • FIG. 24D is an image of the television 10 after the display of the volume bar disappears.
  • the cursor position processing unit 22 selects a process for increasing the volume.
  • the cursor position processing unit 22 selects a process for deleting the display of the volume bar.
  • the user can operate the television 10 by the relative movement of the cursor with respect to the PinP display image. Therefore, when the user wants to operate the television 10, the television 10 is also operated by operating the mouse 2 connected to the STB 20 without operating the remote controller of the television 10 or the keys provided on the main body of the television 10. Can be operated.
  • the relative movement of the cursor with respect to the PinP display image determined by the cursor position processing unit 22 is a movement of the cursor moving from outside the PinP display image area into the PinP display image area, and the cursor. Includes a movement that moves from within the area of the PinP display image to an area outside the area of the PinP display image, and a movement that temporarily stops within the area of the PinP display image.
  • the cursor position processing unit 22 changes the broadcast wave channel received by the display device, displays the menu screen of the display device, and changes the position of the PinP display image. At least one of processing, processing for changing the size of the PinP display image, and processing for displaying an operation toolbar To select the process.
  • the process is selected depending on the direction in which the cursor enters or exits the PinP display image area.
  • the tenth embodiment and the first embodiment are combined, and the STB 20 highlights the direction in which the cursor enters, the direction in which the cursor has come out, and the like.
  • FIG. 25 shows an image displayed on the television 10 in the eleventh embodiment.
  • FIG. 25 is an image displayed on the television 10 in the display system 1 according to the eleventh embodiment of the present invention.
  • FIG. 25A shows an outer frame in the direction in which the cursor 33 enters the PinP display image 32 highlighted. It is an image.
  • the image processing unit 24 of the STB 20 highlights the left side of the outer frame of the PinP display image, for example, in yellow To do.
  • FIG. 25B is an image in which an outer frame in a direction in which the cursor 33 comes out from the PinP display image 32 is highlighted. As shown in FIG. 25B, when the cursor 33 comes out from the right of the area of the PinP display image 32, the image processing unit 24 of the STB 20 highlights the right side of the outer frame of the PinP display image in, for example, orange. indicate.
  • FIG. 25C is an image in which the outer frame in the direction in which the cursor 33 is placed on the PinP display image 32 is highlighted
  • FIG. 25D is an area of the PinP display image 32 after (c). This is an image with the outer frame highlighted in a different color.
  • FIG. 25A when the cursor 33 enters the area of the PinP display image from the bottom as shown in FIG. 25C, the image processing unit 24 of the STB 20 The side is highlighted, for example in yellow.
  • the image processing unit 24 of the STB 20 highlights the lower side of the outer frame of the PinP display image highlighted in yellow, for example, in blue. Light display.
  • the image processing unit 24 of the STB 20 highlights the outer frame of the PinP display image, such as the direction in which the cursor enters or exits the area of the PinP display image.
  • the user can be informed how the cursor operation is recognized. Therefore, the user can perform a desired operation using the cursor.
  • FIG. 26 is a block diagram showing a configuration of the display device 100 according to the twelfth embodiment of the present invention.
  • the display device 100 includes an input unit 11, a setting change unit (execution unit) 12, a PinP processing unit (coordinate acquisition unit) 14, a display unit 18, an external device connection unit 21, and a first cursor position.
  • a processing unit (determination unit, selection unit) 101, a second cursor position processing unit 102, a first image processing unit 103, and a second image processing unit 104 are provided.
  • the first cursor position processing unit 101 has the same function as the cursor position processing unit 22 in the above-described embodiment.
  • the second cursor position processing unit 102 has the same function as the cursor position processing unit 15 in the above-described embodiment.
  • the first image processing unit 103 has the same function as the image processing unit 24 in the above-described embodiment.
  • the second image processing unit 104 has the same function as the image processing unit 17 in the above-described embodiment.
  • FIG. 27 is a diagram illustrating an appearance of the display device 100 according to the twelfth embodiment of the present invention.
  • an image 101 generated by the first image processing unit 103, a PinP display image 102, and a cursor 103 are displayed.
  • the user can move the cursor 103 using the mouse 2.
  • the second image processing unit 104 superimposes the image (second image) of the display device 100 as a PinP display image on the image (first image) generated by the first image processing unit.
  • the PinP processing unit 14 acquires the coordinates of the PinP display image and outputs the acquired coordinates to the first cursor position processing unit 101.
  • the cursor position processing unit 101 determines whether or not the cursor included in the image generated by the first image processing unit overlaps the PinP display image.
  • the cursor position processing unit 101 determines the relative movement of the cursor with respect to the PinP display image.
  • the cursor position processing unit 101 selects one of a plurality of predetermined processes based on the determination result.
  • the cursor position processing unit 101 outputs processing information indicating the selected processing to the setting change unit 12.
  • the setting change unit 12 executes processing indicated by the processing information acquired from the cursor position processing unit 101.
  • the display device 100 has the same effects as the display system including the television 10 and the STB 20 in the above-described tenth embodiment.
  • the display device 100 realizes the functions of the setting change unit 12, the PinP processing unit 14, and the second cursor position processing unit 102 in FIG. It is also possible to configure so that the function is realized by the second CPU. Further, the display device 100 is configured so that each function of the setting change unit 12, the PinP processing unit 14, the first cursor position processing unit 101, and the second cursor position processing unit 102 is realized by one CPU. Also good.
  • the display device 100 may be realized by a television receiver equipped with a tuner. In this case, the display device 100 displays an image obtained by the tuner receiving the broadcast wave as a PinP display image. Further, the display device 100 may include an external signal receiving unit that receives an image signal supplied from an external device. In this case, the display device 100 displays an image indicated by the image signal supplied from the external device and received by the external signal receiving unit as a PinP display image.
  • FIG. 28 is a front view of the remote control device 2a that receives a user operation in the thirteenth embodiment of the present invention.
  • the remote operation device 2a is a device that receives a user operation instead of the mouse 2 in the above-described embodiment.
  • the remote operation device 2a transmits an operation instruction indicating the accepted user operation to the above-described STB 20 or the display device 100 by wireless communication such as infrared rays or Bluetooth. Further, the remote control device 2a includes a touch pad 200 as shown in FIG.
  • the touch pad 200 is a means for receiving an operation input by an operation indicator (for example, a finger, a stylus pen, etc.).
  • the remote operation device 2a accepts a touch by an operation indicator detected by the touch pad 200 as an operation input.
  • the touch pad 200 can detect a touch by an operation indicator by adopting a capacitance method, for example.
  • the operation input received by the touch pad 200 includes, for example, a slide (an operation for tracing the touch surface while touching the touch surface) and a tap (an operation for releasing the operation indicator immediately after touching). Etc. Further, the slide operation includes a flick (operation to lightly touch the touch surface with a finger).
  • the STB 20 or the display device 100 executes a process based on the operation instruction received from the remote operation device 2a. For example, when the STB 20 or the display device 100 receives an operation instruction indicating “slide operation in the left direction” from the remote operation device 2a, the STB 20 or the display device 100 executes a process of moving the cursor to the left direction.
  • the remote operation device 2a is not limited to the configuration including the touch pad 200.
  • the above-described television 10 or display device 100 includes a plurality of light sources, and the remote operation device 2a includes a light receiving sensor that receives light emitted from the plurality of light sources, thereby allowing the spatial operation of the remote operation device 2a to be performed. It is good also as a structure which can be detected (structure A).
  • a television 10 or a display device 100 having the configuration A and the remote control device 2b are shown in FIG. (A) of FIG. 29 is a figure which shows the external appearance of the television 10 or the display apparatus 100 in Embodiment 13 of this invention, and the remote control apparatus 2b.
  • the television 10 or the display device 100 includes a plurality of light sources 110.
  • the remote control device 2b includes a light receiving sensor 210, a button 220a, and a button 220b.
  • the remote control device 2b receives light emitted from the plurality of light sources 110 included in the television 10 or the display device 100 at the light receiving sensor 210.
  • the STB 20 or the display device 100 can detect the spatial movement of the remote control device 2b.
  • the remote operation device 2b may be configured to assign a function to the buttons 220a and 220b and to accept pressing of the buttons 220a and 220b by the user as an operation instruction.
  • the button 220a may be a determination button for determining an operation
  • the button 220b may be a cancel button for invalidating the operation.
  • the light source 110 may be disposed around the television 10 or the display device 100.
  • FIG. 29B is a diagram illustrating an appearance when the light source 110 is disposed around the television 10 or the display device 100. As shown in FIG. 29B, even when the light source 110 is arranged around the television 10 or the display device 100, the light receiving sensor 210 receives the light emitted from the light source 110, whereby the STB 20 Alternatively, the display device 100 can detect the spatial movement of the remote control device 2b.
  • the remote operation device 2a may include a vibration sensor that detects the vibration of the device itself, and an inclination sensor that detects the inclination of the device itself, so that the spatial movement of the remote operation device 2a can be detected. (Configuration B). Further, both the configurations A and B may be adopted, and details of the remote control device 2c in this case will be described later with reference to different drawings.
  • the STB 20 or the display device 100 and the remote operation device 2a are preferably configured to perform wireless communication, but the configuration is not limited thereto.
  • the television 10 or the display device 100 moves the cursor according to the spatial movement of the remote control device 2a.
  • the television 10 or the display device 100 can realize the functions described in the above-described embodiments even using such a remote control device 2a.
  • FIG. 30 is a block diagram showing the configuration of the remote control device 2c according to the thirteenth embodiment of the present invention.
  • the remote control device 2c includes a CMOS sensor 210c, a gyro sensor 240, an acceleration sensor 250, a wireless communication unit 260, and a control unit 270.
  • the CMOS sensor 210c receives infrared light emitted from the plurality of light sources 110, and receives light reception information indicating the positional relationship and intervals of the received plurality of infrared light. Output.
  • the CMOS sensor 210c corresponds to the light receiving sensor 210 of the remote control device 2b in FIG.
  • the gyro sensor 240 detects the tilt of the own device and outputs tilt information indicating the detected tilt of the own device.
  • the gyro sensor 240 corresponds to the tilt sensor in the configuration B described above.
  • the acceleration sensor 250 detects the acceleration of the own device and outputs acceleration information indicating the detected acceleration of the own device.
  • the acceleration sensor 250 functions as a vibration sensor in the configuration B described above.
  • the wireless communication unit 260 has a function of transmitting data to the television 10 or the display device 100 via wireless communication.
  • the control unit 270 comprehensively controls each component of the remote operation device 2c.
  • the remote operation device 2c transmits the vibration information detected by the gyro sensor 240, the tilt information detected by the acceleration sensor 250, and the light reception information by the CMOS sensor 210c to the STB 20 or the display device 100 via the wireless communication unit 260. .
  • the STB 20 or the display device 100 refers to the vibration information, the tilt information, and the light reception information received from the remote control device 2c, and moves the remote control device 2c, the tilt (posture) of the remote control device 2c, and the remote control device 2c.
  • the remote control device 2c detects the relative direction in which the TV 10 or the display device 100 is directed and the distance of the remote control device 2c to the television 10 or the display device 100. Then, the STB 20 or the display device 100 executes processing based on the detected result.
  • the STB 20 or the display device 100 detects that the remote operation device 2c moves to the left and the remote operation device 2c is directed left with respect to the television 10 or the display device 100, the STB 20 or the display device 100 Performs a process of moving the cursor to the left.
  • the remote operation device 2a is used instead of the mouse 2 as a device for receiving a user operation, the same effect as the display system 1 or the display device 100 in the above-described embodiment. Play.
  • Each block of the display system 1 may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like, or may be realized by software using a CPU (Central Processing Unit).
  • a logic circuit hardware
  • IC chip integrated circuit
  • CPU Central Processing Unit
  • the display system 1 includes a CPU that executes instructions of a program that is software that implements each function, a ROM (Read Only Memory) in which the program and various data are recorded so as to be readable by a computer (or CPU), or A storage device (these are referred to as “recording media”), a RAM (Random Access Memory) for expanding the program, and the like are provided.
  • a computer or CPU
  • the recording medium a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program.
  • a transmission medium such as a communication network or a broadcast wave
  • the present invention can also be realized in the form of a data signal embedded in a carrier wave in which the program is embodied by electronic transmission.
  • An external device (set top box 20) according to aspect 1 of the present invention is an external device that provides an image to a display device capable of displaying PinP, and the display device is superimposed on an image provided by the external device.
  • the external device selects a process based on the movement of the cursor relative to the PinP display image, and notifies the display apparatus of the process.
  • the relative movement of the cursor with respect to the PinP display image determined by the determination unit (cursor position processing unit 22) according to aspect 1 is described.
  • the movement of the cursor from outside the area of the PinP display image to the area of the PinP display image, the movement of the cursor from the area of the PinP display image to the outside of the area of the PinP display image, And a movement that temporarily stops within the area of the PinP display image, At least one of the movements may be included.
  • the predetermined processes in the aspect 1 or 2 include a process of changing the channel of the broadcast wave received by the display device. , A process for displaying the menu screen of the display device, a process for changing the position of the PinP display image, a process for changing the size of the PinP display image, and a process for displaying an operation toolbar. It may be included.
  • the determination means (cursor position processing unit 22) according to any one of the aspects 1 to 3 may be configured such that the cursor indicates an area of the PinP display image.
  • the selection unit (cursor position processing unit 22) may select a process of changing a broadcast wave channel received by the display device.
  • the user can change the channel of the broadcast wave displayed by the display device by operating the external device.
  • the determination means (cursor position processing unit 22) according to any one of aspects 1 to 4 is such that the cursor is within the area of the PinP display image.
  • the selection unit (cursor position processing unit 22) may select a process for displaying the menu screen of the display device.
  • the user can display the menu screen of the display device by operating the external device.
  • the determination means in aspect 5 crosses when the cursor enters the area of the PinP display image.
  • One side may be discriminated, and the selection unit may select a process of sliding and displaying the menu screen of the display device from the one side discriminated by the discrimination unit.
  • the external device slides and displays the menu screen of the display device in accordance with the movement of the cursor entering the area of the PinP display image, so that the displayed menu screen is a process for a user operation.
  • the user can be notified of this.
  • the discrimination means (cursor position processing unit 22) according to any one of aspects 1 to 6 may be configured such that the cursor indicates the area of the PinP display image.
  • the selection unit (cursor position processing unit 22) may select a process for changing the position of the PinP display image. .
  • the user can change the position of the PinP display image by operating an external device.
  • the determination means (cursor position processing unit 22) according to any one of aspects 1 to 7 may be configured such that the cursor indicates an area of the PinP display image.
  • the selection means (cursor position processing unit 22) may select a process for changing the size of the PinP display image.
  • the user can change the size of the PinP display image by operating an external device.
  • the determination means (cursor position processing unit 22) according to any of the aspects 1 to 8 is configured such that the cursor is positioned in the area of the PinP display image. If it is determined that the image has temporarily entered and then moved out of the area of the PinP display image again, the selection means (cursor position processing unit 22) may select a process for displaying the operation toolbar.
  • the user can display the operation toolbar by operating the external device.
  • the external device (set top box 20) according to the tenth aspect of the present invention is configured to detect whether or not the button provided on the operation tool used by the user to operate the cursor is pressed.
  • a cursor position processing unit 22), and the determination means (cursor position processing unit 22) determines that the cursor has entered the area of the PinP display image, and the button press detection means presses the button.
  • the selection means may select a process for displaying a volume bar.
  • the user can display the volume bar by operating the external device.
  • the selection means (cursor position processing unit 22) according to any one of aspects 1 to 8 includes a button for a user to input an operation.
  • One of a plurality of predetermined processes may be selected based on the determination result by the determination means (cursor position processing unit 22) without referring to whether or not the button is pressed.
  • the external device executes the process without referring to whether or not the button is pressed by the user. Therefore, the external device can operate the display device without causing the user to press the button, and thus the convenience of operation of the display device by the user can be improved.
  • an external device (set top box 20) according to aspect 12 of the present invention is the external device according to any one of aspects 1 to 11, and functions as a set top box.
  • a control method is a control method of an external device that provides an image on a display device capable of displaying PinP, and the display device is superimposed on an image provided by the external device.
  • a coordinate acquisition step of acquiring the coordinates of the PinP display image to be displayed, a determination step of determining a relative movement of the cursor included in the image provided by the external device with respect to the PinP display image, and a determination in the determination step A selection step of selecting one of a plurality of predetermined processes based on the result; and a notification step of notifying the display device to execute the process selected by the selection step.
  • the external device and the control method have the same effects as the external device.
  • a display system includes a display device (television 10) capable of PinP display and the external device (set-top box 20) according to any one of aspects 1 to 11. .
  • a display system including a display device capable of PinP display and the external device described above can be realized.
  • the display device (display device 100) is a display device capable of PinP display that displays the second image superimposed on the first image, and the display device displays the above-described display device.
  • a coordinate acquisition unit (PinP processing unit 14) for acquiring the coordinates of the second image, and a determination unit (first pin) for determining the relative movement of the cursor included in the first image with respect to the second image.
  • the display device has the same effect as the above display system.
  • a television receiver includes the above-described units of the display device according to the above-described aspect 15.
  • plays the effect similar to the display apparatus which concerns on the said aspect 15 is realizable.
  • the external device may be realized by a computer.
  • the external device is realized by the computer by causing the computer to operate as each unit included in the external device.
  • a control program and a computer-readable recording medium on which the control program is recorded also fall within the scope of the present invention.
  • the present invention can be suitably used for a display system including an external device such as a set top box and a display device such as a television.

Abstract

PinP表示画像の座標を取得する座標取得手段(23)と、カーソルの、PinP表示画像に対する相対的な動きを判別する判別手段(22)と、処理を選択する選択手段(22)と、処理を実行するよう表示装置に通知する通知手段(23)と、を備える外部機器。

Description

外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機
 本発明は、PinP表示可能な表示装置に画像を提供する外部機器、当該外部機器の制御方法、当該表示装置および当該外部機器を備えた表示システム、当該表示装置、および当該表示装置として機能するテレビジョン受像機に関する。
 近年、スマートフォンやタブレットといった、10インチ程度の大きさの画面を持つ端末が普及している。しかし、10インチ程度では画面が小さいため、より大きな画面を持つテレビなどの表示装置にスマートフォンやタブレットを接続し、スマートフォンやタブレットの画像をテレビに映して見るユーザが増えている。また、このようなユーザのために、表示装置を備えておらず、スマートフォンやタブレットの機能のみを持たせたセットトップボックスも開発されている。
 このようなセットトップボックスをテレビに接続した場合、テレビの大画面を有効に使うため、ユーザは、セットトップボックスの画像にテレビの画像を重畳してPinP(Picture In Picture)表示画像として表示するPinP機能を利用する場合が多い。しかし、PinP機能を利用した場合、テレビに表示されている画像のうち、セットトップボックスのカーソルを操作するのは、セットトップボックスに接続したマウス等の操作機器である。一方、テレビに表示されている画像のうち、PinP表示画像であるテレビの画像を調整するのは、テレビのリモートコントローラや本体に備えているキーといった、テレビの操作機器である。
 このように、操作機器が複数あるとユーザが混乱するため、セットトップボックス(コンピュータ)に接続されたマウス等の操作機器を使って、直接的なセットトップボックスの操作以外の操作もできる技術が開示されている。
 例えば、特許文献1には、TVの映像とコンピュータ映像信号を合成した映像を供給でき、コンピュータのアイコンを操作することにより、TVの映像を調整できる映像信号重畳装置が開示されている。
 また、特許文献2には、マウス操作による軌跡に対応したウィンドウが表示され、ウィンドウに含まれた複数のコマンドのうち、ユーザが選択したコマンドを実行するウィンドウ表示制御装置が開示されている。
日本国公開特許公報「特開平10-83171号公報(1998年3月31日公開)」 日本国公開特許公報「特開平10-307674号公報(1998年11月17日公開)」
 しかしながら、上述のような従来技術では、PinP機能を備えるテレビが、セットトップボックスの画像にPinP表示画像を重畳して表示する場合は想定されていない。
 例えば、特許文献1は、コンピュータが備えるTVチューナから取得した映像を、コンピュータがTV装置を擬したアイコン内に表示している。また、特許文献2では、表示する画像はコンピュータの画像のみである。
 本発明は、上記の課題を解決するためになされたものであり、PinP機能を備える表示装置が、外部機器の画像にPinP表示画像を重畳して表示する場合において、ユーザによる表示装置の操作の利便性を向上させることのできる外部機器を実現することにある。
 上記の課題を解決するために、本発明の一態様に係る外部機器は、PinP表示可能な表示装置に、画像を提供する外部機器であって、当該外部機器が提供する画像に対して上記表示装置が重畳して表示するPinP表示画像の座標を取得する座標取得手段と、当該外部機器が提供する画像に含まれるカーソルの、上記PinP表示画像に対する相対的な動きを判別する判別手段と、上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択手段と、上記選択手段が選択した処理を実行するよう上記表示装置に通知する通知手段と、を備えている。
 また、上記の課題を解決するために、本発明の一態様に係る表示装置は、第1の画像に第2の画像を重畳して表示するPinP表示可能な表示装置であって、当該表示装置が表示する上記第2の画像の座標を取得する座標取得手段と、上記第1の画像に含まれるカーソルの、上記第2の画像に対する相対的な動きを判別する判別手段と、上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択手段と、上記選択手段が選択した処理を実行する実行手段と、を備えている。
 本発明の一態様によれば、PinP機能を備える表示装置が、外部機器の画像にPinP表示画像を重畳して表示する場合において、ユーザによる表示装置の操作の利便性を向上させることができる。
本発明の実施形態1に係る表示システムの構成を示すブロック図である。 本発明の実施形態1に係る表示システムの外観を示す図である。 本発明の実施形態1に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態1に係る表示システムにおいて、カーソルがPinP表示画像と重なった場合に、テレビが表示する画像である。 本発明の実施形態2に係る表示システムにおいて、カーソルがPinP表示画像と重なった場合に、テレビが表示する画像である。 本発明の実施形態3に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態4に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態4に係る表示システムにおいて、テレビが表示する画像であり、(a)は、サイズが小さくなったカーソルを含む画像であり、(b)は、色が変更されたカーソルを含む画像であり、(c)は、形状が変更されたカーソルを含む画像である。 本発明の実施形態5に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態5に係る表示システムにおいて、テレビが表示する画像であり、(a)は、ユーザがPinP表示画像の上辺を横切ってカーソルをPinP表示画像に重ねる様子を示す図であり、(b)は、(a)の操作により実際に表示されるカーソルを示す図である。 本発明の実施形態5に係る表示システムにおいて、テレビが表示する画像であり、(a)は、ユーザがPinP表示画像の左辺を横切ってカーソルをPinP表示画像に重ねる様子を示す図であり、(b)は、(a)の操作により実際に表示されるカーソルを示す図である。 図12は、本発明の実施形態6に係る表示システム1において、MENUを表示させたときにテレビが表示する画像であり、(a)は、テレビが、メイン画面(PinP表示画像の背景)としてテレビ画像を表示し、PinP表示画像として、STBから入力される画像を表示する場合を示す図であり、(b)は、テレビがメイン画面(PinP表示画像の背景)としてSTBから入力される画像を表示し、PinP表示画像として、テレビ画像を表示する場合を示す図である。 本発明の実施形態6に係る表示システムにおいて、テレビが有する座標系を示す図であり、(a)は、STBの画像内の座標系を示す図であり、(b)は、PinP表示画像内のローカル座標系を示す図であり、(c)は(a)の座標系の例を示す図である。 本発明の実施形態6に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態6に係る表示システムにおいて、カーソルがPinP表示画像と重なった場合に、テレビが表示する画像である。 本発明の実施形態7に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態8に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態10に係る表示システムの処理の流れを示すシーケンス図である。 本発明の実施形態10に係る表示システムにおいて、テレビが表示する画像であり、(a)は、テレビが受信する放送波のチャンネルをアップするカーソルの動きを示す図であり、(b)は(a)の処理が実行された後のテレビの画像である。 本発明の実施形態10に係る表示システムにおいて、テレビが表示する画像であり、(a)は、テレビがMENUを表示するカーソルの動きを示す図であり、(b)は(a)の処理が実行された後のテレビの画像である。 本発明の実施形態10に係る表示システムにおいて、テレビが表示する画像であり、(a)は、テレビがPinP表示画像の位置を変更するカーソルの動きを示す図であり、(b)は(a)の処理が実行された後のテレビの画像である。 本発明の実施形態10に係る表示システムにおいて、テレビが表示する画像であり、(a)は、テレビがPinP表示画像のサイズを変更するカーソルの動きを示す図であり、(b)は(a)の処理が実行された後のテレビの画像である。 本発明の実施形態10に係る表示システムにおいて、テレビが表示する画像であり、(a)は、テレビが操作ツールバーを表示するカーソルの動きを示す図であり、(b)は、(a)の処理が実行された後のテレビの画像である。 本発明の実施形態10に係る表示システムにおいて、テレビが表示する画像であり、(a)は、テレビが音量バーを表示するカーソルの動きを示す図であり、(b)は、(a)の処理が実行された後のテレビの画像であり、(c)は、(b)の処理が実行された後に音量を上げるカーソルの動きを示す図であり、(d)、は音量バーの表示が消えた後のテレビの画像である。 本発明の実施形態11に係る表示システムにおいて、テレビが表示する画像であり、(a)は、PinP表示画像にカーソルが入ってきた方向の外枠がハイライト表示された画像であり、(b)は、PinP表示画像からカーソルが出ていった方向の外枠がハイライト表示された画像であり、(c)は、PinP表示画像にカーソルが入ってきた方向の外枠がハイライト表示された画像であり、(d)は、(c)の後にカーソルがPinP表示画像の領域に停止し、外枠が違う色にハイライト表示された画像である。 本発明の実施形態12に係るテレビの構成を示すブロック図である。 本発明の実施形態12に係るテレビの外観を示す図である。 本発明の実施形態13において、ユーザの操作を受け付ける遠隔操作装置の正面図である。 (a)は、本発明の実施形態13におけるテレビまたは表示装置と、リモコンとの外観を示す図であり、(b)は、テレビまたは表示装置の周辺に光源110が配置されている場合の外観を示す図である。 本発明の実施形態13における遠隔操作装置の構成を示すブロック図である。
 〔実施形態1〕
 以下、本発明の実施の形態について、詳細に説明する。
 (表示システム1の構成)
 図1は、本発明の実施形態1に係る表示システム1の構成を示すブロック図である。
 図1に示すように、表示システム1は、マウス2、テレビ10(表示装置)、およびセットトップボックス20(以下、STB20と称する、外部機器)によって構成されている。
 表示システム1は、ユーザがマウス2を使ってSTB20を操作し、テレビ10が、STB20から出力された画像にテレビ10の画像を重畳してPinP表示するシステムである。
 マウス2は、ユーザがSTB20を操作するための機器である。マウス2とSTB20とは、有線またはBluetooth(登録商標)といった無線で接続されている。
 テレビ10は、外部から取得した画像に、放送波を受信して得られる画像をPinP表示画像として重畳するPinP(Picture In Picture)の機能を備えている。また、STB20から処理情報を取得して、処理情報が示す処理をテレビ10は実行することができる。処理情報が示す処理とは、例えば、テレビ10が受信する放送波のチャンネルを変更する処理や、PinP表示画像の位置を変更する処理などがある。
 STB20は、OS(Operating System)を搭載しているので、アプリケーションを実行でき、スマートフォンやタブレットのように使用することができる。また、画像および処理情報を、テレビ10に出力することができる。
 (テレビ10の構成)
 図1に示すように、テレビ10は、入力部11、設定変更部12、制御情報通信部13、PinP処理部14、カーソル位置処理部15、外部画像入力部16、画像処理部17、および表示部18によって構成されている。
 入力部11は、ユーザから入力を受け付けた情報を設定変更部12に出力する。ユーザから入力を受け付ける手段として、リモートコントローラによる入力や、テレビ10が本体に備えているキーによる入力などがある。
 設定変更部12は、テレビ10の設定を変更する処理を行う。テレビ10の設定を変更する処理とは、例えば、テレビ10が受信する放送波のチャンネルを変更する処理や、PinP表示画像の位置を変更する処理などがある。
 制御情報通信部13は、テレビ10の処理に関する処理情報を外部機器に出力または外部機器から取得する。処理情報には、設定変更部12が処理するテレビ10の設定に関する情報に限らず、テレビ10が表示する画像に関する情報も含まれる。
 PinP処理部14は、テレビ10が有する機能であるPinPが実行されたときに、PinP表示画像を表示する位置の座標値およびPinP表示画像の大きさについての処理を行う。
 カーソル位置処理部15は、制御情報通信部13の取得した情報がSTB20のカーソルの位置に関する情報であった場合に、カーソルの位置に関する処理を行う。カーソルの位置に関する処理とは、例えば、取得したカーソルの位置を示すカーソル座標値を、異なる座標系の座標値に変換する処理がある。
 外部画像入力部16は、STB20から画像を取得する。画像を取得するインターフェースとして、例えばHDMI(登録商標)(High Definition Multimedia Interface)などがある。
 画像処理部17は、取得した画像や情報から、テレビ10に表示する画像を生成する処理を行う。テレビ10に表示する画像を生成する処理とは、例えば、STB20の画像にPinP表示画像を重畳する処理や、カーソル座標値の示す位置にカーソルを表示する処理である。
 表示部18は、取得した画像を表示する。表示するデバイスとして、液晶、有機EL(Electro Luminescence)などが挙げられる。
 (STB20の構成)
 図1に示すように、STB20は、外部機器接続部21、カーソル位置処理部22(判定手段、選択手段、ボタン押下検出手段)、制御情報通信部23(座標取得手段、通知手段)、画像処理部24、および画像出力部25によって構成されている。
 外部機器接続部21は、STB20に接続する外部機器のインターフェースである。インターフェースとしては、例えば、USB(Universal Serial Bus)に準拠したものが挙げられる。
 カーソル位置処理部22は、STB20のカーソル位置に関する処理を実行する。カーソル位置に関する処理とは、例えば、カーソル座標値を出力する処理や、前述したテレビ10のカーソル位置処理部15が行う座標値を変換する処理も含まれる。また、カーソルの位置が所定の位置に含まれるか否かを判定する処理や、カーソルの位置に基づいて、複数の処理の中から何れかの処理を選択する処理も含まれる。
 制御情報通信部23は、テレビ10の処理に関する処理情報を取得または処理情報をテレビ10に出力する。
 画像処理部24は、取得した画像および情報を処理して、外部の表示装置に表示する画像を生成する。取得する情報には、例えば、カーソルの座標値や、PinP表示画像の座標値がある。
 画像出力部25は、テレビ10に表示する画像を出力する。
 (表示システム1の外観)
 図2は、本発明の実施形態1に係る表示システム1の外観を示す図である。前述したように、表示システム1は、マウス2、テレビ10、およびSTB20によって構成されている。テレビ10が表示する画像には、STB20の画像31と、PinP表示画像32と、カーソル33とが表示されている。ユーザはマウス2を使ってカーソル33を動かすことができる。また、表示システム1において、マウス2以外の装置(例えば、後述する実施形態における遠隔操作装置2aなど)から操作を受け付ける構成であっても、テレビ10はカーソル33を表示しているため、ユーザの操作性が向上する。すなわち、表示システム1では、テレビ10の画面を直接タッチして入力する構成とは異なり、テレビ10にカーソルが表示されるため、ユーザはカーソル33を使って操作することができるので、ユーザの操作性が向上する。
 (表示システム1の処理)
 図3は、本発明の実施形態1に係る表示システム1の処理の流れを示すシーケンス図である。表示システム1の処理について、図3を用いて説明する。
 まず、表示システム1の処理は、テレビ10がPinPを実行できる状態、すなわち、STB20から画像を取得している状態から始まる。STB20からの画像は、画像出力部25が出力し、外部画像入力部16が取得する。この状態から、テレビ10の設定変更部12は、PinPを実行する設定になっているか否かを判定する(ステップS1)。PinPを実行するか否かはユーザによって設定されるため、入力部11から取得する情報により、設定変更部12はPinPを実行する設定になっているか否かを判定できる。
 ステップS1において、「PinPを実行する設定になっていない」と判定された場合(ステップS1:No)、テレビ10は、引き続きステップS1を繰り返し、PinPを実行する設定になっているか否かを判定する。
 一方、ステップS1において、「PinPを実行する設定になっている」と判定された場合(ステップS1:Yes)、設定変更部12は、制御情報通信部13に、PinP表示画像の座標を出力する命令を示す信号を出力する。制御情報通信部13は、PinP表示画像の座標を出力する命令を示す信号を取得すると、PinP処理部14から、PinP表示画像の座標値を取得する。取得する座標値は、PinP表示画像が表示されている位置と大きさが分かるように、PinP表示画像の四隅それぞれの座標値である。そして、テレビ10の制御情報通信部13は、取得した座標値をSTB20に出力する(ステップS2)。STB20の制御情報通信部23は、出力された座標値を取得する(ステップS3)。
 なお、制御情報通信部13が出力する情報は、上述したPinP表示画像の四隅それぞれの座標値の代わりに、例えば、PinP表示画像の左上の座標値およびPinP表示画像の大きさといった、PinP表示画像が表示されている位置と大きさが分かる情報であればよい。
 続いて、STB20の制御情報通信部23は、取得した座標値を、カーソル位置処理部22に出力する。座標値を取得したカーソル位置処理部22は、取得した座標値から、テレビ10に表示されているPinP表示画像が、画像出力部25から出力しているSTB20の画像のどの部分に表示されているかが分かる。そして、カーソル位置処理部22は、取得した座標値と、カーソルの位置を示すカーソル座標値とから、PinP表示画像とカーソルとが重なっているか否かを判定する(ステップS4)。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、PinP表示画像の座標値と、PinP表示画像とカーソルとが重なっていることを示す信号とを、画像処理部24に出力する。画像処理部24は、取得したPinP表示画像の座標値と、PinP表示画像とカーソルとが重なっていることを示す信号とを取得すると、PinP表示画像の座標値が示す領域の外枠をハイライト表示し、PinP表示画像が強調表示されるように画像を修正する(ステップS5)。そして、画像処理部24は、生成した画像を画像出力部25に出力する。画像出力部25は、取得した画像をテレビ10に出力する(ステップS6)。テレビ10の外部画像入力部16は、出力された画像を取得する(ステップS7)。
 一方、ステップS4において、「PinP表示画像とカーソルとは重なっていない」と判定された場合(ステップS4:No)、STB20の処理はステップS6に進む。
 画像を取得したテレビ10の外部画像入力部16は、取得した画像を画像処理部17に出力する。画像処理部17は、取得した画像にテレビ10の画像を重畳してPinPを実行し、表示部18に出力する。PinPを実行する際に、PinP処理部14は、PinP表示画像の位置の座標値およびPinP表示画像の大きさを画像処理部17に出力し、画像処理部17は、取得した座標値の位置に、取得した大きさでPinP表示画像を重畳する。そして、表示部18は、取得した画像を表示する(ステップS8)。
 続いて、テレビ10の制御情報通信部13は、PinPを実行する設定か否かを示す設定情報を、STB20に出力する(ステップS9)。STB20の制御情報通信部23は、出力された設定情報を取得する(ステップS10)。
 そして、STB20の制御情報通信部23は、取得した設定情報をカーソル位置処理部22に出力する。カーソル位置処理部22は、設定情報を取得し、PinPを実行する設定になっているか否かを判定する(ステップS11)。
 ステップS11において、「PinPを実行する設定になっている」と判定された場合(ステップS11:Yes)、カーソル位置処理部22は、再びPinP表示画像とカーソルとが重なっているか否かを判定するため、ステップS4に戻る。
 一方、ステップS11において、「PinPを実行しない設定になっている」と判定された場合(ステップS11:No)、図3の処理は終了する。
 なお、ステップS9において、PinPの設定情報は毎回出力する必要はなく、PinPを実行しない設定になった場合のみ設定情報を出力してもよい。つまり、STB20は、テレビ10がPinPを実行する設定になっている間はステップS4を繰り返し、PinPを実行しない設定になったときに、処理を終了するとしてもよい。
 ここで、カーソル33とPinP表示画像32とが重なっている場合に、テレビ10に表示される画像を、図4に示す。
 図4は、本発明の実施形態1に係る表示システム1において、カーソル33がPinP表示画像32と重なった場合に、テレビ10が表示する画像である。図4に示すように、カーソル33(実際は不表示)とPinP表示画像32とが重なると、カーソル33が表示されなくなる。しかし、PinP表示画像32の外枠をハイライト表示することにより、ユーザはカーソル33とPinP表示画像32とが重なっていると認識することができる。
 このように、実施形態1において、STB20は、PinP表示画像とカーソルとが重なったときに、PinP表示画像の外枠をハイライト表示する。したがって、ユーザは、PinP表示画像とカーソルとが重なっていると認識できるため、PinP表示画像とカーソルとが重なってカーソルが表示されなくなっても、カーソルの位置を見失うことがない。
 〔実施形態2〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態1の図3のステップS5において、STB20は、PinP表示画像の外枠をハイライト表示したが、実施形態2では、カーソル座標値に対応する部分のみ、ハイライト表示する。
 具体的には、ステップS5において、カーソル位置処理部22は、画像処理部24に、カーソル座標値と、PinP表示画像の座標値と、PinP表示画像とカーソルとが重なっていることを示す信号に加えて、カーソル座標値を出力する。画像処理部24は、取得したPinP表示画像の座標値と、PinP表示画像とカーソルとが重なっていることを示す信号とを取得すると、PinP表示画像の座標値が示す領域の外枠をハイライト表示するが、取得したカーソル座標値から、カーソル座標値に対応する部分のみ、外枠をハイライト表示する。上記の処理により、カーソル座標値に対応する部分のみ、外枠をハイライト表示された画像を、図5に示す。
 図5は、本発明の実施形態2に係る表示システム1において、カーソル33がPinP表示画像32と重なった場合に、テレビ10が表示する画像である。図5に示すように、カーソル33(実際は不表示)とPinP表示画像32とが重なると、カーソル33が表示されなくなる。しかし、PinP表示画像32のうち、カーソル33の座標値に対応する部分のみ、ハイライト表示されている。
 より具体的には、PinP表示画像に隠れたカーソルの座標であってSTB20側で管理する座標を、(X0、Y0)としたとき、画像処理部24は、PinP表示領域の縦方向に延伸する外枠のうち、縦方向座標がY0である部分の近傍をハイライト表示し、PinP表示領域の横方向に延伸する外枠のうち、横方向座標がY0である部分の近傍をハイライト表示する。
 このように、実施形態2において、STB20は、カーソル座標値に対応する部分のみ、外枠をハイライト表示する。したがって、ユーザは、カーソルがPinP表示画像と重なっているということだけでなく、PinP表示画像のどこにカーソルがあるのかを認識することができる。
 〔実施形態3〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 上述の実施形態1および2において、STB20がPinP表示画像32の外枠をハイライト表示した画像を生成したが、実施形態3では、この処理をテレビ10が行う。以下に、実施形態3について、図6を用いて説明する。
 図6は、本発明の実施形態1に係る表示システム1の処理の流れを示すシーケンス図である。
 テレビ10がPinPを実行する設定になっている場合に、テレビ10がPinP表示画像の座標値をSTB20に出力し、STB20がPinP表示画像の座標を取得し、カーソル位置処理部22がPinP表示領域とカーソルとが重なっているか否かを判定するステップS1~ステップS4は上述した処理と同じため、省略する。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、PinP表示画像とカーソルとが重なっていることを示す信号を、制御情報通信部23に出力する。制御情報通信部23は、取得した信号を、テレビ10に出力する(ステップS21)。テレビ10の制御情報通信部13は、出力された信号を取得する(ステップS22)。制御情報通信部13は、取得した信号を、PinP処理部14に出力する。
 一方、ステップS4において、「PinP表示画像とカーソルとが重なっていない」と判定された場合(ステップS4:No)、STB20はステップS23の処理に進む。
 続いて、STB20の画像処理部24は、出力する画像を画像出力部25に出力する。画像出力部25は、取得した画像を、テレビ10に出力する(ステップS23)。テレビ10の外部画像入力部16は、出力された画像を取得する(ステップS24)。外部画像入力部16は、取得した画像を、画像処理部17に出力する。
 画像処理部17は、PinP処理部14から取得した座標値および大きさに基づいて、取得した画像にPinP表示画像を重畳するが、その際に、PinP処理部14から、PinP表示画像とカーソルとが重なっていることを示す信号も取得する。画像処理部17はPinP表示画像とカーソルとが重なっていることを示す信号を取得すると、PinP表示画像の外枠をハイライト表示してPinPを実行する。そして、生成した画像を表示部18に出力し、表示部18は取得した画像を表示する(ステップS25)。
 そして、テレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。
 このように、実施形態3において、PinP表示画像とカーソルとが重なっていることを示す信号を、テレビ10がSTB20から取得することにより、実施形態1と同様、ユーザは、PinP表示画像とカーソルとが重なっていると認識できるため、PinP表示画像とカーソルとが重なってカーソルが表示されなくなっても、カーソルの位置を見失うことがない。
 (実施形態1と実施形態3との違い)
 上述したように、実施形態1と実施形態3とは、奏する効果は同じだが、PinP表示画像の外枠のハイライト表示、つまり強調表示をする主体が、STB20であるかテレビ10であるかという点において異なる。この違いについて、説明する。
 テレビ10は、一般的にSTB20に比べて高価なため、ユーザは頻繁に買い替えることはないと考えられる。また、テレビ10は、取得した画像を表示するという処理がメインであり、したがって搭載するメモリの容量も少なく、汎用性がない。
 一方、STB20は、一般的にテレビ10に比べると安価であり、例えばハイスペックのSTB20が発売されると、ユーザはそれを求め買い替えることも考えられる。また、テレビ10に比べると複雑で多くの処理を実行するため、搭載するメモリの容量も、テレビ10と比較すると多くなる。
 したがって、処理主体がSTB20であると、処理主体がテレビ10である場合と比較して、STB20の方が買い替えやすいため、ユーザは安価で表示システム1を実現できる。また、STB20の方がメモリを多く搭載しているため、処理の速度も速くなるというメリットがある。
 また、強調表示を行う主体をテレビ10とした場合には、テレビ10は、ハイライト表示やカーソルなどを表示するグラフィック表示機能を有する必要があるが、強調表示を行う主体をSTB20とした場合には、テレビ10は、そのようなグラフィック表示機能を有する必要がない。
 〔実施形態1~3に関する付記事項〕
 上述の実施形態1~3において、PinP表示画像32の少なくとも一部がハイライト表示される例を挙げたが、実施形態1~3はこれに限定されるものではない。例えば、PinP表示画像の明るさを明るくする、またはPinP表示画像以外を暗くするなど、PinP表示画像が強調表示されるような画像が表示されればよい。
 〔実施形態4〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態1~3では、STB20またはテレビ10が、PinP表示画像とカーソルとが重なった場合に、PinP表示画像を強調表示したが、実施形態4においては、STB20が、カーソルがPinP表示画像に重ならないように規制する。以下に、実施形態4について、図7を用いて説明する。
 図7は、本発明の実施形態4に係る表示システム1の処理の流れを示すシーケンス図である。
 テレビ10がPinPを実行する設定になっている場合に、テレビ10がPinP表示画像の座標値をSTB20に出力し、STB20がPinP表示画像の座標を取得し、カーソル位置処理部22がPinP表示領域とカーソルとが重なっているか否かを判定するステップS1~ステップS4は上述した処理と同じため、省略する。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、カーソルの座標を更新せず、カーソルの座標をPinP表示画像とカーソルとが重なる前の座標のままにする(ステップS31)。つまり、カーソルがPinP表示画像と重ならないように規制する。そして、カーソル位置処理部22は、PinP表示画像とカーソルとが重なったことを示す信号を、画像処理部24に出力する。画像処理部24は、PinP表示画像とカーソルとが重なったことを示す信号を取得すると、画像に表示されるカーソルのサイズを小さくした画像を生成する(ステップS32)。画像処理部24は、生成した画像を画像出力部25に出力する。
 一方、ステップS4において、「PinP表示画像とカーソルとが重なっていない」と判定された場合(ステップS4:No)、STB20はステップS6の処理に進む。
 画像出力部25が画像をテレビ10に出力し、テレビ10が取得した画像を出力するステップS6~ステップS8、およびテレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。上記の処理により、カーソルのサイズが小さくされた画像を、図8に示す。
 図8は、本発明の実施形態4に係る表示システム1において、テレビ10が表示する画像であり、(a)は、サイズが小さくなったカーソル34を含む画像である。図8(a)に示すように、ユーザがカーソルをPinP表示画像32と重なるように操作すると、カーソルが重ならないようにカーソルは固定され、動かない。さらに、サイズが小さくなったカーソル34が表示される。
 なお、上述の処理において、画像処理部24はカーソルのサイズを変更したが、カーソルの色、形状、または点滅させるなどの表示方法を変更してもよく、またこれらを組み合わせてもよい。カーソルの色または形状を変更した画像を、図8(b)および(c)に示す。
 図8(b)は、色が変更されたカーソル35を含む画像であり、(c)は、形状が変更されたカーソル36を含む画像である。図8(b)および(c)に示すように、図8(a)と同様、ユーザがカーソルをPinP表示画像32と重なるように操作すると、カーソルが重ならないようにカーソルは固定され、動かない。さらに、色が変更されたカーソル35や、形状が変更されたカーソル36が表示される。
 このように、実施形態4においては、PinP表示画像とカーソルとが重なることがないため、ユーザはカーソルの位置を見失うことはない。また、動かなくなったカーソルのサイズ、色、形状などを変更することにより、ユーザはカーソルが動かなくなったのは、自らの操作が、カーソルをPinP表示画像に重ねる操作であったと認識することができる。
 〔実施形態5〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態4では、PinP表示画像とカーソルとが重なると、カーソルが固定されたが、実施形態5では、STB20は、PinP表示画像に沿ってカーソルが動くように、カーソルを規制する。実施形態5について、図9を用いて説明する。
 図9は、本発明の実施形態5に係る表示システム1の処理の流れを示すシーケンス図である。
 テレビ10がPinPを実行する設定になっている場合に、テレビ10がPinP表示画像の座標値をSTB20に出力し、STB20がPinP表示画像の座標を取得し、カーソル位置処理部22がPinP表示領域とカーソルとが重なっているか否かを判定するステップS1~ステップS4は上述した処理と同じため、省略する。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、カーソルがPinP表示画像のどの一辺を横切って重なったのかを判定する。そして、カーソル座標値のうち、横切った一辺に垂直な座標成分を更新せず、その一辺に平行な座標成分のみを更新する(ステップS41)。そして、カーソル位置処理部22は、カーソル座標値を画像処理部24に出力する。画像処理部24は、取得したカーソル座標値に基づいてカーソルを表示した画像を生成し、生成した画像を画像出力部25に出力する。画像出力部25は、取得した画像を、テレビ10に出力する(ステップS42)。
 一方、ステップS4において、「PinP表示画像とカーソルとが重なっていない」と判定された場合(ステップS4:No)、STB20はステップS42の処理に進む。
 テレビ10が取得した画像を出力するステップS7~ステップS8、およびテレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。上記の処理により、カーソルがPinP表示画像に沿って動く様子を、図10に示す。
 図10は、本発明の実施形態5に係る表示システム1において、テレビ10が表示する画像であり、(a)は、ユーザがPinP表示画像32の上辺を横切ってカーソル33をPinP表示画像32に重ねる様子を示す図であり、(b)は、(a)の操作により実際に表示されるカーソル33を示す図である。図10(a)に示すように、ユーザがPinP表示画像32の上辺を横切ってカーソル33をPinP表示画像32に重ねた場合、カーソルの座標のうち、PinP表示画像32の上辺に垂直な成分、つまりテレビ10の縦方向の座標成分は更新されないので、縦方向の位置は変わらない。そして、PinP表示画像32の上辺に平行な成分、つまりテレビ10の横方向の座標成分は更新される。つまり、図10(b)に示すように、図10(a)のユーザの操作により、カーソル33は横方向にのみ動く。
 図11は、本発明の実施形態5に係る表示システム1において、テレビ10が表示する画像であり、(a)は、ユーザがPinP表示画像32の左辺を横切ってカーソル33をPinP表示画像32に重ねる様子を示す図であり、(b)は、(a)の操作により実際に表示されるカーソル33を示す図である。図11(a)に示すように、ユーザがPinP表示画像32の左辺を横切ってカーソル33をPinP表示画像32に重ねた場合、カーソルの座標のうち、PinP表示画像32の左辺に垂直な成分、つまりテレビ10の横方向の座標成分は更新されないので、横方向の位置は変わらない。そして、PinP表示画像32の左辺に平行な成分、つまりテレビ10の縦方向の座標成分は更新される。つまり、図11(b)に示すように、図11(a)のユーザの操作により、カーソル33は縦方向にのみ動く。
 このように、実施形態5においては、PinP表示画像とカーソルとが重なることがないため、ユーザはカーソルの位置を見失うことはない。
 〔実施形態6〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 (座標系の変換)
 ここで、実施形態6の説明の前に、テレビ10が有する座標系について、図12および13を用いて説明する。
 図12は、本発明の実施形態6に係る表示システム1において、MENUを表示させたときにテレビ10が表示する画像であり、(a)は、テレビ10が、メイン画面(PinP表示画像の背景)としてテレビ画像を表示し、PinP表示画像31として、STB20から入力される画像を表示する場合を示す図であり、(b)は、テレビ10がメイン画面(PinP表示画像の背景)としてSTB20から入力される画像を表示し、PinP表示画像31として、テレビ画像を表示する場合を示す図である。なお、図12(a)および(b)においては、テレビ画像としてMENU画面が表示されている。
 テレビ10は、PinPを実行したときに、テレビ画像をメイン画面とするか、STB20から取得した画像をメイン画面とするかを、決めることができる。例えば、テレビ10がテレビ画像をメイン画面とした場合、ユーザがテレビ10のMENUを表示させると、図12(a)のように、メイン画面上にMENUが表示される。一方、テレビ10がSTB20から取得した画像をメイン画面とした場合、ユーザがテレビ10のMENUを表示させると、図12(b)のように、PinP表示画像31上にMENUが表示される。
 このように、PinPを実行したときに、テレビ画像をメイン画面とするか、STB20から取得した画像をメイン画面とするかによって、MENUが表示される位置が変わる。これは、テレビ10が、STB20側が管理する座標系であって、STB20の画像31内の座標系と、PinP表示画像32内のローカル座標系とを有しているからである。これら2つの座標系を図13に示す。
 図13は、本発明の実施形態6に係る表示システム1において、テレビ10が有する座標系を示す図であり、(a)は、STB20の画像31内の座標系を示す図であり、(b)は、PinP表示画像32内のローカル座標系を示す図であり、(c)は(a)の座標系の例を示す図である。
 まず、図13(a)に示すように、画像31内の座標系(x,y)において、各座標を以下のように表記することとする。
 画像31の左上の座標=(0,0)
 画像31の右上の座標=(WidthTV,0)
 画像31の左下の座標=(0,HeightTV)
 画像31の右下の座標=(WidthTV,HeightTV)
 PinP画像32の左上の座標=(x1,y1)
 PinP画像32の右上の座標=(x2,y1)
 PinP画像32の左下の座標=(x1,y2)
 PinP画像32の右下の座標=(x2,y2)
 カーソルの座標=(cx、cy)
 続いて、同様に、図13(b)に示すPinP表示画像32内のローカル座標系(X,Y)において、カーソルの座標を以下のように表記することとする。
 カーソルの座標=(cxPinP,cyPinP)
 この場合、テレビ10のカーソル位置処理部15は、PinP表示画像32内のローカル座標系のカーソルの座標(cxPinP,cyPinP)は、下記の式(1)によって、PinP表示画像32内のローカル座標系から変換できる。
Figure JPOXMLDOC01-appb-M000001
 上記の式を用いて、テレビ10のカーソル位置処理部15は、図13(c)のPinP表示画像32内のカーソルの座標(cxPinP,cyPinP)を、画像31内の座標系(x,y)の各座標の値から求める。
 画像31の左上の座標=(0,0)
 画像31の右上の座標=(WidthTV,0)=(1920,0)
 画像31の左下の座標=(0,HeightTV)=(0,1080)
 画像31の右下の座標=(1920,1080)
 PinP画像32の左上の座標=(x1,y1)=(1240,440)
 PinP画像32の右上の座標=(x2,y1)=(1640,440)
 PinP画像32の左下の座標=(x1,y2)=(1240,640)
 PinP画像32の右下の座標=(x2,y2)=(1640,640)
 カーソルの座標=(cx、cy)=(1440、540)
 上記の値を式(1)に代入すると、以下の(2)になる。
Figure JPOXMLDOC01-appb-M000002
 したがって、テレビ10のカーソル位置処理部15は、PinP表示画像32内のカーソルの座標(cxPinP,cyPinP)=(960,540)と算出できる。
 このように、STB20の画像31内の座標系(x,y)と、PinP表示画像32内のローカル座標系(X,Y)との2つの座標系が存在しても、テレビ10とSTB20とで使用するデータは、どちらの座標系のデータを使用してもよい。また、この座標変換は、テレビ10のカーソル位置処理部15が行ったが、STB20のカーソル位置処理部22においても、実行される。
 (実施形態6の詳細)
 上述した実施形態においては、PinP表示画像上にはカーソルは表示されなかったが、実施形態6においては、PinP表示画像とカーソルとが重なった場合、テレビ10がPinP表示画像上にカーソルを表示する。以下に、実施形態6について、図14を用いて説明する。
 図14は、本発明の実施形態6に係る表示システム1の処理の流れを示すシーケンス図である。実施形態6について、図14を用いて説明する。なお、実施形態6においては、テレビ10が、メイン画面としてテレビ画像を表示するため、座標系を変換する必要はない。
 テレビ10がPinPを実行する設定になっている場合に、テレビ10がPinP表示画像の座標値をSTB20に出力し、STB20がPinP表示画像の座標を取得し、カーソル位置処理部22がPinP表示領域とカーソルとが重なっているか否かを判定するステップS1~ステップS4は上述した処理と同じため、省略する。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、カーソル座標値を制御情報通信部23に出力する。制御情報通信部23は、取得したカーソル座標値を、テレビ10に出力する(ステップS51)。テレビ10の制御情報通信部13は、出力されたカーソル座標値を取得する(ステップS52)。そして、制御情報通信部13は取得したカーソル座標値をカーソル位置処理部15に出力する。上述したように、座標系を変換する必要はないので、カーソル位置処理部15は、取得したカーソル座標値を、そのまま画像処理部17に出力する。
 一方、ステップS4において、「PinP表示画像とカーソルとが重なっていない」と判定された場合(ステップS4:No)、STB20はステップS53の処理に進む。
 続いて、STB20の画像処理部24は、生成した画像を画像出力部25に出力する。画像出力部25は、取得した画像をテレビ10に出力する(ステップS53)。テレビ10の外部画像入力部16は、出力された画像を取得する(ステップS54)。外部画像入力部16は、取得した画像を画像処理部17に出力する。
 カーソル座標値と画像とを取得した画像処理部17は、まず、取得した画像にPinP表示画像を重畳する。そして、取得したカーソル座標値の位置にカーソルを表示して、画像を生成し、表示部18に出力する。表示部18は、取得した画像を表示する(ステップS55)。
 そして、テレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。上記の処理により、カーソルがPinP表示画像上に表示された画像を、図15に示す。
 図15は、本発明の実施形態6に係る表示システム1において、カーソル33がPinP表示画像32と重なった場合に、テレビ10が表示する画像である。
 図15に示すように、カーソル33とPinP表示画像32とが重なると、テレビ10がPinP表示画像32の上からカーソル33を表示するので、カーソル33がPinP表示画像32と重なって、カーソル33が表示されないということはない。
 このように、実施形態6において、PinP表示画像とカーソルとが重なっても、カーソルはPinP表示画像の上から表示されるため、ユーザはカーソルの位置を見失うことはない。また、ユーザが操作した通りにカーソルが動くので、本来はPinP表示画像とカーソルとが重なると、カーソルが表示されないということを意識することもなく、PinP表示画像を気にせずにカーソルを操作することができる。
 〔実施形態7〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態6において、テレビ10は、メイン画面としてテレビ画像を表示したが、実施形態7では、テレビ10はメイン画面としてSTB20から取得した画像を表示する。実施形態7について、図16を用いて説明する。
 図16は、本発明の実施形態7に係る表示システム1の処理の流れを示すシーケンス図である。
 テレビ10がPinPを実行する設定になっている場合に、テレビ10がPinP表示画像の座標値をSTB20に出力し、STB20がPinP表示画像の座標を取得し、カーソル位置処理部22がPinP表示領域とカーソルとが重なっているか否かを判定するステップS1~ステップS4は上述した処理と同じため、省略する。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、カーソル座標値を制御情報通信部23に出力する。制御情報通信部23は、取得したカーソル座標値を、テレビ10に出力する(ステップS61)。テレビ10の制御情報通信部13は、出力されたカーソル座標値を取得する(ステップS62)。そして、制御情報通信部13は取得したカーソル座標値をカーソル位置処理部15に出力する。
 上述したように、テレビ10はメイン画面としてSTB20から取得した画像を表示している。カーソル位置処理部15が取得したカーソル座標値は、STB20の画像内の座標系における座標値のため、PinP表示画像内のローカル座標系の座標値に変換する必要がある。したがって、カーソル位置処理部15は、取得したカーソル座標値を、ローカル座標系の座標値に変換する(ステップS63)。そして、変換したカーソル座標値を、画像処理部17に出力する。
 一方、ステップS4において、「PinP表示画像とカーソルとが重なっていない」と判定された場合(ステップS4:No)STB20は、ステップS64の処理に進む。
 続いて、STB20の画像処理部24は、生成した画像を画像出力部25に出力する。画像出力部25は、取得した画像をテレビ10に出力する(ステップS64)。テレビ10の外部画像入力部16は、出力された画像を取得する(ステップS65)。外部画像入力部16は、取得した画像を画像処理部17に出力する。
 カーソル座標値と画像とを取得した画像処理部17は、まず、取得した画像にPinP表示画像を重畳する。そして、取得したカーソル座標値の位置に、カーソルを表示して、画像を生成し、表示部18に出力する。表示部18は、取得した画像を表示する(ステップS66)。
 そして、テレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。
 このように、実施形態6においては、テレビ10がメイン画面としてSTB20から取得した画像を表示する場合においても、座標値を変換することにより、実施形態6と同様、PinP表示画像とカーソルとが重なっても、カーソルはPinP表示画像の上から表示される。したがって、ユーザはカーソルの位置を見失うこともなく、PinP表示画像を気にせずにカーソルを操作することができる。
 なお、上述したカーソル座標値の変換は、STB20のカーソル位置処理部22において実行されてもよい。その場合、実施形態6と同様、STB20から出力されるカーソル座標値はSTB20の画像内の座標系における座標値のため、テレビ10のカーソル位置処理部15は、取得したカーソル座標値を、そのまま画像処理部17に出力すればよい。
 〔実施形態8〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態6および7では、PinP表示画像とカーソルとが重なった場合にのみ、テレビ10がPinP表示画像上にカーソルを表示したが、実施形態8では、例えばテレビ10がカーソル用プレーンを備え、PinP表示画像以外のカーソルも、テレビ10が表示する。実施形態8について、図17を用いて説明する。
 図17は、本発明の実施形態8に係る表示システム1の処理の流れを示すシーケンス図である。なお、実施形態8においては、テレビ10が、メイン画面としてテレビ画像を表示するため、座標系を変換する必要はない。
 まず、STB20のカーソル位置処理部22は、カーソル座標値を、制御情報通信部23に出力する。制御情報通信部23は、取得したカーソル座標値を、テレビ10に出力する(ステップS71)。テレビ10の制御情報通信部13は、出力されたカーソル座標値を取得する(ステップS72)。そして、制御情報通信部13は、取得したカーソル座標値をカーソル位置処理部15に出力する。上述したように、座標系を変換する必要はないので、カーソル位置処理部15は、取得したカーソル座標値を、そのまま画像処理部17に出力する。
 続いて、STB20の画像処理部24は、生成した画像を画像出力部25に出力する。画像出力部25は、取得した画像をテレビ10に出力する(ステップS73)。テレビ10の外部画像入力部16は、出力された画像を取得する(ステップS74)。外部画像入力部16は、取得した画像を画像処理部17に出力する。
 カーソル座標値と画像とを取得した画像処理部17は、まず、取得した画像にPinP表示画像を重畳する。そして、取得したカーソル座標値の位置に、カーソルを表示して、画像を生成し、表示部18に出力する。表示部18は、取得した画像を表示する(ステップS75)。
 そして、テレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。
 このように、実施形態8においては、STB20が常にカーソル座標値を出力し、テレビ10が取得したカーソル座標値の位置にカーソルを表示するので、PinP表示画像と関係なく、常にテレビ10はカーソルを表示する。したがって、ユーザはカーソルの位置を見失うことはない。また、常にテレビがカーソルを表示するため、カーソルがPinP表示画像と重なった場合でも、カーソルの形状が変化することもなく、スムーズなカーソル移動が可能となる。
 なお、上述したテレビ10は、メイン画面としてSTB20から入力される画像を表示してもよく、その場合は、STB20から出力されたカーソル座標値を、テレビ10のカーソル位置処理部15がSTB20の画像内の座標系における座標値から、PinP表示画像内の座標系における座標値に変換すればよい。また、実施形態7と同様、カーソル座標値の変換は、STB20のカーソル位置処理部22において実行されてもよい。その場合は、実施形態8と同様、STB20から出力されるカーソル座標値はSTB20の画像内の座標系における座標値のため、テレビ10のカーソル位置処理部15は、取得したカーソル座標値を、そのまま画像処理部17に出力すればよい。
 〔実施形態9〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態6~8において、テレビ10がカーソルを表示したが、実施形態9では、STB20がカーソルを表示する。
 具体的には、テレビ10が、画像処理部17からテレビ画像を取得して、取得したテレビ画像をSTB20に出力するテレビ画像出力部(不図示)を備えていればよい。また、STB20がテレビ10からテレビ画像を取得し、取得したテレビ画像を画像処理部17に出力するテレビ画像取得部(不図示)を備えていればよい。また、STB20の画像処理部24がPinPを実行する機能を有していればよい。実施形態9の処理について、説明する。
 まず、テレビ画像出力部は、画像処理部17から取得したテレビ画像を、STB20に出力する。STB20のテレビ画像取得部は、出力されたテレビ画像を取得し、画像処理部24に出力する。画像処理部24は、STB20の画像に取得したテレビ画像をPinP表示画像として重畳し、さらにその上からカーソルを表示した画像を生成する。そして、生成した画像を画像出力部25に出力し、画像出力部25は取得した画像をテレビ10に出力する。テレビ10の外部画像入力部16は、出力された画像を取得し、取得した画像を画像処理部17に出力する。画像処理部17は、取得した画像は既にPinP表示画像が重畳されているため、そのまま表示部18に出力し、表示部18は取得した画像を表示する。
 このように、実施形態9においては、STB20がカーソルを表示しても、実施形態6~8と同様、PinP表示画像とカーソルとが重なっても、カーソルはPinP表示画像の上から表示される。したがって、ユーザはカーソルの位置を見失うこともなく、PinP表示画像を気にせずにカーソルを操作することができる。
 〔実施形態10〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 上述した実施形態において、表示システム1は、カーソルの表示に関する処理を行ったが、実施形態10では、カーソルを使って、STB20がテレビ10を制御する。以下に、実施形態10について、図18を用いて説明する。
 図18は、本発明の実施形態10に係る表示システム1の処理の流れを示すシーケンス図である。
 テレビ10がPinPを実行する設定になっている場合に、テレビ10がPinP表示画像の座標値をSTB20に出力し、STB20がPinP表示画像の座標を取得し、カーソル位置処理部22がPinP表示領域とカーソルとが重なっているか否かを判定するステップS1~ステップS4は上述した処理と同じため、省略する。
 ステップS4において、「PinP表示画像とカーソルとが重なっている」と判定された場合(ステップS4:Yes)、カーソル位置処理部22は、カーソルの動きがPinP表示画像に対してどのように動いているかを判別し、判別結果に基づいて、予め定められた処理のうち何れかを選択する(ステップS81)。予め定められた処理およびカーソルの動きによって選択される処理の例は、後述する。そして、カーソル位置処理部22は、選択した処理を示す処理情報を制御情報通信部23に出力する。制御情報通信部23は、取得した処理情報を、テレビ10に出力する(ステップS82)。テレビ10の制御情報通信部13は、出力された処理情報を取得し(ステップS83)、設定変更部12に出力する。設定変更部12は、取得した処理情報が示す処理を実行する(ステップS84)。
 そして、テレビ10がPinPの設定情報を出力し、STB20がPinPの設定情報を取得して、PinPを実行する設定になっているか否かを判定するステップS9~ステップS11は上述した処理と同じため、省略する。
 (予め定められた処理の例)
 上述した予め定められた処理およびカーソルの動きによって選択される処理の例について、図19~図24を用いて説明する。
 (チャンネル変更)
 カーソルがPinP表示画像の領域に下から入り、例えば1秒未満でPinP表示画像の上から出た場合、つまりPinP表示画像の領域を縦方向に跨いだ場合、カーソル位置処理部22は、テレビ10が受信する放送波のチャンネルをアップする処理を選択する。この場合においてテレビ10が表示する画像を、図19に示す。
 図19は、本発明の実施形態10に係る表示システム1において、テレビ10が表示する画像であり、(a)は、テレビ10が受信する放送波のチャンネルをアップするカーソルの動きを示す図であり、(b)は(a)の処理が実行された後のテレビ10の画像である。図19(a)に示すように、カーソル33がPinP表示画像32の領域を下から上へ縦方向に跨いだ場合、図19(b)に示すように、テレビ10は受信する放送波のチャンネルをアップし、受信した放送波のチャンネルの画像をPinP表示画像32に表示する。逆に、カーソル33がPinP表示画像32の領域を上から下に跨いだ場合は、テレビ10が受信する放送波のチャンネルをダウンする。
 (MENUを表示)
 カーソルがPinP表示画像の領域に入り、例えば2秒以上PinP表示画像の領域に停止した場合、カーソル位置処理部22は、テレビ10のMENUを表示する処理を選択する。この場合においてテレビ10が表示する画像を、図20に示す。
 図20は、本発明の実施形態10に係る表示システム1において、テレビ10が表示する画像であり、(a)は、本発明の実施形態10に係るテレビ10がMENUを表示するカーソル33の動きを示す図であり、(b)は(a)の処理が実行された後のテレビ10の画像である。図20(a)に示すように、カーソル33がPinP表示画像32の下から入り、PinP表示画像32の領域内に停止した場合、図20(b)に示すように、テレビ10はPinP表示画像32の下辺からMENUをスライドさせて表示する。なお、例えば、PinP表示画像32の左からカーソル33が入り、2秒以上停止した場合、MENUが左辺からスライド表示されるなど、テレビ10はカーソル33が入った方向からMENUをスライド表示させてもよい。
 例えば、上述したステップS4において、カーソル33がPinP表示画像32の領域に入る際に横切った一辺(領域の一辺)を、カーソル位置処理部22が判別する構成とする。また、上述したステップS81において、カーソル位置処理部22は、テレビ10のMENUを、上記判別した一辺からスライドして表示する旨の処理情報を制御情報通信部23に出力する。そして、ステップS84において、設定変更部は、取得した処理情報が示す処理を実行する。したがって、STB20は、PinP表示画像32の領域に入るカーソル33の動きに合わせてテレビ10のMENUをスライドして表示するので、ユーザの操作性が向上する。また、STB20は、表示されたMENUがユーザの操作に対する処理であることを、ユーザに好適に知らせることができる。
 (PinP表示画像の位置を変更)
 カーソルがPinP表示画像の領域に入り、例えば1秒未満でPinP表示画像を跨ぎ、さらにSTB20の画像の端に到達した場合、カーソル位置処理部22は、テレビ10のPinP表示画像の位置を、カーソルが到達した方向に移動させる処理を選択する。この場合においてテレビ10が表示する画像を、図21に示す。
 図21は、本発明の実施形態10に係る表示システム1において、テレビ10が表示する画像であり、(a)は、テレビがPinP表示画像32の位置を変更するカーソル33の動きを示す図であり、(b)は(a)の処理が実行された後のテレビ10の画像である。図21(a)に示すように、カーソル33がPinP表示画像32を左から跨ぎ、STB20の表示画像31の右端まで到達した場合、図21(b)に示すように、PinP表示画像32の位置を、カーソルが到達した右方向に変更する。
 (PinP表示画像のサイズを変更)
 カーソルがPinP表示画像の領域に入り、PinP表示画像を跨ぎ、さらにPinP表示画像の境界で、例えば1秒以上停止した場合、カーソル位置処理部22は、テレビ10のPinP表示画像のサイズを変更する処理を選択する。この場合において、テレビ10が表示する画像を、図22に示す。
 図22は、本発明の実施形態10に係る表示システム1において、テレビ10が表示する画像であり、(a)は、テレビがPinP表示画像32のサイズを変更するカーソル33の動きを示す図であり、(b)は(a)の処理が実行された後のテレビ10の画像である。図22(a)に示すように、カーソル33がPinP表示画像32を右から跨ぎ、PinP表示画像32の左側の境界で停止した場合、図21(b)に示すように、PinP表示画像のサイズを小さくする。逆に、カーソル33がPinP表示画像32を左から跨ぎ、PinP表示画像32の右側の境界で停止した場合、PinP表示画像32を大きくする。
 (操作ツールバーを表示)
 カーソルがPinP表示画像の領域に入り、例えば1秒以内に同じ方向から出た場合、カーソル位置処理部22は、操作ツールバーを表示する処理を選択する。この場合において、テレビ10が表示する画像を、図23に示す。
 図23は、本発明の実施形態10に係る表示システム1において、テレビ10が表示する画像であり、(a)は、テレビ10が操作ツールバーを表示するカーソル33の動きを示す図であり、(b)は(a)の処理が実行された後のテレビ10の画像である。図23(a)に示すように、カーソル33がPinP表示画像32の領域に下から入り、下から出た場合、図23(b)に示すように、PinP表示画像の外側に操作ツールバーを表示する。この操作ツールバーは、テレビ10を操作できる操作ツールバーまたはSTB20を操作できる操作ツールバーのどちらでもよく、STB20に接続されたマウス2を使って、ユーザは操作ツールバーを利用できる。
 このように、上述したステップS81において、カーソル位置処理部22は、ユーザが操作を入力するためのボタンが押下されたか否かを参照することなく、カーソル33の動きがPinP表示画像32に対してどのように動いているかを判別した判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する。すなわち、STB20は、ユーザにボタンを押下させることなくテレビ10に対する処理を実行することができるため、ユーザによるテレビ10の操作の利便性を向上させることができる。
 また、STB20は、マウス2以外の装置(例えば、後述する実施形態における遠隔操作装置2aなど)から操作を受け付ける構成であってもよい。その場合、ボタンを備えない装置を操作受付装置として用いることができる。
 また、ボタンを備える装置を操作受付装置として用いる場合であっても、以下の利点がある。
  ・ボタンの数を減らすなどの簡素化を図ることができる。
  ・一時的にテレビ10を操作するためのボタンを割り当てるといった、ユーザの操作を煩雑にさせる構成は必要ないため、ユーザによるテレビ10の操作の利便性を向上させることができる。
 (音量バーを表示)
 カーソルがPinP表示画像の領域に入り、さらにマウス2のボタンをクリックした場合、カーソル位置処理部22は、音量バーを表示する処理を選択する。マウス2のボタンがクリックされたか否かは、外部機器接続部21からの信号により、カーソル位置処理部22が判定する。この場合において、テレビ10が表示する画像を、図24(a)および(b)に示す。
 図24は、本発明の実施形態10に係る表示システム1において、テレビ10が表示する画像であり、(a)は、テレビ10が音量バーを表示するカーソル33の動きを示す図であり、(b)は、(a)の処理が実行された後のテレビ10の画像である。図24(a)に示すように、カーソル33がPinP表示画像32の領域に入り、さらにマウス2のボタンをクリックすると、図24(b)に示すように、音量バーを表示する。また、この音量バーが表示されているときに、音量を上げる操作および音量バーを消す操作について、図24(c)および(d)に示す。
 図24(c)は、(b)の処理が実行された後に音量を上げるカーソル33の動きを示す図であり、(d)は、音量バーの表示が消えた後のテレビ10の画像である。図24(c)に示すように、音量バーが表示されているときに、カーソル33が右に動いた場合、カーソル位置処理部22は、音量を上げる処理を選択する。また、マウス2のボタンが再度クリックされた場合、図24(d)に示すように、カーソル位置処理部22は、音量バーの表示を消す処理を選択する。
 このように、実施形態10においては、ユーザは、PinP表示画像に対するカーソルの相対的な動きによって、テレビ10を操作することができる。したがって、ユーザは、テレビ10を操作したい場合、テレビ10のリモートコントローラやテレビ10が本体に備えているキーを操作することなく、STB20に接続されているマウス2を操作することによって、テレビ10も操作することができる。
 (実施形態10に関する付記事項)
 なお、カーソル位置処理部22が実行する処理は、より一般には、以下のように表現することができる。
 カーソル位置処理部22が判別する、上記カーソルの上記PinP表示画像に対する相対的な動きには、上記カーソルが、上記PinP表示画像の領域外から上記PinP表示画像の領域内に移動する動き、上記カーソルが、上記PinP表示画像の領域内から上記PinP表示画像の領域外に移動する動き、及び、上記PinP表示画像の領域内で一時的に停止する動き、の少なくとも何れかの動きが含まれており、カーソル位置処理部22は、これらの判別結果に基づき、上記表示装置が受信する放送波のチャンネルを変更する処理、上記表示装置のメニュー画面を表示する処理、上記PinP表示画像の位置を変更する処理、上記PinP表示画像の大きさを変更する処理、及び、操作ツールバーを表示する処理、の少なくとも何れかの処理を選択する。
 〔実施形態11〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 実施形態10においては、カーソルがPinP表示画像の領域に入った方向や出た方向などによって処理が選択された。しかし、PinP表示画像の角付近からPinP表示画像の領域にカーソルが入った場合、STB20がどの方向からカーソルが入ったと認識したのか、ユーザには分からない。そこで、実施形態11では、実施形態10と実施形態1とを組み合わせ、カーソルが入った方向や出た方向などを、STB20がハイライト表示する。実施形態11において、テレビ10に表示される画像を、図25に示す。
 図25は、本発明の実施形態11に係る表示システム1において、テレビ10が表示する画像であり、(a)は、PinP表示画像32にカーソル33が入った方向の外枠がハイライト表示された画像である。図25(a)に示すように、カーソル33がPinP表示画像の領域に左から入った場合に、STB20の画像処理部24は、PinP表示画像の外枠の左側を、例えば黄色にハイライト表示する。
 図25(b)は、(b)は、PinP表示画像32からカーソル33が出た方向の外枠がハイライト表示された画像である。図25(b)に示すように、カーソル33がPinP表示画像32の領域の右から出た場合に、STB20の画像処理部24は、PinP表示画像の外枠の右側を、例えば橙色にハイライト表示する。
 図25(c)は、PinP表示画像32にカーソル33が入った方向の外枠がハイライト表示された画像であり、(d)は、(c)の後にカーソル33がPinP表示画像32の領域に停止し、外枠が違う色にハイライト表示された画像である。図25(a)と同様、図25(c)に示すように、カーソル33がPinP表示画像の領域に下から入った場合に、STB20の画像処理部24は、PinP表示画像の外枠の下側を、例えば黄色にハイライト表示する。そして、カーソル33がPinP表示画像の領域に、例えば2秒以上停止した場合に、STB20の画像処理部24は、黄色にハイライト表示したPinP表示画像の外枠の下側を、例えば青色にハイライト表示する。
 このように、実施形態11においては、カーソルがPinP表示画像の領域に入った方向や出た方向などを、STB20の画像処理部24がPinP表示画像の外枠をハイライト表示することにより、STB20がカーソルの操作をどのように認識したのかをユーザに知らせることができる。したがってユーザは、カーソルを使って、思い通りの操作をすることができる。
 〔実施形態12〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 図26は、本発明の実施形態12に係る表示装置100の構成を示すブロック図である。表示装置100は、図26に示すように、入力部11、設定変更部(実行手段)12、PinP処理部(座標取得手段)14、表示部18、外部機器接続部21、第1のカーソル位置処理部(判別手段、選択手段)101、第2のカーソル位置処理部102、第1の画像処理部103、および第2の画像処理部104を備えている。なお、第1のカーソル位置処理部101は、上述した実施形態におけるカーソル位置処理部22と同じ機能を備える。また、第2のカーソル位置処理部102は、上述した実施形態におけるカーソル位置処理部15と同じ機能を備える。また、第1の画像処理部103は、上述した実施形態における画像処理部24と同じ機能を備える。また、第2の画像処理部104は、上述した実施形態における画像処理部17と同じ機能を備える。
 (表示装置100の外観)
 図27は、本発明の実施形態12に係る表示装置100の外観を示す図である。表示装置100が表示する画像には、第1の画像処理部103が生成する画像101と、PinP表示画像102と、カーソル103とが表示されている。ユーザはマウス2を使って、カーソル103を動かすことができる。
 (表示装置100の処理)
 表示装置100では、第2の画像処理部104は、第1の画像処理部が生成する画像(第1の画像)に表示装置100の画像(第2の画像)をPinP表示画像として重畳する。
 また、表示装置100では、PinP処理部14は、PinP表示画像の座標を取得し、取得した座標を第1のカーソル位置処理部101に出力する。カーソル位置処理部101は、PinP表示画像の座標を取得すると、第1の画像処理部が生成する画像に含まれるカーソルが、PinP表示画像と重なっているか否かを判定する。カーソル位置処理部101は、第1の画像処理部が生成する画像に含まれるカーソルは、PinP表示画像と重なっていると判定した場合、カーソルのPinP表示画像に対する相対的な動きを判別する。次に、カーソル位置処理部101は、判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する。そして、カーソル位置処理部101は、選択した処理を示す処理情報を、設定変更部12に出力する。設定変更部12は、カーソル位置処理部101から取得した処理情報が示す処理を実行する。
 このように、本実施形態に係る表示装置100は、上述した実施形態10におけるテレビ10およびSTB20を備えた表示システムと同様の効果を奏する。
 なお、表示装置100は、図26における設定変更部12、PinP処理部14、および第2のカーソル位置処理部102の各機能を第1のCPUにより実現し、第1のカーソル位置処理部101の機能を第2のCPUにより実現するように構成することも可能である。さらに、表示装置100は、設定変更部12、PinP処理部14、第1のカーソル位置処理部101、および第2のカーソル位置処理部102の各機能を一つのCPUにより実現するように構成してもよい。
 また、表示装置100は、チューナを備えたテレビジョン受像機で実現してもよい。この場合、表示装置100は、チューナが放送波を受信して得た画像をPinP表示画像として表示する。また、表示装置100は、外部機器から供給される画像信号を受け付ける外部信号受付手段を備える構成であってもよい。この場合、表示装置100は、外部機器から供給され、外部信号受付手段が受け付けた画像信号の示す画像をPinP表示画像として表示する。
 〔実施形態13〕
 本発明の他の実施形態について、説明する。なお、説明の便宜上、前記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 図28は、本発明の実施形態13において、ユーザの操作を受け付ける遠隔操作装置2aの正面図である。遠隔操作装置2aは、上述した実施形態におけるマウス2の代わりにユーザの操作を受け付ける装置である。遠隔操作装置2aは、赤外線、Bluetoothといった無線通信によって、受け付けたユーザの操作を示す操作指示を、上述したSTB20または表示装置100に対して送信する。また、遠隔操作装置2aは、図28に示すように、タッチパッド200を備えている。
 タッチパッド200は、操作指示体(例えば、指、スタイラスペンなど)による操作入力を受け付けるための手段である。遠隔操作装置2aは、タッチパッド200が検知した操作指示体によるタッチを操作入力として受け付ける。タッチパッド200は、例えば、静電容量方式を採用することにより、操作指示体によるタッチを検知することができる。なお、タッチパッド200が受け付ける操作入力としては、例えば、スライド(タッチ面にタッチしたままの状態で、タッチ面をなぞる動作)操作、及びタップ(タッチ後、すぐに操作指示体を離す動作)操作などが挙げられる。また、スライド操作には、フリック(タッチ面を指で軽くはらう動作)操作が含まれる。
 STB20または表示装置100は、遠隔操作装置2aから受信した操作指示に基づいた処理を実行する。例えば、STB20または表示装置100が遠隔操作装置2aから「左方向へのスライド操作」を示す操作指示を受信した場合、STB20または表示装置100は、カーソルを左方向へ移動させる処理を実行する。
 また、遠隔操作装置2aは、タッチパッド200を備える構成に限定されない。例えば、上述したテレビ10または表示装置100が複数の光源を備え、当該複数の光源が発する光を受光する光受信センサを遠隔操作装置2aが備えることにより、遠隔操作装置2aの空間的な動きを検出可能な構成としてもよい(構成A)。構成Aを備えたテレビ10または表示装置100と、遠隔操作装置2bとを、図29の(a)に示す。図29の(a)は、本発明の実施形態13におけるテレビ10または表示装置100と、遠隔操作装置2bとの外観を示す図である。
 図29の(a)に示すように、テレビ10または表示装置100は複数の光源110を備えている。また、遠隔操作装置2bは、光受信センサ210、ボタン220a、およびボタン220bを備えている。遠隔操作装置2bは、光受信センサ210において、テレビ10または表示装置100が備える複数の光源110から発する光を受光する。この構成により、STB20または表示装置100は、遠隔操作装置2bの空間的な動きを検出することができる。また、遠隔操作装置2bは、ボタン220aおよび220bに機能を割り当て、ユーザによるボタン220aおよび220bの押下を操作指示として受け付ける構成としてもよい。例えば、ボタン220aを、操作を決定する決定ボタン、ボタン220bを、操作を無効にするキャンセルボタンとしてもよい。
 また、構成Aにおいて、光源110は、テレビ10または表示装置100の周辺に配置されている構成であってもよい。図29の(b)は、テレビ10または表示装置100の周辺に光源110が配置されている場合の外観を示す図である。図29の(b)に示すように、テレビ10または表示装置100の周辺に光源110が配置されている場合であっても、光受信センサ210が光源110から発する光を受光することにより、STB20または表示装置100は、遠隔操作装置2bの空間的な動きを検出することができる。
 また、遠隔操作装置2aが、自装置の振動を検知する振動センサ、自装置の傾きを検知する傾きセンサ、を備えることにより、遠隔操作装置2aの空間的な動きを検出可能な構成としてもよい(構成B)。また、上記構成A及び構成Bの双方の構成を採用してもよく、この場合の遠隔操作装置2cの詳細は、参照する図面を変えて後述する。
 なお、このような構成において、STB20または表示装置100と遠隔操作装置2aとは無線通信する構成であることが好ましいがこれに限定されない。
 また、このような構成において、テレビ10または表示装置100は、遠隔操作装置2aの空間的な動きに応じて、カーソルを移動させる。テレビ10または表示装置100は、このような遠隔操作装置2aを用いても、上述の実施形態にて説明した機能を実現できる。
 (遠隔操作装置2c)
 図30は、本発明の実施形態13における遠隔操作装置2cの構成を示すブロック図である。図30に示すように、遠隔操作装置2cは、CMOSセンサ210c、ジャイロセンサ240、加速度センサ250、無線通信部260、および制御部270を備えている。
 CMOSセンサ210cは、光源110が赤外線を出力する赤外線LEDである場合に、複数の光源110が発する赤外光を受光し、受光した複数の赤外光の位置関係および間隔を示す光受信情報を出力する。CMOSセンサ210cは、図29における遠隔操作装置2bの光受信センサ210に相当する。
 ジャイロセンサ240は、自装置の傾きを検知し、検知した自装置の傾きを示す傾き情報を出力する。ジャイロセンサ240は、上述した構成Bにおける傾きセンサに相当する。
 加速度センサ250は、自装置の加速度を検知し、検知した自装置の加速度を示す加速度情報を出力する。加速度センサ250は、上述した構成Bにおける振動センサとして機能する。
 無線通信部260は、テレビ10または表示装置100に対して無線通信を介してデータを送信する機能を備えている。
 制御部270は、遠隔操作装置2cの各構成を統括的に制御する。
 遠隔操作装置2cの具体的な処理の例を挙げれば以下の通りである。
 遠隔操作装置2cは、無線通信部260を介して、ジャイロセンサ240が検知した振動情報、加速度センサ250が検知した傾き情報、およびCMOSセンサ210cが光受信情報を、STB20または表示装置100に送信する。
 STB20または表示装置100は、遠隔操作装置2cから受信した振動情報、傾き情報、および光受信情報を参照し、遠隔操作装置2cの動き、遠隔操作装置2cの傾き(姿勢)、および遠隔操作装置2cがテレビ10または表示装置100に対して向けられている相対的な方向および遠隔操作装置2cがテレビ10または表示装置100までの遠隔操作装置2cの距離を検知する。そして、STB20または表示装置100は、検知した結果に基づいて処理を実行する。例えば、STB20または表示装置100が、遠隔操作装置2cが左方向へ移動し、遠隔操作装置2cがテレビ10または表示装置100に対して左方向へ向いたことを検知した場合、STB20または表示装置100は、カーソルを左方向へ移動させる処理を実行する。
 このように、表示システム1または表示装置100において、ユーザの操作を受け付ける装置としてマウス2の代わりに遠隔操作装置2aを用いても、上述した実施形態における表示システム1または表示装置100と同様の効果を奏する。
 〔ソフトウェアによる実現例〕
 表示システム1の各ブロックは、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェアによって実現してもよい。
 後者の場合、表示システム1は、各機能を実現するソフトウェアであるプログラムの命令を実行するCPU、上記プログラムおよび各種データがコンピュータ(またはCPU)で読み取り可能に記録されたROM(Read Only Memory)または記憶装置(これらを「記録媒体」と称する)、上記プログラムを展開するRAM(Random Access Memory)などを備えている。そして、コンピュータ(またはCPU)が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
 〔まとめ〕
 本発明の態様1に係る外部機器(セットトップボックス20)は、PinP表示可能な表示装置に、画像を提供する外部機器であって、当該外部機器が提供する画像に対して上記表示装置が重畳して表示するPinP表示画像の座標を取得する座標取得手段(制御情報通信部23)と、当該外部機器が提供する画像に含まれるカーソルの、上記PinP表示画像に対する相対的な動きを判別する判別手段(カーソル位置処理部22)と、上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択手段(カーソル位置処理部22)と、上記選択手段が選択した処理を実行するよう上記表示装置に通知する通知手段(制御情報通信部23)と、を備えている。
 上記の構成によれば、上記外部機器は、PinP表示画像に対する相対的なカーソルの動きにより処理を選択し、その処理を表示装置に通知する。
 したがって、外部機器の画像にPinP表示画像を重畳して表示する場合において、ユーザによる表示装置の操作の利便性を向上させることができる。
 また、本発明の態様2に係る外部機器(セットトップボックス20)において、上記態様1における上記判別手段(カーソル位置処理部22)が判別する、上記カーソルの上記PinP表示画像に対する相対的な動きには、上記カーソルが、上記PinP表示画像の領域外から上記PinP表示画像の領域内に移動する動き、上記カーソルが、上記PinP表示画像の領域内から上記PinP表示画像の領域外に移動する動き、及び、上記PinP表示画像の領域内で一時的に停止する動き、
の少なくとも何れかの動きが含まれていてもよい。
 上記の構成によれば、ユーザは外部機器からカーソルを操作することにより、表示装置に処理を実行させることができるので、ユーザによる表示装置の操作の利便性を向上させることができる。
 また、本発明の態様3に係る外部機器(セットトップボックス20)において、上記態様1または2における上記予め定められた複数の処理には、上記表示装置が受信する放送波のチャンネルを変更する処理、上記表示装置のメニュー画面を表示する処理、上記PinP表示画像の位置を変更する処理、上記PinP表示画像の大きさを変更する処理、及び操作ツールバーを表示する処理、の少なくとも何れかの処理が含まれていてもよい。
 上記の構成によれば、ユーザは外部機器からカーソルを操作することにより、表示装置に処理を実行させることができるので、ユーザによる表示装置の操作の利便性を向上させることができる。
 また、本発明の態様4に係る外部機器(セットトップボックス20)において、上記態様1から3の何れかにおける上記判別手段(カーソル位置処理部22)が、上記カーソルが上記PinP表示画像の領域を縦方向に跨ぐ動きを判別した場合、上記選択手段(カーソル位置処理部22)は、上記表示装置が受信する放送波のチャンネルを変更する処理を選択してもよい。
 上記の構成によれば、ユーザは、外部機器を操作することにより、表示装置が表示する放送波のチャンネルを変更することができる。
 また、本発明の態様5に係る外部機器(セットトップボックス20)において、上記態様1から4の何れかにおける上記判別手段(カーソル位置処理部22)が、上記カーソルが上記PinP表示画像の領域内に一時的に停止した動きを判別した場合、上記選択手段(カーソル位置処理部22)は、上記表示装置のメニュー画面を表示する処理を選択してもよい。
 上記の構成によれば、ユーザは、外部機器を操作することにより、表示装置のメニュー画面を表示することができる。
 また、本発明の態様6に係る外部機器(セットトップボックス20)において、上記態様5における上記判別手段(カーソル位置処理部22)は、上記カーソルが上記PinP表示画像の領域に入る際に横切った一辺を判別し、上記選択手段は、上記判別手段が判別した一辺から、上記表示装置のメニュー画面をスライドして表示する処理を選択してもよい。
 上記の構成によれば、外部機器は、PinP表示画像の領域に入るカーソルの動きに合わせて、表示装置のメニュー画面をスライドして表示するので、表示されたメニュー画面がユーザの操作に対する処理であることを、ユーザに知らせることができる。
 また、本発明の態様7に係る外部機器(セットトップボックス20)において、上記態様1から6の何れかにおける上記判別手段(カーソル位置処理部22)が、上記カーソルが上記PinP表示画像の領域を跨いで移動したうえで当該表示装置の表示領域の端に到達したと判別した場合、上記選択手段(カーソル位置処理部22)は、上記PinP表示画像の位置を変更する処理を選択してもよい。
 上記の構成によれば、ユーザは、外部機器を操作することにより、PinP表示画像の位置を変更することができる。
 また、本発明の態様8に係る外部機器(セットトップボックス20)において、上記態様1から7の何れかにおける上記判別手段(カーソル位置処理部22)が、上記カーソルが上記PinP表示画像の領域を跨いで移動したうえで上記PinP表示画像の境界で停止したと判別した場合、上記選択手段(カーソル位置処理部22)は、上記PinP表示画像の大きさを変更する処理を選択してもよい。
 上記の構成によれば、ユーザは、外部機器を操作することにより、PinP表示画像の大きさを変更することができる。
 また、本発明の態様9に係る外部機器(セットトップボックス20)において、上記態様1から8の何れかにおける上記判別手段(カーソル位置処理部22)が、上記カーソルが上記PinP表示画像の領域に一時的に入ったうえで再度上記PinP表示画像の領域外に移動したと判別した場合、上記選択手段(カーソル位置処理部22)は、操作ツールバーを表示する処理を選択してもよい。
 上記の構成によれば、ユーザは、外部機器を操作することにより、操作ツールバーを表示することができる。
 また、本発明の態様10に係る外部機器(セットトップボックス20)は、ユーザが上記カーソルを操作するために用いる操作体に設けられたボタンが押下されたか否かを検出するボタン押下検出手段(カーソル位置処理部22)を更に備え、上記判別手段(カーソル位置処理部22)が、上記カーソルが上記PinP表示画像の領域に入ったと判別したうえで、上記ボタン押下検出手段が、上記ボタンが押下されたことを検出した場合、上記選択手段(カーソル位置処理部22)は、音量バーを表示する処理を選択してもよい。
 上記の構成によれば、ユーザは、外部機器を操作することにより、音量バーを表示することができる。
 また、本発明の態様11に係る外部機器(セットトップボックス20)において、上記態様1から8の何れかにおける上記選択手段(カーソル位置処理部22)は、ユーザが操作を入力するためのボタンが押下されたか否かを参照することなく、上記判別手段(カーソル位置処理部22)による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択してもよい。
 上記の構成によれば、外部機器は、ユーザによってボタンが押下されたか否かを参照することなく、処理を実行する。したがって、外部機器は、ユーザにボタンを押下する操作をさせることなく、表示装置を操作させることができるので、ユーザによる表示装置の操作の利便性を向上させることができる。
 また、本発明の態様12に係る外部機器(セットトップボックス20)は、上記態様1から11の何れかに記載の外部機器であって、セットトップボックスとして機能する。
 また、本発明の態様13に係る制御方法は、PinP表示可能な表示装置に、画像を提供する外部機器の制御方法であって、当該外部機器が提供する画像に対して上記表示装置が重畳して表示するPinP表示画像の座標を取得する座標取得工程と、当該外部機器が提供する画像に含まれるカーソルの、上記PinP表示画像に対する相対的な動きを判別する判別工程と、上記判別工程における判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択工程と、上記選択工程が選択した処理を実行するよう上記表示装置に通知する通知工程と、を含んでいる。
 上記の構成によれば、上記外部機器および制御方法は、上記外部機器と同様の効果を奏する。
 また、本発明の態様14に係る表示システムは、PinP表示可能な表示装置(テレビ10)と、上記態様1から11の何れかに記載の外部機器(セットトップボックス20)と、を備えている。
 上記の構成によれば、PinP表示可能な表示装置と、上記の外部機器とを備えた表示システムを実現できる。
 また、本発明の態様15に係る表示装置(表示装置100)は、第1の画像に第2の画像を重畳して表示するPinP表示可能な表示装置であって、当該表示装置が表示する上記第2の画像の座標を取得する座標取得手段(PinP処理部14)と、上記第1の画像に含まれるカーソルの、上記第2の画像に対する相対的な動きを判別する判別手段(第1のカーソル位置処理部101)と、上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択手段(第1のカーソル処理部)と、上記選択手段が選択した処理を実行する実行手段(設定変更部12)と、を備えている。
 上記の構成によれば、表示装置は、上記表示システムと同様の効果を奏する。
 また、本発明の態様16に係るテレビジョン受像機は、上記態様15に記載の表示装置の上記各手段を備えている。
 上記の構成によれば、上記態様15に係る表示装置と同様の効果を奏するテレビジョン受像機が実現できる。
 本発明の各態様に係る外部機器は、コンピュータによって実現してもよく、この場合には、コンピュータを上記外部機器が備える各手段として動作させることにより上記外部機器をコンピュータにて実現させる外部機器の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
 本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
 本発明は、セットトップボックスなどの外部機器とテレビなどの表示装置とを含む表示システムに好適に利用することができる。
 1 表示システム
 2 マウス
 10 テレビ(表示装置)
 11 入力部
 12 設定変更部
 13 制御情報通信部
 14 PinP処理部
 15 カーソル位置処理部
 16 外部画像入力部
 17 画像処理部
 18 表示部
 20 セットトップボックス(STB、外部機器)
 21 外部機器接続部
 22 カーソル位置処理部(判別手段、選択手段、ボタン押下検出手段)
 23 制御情報通信部(座標取得手段、通知手段)
 24 画像処理部
 25 画像出力部

Claims (16)

  1.  PinP表示可能な表示装置に、画像を提供する外部機器であって、
     当該外部機器が提供する画像に対して上記表示装置が重畳して表示するPinP表示画像の座標を取得する座標取得手段と、
     当該外部機器が提供する画像に含まれるカーソルの、上記PinP表示画像に対する相対的な動きを判別する判別手段と、
     上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択手段と、
     上記選択手段が選択した処理を実行するよう上記表示装置に通知する通知手段と、を備えていることを特徴とする外部機器。
  2.  上記判別手段が判別する、上記カーソルの上記PinP表示画像に対する相対的な動きには、
      上記カーソルが、上記PinP表示画像の領域外から上記PinP表示画像の領域内に移動する動き、
      上記カーソルが、上記PinP表示画像の領域内から上記PinP表示画像の領域外に移動する動き、及び、
      上記PinP表示画像の領域内で一時的に停止する動き、
    の少なくとも何れかの動きが含まれていることを特徴とする請求項1に記載の外部機器。
  3.  上記予め定められた複数の処理には、
      上記表示装置が受信する放送波のチャンネルを変更する処理、
      上記表示装置のメニュー画面を表示する処理、
      上記PinP表示画像の位置を変更する処理、
      上記PinP表示画像の大きさを変更する処理、及び
      操作ツールバーを表示する処理、
    の少なくとも何れかの処理が含まれている、
    ことを特徴とする請求項1または2に記載の外部機器。
  4.  上記判別手段が、上記カーソルが上記PinP表示画像の領域を縦方向に跨ぐ動きを判別した場合、
     上記選択手段は、上記表示装置が受信する放送波のチャンネルを変更する処理を選択することを特徴とする請求項1から3の何れか1項に記載の外部機器。
  5.  上記判別手段が、上記カーソルが上記PinP表示画像の領域内に一時的に停止した動きを判別した場合、
     上記選択手段は、上記表示装置のメニュー画面を表示する処理を選択することを特徴とする請求項1から4の何れか1項に記載の外部機器。
  6.  上記判別手段は、上記カーソルが上記PinP表示画像の領域に入る際に横切った一辺を判別し、
     上記選択手段は、上記判別手段が判別した一辺から、上記表示装置のメニュー画面をスライドして表示する処理を選択することを特徴とする請求項5に記載の外部機器。
  7.  上記判別手段が、上記カーソルが上記PinP表示画像の領域を跨いで移動したうえで当該表示装置の表示領域の端に到達したと判別した場合、
     上記選択手段は、上記PinP表示画像の位置を変更する処理を選択することを特徴とする請求項1から6の何れか1項に記載の外部機器。
  8.  上記判別手段が、上記カーソルが上記PinP表示画像の領域を跨いで移動したうえで上記PinP表示画像の境界で停止したと判別した場合、
     上記選択手段は、上記PinP表示画像の大きさを変更する処理を選択することを特徴とする請求項1から7の何れか1項に記載の外部機器。
  9.  上記判別手段が、上記カーソルが上記PinP表示画像の領域に一時的に入ったうえで再度上記PinP表示画像の領域外に移動したと判別した場合、
     上記選択手段は、操作ツールバーを表示する処理を選択することを特徴とする請求項1から8の何れか1項に記載の外部機器。
  10.  当該外部機器は、
     ユーザが上記カーソルを操作するために用いる操作体に設けられたボタンが押下されたか否かを検出するボタン押下検出手段を更に備え、
     上記判別手段が、上記カーソルが上記PinP表示画像の領域に入った判別したうえで、
     上記ボタン押下検出手段が、上記ボタンが押下されたことを検出した場合、
     上記選択手段は、音量バーを表示する処理を選択することを特徴とする請求項1から9の何れか1項に記載の外部機器。
  11.  上記選択手段は、ユーザが操作を入力するためのボタンが押下されたか否かを参照することなく、上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択することを特徴とする請求項1から8の何れか1項に記載の外部機器。
  12.  セットトップボックスとして機能することを特徴とする請求項1から11の何れか1項に記載の外部機器。
  13.  PinP表示可能な表示装置に、画像を提供する外部機器の制御方法であって、
     当該外部機器が提供する画像に対して上記表示装置が重畳して表示するPinP表示画像の座標を取得する座標取得工程と、
     当該外部機器が提供する画像に含まれるカーソルの、上記PinP表示画像に対する相対的な動きを判別する判別工程と、
     上記判別工程における判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択工程と、
     上記選択工程が選択した処理を実行するよう上記表示装置に通知する通知工程と、を備えていることを特徴とする制御方法。
  14.  PinP表示可能な表示装置と、請求項1から11の何れか1項に記載の外部機器と、を備えていることを特徴とする表示システム。
  15.  第1の画像に第2の画像を重畳して表示するPinP表示可能な表示装置であって、
     当該表示装置が表示する上記第2の画像の座標を取得する座標取得手段と、
     上記第1の画像に含まれるカーソルの、上記第2の画像に対する相対的な動きを判別する判別手段と、
     上記判別手段による判別結果に基づいて、予め定められた複数の処理のうち何れかの処理を選択する選択手段と、
     上記選択手段が選択した処理を実行する実行手段と、を備えていることを特徴とする表示装置。
  16.  請求項15に記載の表示装置の上記各手段を備えていることを特徴とするテレビジョン受像機。
PCT/JP2014/058580 2013-03-27 2014-03-26 外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機 WO2014157360A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2013-067619 2013-03-27
JP2013067619 2013-03-27
JP2014056727A JP5779683B2 (ja) 2013-03-27 2014-03-19 外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機
JP2014-056727 2014-03-19

Publications (1)

Publication Number Publication Date
WO2014157360A1 true WO2014157360A1 (ja) 2014-10-02

Family

ID=51624323

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/058580 WO2014157360A1 (ja) 2013-03-27 2014-03-26 外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機

Country Status (2)

Country Link
JP (1) JP5779683B2 (ja)
WO (1) WO2014157360A1 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004537117A (ja) * 2001-07-23 2004-12-09 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 継ぎ目なく組み合わされた自由に動くカーソルと切り替わるハイライトナビゲーション
JP2007148018A (ja) * 2005-11-28 2007-06-14 I-O Data Device Inc 情報処理装置、表示装置、および表示システム
JP2007533015A (ja) * 2004-04-14 2007-11-15 デーヴィッド・ピーター・ボリジャー メディア・パッケージならびにメディア・パッケージの管理システムおよび方法
JP2009043035A (ja) * 2007-08-09 2009-02-26 Meidensha Corp 画面表示方法とそのシステム及びプログラム
WO2009072504A1 (ja) * 2007-12-07 2009-06-11 Sony Corporation 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
JP2010177848A (ja) * 2009-01-28 2010-08-12 Sharp Corp テレビ装置、pc装置、テレビ装置とpc装置とからなる表示システム
JP2012008628A (ja) * 2010-06-22 2012-01-12 Sony Corp 画像表示装置、表示制御方法及びプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004537117A (ja) * 2001-07-23 2004-12-09 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 継ぎ目なく組み合わされた自由に動くカーソルと切り替わるハイライトナビゲーション
JP2007533015A (ja) * 2004-04-14 2007-11-15 デーヴィッド・ピーター・ボリジャー メディア・パッケージならびにメディア・パッケージの管理システムおよび方法
JP2007148018A (ja) * 2005-11-28 2007-06-14 I-O Data Device Inc 情報処理装置、表示装置、および表示システム
JP2009043035A (ja) * 2007-08-09 2009-02-26 Meidensha Corp 画面表示方法とそのシステム及びプログラム
WO2009072504A1 (ja) * 2007-12-07 2009-06-11 Sony Corporation 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
JP2010177848A (ja) * 2009-01-28 2010-08-12 Sharp Corp テレビ装置、pc装置、テレビ装置とpc装置とからなる表示システム
JP2012008628A (ja) * 2010-06-22 2012-01-12 Sony Corp 画像表示装置、表示制御方法及びプログラム

Also Published As

Publication number Publication date
JP2014209335A (ja) 2014-11-06
JP5779683B2 (ja) 2015-09-16

Similar Documents

Publication Publication Date Title
KR101969318B1 (ko) 디스플레이장치 및 그 제어방법
US10437378B2 (en) Input apparatus, display apparatus and control method thereof which receives an input to an input area of the input apparatus which is divided into a plurality of areas by using the input apparatus including a touch sensor
KR102474244B1 (ko) 영상 표시 장치 및 그 동작방법
KR102414806B1 (ko) 영상 표시 장치 및 영상 표시 방법
CN102541379A (zh) 信息处理装置、处理信息的方法和计算机程序存储装置
US20150199021A1 (en) Display apparatus and method for controlling display apparatus thereof
EP2772842A1 (en) Display Apparatus, Input Apparatus, and Control Method Thereof
CN108024127A (zh) 图像显示装置、移动设备及其操作方法
JP2015011679A (ja) 操作入力装置及び入力操作処理方法
US20150009143A1 (en) Operating system
JP5937715B2 (ja) 画像提供機器、制御方法、表示装置、およびテレビジョン受像機
JP6076795B2 (ja) 画像提供装置、セットトップボックス、表示装置、表示システム、テレビジョン受像機および制御方法
KR102248741B1 (ko) 디스플레이 장치 및 그 제어 방법
KR20180071725A (ko) 디스플레이 장치 및 방법
JP5779683B2 (ja) 外部機器、制御方法、表示システム、表示装置、およびテレビジョン受像機
KR102407191B1 (ko) 영상 표시 장치 및 영상 표시 방법
US20170237929A1 (en) Remote controller for providing a force input in a media system and method for operating the same
KR101097364B1 (ko) 터치 리모컨 및 터치 리모컨을 이용하여 영상출력장치를 제어하는 제어시스템
TW202038080A (zh) 電腦系統、顯示裝置及螢幕上顯示介面的操作方法
JP5989585B2 (ja) 表示装置、外部機器、表示システム、テレビジョン受像機および制御方法
US20160313879A1 (en) Display device and method for controlling same
JP6722239B2 (ja) 情報処理装置、入力方法及びプログラム
US10567694B2 (en) Electronic apparatus and method for controlling sound of electronic apparatus
US10048791B2 (en) Image processing device and method for displaying a force input of a remote controller with three dimensional image in the same
JP2014191236A (ja) 外部機器および制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14773943

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14773943

Country of ref document: EP

Kind code of ref document: A1