WO2013061526A1 - 放送受信装置、放送受信方法およびプログラム - Google Patents

放送受信装置、放送受信方法およびプログラム Download PDF

Info

Publication number
WO2013061526A1
WO2013061526A1 PCT/JP2012/006457 JP2012006457W WO2013061526A1 WO 2013061526 A1 WO2013061526 A1 WO 2013061526A1 JP 2012006457 W JP2012006457 W JP 2012006457W WO 2013061526 A1 WO2013061526 A1 WO 2013061526A1
Authority
WO
WIPO (PCT)
Prior art keywords
broadcast
communication
moving image
content
picture
Prior art date
Application number
PCT/JP2012/006457
Other languages
English (en)
French (fr)
Inventor
雅文 大久保
智典 中村
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to US13/988,912 priority Critical patent/US8949884B2/en
Priority to CN2012800038582A priority patent/CN103229511A/zh
Publication of WO2013061526A1 publication Critical patent/WO2013061526A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6156Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6175Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals

Definitions

  • the present invention relates to a broadcast receiving apparatus that receives broadcast content to be broadcast, and particularly to a broadcast receiving apparatus that also receives communication content distributed by communication other than broadcast.
  • TV television receivers
  • Internet TV and smart TV are becoming mainstream (see, for example, Patent Documents 1 to 3).
  • such a TV is configured as a broadcast receiving device that receives broadcast content and is connected to the Internet. Then, the TV searches for the video that is the desired communication content via the connected Internet, and downloads and plays the video. Also, the TV receives and plays back the content that is streamed from the video and music distribution site on demand. The TV also downloads and executes application programs such as games and utilities, and further has a communication function of a social network service.
  • JP 2007-68172 A Japanese Patent Laying-Open No. 2005-26867 Special table 2009-503602
  • Patent Documents 1 to 3 have a problem that the layout of the broadcast content moving image and the communication content moving image cannot be changed.
  • the present invention provides a broadcast receiving apparatus that can change the layout of broadcast content and communication content.
  • a broadcast receiving apparatus is a broadcast receiving apparatus that receives broadcast content to be broadcast, and communication that receives communication content related to the broadcast content that is distributed via communication other than broadcast.
  • a layout information acquisition unit for acquiring the layout information indicating the layout of the broadcast moving image and the communication moving image from the outside of the broadcast receiving device, and the layout information.
  • the picture of the broadcast video and the communication video held in the plane And a superimposing unit for outputting superimposed and picture.
  • a recording medium such as a system, a method, an integrated circuit, a computer program, or a computer-readable CD-ROM.
  • the system, method, integrated circuit, computer program, and You may implement
  • the broadcast receiving apparatus of the present invention can change the layout of broadcast content and communication content.
  • FIG. 1 is a diagram showing a system having a TV provided with a broadcast receiving apparatus in the first embodiment.
  • FIG. 2 is a diagram showing an example of the PiP image in the first embodiment.
  • FIG. 3 is a diagram showing a configuration of the broadcast receiving apparatus in the first embodiment.
  • FIG. 4 is a diagram showing an example of layout information in the first embodiment.
  • FIG. 5 is a flowchart showing the operation of the broadcast receiving apparatus in the first embodiment.
  • FIG. 6 is a diagram showing layout information according to the first modification of the first embodiment.
  • FIG. 7 is a diagram showing a configuration of a broadcast receiving apparatus according to the first modification of the first embodiment.
  • FIG. 8 is a diagram illustrating a configuration of a broadcast receiving apparatus according to the second modification of the first embodiment.
  • FIG. 1 is a diagram showing a system having a TV provided with a broadcast receiving apparatus in the first embodiment.
  • FIG. 2 is a diagram showing an example of the PiP image in the first embodiment.
  • FIG. 3 is
  • FIG. 9 is a diagram illustrating an example of synchronization information according to the second modification of the first embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a broadcast receiving apparatus according to the third modification of the first embodiment.
  • FIG. 11 is a diagram illustrating a configuration of a broadcast receiving apparatus according to the fourth modification of the first embodiment.
  • FIG. 12A is a diagram illustrating a picture output from the superimposition unit according to the fifth modification of the first embodiment.
  • FIG. 12B is a diagram showing a configuration of a broadcast receiving apparatus according to Modification 5 of Embodiment 1.
  • FIG. 13 is a block diagram showing an internal configuration of the broadcast receiving apparatus in the second embodiment.
  • FIG. 14 is a diagram illustrating an example of program list information according to the second embodiment.
  • FIG. 15 is a diagram illustrating an example of screen layout information and synchronized content information according to the second embodiment.
  • FIG. 16 is a flowchart illustrating a process in which the broadcast receiving apparatus according to the second embodiment reproduces broadcast content and communication content in synchronization.
  • FIG. 17 is a flowchart illustrating details of the communication content acquisition process according to the second embodiment.
  • FIG. 18 is a diagram illustrating an example of the synchronized content information according to the first modification of the second embodiment.
  • FIG. 19 is a flowchart showing a reproduction process using a broadcast type by the broadcast receiving apparatus according to the first modification of the second embodiment.
  • FIG. 20 is a block diagram showing an internal configuration of a broadcast receiving apparatus according to the second modification of the second embodiment.
  • FIG. 21 is a flowchart illustrating an example of layout change (overlapping order switching) by the broadcast receiving apparatus according to the second modification of the second embodiment.
  • FIG. 22 is a diagram illustrating an example of synchronized content information according to the third modification of the second embodiment.
  • FIG. 23 is a diagram illustrating an example of a PiP image displayed by the broadcast receiving device according to the fourth modification of the second embodiment.
  • FIG. 24 is a diagram illustrating an example of the synchronized content information according to the fourth modification of the second embodiment.
  • FIG. 25 is a block diagram showing an internal configuration of a broadcast receiving apparatus according to the fifth modification of the second embodiment.
  • the broadcast receiving apparatus of Patent Document 1 reproduces broadcast content and communication content in synchronization. More specifically, this broadcast receiving apparatus starts the reception of the communication content before the broadcast start time of the broadcast content, thereby reproducing the broadcast content and the communication content in synchronization. That is, before the broadcast start time, information related to the communication content is embedded in the broadcast signal and broadcast, and the broadcast receiving apparatus acquires the information in advance, thereby receiving the communication content before receiving the broadcast content. Can start.
  • the broadcast receiving apparatus of Patent Document 2 acquires the above information from the electronic program guide. More specifically, this broadcast receiving apparatus acquires information on communication content from the electronic program guide even when communication content information exists on the website. Therefore, the broadcast receiving apparatus acquires information related to the communication content before selecting the broadcast program, and synchronizes the reproduction of the broadcast content and the communication content by using the information.
  • the broadcast receiving apparatus of Patent Document 3 uses a method (PiP: Picture in Picture) in which the main video and the sub video are reproduced in synchronization.
  • a sub-video displayed in a small size is superimposed on a main video displayed in a large size.
  • the present inventor has found that the broadcast receiving devices of Patent Documents 1 to 3 have a problem that the layout of the moving image of the broadcast content and the moving image of the communication content cannot be changed. That is, when the broadcast content moving image and the communication content moving image are reproduced in synchronization with each other as in the broadcast receiving apparatuses of Patent Documents 1 and 2, even if the PiP method of Patent Document 3 is used, The layout of the moving image and the moving image of the communication content is fixed. In the PiP method of Patent Document 3, since the plane in which the main video is written and the plane in which the sub video is written are fixed, the main video becomes invisible when the sub video is displayed in full screen. .
  • a broadcast receiving apparatus is a broadcast receiving apparatus that receives broadcast content to be broadcast, and is distributed via communication other than broadcast.
  • a communication content receiving unit that receives communication content related to content, a broadcast content receiving unit that receives the broadcast content, a picture of a broadcast moving image that is a moving image indicated by the broadcast content, and the communication content
  • the broadcast moving image and the communication moving image are output in a superimposed manner according to the layout indicated by the layout information
  • the layout of the broadcast content moving image and the communication content moving image according to the layout information can be changed. That is, when a broadcast station broadcasts layout information, the broadcast station can change the layout.
  • the layout information may be determined so that one of the broadcast moving image and the communication moving image is smaller than the other moving image and is superimposed on the other moving image.
  • a display size and a display position of the broadcast moving image and a display size and a display position of the communication moving image are displayed so that the one moving image is superimposed at a position excluding a characteristic portion of the moving image, and the superimposition is performed.
  • the unit is a display size of each of the broadcast moving image and the communication moving image indicated by the layout information, and is displayed at each display position of the broadcast moving image and the communication moving image indicated by the layout information.
  • a broadcast moving image and the broadcast moving image may be arranged.
  • the layout information indicates a first layout and a second layout
  • the broadcast receiving apparatus further includes an instruction receiving unit that receives a layout instruction, and the superimposing unit is operated by the instruction receiving unit.
  • the communication moving image is output to be superimposed on the broadcast moving image in accordance with the first layout
  • the instruction for the second layout is issued by the instruction receiving unit. If accepted, the broadcast moving image may be output over the communication moving image in accordance with the second layout.
  • the user can change the layout within the range indicated by the layout information.
  • the plane includes a first plane for holding a picture of one of the broadcast moving picture and the communication moving picture, and a second plane for holding a picture of the other moving picture.
  • the superimposing unit switches the plane for holding the broadcast moving picture and the communication moving picture between the first plane and the second plane, so that the communication moving image An image may be arranged on the front or back of the broadcast moving image.
  • the order in which the pictures of each plane are overlaid is fixed so that the pictures held in the first plane are arranged in the back and the pictures held in the second plane are arranged in the front. Even in such a case, since the types of pictures stored in each plane are switched, the order in which the broadcast moving picture and the communication moving picture are overlaid can be appropriately changed.
  • the broadcast receiving device further includes a synchronization information acquiring unit that acquires synchronization information from outside the broadcast receiving device, and the superimposing unit, according to the synchronization information, the communication moving image, the broadcast moving image,
  • the communication moving image may be synchronized with the broadcast moving image by overlapping and outputting.
  • the synchronization information indicates a reproduction position in the communication content and a reproduction time at which data at the reproduction position is reproduced, and the superimposing unit performs the communication at the reproduction time indicated by the synchronization information.
  • the picture at the reproduction position indicated in association with the reproduction time and the picture of the broadcast moving image may be output in an overlapping manner.
  • the synchronization information further indicates the type of the broadcast content as a broadcast type, and the superimposing unit determines whether the broadcast content is content to be broadcast live according to the broadcast type, and performs live broadcasting. If it is determined that the content is to be transmitted, superimposition of the broadcast moving image and the communication moving image may be prohibited.
  • broadcast content when broadcast content is broadcast live, for example, only broadcast moving images are displayed on the display by prohibiting superimposition of broadcast moving images and communication moving images. It can be displayed, and it is possible to prevent a burden on the user's viewing by displaying an asynchronous moving image.
  • the synchronization information further includes still image specifying information for specifying a still image
  • the superimposing unit includes the still image specified by the still image specifying information, the broadcast moving image, and the communication moving image. And may be output in piles.
  • the superimposing unit may output the broadcast moving image without overlapping the communication moving image.
  • the superimposing unit displays the communication moving image when the communication moving image is displayed on the entire display size of the display and the broadcast moving image is superimposed on the communication moving image with a size smaller than the display size of the display.
  • the display size of the broadcast moving image is increased to the display size of the display, and the communication content is received by the communication content receiving unit. Then, the display size of the broadcast moving image may be reduced to a size smaller than the display size of the display.
  • the broadcast receiving apparatus further includes a communication status acquisition unit that acquires communication status information indicating a status of communication other than the broadcast, and the communication content receiving unit includes a plurality of communication contents related to the broadcast content.
  • the communication content having quality according to the communication status indicated by the communication status information may be received.
  • the bit rates of the plurality of communication contents or the resolutions of the plurality of communication contents are different from each other, and the communication content receiving unit is indicated by the communication status information among the plurality of communication contents.
  • the communication content having a bit rate or resolution corresponding to the communication status to be received is received.
  • the broadcast receiving apparatus further includes a communication status acquisition unit that acquires communication status information indicating a status of communication other than the broadcast, and the superimposing unit is an index that indicates a communication status indicated by the communication status information.
  • the broadcast moving image may be output without overlapping the communication moving image.
  • the index value indicating the communication status is an available bit rate or the frequency of packet loss.
  • these index values are lower or higher than a predetermined value, the communication content is received by the communication content receiving unit. The possibility of not being received increases. Therefore, in the broadcast receiving device according to one aspect of the present invention, in the above-described case, the communication moving image is not superimposed. Therefore, it is possible to prevent excessive superimposition of the moving image and reduce the burden on the user's viewing. it can.
  • the superimposing unit when the broadcast moving image and the communication moving image are moving images composed of a plurality of pictures that are stereoscopically viewed by being visually recognized by different eyes, respectively, Broadcast pictures that are included in the video and pictures that are included in the communication moving image and that are stereoscopically viewed in pairs with the broadcast pictures are output continuously in a unit time without overlapping each other.
  • the broadcast picture may be output twice continuously within a unit time.
  • the moving image can be displayed in 3D by the broadcast moving image and the communication moving image, and when the communication content is not received, the broadcast picture is output twice in succession.
  • the image display can be appropriately switched from the 3D display to the 2D display, and an inappropriate moving image can be prevented from being displayed.
  • the communication content receiving unit cannot receive the broadcast content from the receivable status where the communication content can be received when the broadcast content is received by the broadcast content receiving unit.
  • Other communication content related to a part of the broadcast content received by the broadcast content receiving unit after the reception enabled status is entered again.
  • the superimposing unit may receive and output the broadcast moving image and the other communication moving image in accordance with the layout information.
  • the broadcast receiving device further includes a location information acquisition unit that acquires location information indicating the location of other communication content indicating a moving image that follows the broadcast content, and the communication content reception unit includes the broadcast content
  • the location information acquisition unit acquires location information indicating the location of other communication content indicating a moving image that follows the broadcast content
  • the communication content reception unit includes the broadcast content
  • the user can view the continuation of the broadcast content with the communication content, and the convenience for the user can be improved.
  • the broadcast receiving apparatus further includes a location information acquisition unit that acquires location information indicating the location of the communication content indicating the same communication moving image as the broadcast moving image
  • the communication content receiving unit includes: After receiving the broadcast content by the broadcast content receiving unit, upon receiving an operation from the user, the communication content is received from the location indicated by the location information, and the superimposing unit receives the broadcast content.
  • the broadcast moving image starts to be output, and when reception of the communication content is started, according to the layout information, the broadcast moving image and the communication moving image shown from the top of the communication content And may be output in piles.
  • the superimposing unit enlarges the communication moving image so that the communication moving image is displayed on the entire display size of the display, and the communication moving image is displayed.
  • a moving image may be output.
  • the superimposing unit communicates the communication moving image of the communication content that is played back fast until the displayed image of the broadcast moving image is equal to the displayed image of the communication moving image.
  • the communication moving image of the communication content that is normally reproduced is output. Also good.
  • the missed portion is fast-played and displayed, and when the playback position in the communication content reaches the playback position in the broadcast content, the communication content is normally played back, and the communication moving image and the broadcast moving image are overlapped. Is displayed. Therefore, even if the first part of the broadcast content is missed, the missed part can be displayed to the user, and the communication moving image and the broadcast moving image can be displayed in synchronization with the user.
  • the present invention can be realized not only as such a broadcast receiving device, but also as an integrated circuit, a method for receiving the broadcast content by the broadcast receiving device, a program for causing a computer to receive the broadcast content, Alternatively, it can be realized as a recording medium for storing the program.
  • FIG. 1 is a diagram showing a system having a TV provided with a broadcast receiving apparatus in the present embodiment.
  • This system is a so-called broadcasting / communication system that combines broadcasting and communication, and includes a broadcasting station 101 that broadcasts broadcast content, a TV 104, a server 102 that distributes communication content, and an Internet line 103. .
  • the broadcast station 101 inserts broadcast content into a broadcast wave or broadcast signal and broadcasts.
  • the server 102 transmits communication content to the TV 104 via the Internet line 103.
  • the TV 104 includes a broadcast receiving device and a display according to the present embodiment.
  • the broadcast receiving device receives the above-described broadcast content and communication content. Then, the broadcast receiving apparatus superimposes the broadcast moving image that is the moving image indicated by the broadcast content and the communication moving image that is the moving image indicated by the communication content, and outputs the superimposed image to the display. As a result, an image in which the broadcast moving image and the communication moving image are superimposed is displayed on the display.
  • the broadcast receiving device is provided in the TV 104, but may be provided in another device or device.
  • an image in which a broadcast moving image and a communication moving image are superimposed is hereinafter referred to as a PiP image.
  • FIG. 2 is a diagram illustrating an example of a PiP image.
  • the broadcast receiving apparatus receives broadcast content 201 broadcast from the broadcast station 101 and communication content 202 distributed from the server 102 via the Internet line 103. Then, the broadcast receiving apparatus superimposes the broadcast moving image of the broadcast content 201 and the communication moving image of the communication content 202 and outputs them to the display 203.
  • the broadcast content 201 indicates a broadcast moving image that is a moving image shot from an angle on the batter side
  • the communication content indicates a broadcast moving image that is a moving image shot from an angle on the pitcher side.
  • the broadcast receiving apparatus may acquire and output speech, subtitles, privilege videos, and the like of languages not included in the broadcast content 201 as communication content when the broadcast content 201 and the communication content 202 are synchronously reproduced.
  • FIG. 3 is a diagram showing a configuration of the broadcast receiving apparatus in the present embodiment.
  • the broadcast receiving device 10A in the present embodiment is a broadcast receiving device that receives broadcast content to be broadcast, and includes a broadcast content receiving unit 11a, a communication content receiving unit 11b, and first and second planes 13a and 13b. And a layout information acquisition unit 12 and a superimposition unit 14.
  • the broadcast content receiving unit 11a receives broadcast content.
  • the communication content receiving unit 11b receives communication content related to the above-described broadcast content distributed via communication other than broadcasting.
  • Communication other than communication is, for example, communication via the Internet line 103, and is simply referred to as communication hereinafter.
  • the first and second planes 13a and 13b are planes for holding a picture of a broadcast moving image that is a moving image indicated by the broadcast content and a picture of a communication moving image that is a moving image indicated by the communication content. is there.
  • the first plane 13a holds a picture of one moving image of a broadcast moving image and a communication moving image
  • the second plane 13b holds a picture of the other moving image.
  • the broadcast receiving apparatus 10A may include one plane including the first and second planes 13a and 13b.
  • the layout information acquisition unit 12 acquires the layout information 20 indicating the layout of the broadcast moving image and the communication moving image from the outside of the broadcast receiving apparatus 10A.
  • the layout information 20 is distributed by broadcasting or communication.
  • the superimposing unit 14 superimposes and outputs the broadcast moving picture and the communication moving picture held in the first and second planes 13a and 13b for each picture according to the layout information 20.
  • the superimposing unit 14 switches the communication moving image between the first plane 13a and the second plane 13b by switching the plane for holding the broadcast moving picture and the communication moving picture, respectively. Place on the front or back of the image.
  • the order in which the pictures of the respective planes are overlapped so that the pictures held in the first plane 13a are arranged in the back and the pictures held in the second plane 13b are arranged in the foreground.
  • the type of picture stored in each plane is switched, so that the order in which the picture of the broadcast moving picture and the picture of the communication moving picture are overlaid can be appropriately changed.
  • the plane for holding the picture of the broadcast moving image may be fixed to the first plane 13a
  • the plane for holding the picture of the communication moving image may be fixed to the second plane 13b.
  • the superimposing unit 14 superimposes the two pictures held in the first and second planes 13a and 13b in the order according to the layout information 20.
  • the broadcast moving image and the communication moving image are superimposed and output according to the layout indicated by the layout information 20, and accordingly, according to the layout information 20,
  • the layout of the moving image of the broadcast content and the moving image of the communication content can be changed. That is, when the broadcast station 101 broadcasts the layout information 20, the layout can be changed on the broadcast station 101 side.
  • FIG. 4 is a diagram showing an example of the layout information 20.
  • the layout information 20 indicates the display size and display position of the broadcast moving image of the broadcast content, and the display size and display position of the communication moving image of the communication content.
  • the layout information 20 indicates that one of the broadcast moving image and the communication moving image is smaller than the other moving image and is superimposed on the other moving image.
  • the display size and the display position of the broadcast moving image and the display size and the display position of the communication moving image are shown so that one of the moving images is superimposed at a position excluding the characteristic portion.
  • the superimposing unit 14 has the respective display sizes of the broadcast moving image and the communication moving image indicated by the layout information 20 at the display positions of the broadcast moving image and the communication moving image indicated by the layout information 20.
  • a broadcast moving image and a broadcast moving image are arranged.
  • the layout of the broadcast moving image and the communication moving image can be appropriately changed depending on the display size and the display position.
  • FIG. 5 is a flowchart showing the operation of the broadcast receiving apparatus 10A in the present embodiment.
  • the broadcast receiving apparatus 10A receives communication content related to broadcast content distributed via communication other than broadcast (step S10).
  • the broadcast receiving apparatus 10A receives the broadcast content (step S11).
  • the broadcast receiving apparatus 10A converts the first and second planes 13a and 1b into a picture of a broadcast moving image that is a moving image indicated by the broadcast content and a picture of a communication moving image that is a moving image indicated by the communication content. (Step S12).
  • the broadcast receiving apparatus 10A acquires layout information 20 indicating the layout of the broadcast moving image and the communication moving image from the outside of the broadcast receiving apparatus 10A (step S13). Then, according to the layout information 20, the broadcast receiving apparatus 10 ⁇ / b> A superimposes and outputs the broadcast moving picture and the communication moving picture stored in the first and second planes 13 a and 13 b for each picture. (Step S14).
  • the superimposing unit 14 may output the broadcast moving image without overlapping the communication moving image. Thereby, since there is no excessive superimposition of a moving image, the burden on a user's viewing can be reduced.
  • the communication moving image is displayed on the entire display size of the display 203, and the broadcast moving image is superimposed on the communication moving image with a size smaller than the display size of the display 203.
  • the superimposing unit 14 increases the display size of the broadcast moving image to the display size of the display 203, and the communication content becomes the communication content.
  • the display size of the broadcast moving image may be reduced to a size smaller than the display size of the display 203.
  • the communication content receiving unit 11b may receive other communication content related to a part of the broadcast content received by the broadcast content receiving unit 11a after the reception is possible again.
  • the superimposing unit 14 superimposes and outputs the broadcast moving image and another communication moving image according to the layout information 20. Thereby, even when the communication status other than the broadcast is recovered, the superimposition of the moving image according to the layout information 20 can be appropriately restarted.
  • Modification 1 a first modification of the present embodiment will be described.
  • the broadcast receiving apparatus according to this modification is characterized in that the layout is changed by an instruction from the user.
  • FIG. 6 is a diagram showing layout information according to this modification.
  • the layout information 20a shows the first layout and the second layout.
  • the first layout is a layout for setting a broadcast moving image of broadcast content as a main moving image and a communication moving image of communication content as a sub moving image.
  • the second layout is a layout for setting the broadcast moving image of the broadcast content as a sub moving image and the communication moving image of the communication content as a main moving image.
  • FIG. 7 is a diagram showing a configuration of a broadcast receiving apparatus according to this modification.
  • the broadcast receiving device 10B includes the components included in the broadcast receiving device 10A, and further includes an instruction receiving unit 15 that receives a layout instruction.
  • the instruction receiving unit 15 receives a layout instruction.
  • the superimposing unit 14 outputs the communication moving image superimposed on the broadcast moving image according to the first layout
  • the instruction receiving unit 15 outputs the first moving image.
  • the broadcast moving image is superimposed on the communication moving image and output according to the second layout.
  • the user when a layout instruction from the user is accepted, the user can change the layout within the range indicated by the layout information 20a.
  • Modification 2 a second modification of the present embodiment will be described.
  • the broadcast receiving apparatus according to this modification is characterized in that broadcast content and communication content are synchronized.
  • FIG. 8 is a diagram showing a configuration of a broadcast receiving apparatus according to this modification.
  • the broadcast receiving apparatus 10C includes the components included in the broadcast receiving apparatus 10A, and further includes a synchronization information acquisition unit 16 that acquires the synchronization information 21 from the outside of the broadcast receiving apparatus 10C. Then, the superimposing unit 14 synchronizes the communication moving image with the broadcast moving image by superimposing and outputting the communication moving image and the broadcast moving image in accordance with the synchronization information 21.
  • the communication moving image and the broadcast moving image can be synchronized in an appropriately superimposed state, and a video that is easy to see for the user can be displayed.
  • FIG. 9 is a diagram showing an example of the synchronization information 21 according to this modification.
  • the synchronization information 21 indicates the reproduction position in the communication content and the reproduction time at which the data at the reproduction position is reproduced, and indicates the type of the broadcast content as the broadcast type. Furthermore, the synchronization information 21 includes still image specifying information for specifying a still image.
  • the superimposing unit 14 superimposes and outputs the picture at the reproduction position indicated in association with the reproduction time and the picture of the broadcast moving image at the reproduction time indicated by the synchronization information 21. Thereby, it is possible to superimpose an appropriate picture and a picture of the broadcast moving picture on a picture of the broadcast moving picture among a plurality of pictures included in the communication moving picture.
  • the superimposing unit 14 determines whether or not the broadcast content is a live broadcast content depending on the broadcast type, and if determining that the broadcast content is a live broadcast content, the superimposing unit 14 superimposes the broadcast moving image and the communication moving image. Is prohibited.
  • the superimposing unit 14 outputs the still image specified by the still image specifying information, the broadcast moving image, and the communication moving image in an overlapping manner.
  • still images suitable for broadcast moving images and communication moving images can be displayed superimposed on those moving images.
  • Modification 3 a third modification of the present embodiment will be described.
  • the broadcast receiving apparatus according to this modification is characterized in that it performs processing according to the communication status.
  • FIG. 10 is a diagram showing a configuration of a broadcast receiving apparatus according to this modification.
  • the broadcast receiving device 10D includes the components included in the broadcast receiving device 10A, and further includes a communication status acquisition unit 17 that acquires communication status information 22 indicating the status of communication other than broadcasting.
  • the communication content receiving unit 11b receives communication content having a quality corresponding to the communication status indicated by the communication status information 22 among the plurality of communication content related to the broadcast content.
  • the communication content receiving unit 11b receives communication content having a bit rate or resolution corresponding to the communication status indicated by the communication status information 22 among the plurality of communication content.
  • the superimposing unit 14 may output the broadcast moving image without overlapping the communication moving image when the index value indicating the communication state indicated by the communication state information 22 is lower or higher than a predetermined value. Good.
  • the index value indicating the communication status is the bit rate that can be used or the frequency of packet loss.
  • the communication content is the communication content receiving unit 11b. The possibility of not being received is increased. Therefore, in the broadcast receiving device 10D according to the present modification, the communication moving image is not superimposed in the above-described case, so that it is possible to prevent excessive superimposition of the moving image and reduce the burden on the user's viewing. .
  • Modification 4 Here, the 4th modification in this Embodiment is demonstrated.
  • the broadcast receiving apparatus according to the present modification is characterized in that a continuation of broadcast content or a moving image missed by a user of the broadcast content is supplemented by communication content.
  • FIG. 11 is a diagram showing a configuration of a broadcast receiving apparatus according to this modification.
  • the broadcast receiving device 10E includes the components included in the broadcast receiving device 10A, and further acquires location information 23 indicating the location of other communication content indicating a moving image following the broadcast content.
  • An acquisition unit 18 is provided.
  • the communication content receiving unit 11b receives other communication content from the location indicated by the location information 23 when reception of the broadcast content by the broadcast content receiving unit 11a is completed. Moreover, the superimposition part 14 which concerns on this modification outputs another communication content, after reception of the broadcast content by the broadcast content receiving part 11a is complete
  • the user can view the continuation of the broadcast content with the communication content, and the convenience for the user can be improved.
  • the location information acquisition unit 18 may acquire location information 23 indicating the location of communication content indicating the same communication moving image as the broadcast moving image.
  • the communication content receiving unit 11b receives the communication content from the location indicated by the location information 23 when receiving an operation from the user after the broadcast content receiving unit 11a starts receiving the broadcast content. Then, the superimposing unit 14 starts outputting the broadcast moving image when the reception of the broadcast content is started. When the reception of the communication content is started, the superimposing unit 14 performs the broadcast moving image and the communication content according to the layout information 20. The communication moving image shown from the top is superimposed and output.
  • the superimposing unit 14 enlarges the communication moving image and outputs the communication moving image so that the communication moving image is displayed on the entire display size of the display 203 instead of superimposing the broadcast moving image and the communication moving image. May be. Thereby, the missed portion can be displayed in an easy-to-view manner for the user.
  • the superimposing unit 14 outputs the communication moving image of the communication content that is played back fast until the displayed image of the broadcast moving image is equal to the displayed image of the communication moving image. May be. Further, when the displayed image of the broadcast moving image becomes equal to the displayed image of the communication moving image, the superimposing unit 14 outputs the communication moving image of the communication content that is normally played back. Also good.
  • the missed portion is fast-played and displayed, and when the playback position in the communication content reaches the playback position in the broadcast content, the communication content is normally played back, and the communication moving image and the broadcast moving image are overlapped. Is displayed. Therefore, even if the first part of the broadcast content is missed, the missed part can be displayed to the user, and the communication moving image and the broadcast moving image can be displayed in synchronization with the user.
  • the location information 23 may be included in the synchronization information 21.
  • Modification 5 a fifth modification example of the present embodiment will be described.
  • the broadcast receiving apparatus according to this modification is characterized in that 3D display of moving images is performed.
  • the broadcast moving image and the communication moving image are moving images composed of a plurality of pictures that are stereoscopically viewed by being visually recognized by different eyes.
  • the superimposing unit 14 includes a broadcast picture that is a picture included in the broadcast moving image and a communication picture that is included in the communication moving image and is stereoscopically viewed as a pair with the broadcast picture. Are output continuously within a unit time without overlapping each other. If the communication picture is not received by the communication content receiving unit 11b, the superimposing unit 14 outputs the broadcast picture twice in a unit time.
  • FIG. 12A is a diagram illustrating a picture output from the superimposing unit 14.
  • the superimposing unit 14 continuously outputs a broadcast picture and a communication picture stereoscopically viewed as a pair with the broadcast picture within a unit time. Further, when the communication picture is not received, the superimposing unit 14 outputs the broadcast picture twice continuously within the unit time.
  • the moving image can be displayed in 3D by the broadcast moving image and the communication moving image. Furthermore, when the communication content is not received, the broadcast picture is continuously output twice, so that the moving image display can be appropriately switched from the 3D display to the 2D display. As a result, it is possible to prevent an inappropriate moving image from being displayed.
  • the broadcast receiving apparatus may not include the layout information acquisition unit 12 and the superimposition unit 14. That is, this broadcast receiving apparatus does not have a function of superimposing and outputting the broadcast picture and the communication picture held in the first and second planes 13a and 13b according to the layout information 20, and at least those It is only necessary to have a 3D display function for moving images using pictures.
  • FIG. 12B is a diagram showing another configuration of the broadcast receiving apparatus according to this modification.
  • This broadcast receiving apparatus 10F is an apparatus that does not have a function of outputting a broadcast picture and a communication picture in an overlapping manner, and is a broadcast content receiving unit 11a, a communication content receiving unit 11b, and first and second planes 13a, 13a, 13b and an output unit 14F.
  • the broadcast receiving device 10F is a broadcast receiving device that receives broadcast content to be broadcast, and communication that receives communication content related to the broadcast content that is distributed via communication other than broadcast.
  • a content receiving unit 11b, a broadcast content receiving unit 11a that receives the broadcast content, a picture of a broadcast moving image (broadcast picture) that is a moving image indicated by the broadcast content, and a moving image indicated by the communication content First and second planes 13a and 13b for holding pictures of communication moving pictures (communication pictures), broadcast pictures and communication pictures held in the first and second planes 13a and 13b, And an output unit 14F for outputting.
  • the output unit 14F When the broadcast moving image and the communication moving image are moving images that are stereoscopically viewed by being visually recognized by different eyes, the output unit 14F outputs the broadcast moving image to the broadcast moving image.
  • a broadcast picture that is an included picture and a picture that is included in the communication moving image and that is stereoscopically viewed in pairs with the broadcast picture are alternately output, and the communication picture is If it is not received by the communication content receiver 11b, the broadcast picture is output twice in succession.
  • FIG. 13 is a block diagram showing an internal configuration of the broadcast receiving apparatus according to the present embodiment.
  • broadcast receiving apparatus 104A corresponds to any of broadcast receiving apparatuses 10A to 10E of the first embodiment, and includes tuner 301, network interface 302, buffer 303, buffer 304, demultiplexer 305, and demultiplexer.
  • 306 image memory 307, image decoder 308, video decoder 309, video decoder 310, audio decoder 311, synchronization controller 312, image plane 313, video plane 314, video plane 315, speaker 316, adder 317, scenario memory 318, And a control unit 322.
  • the scenario memory 318 is a memory for storing current program information 319, screen layout information 320, and synchronized content information 321.
  • the control unit 322 includes a service manager 323, a tuner library 324, a communication library 325, an AV playback library 326, a rendering library 327, and a remote control manager 328.
  • the tuner 301 receives the broadcast wave and executes access to the broadcast content. As a result, the tuner 301 receives the broadcast content.
  • the network interface 302 is connected to the Internet line 103 and receives communication content.
  • the buffer 303 is a memory for storing broadcast content received by the tuner 301.
  • the buffer 304 is a memory for storing communication content received by the network interface 302.
  • the demultiplexer 305 performs demultiplexing on the transport stream of the broadcast content received by the tuner 301, and information on the broadcast program, a video frame constituting a GOP (Group Of Picture), an audio frame, Obtain image data such as still images or subtitles. Further, the demultiplexer 305 stores information regarding the broadcast program in the scenario memory 318, outputs a video frame to the video decoder 310, and outputs an audio frame to the audio decoder 311. Further, the demultiplexer 305 stores the image data in the image memory 307. Demultiplexing by the demultiplexer 305 includes a conversion process of converting a TS (Transport Stream) packet into a PES (Packetized Elementary Stream) packet.
  • TS Transport Stream
  • PES Packetized Elementary Stream
  • the demultiplexer 306 performs demultiplexing on the transport stream of the communication content received via the network interface 302, and video data, audio frames, and image data such as still images or subtitles constituting the GOP. And get. Further, the demultiplexer 306 outputs the video frame to the video decoder 309, outputs the audio frame to the audio decoder 311, and stores image data such as a still image or caption in the image memory 307. Demultiplexing by the demultiplexer 306 includes a conversion process of converting TS packets into PES packets.
  • the image memory 307 is a buffer for storing image data such as still images or subtitles read from the demultiplexer 305, the demultiplexer 306, or the buffer 304.
  • the image decoder 308 decodes the image data stored in the image memory 307 and writes the decoded image data (hereinafter referred to as an image) to the image plane 313. By decoding the image data, still images and subtitles appear on the display 203.
  • the video decoder 309 decodes the video frame output from the demultiplexer 306 and writes an uncompressed picture in the video plane 314.
  • the video decoder 310 decodes the video frame output from the demultiplexer 305 and writes an uncompressed picture in the video plane 315.
  • the audio decoder 311 decodes the audio frame output from the demultiplexer 305 or the demultiplexer 306 and outputs uncompressed audio data.
  • the synchronization controller 312 outputs the image, video (picture), and audio data in synchronism using the time stamp for time management of the decoding / reproducing process output from the demultiplexer 305 or the demultiplexer 306. In this manner, the image decoder 308, the video decoder 309, the video decoder 310, and the audio decoder 311 are controlled.
  • the image plane 313 is a memory for storing an uncompressed image.
  • the video plane 314 and the video plane 315 are memories for storing uncompressed pictures.
  • Speaker 316 outputs audio data that is uncompressed audio data.
  • the adder 317 superimposes and outputs the uncompressed picture stored in the video plane 314 and the uncompressed picture stored in the video plane 314 on the uncompressed picture stored in the video plane 315.
  • the scenario memory 318 is a memory for storing current program information 319, screen layout information 320, and synchronized content information 321.
  • Current program information 319 relates to a program that is currently being reproduced from among a plurality of program information recorded in the buffer 303.
  • the screen layout information 320 corresponds to the layout information 20 and 20a of the first embodiment, and is the screen layout information stored in the buffer 303 or the buffer 304 that is currently processed.
  • the synchronized content information 321 corresponds to the synchronized information 21 of the first embodiment, and refers to information that is currently processed among the synchronized content information stored in the buffer 303 or the buffer 304.
  • the control unit 322 is a microcomputer system including a ROM, a RAM, and a CPU, and a program for controlling the broadcast receiving device 104A is recorded in the ROM.
  • the programs in the ROM are read into the CPU, and the programs and hardware resources cooperate to function the service manager 323, tuner library 324, communication library 325, AV playback library 326, rendering library 327, and remote control manager 328. Is realized.
  • the service manager 323 acquires current program information 319 from the scenario memory 318, and acquires tuning information including frequency using the tuner library 324. In addition, the service manager 323 acquires the screen layout information 320 and the synchronized content information 321 from the scenario memory 318. Furthermore, the service manager 323 uses the communication library 325 to cause the network interface 302 to acquire communication content (stream data or the like). Furthermore, the service manager 323 controls the demultiplexer 305, the demultiplexer 306, the synchronization controller 312, and the image plane 313 by using the AV playback library 326 and the rendering library 327 to execute the broadcasting / communication integrated service.
  • the tuner library 324 acquires tuning information such as frequency from the tuner 301.
  • the communication library 325 is used for downloading broadcast additional contents published on the Internet.
  • the broadcast additional content is content not included in the original broadcast, and is, for example, an additional angle video, sub audio, subtitle, privilege video, or application program.
  • the service manager 323 can download the broadcast additional content published on the Internet to the buffer 304 or the local storage by controlling the communication library 325.
  • the AV playback library 326 executes an AV playback function in response to a function call from the service manager 323.
  • the AV playback function is playback start, playback stop, pause, release of pause, release of still image function, fast forward with the playback speed specified as immediate value, rewind with the playback speed specified as immediate value, audio switching, sub-video This is processing such as switching or angle switching.
  • the rendering library 327 decodes the image data stored in the image memory 307 using the image decoder 308 and writes the decoded image data to the image plane 313. In addition, the rendering library 327 writes characters or graphics on the image plane 313.
  • the remote control manager 328 transmits the input signal from the remote control that communicates with the broadcast receiving apparatus 104A to the service manager 323.
  • the screen layout information 320 or the synchronized content information 321 used in the broadcast receiving apparatus 104A in the present embodiment may be acquired via the Internet, that is, via the Internet line 103.
  • information indicating the location of the communication content may be included in the broadcast wave, or the information may be arranged on the website of the broadcast station 101.
  • the tuner 301, the buffer 303, the demultiplexer 305, and the video decoder 310 correspond to the broadcast content receiving unit 11a of the first embodiment.
  • the network interface 302, the buffer 304, the demultiplexer 306, and the video decoder 309 correspond to the communication content receiving unit 11b of the first embodiment.
  • the tuner 301 and the buffer 303 correspond to the layout information acquisition unit 12, the synchronization information acquisition unit 16, and the location information acquisition unit 18 of the first embodiment.
  • the video planes 314 and 315 correspond to the first and second planes 13a and 13b of the first embodiment, respectively, and the synchronization controller 312 and the adder 317 correspond to the superimposing unit 14 of the first embodiment.
  • the communication library 325 corresponds to the communication status acquisition unit 17 of the first embodiment.
  • FIG. 14 is a diagram showing an example of program list information.
  • the program list information 401 is composed of the above-described plurality of program information stored in the buffer 303.
  • the program list information 401 is configured in a table format, and includes a channel identifier, a channel name, and a program number.
  • the program number is a number for identifying a PMT (Program Map) defined by the MPEG2 standard.
  • program service information is also stored in the buffer 303.
  • This program service information includes a PAT (Program Association Table) 402 and a PMT (Program Map Table) 403 defined by the MPEG2 standard.
  • PAT402 shows a program number and packet ID for every broadcast program, and packet ID is used in order to acquire PMT403.
  • the PMT 403 is stored and transmitted in a packet with a packet ID defined by the PAT 402.
  • the PMT 403 includes a stream type, a packet ID, and supplementary information. Each of audio, video, and data is called an elementary stream and consists of a plurality of packets transmitted with the same packet ID.
  • the supplementary information of the data indicates, for example, a method called DSMCC described in the MPEG standard document ISO / IEC13818-6.
  • DSMCC a method for encoding a file system composed of directories and files used in a computer is defined in a packet of an MPEG2 transport stream.
  • FIG. 15 is a diagram showing an example of screen layout information and synchronized content information.
  • the screen layout information 320 includes, for each display type, the position (display position) and size (display size) of broadcast content, and the position (display position) and size (display size) of communication content that is reproduced in synchronization with the broadcast content. Indicates.
  • the display type is main or sub.
  • One of the broadcast content and communication content is the main, and the other of the broadcast content and communication content is the sub.
  • the main is content with a large moving image displayed on the back, and the sub is content with a small moving image displayed on the front.
  • the screen layout information 320 includes a first layout in which broadcast content is main and communication content is sub, and a second layout in which broadcast content is sub and communication content is main. Although shown, only one of the first and second layouts may be shown in the screen layout information 320. Also, broadcast receiving apparatus 104A in the present embodiment may select the first layout by default when the first and second layouts are shown.
  • the synchronized content information 321 includes a content ID for identifying the communication content, a URL indicating the location of the communication content, a codec type, a resolution, a bit rate, a start time, a start PTS (Program Time Stamp), an end time, and an end. PTS is shown.
  • the synchronized content information 321 is broadcast accompanying broadcast content, for example. Accordingly, the content ID links the broadcast content and the communication content.
  • the broadcast receiving apparatus 104A identifies the acquisition destination of the communication content based on the URL, and grasps the attribute of the communication content based on the codec type, resolution, and bit rate.
  • the broadcast receiving apparatus 104A grasps the relationship between the reproduction period and reproduction time of the communication content and the position of the data in the stream constituting the communication content based on the start time, the start PTS, the end time, and the end PTS.
  • the screen layout information 320 or the synchronized content information 321 may be superimposed on a broadcast wave (for example, embedded in a DSMCC file system) or may be arranged in the server 102. When such information is arranged in the server 102, only link information for linking to the server 102 may be superimposed on the broadcast wave.
  • the coordinate system of the position indicated by the screen layout information 320 is not limited to the absolute coordinate system and may be a relative coordinate system.
  • the synchronized content information 321 may indicate a plurality of codec types, a plurality of resolutions, and a plurality of bit rates. That is, the synchronized content information 321 may indicate the content ID, URL, codec type, and the like for each communication content.
  • FIG. 16 is a flowchart showing a process in which the broadcast receiving device 104A reproduces broadcast content and communication content in synchronization.
  • the broadcast receiving device 104A receives a request for synchronous reproduction of the broadcast content and the communication content by a remote control operation by the user (step S601).
  • remote control manager 328 sends remote control key information indicating a request for synchronous playback to service manager 323.
  • the service manager 323 uses the communication library 325 to start communication content acquisition, that is, communication content acquisition processing (step S602). Details regarding the communication content acquisition processing will be described later.
  • the service manager 323 designates the display size of the communication content indicated by the screen layout information 320 to the AV playback library 326.
  • the communication content is requested to be reproduced.
  • the AV playback library 326 uses the synchronization controller 312 to match the time stamp (PTS) included in the broadcast content with the time stamp (PTS) included in the communication content, and the picture included in each content is converted into a video plane.
  • PTS time stamp
  • step S603 synchronized playback of broadcast content and communication content is started.
  • the service manager 323 monitors whether or not the current time is the end time of the broadcast program that is the broadcast content (step S604). If it is determined in step S604 that the current time is not the end time of the broadcast content (No in step S604), the service manager 323 monitors whether the channel has been switched (channel selection) by the user (step S605). If it is determined in step S605 that switching has not been performed (No in step S605), the service manager 323 further checks whether at least one of the screen layout information 320 and the synchronized content information 321 has been updated (step S605). S606).
  • step S606 If it is determined in step S606 that the screen layout information 320 and the synchronized content information 321 have not been updated (No in step S606), the service manager 323 performs synchronous playback of the video data of the broadcast content and the communication content. (Step S607). If it is determined in step S607 that the video data of the broadcast content and the communication content are sufficiently present for synchronous reproduction (Yes in step S607), the service manager 323 repeats the processing from step S604.
  • step S606 if it is determined in step S606 that at least one of the screen layout information 320 and the synchronized content information 321 has been updated (Yes in step S606), or each of the broadcast content and the communication content is determined in step S607.
  • the service manager 323 determines that the video data does not exist enough for synchronous reproduction (No in step S607), the service manager 323 holds the program information of the broadcast content that was synchronously reproduced with the communication content in the memory ( Step S608). Further, the service manager 323 confirms whether or not the communication status is normal (step S609).
  • step S609 If it is determined in step S609 that the communication status is normal (Yes in step S609), the service manager 323 performs communication content acquisition processing in step S602, and repeats the processing from step S604. On the other hand, if it is determined in step S609 that the communication status is abnormal, the service manager 323 immediately stops the synchronized playback of the broadcast content and the communication content (step S610). Alternatively, the service manager 323 temporarily prevents the communication content from being output from the video plane 314, and when the communication state is recovered normally, acquires the communication content again, and the communication content is output from the video plane 314. You may make it do.
  • the broadcast receiving device 104A determines that the audio content is 104A. Decode and output frame or image data.
  • the broadcast receiving apparatus 104A recognizes one of the contents as the processing target content at the time of synchronous reproduction in step S603. Then, the broadcast receiving apparatus 104A decodes and outputs the audio frame or image data included in the processing target content. For example, the broadcast receiving apparatus 104A recognizes content corresponding to the content as processing target content based on content (for example, language) set in advance.
  • the broadcast receiving apparatus 104A may recognize the processing target content based on control information indicating whether or not to output an image in conjunction with synchronous playback, and which content the processing target content is.
  • the processing target content may be recognized based on the information shown.
  • the broadcast receiving device 104A may recognize the processing target content according to the display size of the moving image indicated by each of the communication content and the broadcast content.
  • step S604 If it is determined in step S604 that the current time is the end time of the broadcast content (Yes in step S604), or if it is determined in step S609 that the communication status is abnormal (No in step S609).
  • the service manager 323 stops the reproduction of the communication content (step S610).
  • the broadcast receiving device 104A of the TV 104 automatically stops the communication content when the channel is switched or when the broadcast content ends. However, even in such a case, when the broadcast content that is another broadcast program is continuously reproduced and the communication content corresponding to the other broadcast program exists, the TV 104 performs synchronous reproduction of the broadcast content and the communication content. You may continue. When authentication for charging or the like is required for viewing the communication content, the communication content may be temporarily stopped and the communication content may be reproduced after the user authentication is completed.
  • FIG. 17 is a flowchart showing details of the communication content acquisition processing in step S602 in FIG.
  • the broadcast receiving device 104A of the TV 104 acquires the synchronized content information 321 superimposed on the broadcast wave (step S701), and further acquires the screen layout information 320 (step S702).
  • the broadcast receiving device 104A confirms whether the broadcast content and the communication content are currently being reproduced in synchronization (step S703). If it is determined in step S703 that the broadcast content and the communication content are not reproduced in synchronization (No in step S703), the broadcast receiving apparatus 104A displays display screen information indicating the resolution, display size, and the like of the display 203 of the TV 104. Obtain (step S704).
  • the synchronized content information 321 acquired in step S701 indicates video information such as a bit rate for each of a plurality of communication contents. Therefore, the broadcast receiving apparatus 104A selects the most appropriate communication content based on the synchronized content information 321 acquired in step S701, the screen layout information 320 acquired in step S702, and the display screen information acquired in step S704. Obtain (step S705). For example, the broadcast receiving apparatus 104A acquires communication content having the minimum necessary quality (video information) described in the synchronized content information 321 according to the display size of the display 203.
  • step S703 if it is determined in step S703 that the broadcast content and the communication content are synchronously reproduced (Yes in step S703), the broadcast receiving device 104A acquires the high-quality communication content described in the synchronous content information 321. (Step S705). However, the broadcast receiving apparatus 104A may change the quality of the communication content acquired in step S705 according to the load and communication status.
  • the broadcast type of the broadcast content that is reproduced in synchronization with the communication content is shown.
  • the broadcast receiving device 104 ⁇ / b> A according to this modification performs a reproduction process according to the broadcast type.
  • FIG. 18 is a diagram showing an example of the synchronized content information 321 according to the present modification.
  • the synchronous content information 321 indicates the content ID and URL of the communication content, and further indicates the broadcast type 801 of the broadcast content that is reproduced in synchronization with the communication content.
  • the broadcast type 801 is live broadcast (live) or on-demand broadcast (recording).
  • FIG. 19 is a flowchart showing a reproduction process using the broadcast type 801 by the broadcast receiving apparatus 104A according to this modification.
  • the broadcast receiving apparatus 104A first accepts a request for reservation for synchronous reproduction (step S901). That is, the user operates the TV 104 with reference to program information and the like to make an automatic start reservation for broadcast content and communication content.
  • the broadcast receiving apparatus 104A checks whether or not the broadcast type 801 of the synchronized content information 321 is a live broadcast (step S902). If it is determined in step S902 that the broadcast type 801 is not a live broadcast (No in step S902), the broadcast receiving device 104A performs the communication content acquisition process in step S602 described above. At this time, if there is sufficient time until the broadcast content broadcast start time, the broadcast receiving device 104A may acquire high-quality (high-quality) communication content.
  • the broadcast receiving apparatus 104A monitors whether or not broadcasting of the broadcast program that is the broadcast content is started after the communication content having a data amount sufficient for synchronous reproduction is acquired (step S903). If it is determined in step S903 that broadcasting of the broadcast program is started (Yes in step S903), the broadcast receiving device 104A performs the synchronized playback in step S603 described above, that is, the synchronized playback of the broadcast content and the communication content. Start. On the other hand, if it is determined in step S903 that the broadcast program is not started (No in step S603), the broadcast receiving device 104A waits until the broadcast program starts.
  • the broadcast content can be reproduced in synchronization with the communication content simultaneously with the start of the broadcast of the broadcast content.
  • the broadcast receiving apparatus 104A may reproduce these contents as 3D images by reproducing the broadcast contents and the communication contents in synchronization. Such reproduction is also referred to as 3D reproduction or 3D display.
  • the broadcast receiving device 104A when the output device of the TV 104 is 3D-compatible, the broadcast receiving device 104A outputs the broadcast content as data for the right eye and outputs the communication content as data for the left eye to perform 3D playback.
  • the synchronized content information 321 indicates that the broadcast content and communication content corresponding to the synchronized content information 321 are content for 3D playback.
  • the broadcast receiving apparatus 104A can perform output setting for 3D reproduction (setting for alternately outputting right-eye data and left-eye data) in advance.
  • the broadcast receiving apparatus 104A outputs the broadcast content written on the video plane twice. Thereby, although the displayed image is visually recognized as a 2D image, it is possible to alleviate the uncomfortable feeling. In such a case, the broadcast receiving apparatus 104A may notify the user in advance that switching to a 2D image is caused by a communication abnormality. Thereby, the user can easily understand that switching to the 2D image is performed. If the communication status returns to normal from the abnormality, the broadcast receiving apparatus 104A resumes the reproduction of the communication content.
  • the broadcast receiving apparatus 104A performs the above-described 3D reproduction by alternately outputting the broadcast content written on one video plane and the communication content written on the other video plane.
  • the broadcast receiving device 104A holds the interrupted time. Then, the broadcast receiving device 104A may resume 3D playback from an image corresponding to the time, which is an image that the user has missed when the communication content can be received.
  • the broadcast receiving device 104A of the TV 104 may acquire and reproduce communication content indicating the same content as the broadcast content.
  • the broadcast receiving apparatus 104A can be overlooked and used as an alternative means of reproduction.
  • the broadcast receiving apparatus 104A acquires and reproduces the communication content corresponding to the broadcast start position that is the beginning portion.
  • the broadcast receiving device 104A switches the playback of the communication content to the playback of the broadcast content or automatically increases the playback speed of the communication content. Return to normal playback speed. Further, when the user stands in the middle of the broadcast, the TV 104 is notified that the broadcast content cannot be viewed temporarily by a remote control operation or the like. At this time, the broadcast receiving device 104A of the TV 104 holds the time when the notification is received. Then, when the user returns to the seat, the TV 104 is notified that the user wants to view again by operating the remote controller or the like.
  • the broadcast receiving device 104A of the TV 104 may acquire communication content corresponding to the held time using communication, and may perform fast-playing as described above. Further, the broadcast receiving apparatus 104A may search for and display a specific scene of the broadcast content, or enlarge a part of the scene.
  • the broadcast receiving apparatus 104A may perform relay relay that links broadcast content and communication content. For example, while a user is watching a live broadcast such as a baseball night game on a broadcast, the baseball game itself may continue but the broadcast may end. In such a case, the broadcast receiving apparatus 104A acquires and reproduces the communication content as a continuation of the broadcast (broadcast content). Also, the broadcast receiving device 104A changes the display size of the communication content to the full screen when the broadcast ends when the small moving image of the communication content is output in front of the large moving image of the broadcast content. Then, the communication content may be continuously reproduced as a continuation of the broadcast.
  • the broadcast receiving apparatus changes the layout of the broadcast content and communication content to be superimposed according to the operation by the user.
  • the broadcast receiving apparatus displays the broadcast content and the communication content in a different arrangement in accordance with the screen layout information 320 and the operation by the user.
  • the broadcast content showing a video taken from the center back screen is broadcast, and communication content showing a video in which only a user's favorite fielder is shown is uploaded to the server 102.
  • the user wants to view each content by displaying the communication content as a main, not the broadcast content, on the full screen, and displaying the broadcast content as a sub screen on the child screen.
  • the user operates the broadcast receiving device via a remote controller to change the arrangement of the broadcast content and the communication content. That is, the user can display the moving image of the communication content largely on the back and the small moving image of the broadcast content on the front as desired.
  • FIG. 20 is a block diagram showing an internal configuration of the broadcast receiving apparatus according to this modification.
  • the broadcast receiving apparatus 104B includes all the components of the broadcast receiving apparatus 104A in the second embodiment, and further includes a decode switch 1001 and a superposition switch 1002. Prepare.
  • the decode switch 1001 controls the image decoder 308 and the audio decoder 311. As a result, the decoding switch 1001 switches between decoding of image data and audio frames included in broadcast content and decoding of image data and audio frames included in communication content.
  • the superimposing switcher 1002 switches the superimposing order of the pictures and images held in each plane in accordance with the screen layout information 320 and a user operation.
  • remote control manager 328 corresponds to instruction receiving unit 15 in the first embodiment.
  • FIG. 21 is a flowchart showing an example of layout change by the broadcast receiving apparatus 104B according to the present modification, that is, switching of the superposition order.
  • the broadcast receiving apparatus 104B accepts a screen switching request according to an instruction from the user (step S1101).
  • This screen switching request is a request for switching between main and sub assignments for broadcast content and communication content.
  • the broadcast receiving apparatus 104B confirms whether it is necessary to switch the image data and audio frame to be decoded together (step S1102). If it is determined in step S1102 that the image data and the audio frame need to be switched together (Yes in step S1102), the broadcast receiving device 104B includes the current content included in one of the broadcast content and the broadcast content. Then, decoding and output of the decoded image data and audio frame are stopped (step S1103). Then, the AV playback library 326 requests the decoding switch 1001 to decode the undecoded image data and audio frames included in the other content (step S1104). Thereby, the image data and audio frame to be decoded are switched.
  • the broadcast receiving apparatus 104B starts decoding and outputting the switched image data and audio frame to be decoded (step S1105). Then, the broadcast receiving apparatus 104B switches the superposition order of the broadcast content picture written in one video plane and the communication content picture written in the other video plane (step S1106).
  • the user can not only view the communication content as the main and also view the broadcast content together as the sub, but can also seamlessly switch the video display. .
  • the broadcast receiving apparatus 104B may present the situation to the user and display the broadcast content in full screen. Thereafter, when the communication content is secured, the broadcast receiving device 104B may automatically return the display size of the broadcast content to the original state.
  • the superimposition switch 1002 uses the above-described adder 317 to switch the superposition order.
  • the main and sub may be switched by switching the video plane in which broadcast content and communication content are written. Good.
  • the broadcast receiving apparatus 104 ⁇ / b> A according to the present modification performs a reproduction process according to the information related to the linked data.
  • FIG. 22 is a diagram showing an example of the synchronized content information 321 according to the present modification.
  • the synchronous content information 321 indicates the content ID and URL of the communication content, and further indicates information 1201 regarding the interlocking data displayed in conjunction with the communication content.
  • this information 1201 is information for enabling linked data such as image data to be automatically reproduced or output linked to communication content at a specified time.
  • the broadcast receiving apparatus 104A acquires the linked data having the name indicated by the information 1201 via the broadcast or the Internet line 103 at the time indicated by the information 1201, and reproduces or outputs it.
  • the linked data is a still image, subtitle, sound effect, or the like, and is played back in synchronization with video data of communication content in units of frames, for example.
  • the broadcast receiving apparatus 104A not only displays a single communication content superimposed on the broadcast content, but also displays a plurality of communication content superimposed. For example, in a baseball broadcast, broadcast content indicating a video shot from the center back screen is broadcast, and communication content indicating a video shot of a pitcher, catcher, fielder, and cheerleader is uploaded to the server 102. The server 102 edits and distributes the uploaded communication content into one communication content. In this case, the broadcast receiving apparatus 104A sets broadcast content as main, and displays a moving image of the broadcast content in a full screen size.
  • the broadcast receiving apparatus 104A sets the communication content as a sub, and displays a moving image of the communication content, which is a moving image in which a pitcher, a catcher, a fielder, and a cheerleader are projected, in a small display size.
  • FIG. 23 is a diagram illustrating an example of a PiP image displayed by the broadcast receiving device 104A according to the present modification.
  • baseball broadcast multi-angle viewing is realized by synchronous playback of broadcast content and communication content.
  • the broadcast receiving device 104 ⁇ / b> A receives the broadcast content 201 broadcast from the broadcast station 101 and the communication content 1301 distributed from the server 102 via the Internet line 103. Then, the broadcast receiving apparatus 104A superimposes the broadcast moving image of the broadcast content 201 and the communication moving image of the communication content 1301 and outputs them to the display 203.
  • the broadcast content indicates a broadcast video that is a video taken from an angle on the batter side
  • the communication content indicates a broadcast video that is a video on which pitchers, catchers, fielders, and cheerleaders are projected. In this way, by supplementing elements that cannot be expressed only with broadcast content with communication content, it is possible to convey a greater sense of realism to the viewer.
  • FIG. 24 is a diagram illustrating an example of the synchronized content information 321 according to the present modification.
  • the synchronized content information 321 indicates the contents included in the synchronized content information shown in FIG. 15 of the second embodiment, and further indicates the data type 1401, the number of screens 1402, and the video area 1403.
  • the data type 1401 is a type of communication content corresponding to the synchronized content information 321.
  • the data type 1401 is a type of communication content generated by editing a plurality of video streams into one and superimposed on the broadcast content (this type is called thumbnail display, for example), a single video stream Of the communication content to be superimposed on the broadcast content (this type is referred to as an angle display, for example), the type of communication content displayed in 3D together with the broadcast content (this type is referred to as 3D display), and the like.
  • the number of screens 1402 is the number of video streams included in the communication content displayed as thumbnails.
  • a video area 1403 is a display area for a video stream included in the communication content displayed in thumbnails.
  • the communication content type (data type 1401) is thumbnail display
  • a video decoder and a video plane are used for communication content because one communication content includes a plurality of video streams. Even if there is only one, it is possible to simultaneously display images of a plurality of video streams obtained through communication.
  • the broadcast receiving apparatus 104A includes a plurality of resources such as a video decoder and a video plane for communication contents
  • the same is obtained by acquiring a plurality of communication contents and individually decoding the communication contents.
  • the effect of can be obtained.
  • the same effect may be obtained by using simulcast, acquiring a plurality of video streams from each of the broadcast content and the communication content, and individually decoding the video streams.
  • the broadcast receiving apparatus acquires not only the screen layout information 320 and the synchronized content information 321 but also an application program (hereinafter referred to as an application). That is, the broadcast receiving apparatus according to this modification performs synchronized playback of broadcast content and communication content according to the application. Thereby, in the broadcast receiving apparatus according to the present modification, a broadcaster or a telecommunications carrier that has distributed the application can set processing for when communication is abnormal.
  • FIG. 25 is a block diagram showing an internal configuration of a broadcast receiving apparatus according to this modification.
  • the broadcast receiving apparatus 104C includes all the components of the broadcast receiving apparatus 104A in the second embodiment, and further includes an application manager 1501.
  • the application manager 1501 manages activation and termination of the application 1502 embedded in the broadcast wave by DSMCC.
  • the application manager 1501 acquires the application 1502 via communication using location information of the application 1502 embedded in the broadcast wave, and manages the activation and termination of the application 1502.
  • the acquired application 1502 is stored in the scenario memory 318, and the application manager 1501 is provided in the control unit 322. Then, the application manager 1501 reads out the application 1502 stored in the scenario memory 318, and starts and ends it.
  • the language of the application 1502 may be any language. That is, the application 1502 may be written in the Java (registered trademark) language, written in the HTML language, or written in the BML language.
  • the service manager 323 of the broadcast receiving apparatus 104C notifies the application 1502 of a communication abnormality or notifies the update of the screen layout information 320 or the synchronized content information 321.
  • the service manager 323 of the broadcast receiving device 104C instructs the application 1502 to synchronize playback of broadcast content and communication content, instructs the acquisition of communication content of a specified bit rate or resolution, and the screen layout. Instructing acquisition of information 320 or synchronized content information 321, instructing acquisition of display screen information, instructing replacement of broadcast content and communication content, presenting a display / non-display switching function, etc. Also good.
  • the present invention may be a computer program including program code for operating a computer, or may be a digital signal composed of the computer program. That is, in each of the above embodiments, each component may be configured by dedicated hardware or may be realized by executing a software program suitable for each component. Each component may be realized by a program execution unit such as a CPU or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory.
  • this program is a program for receiving broadcast content to be broadcast, and receives communication content related to the broadcast content distributed via communication other than broadcast, and receives the broadcast content.
  • a picture of a broadcast moving image that is a moving image indicated by the broadcast content and a picture of a communication moving image that is a moving image indicated by the communication content are held in a plane, and the broadcast moving image and the communication moving image Layout information indicating a layout is acquired from the outside of the broadcast receiving apparatus, and the picture of the broadcast moving image and the picture of the communication moving image held in the plane are overlapped for each picture according to the layout information.
  • the present invention also provides a computer-readable recording medium such as a flexible disk, hard disk, CD-ROM, MO, DVD, DVD-ROM, DVD-RAM, BD (Blu-ray Disc). ), Recorded in a semiconductor memory or the like.
  • a computer-readable recording medium such as a flexible disk, hard disk, CD-ROM, MO, DVD, DVD-ROM, DVD-RAM, BD (Blu-ray Disc).
  • the computer program or the digital signal may be transmitted via an electric communication line, a wireless or wired communication line, a network represented by the Internet, or the like.
  • the present invention can also be implemented as an LSI that controls the device described in the above embodiment.
  • the functional blocks may be individually made into one chip, or may be made into one chip so as to include a part or all of them.
  • LSI is used, but depending on the degree of integration, it may be called IC, system LSI, super LSI, or ultra LSI.
  • the method of circuit integration is not limited to LSI, and implementation with a dedicated circuit or a general-purpose processor is also possible.
  • An FPGA Field Programmable Gate Array
  • a reconfigurable processor that can reconfigure the connection and setting of circuit cells inside the LSI may be used.
  • a recording medium for example, a semiconductor memory such as an HDD, an SD card, or a compact flash (registered trademark)
  • a readable / writable recording medium to which stored data is transferred.
  • the present invention is not dependent on the physical characteristics of the recording medium, and the present invention can also be applied to other readable / writable recording media. For example, even when data is recorded on an external hard disk or the like, it goes without saying that the same effects as described above can be obtained.
  • the broadcast receiving apparatus has an effect that the layout of broadcast content and communication content can be changed, and can be applied to, for example, a television receiver, a playback device, or a mobile device.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

 放送コンテンツと通信コンテンツとのレイアウトを変更することができる放送受信装置(10A)は、通信を介して配信される通信コンテンツを受信する通信コンテンツ受信部(11b)と、放送コンテンツを受信する放送コンテンツ受信部(11a)と、放送コンテンツによって示される動画像である放送動画像のピクチャと、通信コンテンツによって示される動画像である通信動画像のピクチャとを保持するためのプレーン(13a,13b)と、放送動画像および通信動画像のレイアウトを示すレイアウト情報(20)を取得するレイアウト情報取得部(12)と、レイアウト情報(20)にしたがって、ピクチャごとに、プレーン(13a,13b)に保持されている放送動画像のピクチャと通信動画像のピクチャとを重ねて出力する重畳部(14)とを備える。

Description

放送受信装置、放送受信方法およびプログラム
 本発明は、放送される放送コンテンツを受信する放送受信装置に関し、特に、放送以外の通信によって配信される通信コンテンツも受信する放送受信装置などに関する。
 近年、インターネットテレビ、スマートテレビと呼ばれる通信を利用してコンテンツをダウンロードして再生することが可能なテレビ受像機(以下、TVという)が主流になりつつある(例えば、特許文献1~3参照)。
 たとえば、このようなTVは、放送コンテンツを受信する放送受信装置として構成されるとともに、インターネットに接続される。そして、TVは、接続されたインターネットを介して所望の通信コンテンツであるビデオを検索し、そのビデオをダウンロードして再生する。また、TVは、オンデマンドにより、映像音楽配信サイトからストリーミング配信されるコンテンツを受信して再生する。また、TVは、ゲームやユーティリティーなどのアプリケーションプログラムをダウンロードして実行し、さらに、ソーシャルネットワークサービスの通信機能などを有する。
特開2007-68172号公報 特開2005-26867号公報 特表2009-503602号公報
 しかしながら、上記特許文献1~3の放送受信装置では、放送コンテンツの動画像と通信コンテンツの動画像とのレイアウトを変更することができないという問題がある。
 そこで、本発明は、放送コンテンツと通信コンテンツとのレイアウトを変更することができる放送受信装置を提供する。
 本発明の一態様に係る放送受信装置は、放送される放送コンテンツを受信する放送受信装置であって、放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信する通信コンテンツ受信部と、前記放送コンテンツを受信する放送コンテンツ受信部と、前記放送コンテンツによって示される動画像である放送動画像のピクチャと、前記通信コンテンツによって示される動画像である通信動画像のピクチャとを保持するためのプレーンと、前記放送動画像および前記通信動画像のレイアウトを示すレイアウト情報を、前記放送受信装置の外部から取得するレイアウト情報取得部と、前記レイアウト情報にしたがって、ピクチャごとに、前記プレーンに保持されている前記放送動画像のピクチャと前記通信動画像のピクチャとを重ねて出力する重畳部とを備える。
 なお、この包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD-ROMなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。
 本発明の放送受信装置は、放送コンテンツと通信コンテンツとのレイアウトを変更することができる。
図1は、実施の形態1における放送受信装置を備えたTVを有するシステムを示す図である。 図2は、実施の形態1におけるPiP画像の一例を示す図である。 図3は、実施の形態1における放送受信装置の構成を示す図である。 図4は、実施の形態1におけるレイアウト情報の一例を示す図である。 図5は、実施の形態1における放送受信装置の動作を示すフローチャートである。 図6は、実施の形態1の変形例1に係るレイアウト情報を示す図である。 図7は、実施の形態1の変形例1に係る放送受信装置の構成を示す図である。 図8は、実施の形態1の変形例2に係る放送受信装置の構成を示す図である。 図9は、実施の形態1の変形例2に係る同期情報の一例を示す図である。 図10は、実施の形態1の変形例3に係る放送受信装置の構成を示す図である。 図11は、実施の形態1の変形例4に係る放送受信装置の構成を示す図である。 図12Aは、実施の形態1の変形例5に係る重畳部から出力されるピクチャを示す図である。 図12Bは、実施の形態1の変形例5に係る放送受信装置の構成を示す図である。 図13は、実施の形態2における放送受信装置の内部構成を示すブロック図である。 図14は、実施の形態2における番組一覧情報の一例を示す図である。 図15は、実施の形態2における画面レイアウト情報および同期コンテンツ情報の一例を示す図である。 図16は、実施の形態2における放送受信装置が放送コンテンツと通信コンテンツとを同期させて再生する処理を示すフローチャートである。 図17は、実施の形態2における通信コンテンツ取得処理の詳細を示すフローチャートである。 図18は、実施の形態2の変形例1に係る同期コンテンツ情報の一例を示す図である。 図19は、実施の形態2の変形例1に係る放送受信装置による放送タイプを用いた再生処理を示すフローチャートである。 図20は、実施の形態2の変形例2に係る放送受信装置の内部構成を示すブロック図である。 図21は、実施の形態2の変形例2に係る放送受信装置によるレイアウトの変更(重畳順の切り替え)の一例を示すフローチャートである。 図22は、実施の形態2の変形例3に係る同期コンテンツ情報の一例を示す図である。 図23は、実施の形態2の変形例4に係る放送受信装置によって表示されるPiP画像の一例を示す図である。 図24は、実施の形態2の変形例4に係る同期コンテンツ情報の一例を示す図である。 図25は、実施の形態2の変形例5に係る放送受信装置の内部構成を示すブロック図である。
(本発明の基礎となった知見)
 「背景技術」の欄において記載した各放送受信装置は、具体的には以下のとおりである。
 特許文献1の放送受信装置は、放送コンテンツと通信コンテンツとを同期させて再生する。より具体的には、この放送受信装置は、放送コンテンツの放送開始時刻よりも前に、通信コンテンツの受信を開始することによって、放送コンテンツと通信コンテンツとを同期させて再生する。つまり、放送開始時刻より前に、通信コンテンツに関する情報が放送信号に埋め込まれて放送され、放送受信装置は、その情報を事前に取得することによって、通信コンテンツの受信を放送コンテンツの受信よりも前に開始することができる。
 また、特許文献2の放送受信装置は、上述のような情報を電子番組ガイドから取得する。より具体的には、この放送受信装置は、Webサイトに通信コンテンツの情報が存在する場合でも、電子番組ガイドから通信コンテンツに関する情報を取得する。したがって、放送受信装置は、放送される番組の選択以前に通信コンテンツに関する情報を取得し、その情報を用いることによって放送コンテンツと通信コンテンツとのそれぞれの再生を同期させる。
 また、特許文献3の放送受信装置は、メインのビデオとサブのビデオとを同期させて再生するという方法(PiP:Picture in Picture)を用いる。この方法では、大きく表示されるメインのビデオの上に、小さく表示されるサブのビデオが重ねられる。
 しかしながら、本発明者は、上記特許文献1~3の放送受信装置では、放送コンテンツの動画像と通信コンテンツの動画像とのレイアウトを変更することができないという問題があることを見出した。つまり、特許文献1および2の放送受信装置のように、放送コンテンツの動画像と通信コンテンツの動画像とを同期させて再生させる場合に、特許文献3のPiPの方法を用いても、放送コンテンツの動画像と通信コンテンツの動画像とのレイアウトは固定されてしまう。なお、特許文献3のPiPの方法では、メインのビデオが書き込まれるプレーンとサブのビデオが書き込まれるプレーンとが固定されているため、サブのビデオを全画面表示するとメインのビデオが見えなくなってしまう。
 このような問題を解決するために、本発明の一態様に係る放送受信装置は、放送される放送コンテンツを受信する放送受信装置であって、放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信する通信コンテンツ受信部と、前記放送コンテンツを受信する放送コンテンツ受信部と、前記放送コンテンツによって示される動画像である放送動画像のピクチャと、前記通信コンテンツによって示される動画像である通信動画像のピクチャとを保持するためのプレーンと、前記放送動画像および前記通信動画像のレイアウトを示すレイアウト情報を、前記放送受信装置の外部から取得するレイアウト情報取得部と、前記レイアウト情報にしたがって、ピクチャごとに、前記プレーンに保持されている前記放送動画像のピクチャと前記通信動画像のピクチャとを重ねて出力する重畳部とを備える。
 これにより、レイアウト情報により示されるレイアウトにしたがって、放送動画像と通信動画像とが重ねられて出力されるため、そのレイアウト情報に応じて、放送コンテンツの動画像と通信コンテンツの動画像とのレイアウトを変更することができる。つまり、放送局がレイアウト情報を放送する場合には、放送局側でレイアウトを変更することができる。
 また、前記レイアウト情報は、前記放送動画像および前記通信動画像のうちの一方の動画像が、他方の動画像よりも小さく、当該他方の動画像の上に重ねられる場合には、前記他方の動画像のうちの特徴部分を除く位置に前記一方の動画像が重ねられるように、前記放送動画像の表示サイズおよび表示位置と、前記通信動画像の表示サイズおよび表示位置とを示し、前記重畳部は、前記レイアウト情報によって示される、前記放送動画像および前記通信動画像のそれぞれの表示サイズで、前記レイアウト情報によって示される、前記放送動画像および前記通信動画像のそれぞれの表示位置に、前記放送動画像および前記放送動画像を配置してもよい。
 これにより、放送動画像および通信動画像のレイアウトを、表示サイズおよび表示位置によって適切に変更することができる。
 また、前記レイアウト情報は、第1のレイアウトと第2のレイアウトとを示し、前記放送受信装置は、さらに、レイアウトの指示を受け付ける指示受付部を備え、前記重畳部は、前記指示受付部によって前記第1のレイアウトの指示が受け付けられた場合には、前記第1のレイアウトにしたがって、前記通信動画像を前記放送動画像に重ねて出力し、前記指示受付部によって前記第2のレイアウトの指示が受け付けられた場合には、前記第2のレイアウトにしたがって、前記放送動画像を前記通信動画像に重ねて出力してもよい。
 これにより、例えばユーザからのレイアウトの指示が受け付けられる場合には、レイアウト情報により示される範囲でユーザがそのレイアウトを変更することができる。 
 また、前記プレーンは、前記放送動画像および前記通信動画像のうちの一方の動画像のピクチャを保持するための第1のプレーンと、他方の動画像のピクチャを保持するための第2のプレーンとを有し、前記重畳部は、前記放送動画像のピクチャおよび前記通信動画像のピクチャをそれぞれ保持するためのプレーンを、第1のプレーンと第2のプレーンとで切り替えることによって、前記通信動画像を前記放送動画像の前面または背面に配置してもよい。
 これにより、例えば、第1のプレーンに保持されるピクチャが背面に配置され、第2のプレーンに保持されるピクチャが前面に配置されるように、それぞれのプレーンのピクチャが重ねられる順序が固定されている場合であっても、各プレーンに格納されるピクチャの種類が切り替えられるため、放送動画像のピクチャと通信動画像のピクチャとが重ねられる順序を適切に変更することができる。
 また、前記放送受信装置は、さらに、同期情報を前記放送受信装置の外部から取得する同期情報取得部を備え、前記重畳部は、前記同期情報にしたがって、前記通信動画像と前記放送動画像とを重ねて出力することによって、前記通信動画像を前記放送動画像に同期させてもよい。
 これにより、通信動画像と放送動画像とを適切に重畳させた状態で同期させることができ、ユーザに対して見やすい映像を映し出すことができる。
 また、前記同期情報は、前記通信コンテンツ内の再生位置と、当該再生位置のデータが再生される再生時刻とを関連付けて示し、前記重畳部は、前記同期情報によって示される再生時刻に、前記通信動画像のうち、当該再生時刻に関連付けて示される再生位置にあるピクチャと、前記放送動画像のピクチャとを重ねて出力してもよい。
 これにより、通信動画像に含まれる複数のピクチャのうち、放送動画像のピクチャに対して適切なピクチャと、その放送動画像のピクチャとを重畳することができる。
 また、前記同期情報は、さらに、前記放送コンテンツのタイプを放送タイプとして示し、前記重畳部は、前記放送タイプによって、前記放送コンテンツがライブ放送されるコンテンツであるか否かを判別し、ライブ放送されるコンテンツであると判別すると、前記放送動画像と前記通信動画像との重ね合わせを禁止してもよい。
 放送以外の通信(例えばインターネットを介した通信)の状況が悪くなると、通信コンテンツの受信は遅れる。その結果、放送コンテンツと通信コンテンツとを同期させることができなくなる場合がある。したがって、通信状況による影響を受けた場合でもこれらのコンテンツを適切に同期させるためには、通信コンテンツの受信を、放送コンテンツの受信よりも早めに開始しておく必要がある。しかし、放送コンテンツがライブ放送される場合には、通信コンテンツの受信を、放送コンテンツの受信よりも早めに開始することができない。そこで、本発明の一態様に係る放送受信装置では、放送コンテンツがライブ放送される場合には、放送動画像と通信動画像との重ね合わせを禁止することによって、例えば放送動画像のみをディスプレイに表示させることができ、非同期の動画像が表示されることによってユーザの視聴に負担がかかるのを防ぐことができる。
 また、前記同期情報は、さらに、静止画を特定するための静止画特定情報を含み、前記重畳部は、前記静止画特定情報によって特定される静止画と、前記放送動画像および前記通信動画像とを重ねて出力してもよい。
 これにより、放送動画像および通信動画像に対して適切な静止画もそれらの動画像に重畳して表示させることができる。
 また、前記重畳部は、通信コンテンツが前記通信コンテンツ受信部によって受信されない場合には、前記通信動画像を重ねることなく、前記放送動画像を出力してもよい。
 これにより、動画像の無理な重畳がないため、ユーザの視聴にかかる負担を軽減することができる。
 また、前記重畳部は、前記通信動画像がディスプレイの表示サイズ全体に表示され、前記放送動画像が前記ディスプレイの表示サイズよりも小さいサイズで前記通信動画像に重ねられている際に、前記通信コンテンツが前記通信コンテンツ受信部によって受信されていない状態になると、前記放送動画像の表示サイズを、前記ディスプレイの表示サイズまで拡大し、前記通信コンテンツが前記通信コンテンツ受信部によって受信されている状態になると、前記放送動画像の表示サイズを、前記ディスプレイの表示サイズよりも小さいサイズに縮小してもよい。
 これにより、インターネットを介した通信などの放送以外の通信の通信状況が変動する場合であっても、動画像をユーザに見やすく表示することができる。
 また、前記放送受信装置は、さらに、前記放送以外の通信の状況を示す通信状況情報を取得する通信状況取得部を備え、前記通信コンテンツ受信部は、前記放送コンテンツに関連する複数の通信コンテンツのうち、前記通信状況情報によって示される通信の状況に応じた品質を有する前記通信コンテンツを受信してもよい。例えば、前記複数の通信コンテンツのそれぞれのビットレート、または、前記複数の通信コンテンツのそれぞれの解像度は、互いに異なり、前記通信コンテンツ受信部は、前記複数の通信コンテンツのうち、前記通信状況情報によって示される通信の状況に応じたビットレートまたは解像度を有する前記通信コンテンツを受信する。
 これにより、そのときの通信状況に応じて、適切な通信コンテンツを受信することができ、通信動画像をユーザに見やすく表示することができる。
 また、前記放送受信装置は、さらに、前記放送以外の通信の状況を示す通信状況情報を取得する通信状況取得部を備え、前記重畳部は、前記通信状況情報によって示される通信の状況である指標値が所定の値よりも低いまたは高い場合には、前記通信動画像を重ねることなく、前記放送動画像を出力してもよい。
 例えば、通信の状況である指標値は、使用可能なビットレートまたはパケットロスの頻度などであり、これらの指標値が所定の値よりも低いまたは高い場合には、通信コンテンツが通信コンテンツ受信部によって受信されない可能性が高まる。したがって、本発明の一態様に係る放送受信装置では、上述のような場合には、通信動画像が重畳されないため、動画像の無理な重畳を防ぎ、ユーザの視聴にかかる負担を軽減することができる。
 また、前記重畳部は、前記放送動画像および通信動画像が、それぞれが互いに異なる目に視認されることによって立体視される、複数のピクチャからなる動画像である場合には、前記放送動画像に含まれるピクチャである放送ピクチャと、通信動画像に含まれるピクチャであって、前記放送ピクチャと対になって立体視される通信ピクチャとをそれぞれ重ねることなく、単位時間内に連続して出力し、前記通信ピクチャが前記通信コンテンツ受信部によって受信されなかった場合には、前記放送ピクチャを、単位時間内に2回連続して出力してもよい。 
 これにより、放送動画像と通信動画像とによって、動画像を3Dで表示することができるとともに、通信コンテンツが受信されないような場合には、放送ピクチャが2回連続して出力されるため、動画像の表示を3D表示から2D表示に適切に切り替えることができ、不適切な動画像が表示されてしまうのを防ぐことができる。
 また、前記通信コンテンツ受信部は、前記放送コンテンツ受信部によって前記放送コンテンツが受信されている際に、前記放送以外の通信の状況が、前記通信コンテンツが受信可能な受信可能状況から、受信不可能な受信不可状況になり、再び受信可能状況になったときには、再び前記受信可能状況になったとき以降に前記放送コンテンツ受信部によって受信される前記放送コンテンツの一部に関連する他の通信コンテンツを受信し、前記重畳部は、前記レイアウト情報にしたがって、前記放送動画像と前記他の通信動画像とを重ねて出力してもよい。
 これにより、放送以外の通信の状況が復旧した場合にも、レイアウト情報にしたがった動画像の重畳を適切に再開することができる。
 また、前記放送受信装置は、さらに、前記放送コンテンツの続きの動画像を示す他の通信コンテンツの所在を示す所在情報を取得する所在情報取得部を備え、前記通信コンテンツ受信部は、前記放送コンテンツ受信部による前記放送コンテンツの受信が終了すると、前記所在情報によって示される所在から前記他の通信コンテンツを受信し、前記重畳部は、前記放送コンテンツ受信部による前記放送コンテンツの受信が終了した後、前記他の通信コンテンツを出力してもよい。
 これにより、ユーザは、放送コンテンツの続きを、通信コンテンツで視聴することができ、ユーザに対する利便性を向上することができる。
 また、前記放送受信装置は、さらに、前記放送動画像と同一の前記通信動画像を示す前記通信コンテンツの所在を示す所在情報を取得する所在情報取得部を備え、前記通信コンテンツ受信部は、前記放送コンテンツ受信部による前記放送コンテンツの受信が開始された後に、ユーザからの操作を受け付けると、前記所在情報によって示される所在から前記通信コンテンツを受信し、前記重畳部は、前記放送コンテンツの受信が開始されときに、前記放送動画像の出力を開始し、前記通信コンテンツの受信が開始されときに、前記レイアウト情報にしたがって、前記放送動画像と、前記通信コンテンツの先頭から示される前記通信動画像とを重ねて出力してもよい。
 これにより、ユーザは、放送コンテンツの最初の部分を見逃した場合でも、その後、通信コンテンツの先頭から、その見逃した部分を見ることができ、ユーザに対する利便性を向上することができる。
 また、前記重畳部は、前記放送動画像と前記通信動画像とを重ねる代わりに、前記通信動画像がディスプレイの表示サイズ全体に表示されるように、前記通信動画像を拡大して、前記通信動画像を出力してもよい。
 これにより、見逃した部分をユーザに見やすく表示することができる。
 また、前記重畳部は、前記放送動画像のうちの表示されている画像と、前記通信動画像のうちの表示されている画像とが等しくなるまで、早送り再生される前記通信コンテンツの通信動画像を出力し、前記放送動画像のうちの表示されている画像と、前記通信動画像のうちの表示されている画像とが等しくなると、通常再生される前記通信コンテンツの通信動画像を出力してもよい。
 これにより、見逃した部分が早送り再生されて表示され、通信コンテンツ内の再生位置が、放送コンテンツ内の再生位置に到達すると、通信コンテンツが通常再生され、通信動画像と放送動画像とが重ねて表示される。したがって、放送コンテンツの最初の部分を見逃した場合でも、その見逃した部分をユーザに表示することができるとともに、通信動画像と放送動画像とを同期させてユーザに表示することができる。
 なお、本発明は、このような放送受信装置として実現することができるだけでなく、集積回路、その放送受信装置が放送コンテンツを受信する方法、コンピュータにその方法で放送コンテンツを受信させるためのプログラム、または、そのプログラムを格納する記録媒体としても実現することができる。
 以下、実施の形態について、図面を参照しながら具体的に説明する。
 なお、以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
 (実施の形態1)
 図1は、本実施の形態における放送受信装置を備えたTVを有するシステムを示す図である。
 このシステムは、放送と通信とを融合させた、いわゆる放送通信融合システムであって、放送コンテンツを放送する放送局101と、TV104と、通信コンテンツを配信するサーバ102と、インターネット回線103とを有する。放送局101は、放送波または放送信号に放送コンテンツを挿入して放送する。サーバ102は、インターネット回線103を介して通信コンテンツをTV104に送信する。
 TV104は本実施の形態における放送受信装置とディスプレイとを備える。放送受信装置は、上述の放送コンテンツおよび通信コンテンツを受信する。そして、放送受信装置は、放送コンテンツによって示される動画像である放送動画像と、通信コンテンツによって示される動画像である通信動画像とを重ね合わせて、上述のディスプレイに出力する。これにより、ディスプレイには、放送動画像と通信動画像とが重ね合わされた画像が表示される。なお、本実施の形態では、放送受信装置がTV104に備えられているが、他の装置または機器に備えられていてもかまわない。また、放送動画像と通信動画像とが重ね合わされた画像を、以下、PiP画像という。
 図2は、PiP画像の一例を示す図である。
 例えば、放送コンテンツと通信コンテンツの同期再生によって野球中継のマルチアングル視聴が実現される。放送受信装置は、放送局101から放送される放送コンテンツ201と、サーバ102からインターネット回線103を介して配信される通信コンテンツ202とを受信する。そして、放送受信装置は、放送コンテンツ201の放送動画像と通信コンテンツ202の通信動画像とを重畳してディスプレイ203に出力している。放送コンテンツ201は、バッター側のアングルから撮影された動画像である放送動画像を示し、通信コンテンツは、ピッチャー側のアングルから撮影された動画像である放送動画像を示す。このように、放送コンテンツのみでは表現しきれない要素を通信コンテンツで補うことで、視聴者により一層臨場感を伝えることが可能となる。放送受信装置は、放送コンテンツ201と通信コンテンツ202の同期再生時に、放送コンテンツ201には含まれていない言語の音声や字幕、特典映像等を通信コンテンツとして取得して出力してもよい。
 図3は、本実施の形態における放送受信装置の構成を示す図である。
 本実施の形態における放送受信装置10Aは、放送される放送コンテンツを受信する放送受信装置であって、放送コンテンツ受信部11aと、通信コンテンツ受信部11bと、第1および第2のプレーン13a,13bと、レイアウト情報取得部12と、重畳部14とを備える。
 放送コンテンツ受信部11aは放送コンテンツを受信する。通信コンテンツ受信部11bは、放送以外の通信を介して配信される、上述の放送コンテンツに関連する通信コンテンツを受信する。通信以外の通信は、例えばインターネット回線103を介した通信であり、以下、単に通信ともいう。
 第1および第2のプレーン13a,13bは、放送コンテンツによって示される動画像である放送動画像のピクチャと、通信コンテンツによって示される動画像である通信動画像のピクチャとを保持するためのプレーンである。例えば、第1のプレーン13aは、放送動画像および通信動画像のうちの一方の動画像のピクチャを保持し、第2のプレーン13bは、他方の動画像のピクチャを保持する。なお、放送受信装置10Aは、第1および第2のプレーン13a,13bを含む1つのプレーンを備えていてもよい。
 レイアウト情報取得部12は、放送動画像および通信動画像のレイアウトを示すレイアウト情報20を、放送受信装置10Aの外部から取得する。例えば、レイアウト情報20は、放送または通信によって配信されている。
 重畳部14は、レイアウト情報20にしたがって、ピクチャごとに、第1および第2のプレーン13a,13bに保持されている放送動画像のピクチャと通信動画像のピクチャとを重ねて出力する。例えば、重畳部14は、放送動画像のピクチャおよび通信動画像のピクチャをそれぞれ保持するためのプレーンを、第1のプレーン13aと第2のプレーン13bとで切り替えることによって、通信動画像を放送動画像の前面または背面に配置する。これにより、例えば、第1のプレーン13aに保持されるピクチャが背面に配置され、第2のプレーン13bに保持されるピクチャが前面に配置されるように、それぞれのプレーンのピクチャが重ねられる順序が固定されている場合であっても、各プレーンに格納されるピクチャの種類が切り替えられるため、放送動画像のピクチャと通信動画像のピクチャとが重ねられる順序を適切に変更することができる。
 なお、放送動画像のピクチャを保持するためのプレーンが第1のプレーン13aに固定され、通信動画像のピクチャを保持するためのプレーンが第2のプレーン13bに固定されていてもよい。この場合には、重畳部14は、第1および第2のプレーン13a,13bに保持されている2つのピクチャを、レイアウト情報20にしたがった順序で重ね合わせる。
 このように、本実施の形態における放送受信装置10Aでは、レイアウト情報20により示されるレイアウトにしたがって、放送動画像と通信動画像とが重ねられて出力されるため、そのレイアウト情報20に応じて、放送コンテンツの動画像と通信コンテンツの動画像とのレイアウトを変更することができる。つまり、放送局101がレイアウト情報20を放送する場合には、放送局101側でレイアウトを変更することができる。
 図4は、レイアウト情報20の一例を示す図である。
 レイアウト情報20は、例えば図4に示すように、放送コンテンツの放送動画像の表示サイズおよび表示位置を示すとともに、通信コンテンツの通信動画像の表示サイズおよび表示位置を示す。ここで、レイアウト情報20は、放送動画像および通信動画像のうちの一方の動画像が、他方の動画像よりも小さく、その他方の動画像の上に重ねられる場合には、他方の動画像のうちの特徴部分を除く位置に一方の動画像が重ねられるように、放送動画像の表示サイズおよび表示位置と、通信動画像の表示サイズおよび表示位置とを示す。
 この場合、重畳部14は、レイアウト情報20によって示される、放送動画像および通信動画像のそれぞれの表示サイズで、レイアウト情報20によって示される、放送動画像および通信動画像のそれぞれの表示位置に、放送動画像および放送動画像を配置する。
 このように、本実施の形態における放送受信装置10Aでは、放送動画像および通信動画像のレイアウトを、表示サイズおよび表示位置によって適切に変更することができる。
 図5は、本実施の形態における放送受信装置10Aの動作を示すフローチャートである。
 まず、放送受信装置10Aは、放送以外の通信を介して配信される、放送コンテンツに関連する通信コンテンツを受信する(ステップS10)。次に、放送受信装置10Aは、放送コンテンツを受信する(ステップS11)。そして、放送受信装置10Aは、放送コンテンツによって示される動画像である放送動画像のピクチャと、通信コンテンツによって示される動画像である通信動画像のピクチャとを第1および第2のプレーン13a,1bに保持させる(ステップS12)。
 次に、放送受信装置10Aは、放送動画像および通信動画像のレイアウトを示すレイアウト情報20を、放送受信装置10Aの外部から取得する(ステップS13)。そして、放送受信装置10Aは、そのレイアウト情報20にしたがって、ピクチャごとに、第1および第2のプレーン13a,13bに保持されている放送動画像のピクチャと通信動画像のピクチャとを重ねて出力する(ステップS14)。
 ここで、重畳部14は、通信コンテンツが通信コンテンツ受信部11bによって受信されない場合には、通信動画像を重ねることなく、放送動画像を出力してもよい。これにより、動画像の無理な重畳がないため、ユーザの視聴にかかる負担を軽減することができる。
 また、通信動画像がディスプレイ203の表示サイズ全体に表示され、放送動画像がディスプレイ203の表示サイズよりも小さいサイズで通信動画像に重ねられている場合がある。このような場合に、重畳部14は、通信コンテンツが通信コンテンツ受信部11bによって受信されていない状態になると、放送動画像の表示サイズを、ディスプレイ203の表示サイズまで拡大し、通信コンテンツが通信コンテンツ受信部11bによって受信されている状態になると、放送動画像の表示サイズを、ディスプレイ203の表示サイズよりも小さいサイズに縮小してもよい。これにより、インターネット回線103を介した通信などの放送以外の通信の通信状況が変動する場合であっても、動画像をユーザに見やすく表示することができる。
 また、放送コンテンツ受信部11aによって放送コンテンツが受信されている際に、放送以外の通信の状況が、通信コンテンツが受信可能な受信可能状況から、受信不可能な受信不可状況になり、再び受信可能状況になるときがある。このとき、通信コンテンツ受信部11bは、再び受信可能状況になったとき以降に放送コンテンツ受信部11aによって受信される放送コンテンツの一部に関連する他の通信コンテンツを受信してもよい。この場合、重畳部14は、レイアウト情報20にしたがって、放送動画像と他の通信動画像とを重ねて出力する。これにより、放送以外の通信の状況が復旧した場合にも、レイアウト情報20にしたがった動画像の重畳を適切に再開することができる。
 (変形例1)
 ここで、本実施の形態における第1の変形例について説明する。本変形例に係る放送受信装置では、ユーザによる指示によってレイアウトを変更する点に特徴がある。
 図6は、本変形例に係るレイアウト情報を示す図である。
 本変形例に係るレイアウト情報20aは、第1のレイアウトと第2のレイアウトとを示す。例えば、第1のレイアウトは、放送コンテンツの放送動画像をメインの動画像とし、通信コンテンツの通信動画像をサブの動画像とするためのレイアウトである。逆に、第2のレイアウトは、放送コンテンツの放送動画像をサブの動画像とし、通信コンテンツの通信動画像をメインの動画像とするためのレイアウトである。
 図7は、本変形例に係る放送受信装置の構成を示す図である。
 本変形例に係る放送受信装置10Bは、放送受信装置10Aが備える構成要素を備えるとともに、さらに、レイアウトの指示を受け付ける指示受付部15を備える。重畳部14は、指示受付部15によって第1のレイアウトの指示が受け付けられた場合には、第1のレイアウトにしたがって、通信動画像を放送動画像に重ねて出力し、指示受付部15によって第2のレイアウトの指示が受け付けられた場合には、第2のレイアウトにしたがって、放送動画像を通信動画像に重ねて出力する。
 このように、本変形例に係る放送受信装置10Bでは、ユーザからのレイアウトの指示が受け付けられる場合には、レイアウト情報20aにより示される範囲でユーザがそのレイアウトを変更することができる。
 (変形例2)
 ここで、本実施の形態における第2の変形例について説明する。本変形例に係る放送受信装置では、放送コンテンツと通信コンテンツとを同期させる点に特徴がある。
 図8は、本変形例に係る放送受信装置の構成を示す図である。
 本変形例に係る放送受信装置10Cは、放送受信装置10Aが備える構成要素を備えるとともに、さらに、同期情報21を放送受信装置10Cの外部から取得する同期情報取得部16を備える。そして、重畳部14は、その同期情報21にしたがって、通信動画像と放送動画像とを重ねて出力することによって、通信動画像を放送動画像に同期させる。 
 このように、本変形例に係る放送受信装置10Cでは、通信動画像と放送動画像とを適切に重畳させた状態で同期させることができ、ユーザに対して見やすい映像を映し出すことができる。
 図9は、本変形例に係る同期情報21の一例を示す図である。
 同期情報21は、通信コンテンツ内の再生位置と、その再生位置のデータが再生される再生時刻とを関連付けて示すとともに、放送コンテンツのタイプを放送タイプとして示す。さらに、同期情報21は、静止画を特定するための静止画特定情報を含む。
 重畳部14は、同期情報21によって示される再生時刻に、通信動画像のうち、その再生時刻に関連付けて示される再生位置にあるピクチャと、放送動画像のピクチャとを重ねて出力する。これにより、通信動画像に含まれる複数のピクチャのうち、放送動画像のピクチャに対して適切なピクチャと、その放送動画像のピクチャとを重畳することができる。
 また、重畳部14は、放送タイプによって、放送コンテンツがライブ放送されるコンテンツであるか否かを判別し、ライブ放送されるコンテンツであると判別すると、放送動画像と通信動画像との重ね合わせを禁止する。
 ここで、通信(例えばインターネット回線103を介した通信)の状況が悪くなると、通信コンテンツの受信は遅れる。その結果、放送コンテンツと通信コンテンツとを同期させることができなくなる場合がある。したがって、通信状況による影響を受けた場合でもこれらのコンテンツを適切に同期させるためには、通信コンテンツの受信を、放送コンテンツの受信よりも早めに開始しておく必要がある。しかし、放送コンテンツがライブ放送される場合には、通信コンテンツの受信を、放送コンテンツの受信よりも早めに開始することができない。そこで、本変形例に係る放送受信装置10Cでは、放送コンテンツがライブ放送される場合には、放送動画像と通信動画像との重ね合わせを禁止することによって、例えば放送動画像のみをディスプレイに表示させることができ、非同期の動画像が表示されることによってユーザの視聴に負担がかかるのを防ぐことができる。
 また、重畳部14は、静止画特定情報によって特定される静止画と、放送動画像および通信動画像とを重ねて出力する。これにより、放送動画像および通信動画像に対して適切な静止画もそれらの動画像に重畳して表示させることができる。
 (変形例3)
 ここで、本実施の形態における第3の変形例について説明する。本変形例に係る放送受信装置では、通信の状況に応じた処理を行う点に特徴がある。
 図10は、本変形例に係る放送受信装置の構成を示す図である。
 本変形例に係る放送受信装置10Dは、放送受信装置10Aが備える構成要素を備えるとともに、さらに、放送以外の通信の状況を示す通信状況情報22を取得する通信状況取得部17を備える。
 本変形例に係る通信コンテンツ受信部11bは、放送コンテンツに関連する複数の通信コンテンツのうち、その通信状況情報22によって示される通信の状況に応じた品質を有する通信コンテンツを受信する。
 ここで、複数の通信コンテンツのそれぞれのビットレート、または、複数の通信コンテンツのそれぞれの解像度は互いに異なっている。そこで、通信コンテンツ受信部11bは、その複数の通信コンテンツのうち、通信状況情報22によって示される通信の状況に応じたビットレートまたは解像度を有する通信コンテンツを受信する。
 これにより、そのときの通信状況に応じて、適切な通信コンテンツを受信することができ、通信動画像をユーザに見やすく表示することができる。
 また、重畳部14は、通信状況情報22によって示される通信の状況である指標値が所定の値よりも低いまたは高い場合には、通信動画像を重ねることなく、放送動画像を出力してもよい。
 例えば、通信の状況である指標値は、使用可能なビットレートまたはパケットロスの頻度などであり、これらの指標値が所定の値よりも低いまたは高い場合には、通信コンテンツが通信コンテンツ受信部11bによって受信されない可能性が高まる。したがって、本変形例に係る放送受信装置10Dでは、上述のような場合には、通信動画像が重畳されないため、動画像の無理な重畳を防ぎ、ユーザの視聴にかかる負担を軽減することができる。
 (変形例4)
 ここで、本実施の形態における第4の変形例について説明する。本変形例に係る放送受信装置では、放送コンテンツの続き、または、放送コンテンツのユーザによって見逃された動画像を、通信コンテンツによって補う点に特徴がある。
 図11は、本変形例に係る放送受信装置の構成を示す図である。
 本変形例に係る放送受信装置10Eは、放送受信装置10Aが備える構成要素を備えるとともに、さらに、放送コンテンツの続きの動画像を示す他の通信コンテンツの所在を示す所在情報23を取得する所在情報取得部18を備える。
 本変形例に係る通信コンテンツ受信部11bは、放送コンテンツ受信部11aによる放送コンテンツの受信が終了すると、所在情報23によって示される所在から他の通信コンテンツを受信する。また、本変形例に係る重畳部14は、放送コンテンツ受信部11aによる放送コンテンツの受信が終了した後、他の通信コンテンツを出力する。
 これにより、ユーザは、放送コンテンツの続きを、通信コンテンツで視聴することができ、ユーザに対する利便性を向上することができる。
 ここで、所在情報取得部18は、放送動画像と同一の通信動画像を示す通信コンテンツの所在を示す所在情報23を取得してもよい。
 この場合、通信コンテンツ受信部11bは、放送コンテンツ受信部11aによる放送コンテンツの受信が開始された後に、ユーザからの操作を受け付けると、所在情報23によって示される所在から通信コンテンツを受信する。そして、重畳部14は、放送コンテンツの受信が開始されときに、放送動画像の出力を開始し、通信コンテンツの受信が開始されときに、レイアウト情報20にしたがって、放送動画像と、通信コンテンツの先頭から示される通信動画像とを重ねて出力する。
 これにより、ユーザは、放送コンテンツの最初の部分を見逃した場合でも、その後、通信コンテンツの先頭から、その見逃した部分を見ることができ、ユーザに対する利便性を向上することができる。
 また、重畳部14は、放送動画像と通信動画像とを重ねる代わりに、通信動画像がディスプレイ203の表示サイズ全体に表示されるように、通信動画像を拡大して、通信動画像を出力してもよい。これにより、見逃した部分をユーザに見やすく表示することができる。
 また、重畳部14は、放送動画像のうちの表示されている画像と、通信動画像のうちの表示されている画像とが等しくなるまで、早送り再生される通信コンテンツの通信動画像を出力してもよい。さらに、重畳部14は、放送動画像のうちの表示されている画像と、通信動画像のうちの表示されている画像とが等しくなると、通常再生される通信コンテンツの通信動画像を出力してもよい。
 これにより、見逃した部分が早送り再生されて表示され、通信コンテンツ内の再生位置が、放送コンテンツ内の再生位置に到達すると、通信コンテンツが通常再生され、通信動画像と放送動画像とが重ねて表示される。したがって、放送コンテンツの最初の部分を見逃した場合でも、その見逃した部分をユーザに表示することができるとともに、通信動画像と放送動画像とを同期させてユーザに表示することができる。
 なお、所在情報23は同期情報21に含まれていてもよい。
 (変形例5)
 ここで、本実施の形態における第5の変形例について説明する。本変形例に係る放送受信装置では、動画像の3D表示を行う点に特徴がある。
 本変形例では、放送動画像および通信動画像は、それぞれが互いに異なる目に視認されることによって立体視される、複数のピクチャからなる動画像である。
 この場合、本変形例に係る重畳部14は、放送動画像に含まれるピクチャである放送ピクチャと、通信動画像に含まれるピクチャであって、放送ピクチャと対になって立体視される通信ピクチャとをそれぞれ重ねることなく、単位時間内に連続して出力する。また、通信ピクチャが通信コンテンツ受信部11bによって受信されなかった場合には、重畳部14は、放送ピクチャを単位時間内に2回連続して出力する。
 図12Aは、重畳部14から出力されるピクチャを示す図である。
 この図12Aに示すように、重畳部14は、放送ピクチャと、放送ピクチャと対になって立体視される通信ピクチャとを単位時間内に連続して出力する。また、通信ピクチャが受信されなかった場合には、重畳部14は、放送ピクチャを単位時間内に2回連続して出力する。
 これにより、放送動画像と通信動画像とによって、動画像を3Dで表示することができる。さらに、通信コンテンツが受信されないような場合には、放送ピクチャが2回連続して出力されるため、動画像の表示を3D表示から2D表示に適切に切り替えることができる。その結果、不適切な動画像が表示されてしまうのを防ぐことができる。
 なお、本変形例に係る放送受信装置は、レイアウト情報取得部12および重畳部14を備えていなくてもよい。つまり、この放送受信装置は、レイアウト情報20にしたがって、第1および第2のプレーン13a,13bに保持されている放送ピクチャと通信ピクチャとを重ねて出力する機能を備えずに、少なくとも、それらのピクチャを用いた動画像の3D表示機能を備えていればよい。
 図12Bは、本変形例に係る放送受信装置の他の構成を示す図である。
 この放送受信装置10Fは、放送ピクチャと通信ピクチャとを重ねて出力する機能を持たない装置であって、放送コンテンツ受信部11aと、通信コンテンツ受信部11bと、第1および第2のプレーン13a,13bと、出力部14Fとを備える。
 具体的には、この放送受信装置10Fは、放送される放送コンテンツを受信する放送受信装置であって、放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信する通信コンテンツ受信部11bと、前記放送コンテンツを受信する放送コンテンツ受信部11aと、前記放送コンテンツによって示される動画像である放送動画像のピクチャ(放送ピクチャ)と、前記通信コンテンツによって示される動画像である通信動画像のピクチャ(通信ピクチャ)とを保持するための第1および第2のプレーン13a,13bと、前記第1および第2のプレーン13a,13bに保持されている放送ピクチャと通信ピクチャとを出力する出力部14Fとを備える。
 前記出力部14Fは、前記放送動画像および通信動画像が、それぞれが互いに異なる目に視認されることによって立体視される、複数のピクチャからなる動画像である場合には、前記放送動画像に含まれるピクチャである放送ピクチャと、前記通信動画像に含まれるピクチャであって、前記放送ピクチャと対になって立体視される通信ピクチャとを交互に連続して出力し、前記通信ピクチャが前記通信コンテンツ受信部11bによって受信されなかった場合には、前記放送ピクチャを2回連続して出力する。
 このような放送受信装置10Fであっても、通信コンテンツが受信されないような場合には、放送ピクチャが2回連続して出力されるため、動画像の表示を3D表示から2D表示に適切に切り替えることができる。その結果、不適切な動画像が表示されてしまうのを防ぐことができる。
 (実施の形態2)
 本実施の形態では、放送受信装置の詳細について説明する。
 図13は、本実施の形態における放送受信装置の内部構成を示すブロック図である。
 図13に示すように、放送受信装置104Aは、実施の形態1の放送受信装置10A~10Eの何れかに相当し、チューナ301、ネットワークインターフェース302、バッファ303、バッファ304、デマルチプレクサ305、デマルチプレクサ306、イメージメモリ307、イメージデコーダ308、ビデオデコーダ309、ビデオデコーダ310、オーディオデコーダ311、同期制御器312、イメージプレーン313、ビデオプレーン314、ビデオプレーン315、スピーカ316、加算器317、シナリオメモリ318、および制御部322を備える。シナリオメモリ318は、カレント番組情報319、画面レイアウト情報320および同期コンテンツ情報321を格納するためのメモリである。制御部322は、サービスマネージャ323、チューナライブラリ324、通信ライブラリ325、AV再生ライブラリ326、レンダリングライブラリ327、およびリモコンマネージャ328から構成される。
 チューナ301は、放送波を受信し、放送コンテンツに対するアクセスを実行する。これにより、チューナ301は放送コンテンツを受信する。
 ネットワークインターフェース302は、インターネット回線103に接続して通信コンテンツを受信する。
 バッファ303は、チューナ301によって受信された放送コンテンツを格納するためのメモリである。
 バッファ304は、ネットワークインターフェース302によって受信された通信コンテンツを格納するためのメモリである。
 デマルチプレクサ305は、チューナ301によって受信された放送コンテンツのうちのトランスポートストリームに対して多重分離を行い、放送番組に関する情報と、GOP(Group Of Picture)を構成するビデオフレームと、オーディオフレームと、静止画または字幕などのイメージデータとを得る。さらに、デマルチプレクサ305は、放送番組に関する情報をシナリオメモリ318に格納し、ビデオフレームをビデオデコーダ310に出力し、オーディオフレームをオーディオデコーダ311に出力する。さらに、デマルチプレクサ305は、イメージデータをイメージメモリ307に格納する。デマルチプレクサ305による多重分離は、TS(Transport Stream)パケットをPES(Packetized Elementary Stream)パケットに変換するという変換処理を含む。
 デマルチプレクサ306は、ネットワークインターフェース302を介して受信された通信コンテンツのうちのトランスポートストリームに対して多重分離を行い、GOPを構成するビデオフレームと、オーディオフレームと、静止画または字幕などのイメージデータとを得る。さらに、デマルチプレクサ306は、ビデオフレームをビデオデコーダ309に出力し、オーディオフレームをオーディオデコーダ311に出力し、静止画または字幕などのイメージデータをイメージメモリ307に格納する。デマルチプレクサ306による多重分離は、TSパケットをPESパケットに変換するという変換処理を含む。
 イメージメモリ307は、デマルチプレクサ305、デマルチプレクサ306またはバッファ304から読み出された静止画または字幕などのイメージデータを格納するためのバッファである。
 イメージデコーダ308は、イメージメモリ307に格納されたイメージデータをデコードし、復号されたイメージデータ(以下、イメージという)をイメージプレーン313に書き込む。イメージデータのデコードによって、静止画や字幕がディスプレイ203上に現れることになる。
 ビデオデコーダ309は、デマルチプレクサ306から出力されたビデオフレームを復号し、非圧縮形式のピクチャをビデオプレーン314に書き込む。
 ビデオデコーダ310は、デマルチプレクサ305から出力されたビデオフレームを復号し、非圧縮形式のピクチャをビデオプレーン315に書き込む。
 オーディオデコーダ311は、デマルチプレクサ305またはデマルチプレクサ306から出力されたオーディオフレームを復号し、非圧縮形式のオーディオデータを出力する。
 同期制御器312は、デマルチプレクサ305またはデマルチプレクサ306から出力された、復号再生処理の時刻管理のためのタイムスタンプを利用して、イメージ、ビデオ(ピクチャ)、およびオーディオデータが同期して出力されるように、イメージデコーダ308、ビデオデコーダ309、ビデオデコーダ310およびオーディオデコーダ311を制御する。
 イメージプレーン313は、非圧縮形式のイメージを格納しておくためのメモリである。
 ビデオプレーン314およびビデオプレーン315は、非圧縮形式のピクチャを格納しておくためのメモリである。
 スピーカ316は、非圧縮形式のオーディオデータである音声データを出力する。
 加算器317は、ビデオプレーン315に格納された非圧縮形式のピクチャに、ビデオプレーン314に格納された非圧縮形式のピクチャと、イメージプレーン313に格納されたイメージとを重ねて出力する。
 シナリオメモリ318は、カレント番組情報319、画面レイアウト情報320、および同期コンテンツ情報321を格納しておくためのメモリである。
 カレント番組情報319は、バッファ303に記録されている複数の番組情報のうち、現在再生中の番組に関するものである。
 画面レイアウト情報320は、実施の形態1のレイアウト情報20,20aに相当し、バッファ303またはバッファ304に格納されている画面レイアウト情報のうち、現在処理対象になっているものである。
 同期コンテンツ情報321は、実施の形態1の同期情報21に相当し、バッファ303またはバッファ304に格納されている同期コンテンツ情報のうち、現在処理対象になっているものをいう。
 制御部322は、ROM、RAM、およびCPUからなるマイコンシステムであり、ROMには放送受信装置104Aを制御するプログラムが記録されている。ROM内のプログラムがCPUに読み込まれ、プログラムとハードウェア資源とが協動することにより、サービスマネージャ323、チューナライブラリ324、通信ライブラリ325、AV再生ライブラリ326、レンダリングライブラリ327、およびリモコンマネージャ328の機能が実現される。 
 サービスマネージャ323は、シナリオメモリ318からカレント番組情報319を取得し、チューナライブラリ324を利用して周波数を含むチューニング情報を取得する。また、サービスマネージャ323は、シナリオメモリ318から画面レイアウト情報320および同期コンテンツ情報321を取得する。さらに、サービスマネージャ323は、通信ライブラリ325を利用して、通信コンテンツ(ストリームデータ等)をネットワークインターフェース302に取得させる。さらに、サービスマネージャ323は、AV再生ライブラリ326およびレンダリングライブラリ327を利用して、デマルチプレクサ305、デマルチプレクサ306、同期制御器312およびイメージプレーン313を制御することにより放送通信融合サービスを実行する。
 チューナライブラリ324は、チューナ301から周波数等のチューニング情報を取得する。
 通信ライブラリ325は、インターネット上に公開された放送追加コンテンツのダウンロードに用いられる。放送追加コンテンツとは、オリジナルの放送にないコンテンツで、例えば追加のアングル映像、副音声、字幕、特典映像、またはアプリケーションプログラムなどである。サービスマネージャ323は、通信ライブラリ325を制御することによって、インターネット上に公開されたその放送追加コンテンツをバッファ304やローカルストレージ等にダウンロードすることができる。
 AV再生ライブラリ326は、サービスマネージャ323からの関数呼び出しに応じて、AV再生機能を実行する。AV再生機能とは、再生開始、再生停止、一時停止、一時停止の解除、静止画機能の解除、再生速度を即値で指定した早送り、再生速度を即値で指定した巻戻し、音声切り替え、副映像切り替え、またはアングル切り替えといった処理である。
 レンダリングライブラリ327は、イメージデコーダ308を利用してイメージメモリ307に格納されたイメージデータをデコードしてイメージプレーン313に書き込む。また、レンダリングライブラリ327は、文字または図形等をイメージプレーン313に書き込んだりする。
 リモコンマネージャ328は、放送受信装置104Aと通信するリモコンからの入力信号をサービスマネージャ323に伝える。
 なお、本実施の形態における放送受信装置104Aで利用される画面レイアウト情報320または同期コンテンツ情報321は、インターネットを介して、つまりインターネット回線103を介して取得されてもよい。その場合、放送波の中に通信コンテンツの所在を示す情報を含ませておいてもよいし、放送局101のWebサイトにその情報を配置しておいてもよい。
 また、本実施の形態では、チューナ301、バッファ303、デマルチプレクサ305、およびビデオデコーダ310が実施の形態1の放送コンテンツ受信部11aに相当する。また、ネットワークインターフェース302、バッファ304、デマルチプレクサ306、およびビデオデコーダ309が実施の形態1の通信コンテンツ受信部11bに相当する。さらに、チューナ301およびバッファ303が実施の形態1のレイアウト情報取得部12、同期情報取得部16および所在情報取得部18に相当する。さらに、ビデオプレーン314,315がそれぞれ実施の形態1の第1および第2のプレーン13a,13bに相当し、同期制御器312および加算器317が実施の形態1の重畳部14に相当する。また、通信ライブラリ325が実施の形態1の通信状況取得部17に相当する。 
 図14は、番組一覧情報の一例を示す図である。
 番組一覧情報401は、バッファ303に格納されている上述の複数の番組情報から構成される。この番組一覧情報401は、表形式に構成されており、チャンネルの識別子、チャンネル名、およびプログラム番号を含んでいる。プログラム番号とは、MPEG2規格で規定されているPMT(Program Map Table)を識別するための番号である。
 また、バッファ303にはプログラムサービス情報も格納される。このプログラムサービス情報は、MPEG2規格で規定されているPAT(Program Association Table)402およびPMT(Program Map Table)403を有する。PAT402は、放送番組ごとに、プログラム番号とパケットIDを示し、パケットIDはPMT403を取得するために用いられる。PMT403は、PAT402で規定されたパケットIDのパケットに格納され送信されている。PMT403は、ストリーム種別、パケットID、および補足情報から構成されている。オーディオ、ビデオ、およびデータはそれぞれ、エレメンタリーストリームと呼ばれ、同一のパケットIDで送信される複数のパケットからなる。データの補足情報は、例えば、MPEG規格書ISO/IEC13818-6に記述されたDSMCCという方式を示す。ここではDSMCCの詳細な説明は省略する。DSMCC方式では、MPEG2トランスポートストリームのパケットの中に、コンピュータで使用されているディレクトリやファイルで構成されるファイルシステムをエンコードする方法が規定されている。
 図15は、画面レイアウト情報および同期コンテンツ情報の一例を示す図である。
 画面レイアウト情報320は、表示タイプごとに、放送コンテンツの位置(表示位置)およびサイズ(表示サイズ)と、その放送コンテンツと同期再生される通信コンテンツの位置(表示位置)およびサイズ(表示サイズ)とを示す。表示タイプはメインまたはサブである。放送コンテンツおよび通信コンテンツのうちの一方がメインとなり、放送コンテンツおよび通信コンテンツのうちの他方がサブとなる。例えば、メインは、動画像が大きく背面に表示されるコンテンツであり、サブは、動画像が小さく前面に表示されるコンテンツである。なお、本実施の形態では、放送コンテンツがメインとなり、通信コンテンツがサブとなる第1のレイアウトと、放送コンテンツがサブとなり、通信コンテンツがメインとなる第2のレイアウトとが、画面レイアウト情報320に示されているが、第1および第2のレイアウトのうちの一方だけが画面レイアウト情報320に示されていてもよい。また、本実施の形態における放送受信装置104Aは、第1および第2のレイアウトが示されている場合には、デフォルトで第1のレイアウトを選択してもよい。
 同期コンテンツ情報321は、通信コンテンツを識別するためのコンテンツID、その通信コンテンツの所在を示すURL、コーデックの種類、解像度、ビットレート、開始時刻、開始PTS(Program Time Stamp)、終了時刻、および終了PTSを示す。この同期コンテンツ情報321は例えば放送コンテンツに付随して放送される。したがって、コンテンツIDは、放送コンテンツと通信コンテンツとの紐付けを行う。放送受信装置104Aは、URLによって通信コンテンツの取得先を特定し、コーデックの種類、解像度、およびビットレートによって通信コンテンツの属性を把握する。さらに、放送受信装置104Aは、開始時刻、開始PTS、終了時刻、および終了PTSによって、通信コンテンツの再生期間および再生時刻と、通信コンテンツを構成するストリーム内のデータの位置との関係を把握する。画面レイアウト情報320または同期コンテンツ情報321は、放送波に重畳(例えば、DSMCCのファイルシステム内への埋め込み)されていてもよいし、サーバ102に配置されていてもよい。これらの情報がサーバ102に配置される場合には、そのサーバ102へリンクするためのリンク情報のみを放送波に重畳しておいてもよい。画面レイアウト情報320によって示される位置の座標系は、絶対座標系に限らず、相対座標系であってもよい。同期コンテンツ情報321は、複数のコーデックの種類、複数の解像度、複数のビットレートを示していてもよい。つまり、同期コンテンツ情報321は、通信コンテンツごとに、コンテンツID、URL、およびコーデックの種類などを示していてもよい。
 図16は、放送受信装置104Aが放送コンテンツと通信コンテンツとを同期させて再生する処理を示すフローチャートである。
 まず、ある放送番組である放送コンテンツがユーザに視聴されているときに、ユーザによるリモコン操作によって、放送受信装置104Aは、放送コンテンツと通信コンテンツとの同期再生の要求を受け付ける(ステップS601)。これにより、リモコンマネージャ328は、サービスマネージャ323へ、同期再生の要求を示すリモコンキー情報を送る。サービスマネージャ323は、そのリモコンキー情報を受けると、通信ライブラリ325を利用して通信コンテンツの取得、つまり通信コンテンツ取得処理を開始する(ステップS602)。通信コンテンツ取得処理に関する詳細は後述する。
 放送コンテンツと通信コンテンツとの同期再生に十分なデータ量の通信コンテンツが取得されると、サービスマネージャ323は、AV再生ライブラリ326に対して、画面レイアウト情報320によって示される通信コンテンツの表示サイズを指定し、通信コンテンツの再生を要求する。AV再生ライブラリ326は、同期制御器312を利用して、放送コンテンツに含まれるタイムスタンプ(PTS)と通信コンテンツに含まれるタイムスタンプ(PTS)を整合させ、夫々のコンテンツに含まれるピクチャをビデオプレーン314,315のそれぞれに書き込ませ、それらのピクチャを重畳して出力させる(ステップS603)。このようにして、放送コンテンツと通信コンテンツの同期再生が開始される。
 放送コンテンツと通信コンテンツの同期再生が開始されると、サービスマネージャ323は、現時点が、放送コンテンツである放送番組の終了時刻かどうか監視する(ステップS604)。ステップS604で、現時点が放送コンテンツの終了時刻でないと判別されると(ステップS604のNo)、サービスマネージャ323は、ユーザによってチャンネルの切り替え(選局)が行われたかを監視する(ステップS605)。ステップS605で、切り替えが行われていないと判別されると(ステップS605No)サービスマネージャ323は、さらに、画面レイアウト情報320および同期コンテンツ情報321のうちの少なくとも1つが更新されたかどうかを確認する(ステップS606)。ステップS606で、画面レイアウト情報320および同期コンテンツ情報321が更新されていないと判別されると(ステップS606のNo)、サービスマネージャ323は、放送コンテンツと通信コンテンツのそれぞれのビデオデータが同期再生するのに十分存在しているかどうかを確認する(ステップS607)。ステップS607で、放送コンテンツと通信コンテンツのそれぞれのビデオデータが同期再生するのに十分存在していると判別されると(ステップS607のYes)、サービスマネージャ323は、ステップS604から処理を繰り返す。
 一方、ステップS606で、画面レイアウト情報320および同期コンテンツ情報321のうちの少なくとも1つが更新されていると判別されると(ステップS606のYes)、または、ステップS607で、放送コンテンツと通信コンテンツのそれぞれのビデオデータが同期再生するのに十分存在していないと判別されると(ステップS607のNo)、サービスマネージャ323は、通信コンテンツと同期再生されていた放送コンテンツの番組情報をメモリに保持する(ステップS608)。さらに、サービスマネージャ323は、その後、通信状況が正常かどうかを確認する(ステップS609)。ステップS609で、通信状況が正常であると判別されると(ステップS609のYes)、サービスマネージャ323は、ステップS602の通信コンテンツ取得処理を行い、ステップS604から処理を繰り返す。一方、ステップS609で、通信状況が異常であると判別されると、サービスマネージャ323は、ただちに放送コンテンツと通信コンテンツの同期再生を停止する(ステップS610)。あるいは、サービスマネージャ323は、一旦、通信コンテンツがビデオプレーン314から出力されないようにしておき、通信状況が正常に復旧した場合に、再度通信コンテンツを取得して、通信コンテンツがビデオプレーン314から出力されるようにしてもよい。
 なお、ステップS602において取得される通信コンテンツと、ステップS603で受信される放送コンテンツとのうち、何れか一方のコンテンツにのみオーディオフレームまたはイメージデータが存在する場合は、放送受信装置104Aは、そのオーディオフレームまたはイメージデータを復号して出力する。放送コンテンツと通信コンテンツの両方にオーディオデータまたはイメージデータが存在する場合は、放送受信装置104Aは、ステップS603における同期再生時に、何れか一方のコンテンツを処理対象コンテンツとして認識する。そして、放送受信装置104Aは、その処理対象コンテンツに含まれるオーディオフレームまたはイメージデータを復号して出力する。例えば、放送受信装置104Aは、予め設定されている内容(例えば、言語など)に基づいて、その内容に応じたコンテンツを処理対象コンテンツとして認識する。または、放送受信装置104Aは、同期再生に連動してイメージを出力するか否かを示す制御情報に基づいて、処理対象コンテンツを認識してもよく、処理対象コンテンツが何れのコンテンツであるかを示す情報に基づいて、処理対象コンテンツを認識してもよい。または、放送受信装置104Aは、通信コンテンツおよび放送コンテンツのそれぞれによって示される動画像の表示サイズに応じて、処理対象コンテンツを認識してもよい。
 また、ステップS604で、現時点が放送コンテンツの終了時刻であると判別されると(ステップS604のYes)、または、ステップS609で、通信状況が異常であると判別されると(ステップS609のNo)、サービスマネージャ323は、通信コンテンツの再生を停止する(ステップS610)。
 また、図16に示すフローチャートでは、チャンネルが切り替えられたときや、放送コンテンツが終了したときに、TV104の放送受信装置104Aは自動的に通信コンテンツを停止する。しかし、このようなときでも、TV104は、別の放送番組である放送コンテンツが引き続き再生され、その別の放送番組に対応する通信コンテンツが存在する場合には、放送コンテンツと通信コンテンツの同期再生を継続してもよい。通信コンテンツの視聴に課金のための認証等が必要になる場合は、一旦通信コンテンツの再生を停止して、ユーザ認証完了後に通信コンテンツの再生を行ってもよい。
 図17は、図16におけるステップS602の通信コンテンツ取得処理の詳細を示すフローチャートである。
 まず、TV104の放送受信装置104Aは、放送波に重畳された同期コンテンツ情報321を取得し(ステップS701)、さらに、画面レイアウト情報320を取得する(ステップS702)。次に、放送受信装置104Aは、現在、放送コンテンツと通信コンテンツとが同期再生されているかどうかを確認する(ステップS703)。ステップS703で、放送コンテンツと通信コンテンツとが同期再生されていないと判別されると(ステップS703のNo)、放送受信装置104Aは、TV104のディスプレイ203の解像度および表示サイズなどを示す表示画面情報を取得する(ステップS704)。ここで、ステップS701で取得された同期コンテンツ情報321には、複数の通信コンテンツのそれぞれに対して、ビットレートなどのビデオ情報が示されている。そこで、放送受信装置104Aは、ステップS701で取得された同期コンテンツ情報321、ステップS702で取得された画面レイアウト情報320、およびステップS704で取得された表示画面情報に基づいて、最も適切な通信コンテンツを取得する(ステップS705)。例えば、放送受信装置104Aは、ディスプレイ203の表示サイズに合わせた、同期コンテンツ情報321に記載の必要最低限の品位(ビデオ情報)を持つ通信コンテンツを取得する。一方、ステップS703で、放送コンテンツと通信コンテンツとが同期再生されていると判別されると(ステップS703のYes)、放送受信装置104Aは、同期コンテンツ情報321に記載の高品位の通信コンテンツを取得する(ステップS705)。ただし、放送受信装置104Aは、負荷や通信状況に応じて、ステップS705で取得される通信コンテンツの品位を変更してもよい。
 これにより、ユーザの指示により放送コンテンツと通信コンテンツとの同期再生が要求されてから開始するまでの時間を短くできることができる。また、放送コンテンツと通信コンテンツの同期再生中に通信コンテンツをフルスクリーン表示した場合でもユーザに高品位な表示を提示することができる。放送コンテンツの状態に合わせて通信コンテンツのリソースを自動的に回収することで別のサービスにリソースを割り当てることができる。通信コンテンツに異常が発生した場合に、ユーザに対して不適切な画像が提示されてしまうことを防ぐことができる。また、本実施の形態においても、実施の形態1と同様の効果を奏することができる。
 (変形例1)
 ここで、本実施の形態における第1の変形例について説明する。
 本変形例に係る同期コンテンツ情報321には、通信コンテンツと同期再生される放送コンテンツの放送タイプが示されている。本変形例に係る放送受信装置104Aは、その同期コンテンツ情報321を取得すると、その放送タイプに応じた再生処理を行う。
 図18は、本変形例に係る同期コンテンツ情報321の一例を示す図である。
 この同期コンテンツ情報321は、通信コンテンツのコンテンツIDおよびURLなどを示すとともに、さらに、その通信コンテンツと同期再生される放送コンテンツの放送タイプ801を示す。具体的には、この放送タイプ801は、ライブ放送(ライブ)またはオンデマンド放送(録画)である。
 図19は、本変形例に係る放送受信装置104Aによる放送タイプ801を用いた再生処理を示すフローチャートである。
 放送受信装置104Aは、まず、同期再生の予約の要求を受け付ける(ステップS901)。つまり、ユーザは、番組情報等を参考にTV104を操作し、放送コンテンツと通信コンテンツの自動開始予約を行う。放送受信装置104Aは、同期コンテンツ情報321の放送タイプ801がライブ放送であるかどうかを確認する(ステップS902)。ここで、ステップS902で、放送タイプ801がライブ放送でないと判別されると(ステップS902のNo)、放送受信装置104Aは、上述のステップS602の通信コンテンツ取得処理を行う。このとき、放送コンテンツの放送が開始される時刻まで十分に時間がある場合には、放送受信装置104Aは、高品位(高画質)の通信コンテンツを取得しておいてもよい。
 放送受信装置104Aは、同期再生に十分なデータ量の通信コンテンツが取得された後、その放送コンテンツである放送番組の放送が開始されるかどうかを監視する(ステップS903)。ステップS903で、放送番組の放送が開始されると判別されると(ステップS903のYes)、放送受信装置104Aは、上述のステップS603の同期再生、つまり、放送コンテンツと通信コンテンツとの同期再生を開始する。一方、ステップS903で、放送番組の放送が開始されないと判別されると(ステップS603のNo)、放送受信装置104Aは、その放送番組の放送が開始されるまで待機する。
 これにより、放送コンテンツのタイプに応じて事前に通信コンテンツのデータを取得することにより、放送コンテンツの放送開始と同時に、放送コンテンツを通信コンテンツと同期させて再生することが可能になる。
 なお、放送受信装置104Aは、放送コンテンツと通信コンテンツとを同期させて再生することによって、これらのコンテンツを3D画像として再生してもよい。なお、このような再生を3D再生または3D表示ともいう。例えば、TV104の出力デバイスが3D対応の場合、放送受信装置104Aは、放送コンテンツを右目用のデータとして出力し、通信コンテンツを左目用のデータとして出力することによって3D再生する。その場合、同期コンテンツ情報321は、その同期コンテンツ情報321に対応する放送コンテンツと通信コンテンツとが3D再生用のコンテンツであることを示す。これにより、放送受信装置104Aは、3D再生用の出力設定(右目用データと左目用データを交互に出力する設定)を事前に行うことができる。
 また、3D再生する場合に、通信異常によって通信コンテンツのデータを受信することができなかった場合には、3D再生用の出力設定で表示される画像がユーザに違和感を感じさせる可能性があるため、放送受信装置104Aは、ビデオプレーンに書き込まれた放送コンテンツを2度出力する。これにより、表示される画像は2D画像として視認されるが、違和感を緩和することが可能となる。このような場合、放送受信装置104Aは、ユーザに対して事前に、通信異常によって2D画像に切り替わることを通知してもよい。これにより、ユーザは、2D画像への切り替えが行われることを容易に理解することができる。通信状況が異常から正常に戻れば、放送受信装置104Aは通信コンテンツの再生を再開する。つまり、放送受信装置104Aは、一方のビデオプレーンに書き込まれた放送コンテンツと、他方のビデオプレーンに書き込まれた通信コンテンツとを交互出力することによって、上述の3D再生を行う。また、通信異常等によって、通信コンテンツを受信することができず、3D再生が途中で途切れた場合には、放送受信装置104Aは、途切れた時刻を保持しておく。そして、放送受信装置104Aは、通信コンテンツを受信することができるようになった際に、ユーザが見逃した画像である、その時刻に対応する画像から、3D再生を再開してもよい。
 また、ユーザが放送開始時刻を過ぎてからTV104の電源を入れ、放送コンテンツの冒頭部分を見逃してしまうことや、放送途中で席を立ち、一定時間、放送コンテンツを見逃してしまう場合がある。その様な場合、TV104の放送受信装置104Aは、その放送コンテンツと同一の内容を示す通信コンテンツを取得して再生してもよい。これにより、放送受信装置104Aを見逃し再生の代替手段としても利用することが可能である。冒頭部分を見逃してしまった場合、放送受信装置104Aは、その冒頭部分である放送開始位置に対応する通信コンテンツを取得して再生する。コンテンツの種類に応じては、通常再生(1倍速再生)で視聴する必要は無いため、音声も聞き取れるくらいの速度である早見再生で、その通信コンテンツを視聴することも可能である。
 通信コンテンツの再生位置が、早見再生中に放送コンテンツの再生位置に追いついた場合には、放送受信装置104Aは、通信コンテンツの再生を放送コンテンツの再生に切り替えるか、通信コンテンツの再生速度を自動的に通常再生の速度に戻す。また、ユーザは放送途中で席を立つ場合、リモコン操作等により、一時、放送コンテンツを視聴できないことをTV104に通知する。このとき、TV104の放送受信装置104Aはその通知を受けた時刻を保持する。そして、ユーザは席へ戻ると、リモコン操作等によって再度視聴したいことをTV104に通知する。これにより、TV104の放送受信装置104Aは、通信を利用して、保持している時刻に対応する通信コンテンツを取得し、前述同様に、早見再生を行ってもよい。また、放送受信装置104Aは、放送コンテンツの特定のシーンを検索して表示したり、シーンの一部を拡大してもよい。
 なお、放送受信装置104Aは、放送コンテンツと通信コンテンツとを連携するリレー中継を行ってもよい。例えば、ユーザが放送で野球のナイター中継のようなライブ中継を視聴している最中に、野球の試合自体は継続中だが放送が終了する場合がある。その様な場合に、放送受信装置104Aは、放送(放送コンテンツ)の続きとして通信コンテンツを取得して再生する。また、放送受信装置104Aは、放送コンテンツの大きい動画像の前面に、通信コンテンツの小さい動画像を重ねて出力している際に、放送が終了すると、その通信コンテンツの表示サイズを全画面に変更して、放送の続きとしてその通信コンテンツを継続して再生してもよい。
 (変形例2)
 ここで、本実施の形態における第2の変形例について説明する。
 本変形例に係る放送受信装置は、ユーザによる操作に応じて、重畳される放送コンテンツと通信コンテンツのレイアウトを変更する。つまり、放送受信装置は、画面レイアウト情報320とユーザによる操作とに応じて、放送コンテンツと通信コンテンツの配置を入れ替えて表示する。例えば、野球中継では、センターバックスクリーンから撮影した映像を示す放送コンテンツが放送され、ユーザの好きな野手のみをクローズアップした映像を示す通信コンテンツがサーバ102にアップロードされる。この場合、ユーザは、放送コンテンツではなく、通信コンテンツをメインとしてフルスクリーンで表示させ、放送コンテンツをサブとして子画面で表示させて、それぞれのコンテンツを視聴したいと考える。そこで、ユーザは例えばリモコンを介して放送受信装置を操作して放送コンテンツと通信コンテンツの配置を入れ替える。つまり、ユーザは、希望どおり、通信コンテンツの動画像を大きく背面に表示させ、放送コンテンツの動画像を小さく前面に表示させることができる。
 図20は、本変形例に係る放送受信装置の内部構成を示すブロック図である。
 本変形例に係る放送受信装置104Bは、図20に示すように、上記実施の形態2における放送受信装置104Aの全ての構成要素を備えるとともに、さらに、デコード切替器1001と重畳切替器1002とを備える。
 デコード切替器1001は、イメージデコーダ308およびオーディオデコーダ311を制御する。これにより、デコード切替器1001は、放送コンテンツに含まれるイメージデータおよびオーディオフレームのデコードと、通信コンテンツに含まれるイメージデータおよびオーディオフレームのデコードとを切り替える。重畳切替器1002は、画面レイアウト情報320とユーザによる操作とに応じて、各プレーンに保持されているピクチャおよびイメージの重畳順を切り替える。なお、本実施の形態では、リモコンマネージャ328が実施の形態1の指示受付部15に相当する。
 図21は、本変形例に係る放送受信装置104Bによるレイアウトの変更、つまり重畳順の切り替えの一例を示すフローチャートである。
 本変形例に係る放送受信装置104Bは、ユーザによる指示により、画面切替要求を受け付ける(ステップS1101)。なお、この画面切替要求は、放送コンテンツと通信コンテンツに対するメインとサブの割り当てを切り替える要求である。さらに、放送受信装置104Bは、デコード対象となるイメージデータおよびオーディオフレームも合わせて切り替える必要があるかどうかを確認する(ステップS1102)。ステップS1102で、イメージデータやオーディオフレームも合わせて切り替える必要があると判別されると(ステップS1102のYes)、放送受信装置104Bは、放送コンテンツおよび放送コンテンツのうちの一方のコンテンツに含まれる、現在、デコードされて出力されているイメージデータやオーディオフレームのデコードおよび出力を停止する(ステップS1103)。そして、AV再生ライブラリ326は、デコード切替器1001に対して、他方のコンテンツに含まれる、デコードされていなかったイメージデータおよびオーディオフレームを、デコードするように要求する(ステップS1104)。これにより、デコード対象のイメージデータおよびオーディオフレームが切り替えられる。
 次に、放送受信装置104Bは、切り替えられたデコード対象のイメージデータおよびオーディオフレームのデコードおよび出力を開始する(ステップS1105)。そして、放送受信装置104Bは、一方のビデオプレーンに書き込まれている放送コンテンツのピクチャと、他方のビデオプレーンに書き込まれている通信コンテンツのピクチャとの重畳順を入れ替える(ステップS1106)。
 これにより、ユーザは、メインとサブを入れ替えることによって、通信コンテンツをメインとして視聴し、かつ、放送コンテンツをサブとして一緒に視聴することができるだけでなく、ビデオ表示をシームレスに切り替えることが可能になる。
 ただし、放送と比べて通信は途切れる可能性が高く不安定であるため、通信コンテンツをフルスクリーンで表示中に通信コンテンツが欠落する場合がある。そのような場合、放送受信装置104Bは、ユーザに対して状況を提示して放送コンテンツをフルスクリーン表示してもよい。その後、通信コンテンツが確保されると、放送受信装置104Bは放送コンテンツの表示サイズを自動的にもとの状態に戻してもよい。
 なお、本変形例では、重畳切替器1002が上述の加算器317を利用して重畳順を入れ替えたが、放送コンテンツと通信コンテンツが書き込まれるビデオプレーンを入れ替えることにより、メインとサブを入れ替えてもよい。
 (変形例3)
 ここで、本実施の形態における第3の変形例について説明する。
 本変形例に係る同期コンテンツ情報321には、通信コンテンツと連動して表示される連動データに関する情報が示されている。本変形例に係る放送受信装置104Aは、その同期コンテンツ情報321を取得すると、その連動データに関する情報に応じた再生処理を行う。
 図22は、本変形例に係る同期コンテンツ情報321の一例を示す図である。
 この同期コンテンツ情報321は、通信コンテンツのコンテンツIDおよびURLなどを示すとともに、さらに、その通信コンテンツと連動して表示される連動データに関する情報1201を示す。具体的には、この情報1201は、指定された時刻に自動的にイメージデータなどの連動データを通信コンテンツに連動させて再生または出力することを可能にするための情報である。放送受信装置104Aは、その情報1201に示される時刻に、その情報1201に示される名称の連動データを、放送またはインターネット回線103を介して取得して再生または出力する。なお、連動データは、静止画、字幕、または効果音等であり、例えば、通信コンテンツのビデオデータとフレーム単位で同期させて再生される。
 (変形例4)
 本変形例に係る放送受信装置104Aは、放送コンテンツの上に単一の通信コンテンツを重畳して表示するだけでなく、複数の通信コンテンツを重畳して表示する。例えば、野球中継では、センターバックスクリーンから撮影した映像を示す放送コンテンツが放送され、ピッチャー、キャッチャー、野手、およびチアガールをそれぞれ撮影した映像を示す通信コンテンツがサーバ102にアップロードされる。サーバ102は、それらのアップロードされた通信コンテンツを1つの通信コンテンツに編集して配信する。この場合、放送受信装置104Aは、放送コンテンツをメインとして設定し、その放送コンテンツの動画像をフルスクリーンサイズで表示する。さらに、放送受信装置104Aは、通信コンテンツをサブとして設定し、その通信コンテンツの動画像であって、ピッチャー、キャッチャー、野手、およびチアガールが映し出された動画像を小さい表示サイズで表示する。
 図23は、本変形例に係る放送受信装置104Aによって表示されるPiP画像の一例を示す図である。
 例えば、放送コンテンツと通信コンテンツの同期再生によって野球中継のマルチアングル視聴が実現される。放送受信装置104Aは、放送局101から放送される放送コンテンツ201と、サーバ102からインターネット回線103を介して配信される通信コンテンツ1301とを受信する。そして、放送受信装置104Aは、放送コンテンツ201の放送動画像と通信コンテンツ1301の通信動画像とを重畳してディスプレイ203に出力している。放送コンテンツは、バッター側のアングルから撮影された動画像である放送動画像を示し、通信コンテンツは、ピッチャー、キャッチャー、野手、およびチアガールが映し出された動画像である放送動画像を示す。このように、放送コンテンツのみでは表現しきれない要素を通信コンテンツで補うことで、視聴者により一層臨場感を伝えることが可能となる。
 図24は、本変形例に係る同期コンテンツ情報321の一例を示す図である。
 本変形例に係る同期コンテンツ情報321は、上記実施の形態2の図15に示す同期コンテンツ情報に含まれる内容を示すとともに、さらに、データタイプ1401、画面数1402、およびビデオ領域1403を示す。
 データタイプ1401は、その同期コンテンツ情報321に対応する通信コンテンツの種別である。具体的には、データタイプ1401は、複数のビデオストリームを1つに編集することによって生成されて放送コンテンツに重畳される通信コンテンツのタイプ(このタイプを例えばサムネイル表示という)、単一のビデオストリームからなり放送コンテンツに重畳される通信コンテンツのタイプ(このタイプを例えばアングル表示という)、および放送コンテンツと共に3D表示される通信コンテンツのタイプ(このタイプを3D表示という)等のうちの1つである。画面数1402は、サムネイル表示の通信コンテンツに含まれるビデオストリームの数である。ビデオ領域1403は、サムネイル表示の通信コンテンツに含まれるビデオストリームの表示領域である。
 このように本変形例では、通信コンテンツのタイプ(データタイプ1401)がサムネイル表示の場合には、1つの通信コンテンツに複数のビデオストリームが含まれているため、通信コンテンツ用にビデオデコーダおよびビデオプレーンが1つだけしかなくても、通信を介して得られる複数のビデオストリームの画像を同時に表示することができる。ただし、放送受信装置104Aが、通信コンテンツ用にビデオデコーダおよびビデオプレーン等のリソースを複数個備えている場合には、複数の通信コンテンツを取得してそれらの通信コンテンツを個々にデコードすることで同様の効果を得ることができる。あるいは、サイマル放送を利用し、放送コンテンツと通信コンテンツのそれぞれから複数のビデオストリームを取得してそれらのビデオストリームを個々にデコードすることで同様の効果を得てもよい。
 (変形例5)
 ここで、本実施の形態における第5の変形例について説明する。
 本変形例に係る放送受信装置は、画面レイアウト情報320および同期コンテンツ情報321だけでなく、アプリケーションプログラム(以下、アプリケーションという)も取得する。つまり、本変形例に係る放送受信装置は、そのアプリケーションに応じて、放送コンテンツと通信コンテンツの同期再生を行なう。これにより、本変形例に係る放送受信装置では、アプリケーションを配信した放送事業者や通信事業者が通信異常時等に対する処理を設定することができる。
 図25は、本変形例に係る放送受信装置の内部構成を示すブロック図である。
 本変形例に係る放送受信装置104Cは、図25に示すように、上記実施の形態2における放送受信装置104Aの全ての構成要素を備えるとともに、さらに、アプリマネージャ1501を備える。アプリマネージャ1501は、DSMCCで放送波に埋め込まれたアプリケーション1502の起動および終了を管理する。あるいは、アプリマネージャ1501は、放送波に埋め込まれたアプリケーション1502の所在情報を利用して、通信を介してそのアプリケーション1502を取得し、そのアプリケーション1502の起動および終了を管理する。ここで、取得されたアプリケーション1502はシナリオメモリ318に格納され、アプリマネージャ1501は制御部322に備えられる。そして、アプリマネージャ1501は、シナリオメモリ318に格納されているアプリケーション1502を読み出して起動および終了する。
 なお、アプリケーション1502の言語は、どのような言語であってもよい。つまり、アプリケーション1502は、Java(登録商標)言語で記述されたものでも、HTML言語で記述されたものでも、BML言語で記述されたものであってもよい。放送受信装置104Cのサービスマネージャ323は、アプリケーション1502に対して、通信異常の通知をしたり、あるいは、画面レイアウト情報320または同期コンテンツ情報321の更新等を通知したりする。また、放送受信装置104Cのサービスマネージャ323は、アプリケーション1502に対して、放送コンテンツと通信コンテンツの同期再生を指示したり、指定されたビットレートや解像度の通信コンテンツの取得を指示したり、画面レイアウト情報320または同期コンテンツ情報321の取得を指示したり、表示画面情報の取得を指示したり、放送コンテンツと通信コンテンツの入れ替えを指示したり、表示/非表示の切替機能等を提示したりしてもよい。
 なお、一つまたは複数の態様にかかる放送受信装置について、上記の実施の形態およびその変形例に基づいて説明してきたが、本発明は、これらの実施の形態およびその変形例に限定されないのはもちろんである。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、一つまたは複数の態様の範囲内に含まれてもよい。
 本発明は、コンピュータを動作させるプログラムコードを含むコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。つまり、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPUまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
 ここで、上記各実施の形態の放送受信装置を実現するソフトウェアは、次のようなプログラムである。すなわち、このプログラムは、放送される放送コンテンツを受信するためのプログラムであって、放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信し、前記放送コンテンツを受信し、前記放送コンテンツによって示される動画像である放送動画像のピクチャと、前記通信コンテンツによって示される動画像である通信動画像のピクチャとをプレーンに保持させ、前記放送動画像および前記通信動画像のレイアウトを示すレイアウト情報を、前記放送受信装置の外部から取得し、前記レイアウト情報にしたがって、ピクチャごとに、前記プレーンに保持されている前記放送動画像のピクチャと前記通信動画像のピクチャとを重ねて出力することを、コンピュータに実行させる。
 また、本発明は、前記コンピュータプログラム又は前記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc)、半導体メモリなど、に記録したものとしてもよい。
 また、本発明は、前記コンピュータプログラム又は前記デジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク等を経由して伝送するものとしてもよい。
 また、前記コンピュータプログラム又は前記デジタル信号を前記記録媒体に記録して移送することにより、又は前記コンピュータプログラム又は前記デジタル信号を前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
 本発明は、上記実施の形態に記載の装置を制御するLSIとしても実施可能である。機能ブロックは、個別に1チップ化されてもよいし、一部または全てを含むように1チップ化されてもよい。
 ここでは、LSIとしたが、集積度の違いにより、IC、システムLSI、スーパーLSI、ウルトラLSIと呼称されることもある。
 また、集積回路化の手法はLSIに限るものではなく、専用回路または、汎用プロセッサで実現してもよい。LSI製造後にプログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。
 さらには、半導体技術の進歩または派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロック及び部材の集積化を行ってもよい。このような技術には、バイオ技術の適用等が可能性としてありえる。
 保存データの移行対象たる読み書き可能な記録媒体として、上記各実施の形態では、記録媒体(例えばHDDやSDカードやコンパクトフラッシュ(登録商標)などの半導体メモリ)を用いたが、本発明の特徴は、記録媒体の物理的特性に依存するものではなく、本発明は、他の読み書き可能な記録媒体にも適用できる。例えば、外付けハードディスクなどにデータが記録された場合においても上述と同様の効果を奏することはもちろんのことである。
 上記各実施の形態では、放送コンテンツと通信コンテンツとを融合して再生する再生機能を有する装置について説明したが、本発明は、再生機能のみを有するものではなく記録機能をも有する装置にも適用できることはもちろんのことである。また、上記各実施の形態及び上記各変形例をそれぞれ組み合わせるとしてもよい。
 本発明に係る放送受信装置は、放送コンテンツと通信コンテンツとのレイアウトを変更することができるという効果を奏し、例えば、テレビ受像機、再生装置またはモバイル機器などに適用することができる。
 10A~10F  放送受信装置
 11a  放送コンテンツ受信部 
 11b  通信コンテンツ受信部
 12  レイアウト情報取得部
 13a  第1のプレーン
 13b  第2のプレーン
 14  重畳部
 14F  出力部
 15  指示受付部
 16  同期情報取得部
 17  通信状況取得部
 18  所在情報取得部
 20,20a  レイアウト情報
 21  同期情報
 101  放送局
 102  サーバ
 103  インターネット回線
 104  TV
 104A~104C  放送受信装置
 201  放送コンテンツ
 202  通信コンテンツ
 203  ディスプレイ
 301  チューナ
 302  ネットワークインターフェース
 303  バッファ
 304  バッファ
 305  デマルチプレクサ
 306  デマルチプレクサ
 307  イメージメモリ
 308  イメージデコーダ
 309  ビデオデコーダ
 310  ビデオデコーダ
 311  オーディオデコーダ
 312  同期制御器
 313  イメージプレーン
 314  ビデオプレーン
 315  ビデオプレーン
 316  スピーカ
 317  加算器
 318  シナリオメモリ
 319  カレント番組情報
 320  画面レイアウト情報
 321  同期コンテンツ情報
 322  制御部
 323  サービスマネージャ
 324  チューナライブラリ
 325  通信ライブラリ
 326  AV再生ライブラリ
 327  レンダリングライブラリ
 328  リモコンマネージャ
 401  番組一覧情報
 402  PAT
 403  PMT 
 801  放送タイプ
 1001  デコード切替器
 1002  重畳切替器
 1201  連動データに関する情報
 1301  通信コンテンツ
 1401  データタイプ
 1402  画面数
 1403  ビデオ領域
 1501  アプリマネージャ 

Claims (21)

  1.  放送される放送コンテンツを受信する放送受信装置であって、
     放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信する通信コンテンツ受信部と、
     前記放送コンテンツを受信する放送コンテンツ受信部と、
     前記放送コンテンツによって示される動画像である放送動画像のピクチャと、前記通信コンテンツによって示される動画像である通信動画像のピクチャとを保持するためのプレーンと、
     前記放送動画像および前記通信動画像のレイアウトを示すレイアウト情報を、前記放送受信装置の外部から取得するレイアウト情報取得部と、
     前記レイアウト情報にしたがって、ピクチャごとに、前記プレーンに保持されている前記放送動画像のピクチャと前記通信動画像のピクチャとを重ねて出力する重畳部と
     を備える放送受信装置。
  2.  前記レイアウト情報は、
     前記放送動画像および前記通信動画像のうちの一方の動画像が、他方の動画像よりも小さく、当該他方の動画像の上に重ねられる場合には、前記他方の動画像のうちの特徴部分を除く位置に前記一方の動画像が重ねられるように、前記放送動画像の表示サイズおよび表示位置と、前記通信動画像の表示サイズおよび表示位置とを示し、
     前記重畳部は、
     前記レイアウト情報によって示される、前記放送動画像および前記通信動画像のそれぞれの表示サイズで、前記レイアウト情報によって示される、前記放送動画像および前記通信動画像のそれぞれの表示位置に、前記放送動画像および前記放送動画像を配置する
     請求項1に記載の放送受信装置。
  3.  前記レイアウト情報は、第1のレイアウトと第2のレイアウトとを示し、
     前記放送受信装置は、さらに、
     レイアウトの指示を受け付ける指示受付部を備え、
     前記重畳部は、
     前記指示受付部によって前記第1のレイアウトの指示が受け付けられた場合には、前記第1のレイアウトにしたがって、前記通信動画像を前記放送動画像に重ねて出力し、
     前記指示受付部によって前記第2のレイアウトの指示が受け付けられた場合には、前記第2のレイアウトにしたがって、前記放送動画像を前記通信動画像に重ねて出力する
     請求項1に記載の放送受信装置。
  4.  前記プレーンは、前記放送動画像および前記通信動画像のうちの一方の動画像のピクチャを保持するための第1のプレーンと、他方の動画像のピクチャを保持するための第2のプレーンとを有し、
     前記重畳部は、前記放送動画像のピクチャおよび前記通信動画像のピクチャをそれぞれ保持するためのプレーンを、第1のプレーンと第2のプレーンとで切り替えることによって、前記通信動画像を前記放送動画像の前面または背面に配置する
     請求項1に記載の放送受信装置。
  5.  前記放送受信装置は、さらに、
     同期情報を前記放送受信装置の外部から取得する同期情報取得部を備え、
     前記重畳部は、前記同期情報にしたがって、前記通信動画像と前記放送動画像とを重ねて出力することによって、前記通信動画像を前記放送動画像に同期させる
     請求項1に記載の放送受信装置。
  6.  前記同期情報は、前記通信コンテンツ内の再生位置と、当該再生位置のデータが再生される再生時刻とを関連付けて示し、
     前記重畳部は、前記同期情報によって示される再生時刻に、前記通信動画像のうち、当該再生時刻に関連付けて示される再生位置にあるピクチャと、前記放送動画像のピクチャとを重ねて出力する
     請求項5に記載の放送受信装置。
  7.  前記同期情報は、さらに、前記放送コンテンツのタイプを放送タイプとして示し、
     前記重畳部は、前記放送タイプによって、前記放送コンテンツがライブ放送されるコンテンツであるか否かを判別し、ライブ放送されるコンテンツであると判別すると、前記放送動画像と前記通信動画像との重ね合わせを禁止する
     請求項5に記載の放送受信装置。
  8.  前記同期情報は、さらに、静止画を特定するための静止画特定情報を含み、
     前記重畳部は、前記静止画特定情報によって特定される静止画と、前記放送動画像および前記通信動画像とを重ねて出力する
     請求項5に記載の放送受信装置。
  9.  前記重畳部は、通信コンテンツが前記通信コンテンツ受信部によって受信されない場合には、前記通信動画像を重ねることなく、前記放送動画像を出力する
     請求項1に記載の放送受信装置。
  10.  前記重畳部は、
     前記通信動画像がディスプレイの表示サイズ全体に表示され、前記放送動画像が前記ディスプレイの表示サイズよりも小さいサイズで前記通信動画像に重ねられている際に、前記通信コンテンツが前記通信コンテンツ受信部によって受信されていない状態になると、
     前記放送動画像の表示サイズを、前記ディスプレイの表示サイズまで拡大し、
     前記通信コンテンツが前記通信コンテンツ受信部によって受信されている状態になると、前記放送動画像の表示サイズを、前記ディスプレイの表示サイズよりも小さいサイズに縮小する
     請求項1に記載の放送受信装置。
  11.  前記放送受信装置は、さらに、
     前記放送以外の通信の状況を示す通信状況情報を取得する通信状況取得部を備え、
     前記通信コンテンツ受信部は、
     前記放送コンテンツに関連する複数の通信コンテンツのうち、前記通信状況情報によって示される通信の状況に応じた品質を有する前記通信コンテンツを受信する
     請求項1に記載の放送受信装置。
  12.  前記複数の通信コンテンツのそれぞれのビットレート、または、前記複数の通信コンテンツのそれぞれの解像度は、互いに異なり、
     前記通信コンテンツ受信部は、
     前記複数の通信コンテンツのうち、前記通信状況情報によって示される通信の状況に応じたビットレートまたは解像度を有する前記通信コンテンツを受信する
     請求項11に記載の放送受信装置。
  13.  前記放送受信装置は、さらに、
     前記放送以外の通信の状況を示す通信状況情報を取得する通信状況取得部を備え、
     前記重畳部は、
     前記通信状況情報によって示される通信の状況である指標値が所定の値よりも低いまたは高い場合には、前記通信動画像を重ねることなく、前記放送動画像を出力する
     請求項1に記載の放送受信装置。
  14.  前記重畳部は、
     前記放送動画像および通信動画像が、それぞれが互いに異なる目に視認されることによって立体視される、複数のピクチャからなる動画像である場合には、
     前記放送動画像に含まれるピクチャである放送ピクチャと、通信動画像に含まれるピクチャであって、前記放送ピクチャと対になって立体視される通信ピクチャとをそれぞれ重ねることなく、単位時間内に連続して出力し、
     前記通信ピクチャが前記通信コンテンツ受信部によって受信されなかった場合には、前記放送ピクチャを、単位時間内に2回連続して出力する
     請求項1に記載の放送受信装置。
  15.  前記通信コンテンツ受信部は、
     前記放送コンテンツ受信部によって前記放送コンテンツが受信されている際に、前記放送以外の通信の状況が、前記通信コンテンツが受信可能な受信可能状況から、受信不可能な受信不可状況になり、再び受信可能状況になったときには、
     再び前記受信可能状況になったとき以降に前記放送コンテンツ受信部によって受信される前記放送コンテンツの一部に関連する他の通信コンテンツを受信し、
     前記重畳部は、
     前記レイアウト情報にしたがって、前記放送動画像と前記他の通信動画像とを重ねて出力する
     請求項1に記載の放送受信装置。
  16.  前記放送受信装置は、さらに、
     前記放送コンテンツの続きの動画像を示す他の通信コンテンツの所在を示す所在情報を取得する所在情報取得部を備え、
     前記通信コンテンツ受信部は、
     前記放送コンテンツ受信部による前記放送コンテンツの受信が終了すると、前記所在情報によって示される所在から前記他の通信コンテンツを受信し、
     前記重畳部は、
     前記放送コンテンツ受信部による前記放送コンテンツの受信が終了した後、前記他の通信コンテンツを出力する
     請求項1に記載の放送受信装置。
  17.  前記放送受信装置は、さらに、
     前記放送動画像と同一の前記通信動画像を示す前記通信コンテンツの所在を示す所在情報を取得する所在情報取得部を備え、
     前記通信コンテンツ受信部は、
     前記放送コンテンツ受信部による前記放送コンテンツの受信が開始された後に、ユーザからの操作を受け付けると、前記所在情報によって示される所在から前記通信コンテンツを受信し、
     前記重畳部は、
     前記放送コンテンツの受信が開始されときに、前記放送動画像の出力を開始し、前記通信コンテンツの受信が開始されときに、前記レイアウト情報にしたがって、前記放送動画像と、前記通信コンテンツの先頭から示される前記通信動画像とを重ねて出力する
     請求項1に記載の放送受信装置。
  18.  前記重畳部は、
     前記放送動画像と前記通信動画像とを重ねる代わりに、 
     前記通信動画像がディスプレイの表示サイズ全体に表示されるように、前記通信動画像を拡大して、前記通信動画像を出力する
     請求項17に記載の放送受信装置。
  19.  前記重畳部は、
     前記放送動画像のうちの表示されている画像と、前記通信動画像のうちの表示されている画像とが等しくなるまで、早送り再生される前記通信コンテンツの通信動画像を出力し、
     前記放送動画像のうちの表示されている画像と、前記通信動画像のうちの表示されている画像とが等しくなると、通常再生される前記通信コンテンツの通信動画像を出力する
     請求項17に記載の放送受信装置。
  20.  放送される放送コンテンツを放送受信装置が受信する放送受信方法であって、
     放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信し、
     前記放送コンテンツを受信し、
     前記放送コンテンツによって示される動画像である放送動画像のピクチャと、前記通信コンテンツによって示される動画像である通信動画像のピクチャとをプレーンに保持させ、
     前記放送動画像および前記通信動画像のレイアウトを示すレイアウト情報を、前記放送受信装置の外部から取得し、
     前記レイアウト情報にしたがって、ピクチャごとに、前記プレーンに保持されている前記放送動画像のピクチャと前記通信動画像のピクチャとを重ねて出力する
     放送受信方法。
  21.  放送される放送コンテンツを放送受信装置が受信するためのプログラムであって、
     放送以外の通信を介して配信される、前記放送コンテンツに関連する通信コンテンツを受信し、
     前記放送コンテンツを受信し、
     前記放送コンテンツによって示される動画像である放送動画像のピクチャと、前記通信コンテンツによって示される動画像である通信動画像のピクチャとをプレーンに保持させ、
     前記放送動画像および前記通信動画像のレイアウトを示すレイアウト情報を、前記放送受信装置の外部から取得し、
     前記レイアウト情報にしたがって、ピクチャごとに、前記プレーンに保持されている前記放送動画像のピクチャと前記通信動画像のピクチャとを重ねて出力する
     ことを、前記放送受信装置に備えられたコンピュータに実行させるためのプログラム。 
PCT/JP2012/006457 2011-10-26 2012-10-09 放送受信装置、放送受信方法およびプログラム WO2013061526A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US13/988,912 US8949884B2 (en) 2011-10-26 2012-10-09 Broadcast receiving apparatus, broadcast receiving method, and program
CN2012800038582A CN103229511A (zh) 2011-10-26 2012-10-09 广播接收装置、广播接收方法以及程序

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011235161 2011-10-26
JP2011-235161 2011-10-26

Publications (1)

Publication Number Publication Date
WO2013061526A1 true WO2013061526A1 (ja) 2013-05-02

Family

ID=48167382

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/006457 WO2013061526A1 (ja) 2011-10-26 2012-10-09 放送受信装置、放送受信方法およびプログラム

Country Status (4)

Country Link
US (1) US8949884B2 (ja)
JP (1) JPWO2013061526A1 (ja)
CN (1) CN103229511A (ja)
WO (1) WO2013061526A1 (ja)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015111757A (ja) * 2013-12-06 2015-06-18 船井電機株式会社 画像処理装置および通信装置
JP2015119412A (ja) * 2013-12-19 2015-06-25 日本放送協会 受信装置、およびプログラム
JP2015159452A (ja) * 2014-02-25 2015-09-03 株式会社Jストリーム 放送通信連携サービス提供システム
WO2017002642A1 (ja) * 2015-06-30 2017-01-05 シャープ株式会社 情報機器及び表示処理方法
JPWO2015019736A1 (ja) * 2013-08-07 2017-03-02 シャープ株式会社 送信装置
JP2017510119A (ja) * 2014-01-13 2017-04-06 エルジー エレクトロニクス インコーポレイティド 一つ以上のネットワークを介して放送コンテンツを送受信する装置及び方法
JP2017098702A (ja) * 2015-11-20 2017-06-01 日立マクセル株式会社 放送受信装置
EP3089465A4 (en) * 2013-12-27 2017-07-05 Hitachi Maxell, Ltd. Broadcast reception device and video display method
JP2017225136A (ja) * 2017-07-13 2017-12-21 マクセルホールディングス株式会社 放送受信装置及び映像表示方法
JPWO2017022297A1 (ja) * 2015-08-05 2018-05-24 ソニー株式会社 情報処理装置及び情報処理方法並びに制御装置
JP2019140683A (ja) * 2019-03-11 2019-08-22 マクセル株式会社 放送受信装置及び表示方法
JP2019205206A (ja) * 2019-09-04 2019-11-28 マクセル株式会社 出力制御方法及び放送受信装置
JP2020010356A (ja) * 2013-10-31 2020-01-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 方法
JP2020031437A (ja) * 2013-07-25 2020-02-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 送信方法および受信方法
US10638189B2 (en) 2013-11-13 2020-04-28 Maxell, Ltd. Broadcast receiver
US10659833B2 (en) 2013-11-13 2020-05-19 Maxell, Ltd. Broadcast receiver and broadcast receiving system
JP2020191660A (ja) * 2020-07-30 2020-11-26 マクセル株式会社 放送受信装置および表示方法
JP2021005872A (ja) * 2020-08-20 2021-01-14 マクセル株式会社 放送受信装置及び表示方法
JP2022121431A (ja) * 2018-07-25 2022-08-19 株式会社ミクシィ 情報処理装置、動画配信方法及び動画配信プログラム
US11800182B2 (en) 2013-12-27 2023-10-24 Maxell, Ltd. Broadcast receiving device

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102238399B1 (ko) * 2012-12-07 2021-04-09 삼성전자주식회사 Wi­fi 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 방법 및 시스템
CN105245937A (zh) * 2015-09-30 2016-01-13 武汉科优达科技有限公司 视频场景控制系统及方法
US10665266B2 (en) * 2018-03-23 2020-05-26 Gfycat, Inc. Integrating a prerecorded video file into a video
CN113840176B (zh) * 2020-06-24 2023-05-23 京东方科技集团股份有限公司 电子设备及其控制方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002262246A (ja) * 2001-03-05 2002-09-13 Mitsubishi Electric Corp 出力情報制御装置及び出力情報制御方法
JP2004235734A (ja) * 2003-01-28 2004-08-19 Mitsubishi Electric Corp 受信機、放送送出装置及び補助コンテンツサーバ
JP2006333101A (ja) * 2005-05-26 2006-12-07 Sharp Corp テレビジョン情報表示システムおよび装置ならびにリモコン装置
JP2007033946A (ja) * 2005-07-27 2007-02-08 Sharp Corp 映像合成装置及びプログラム
JP2007243903A (ja) * 2006-02-10 2007-09-20 Softbank Bb Corp 番組放送方法及び番組放送システム
JP2009303062A (ja) * 2008-06-16 2009-12-24 Panasonic Corp 放送受信端末、放送データ合成方法、プログラムおよび記録媒体
JP2011120089A (ja) * 2009-12-04 2011-06-16 Nec Corp コンテンツ受信システム、コンテンツ受信装置、コンテンツ受信方法、コンテンツ受信プログラム
JP2012205075A (ja) * 2011-03-25 2012-10-22 Nippon Hoso Kyokai <Nhk> 同期制御装置及びプログラム

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8117281B2 (en) 2006-11-02 2012-02-14 Addnclick, Inc. Using internet content as a means to establish live social networks by linking internet users to each other who are simultaneously engaged in the same and/or similar content
US7168051B2 (en) 2000-10-10 2007-01-23 Addnclick, Inc. System and method to configure and provide a network-enabled three-dimensional computing environment
US20070005969A1 (en) 2005-07-02 2007-01-04 Addnclick, Inc. Anonymous communication system and method
US8234218B2 (en) 2000-10-10 2012-07-31 AddnClick, Inc Method of inserting/overlaying markers, data packets and objects relative to viewable content and enabling live social networking, N-dimensional virtual environments and/or other value derivable from the content
US8316450B2 (en) 2000-10-10 2012-11-20 Addn Click, Inc. System for inserting/overlaying markers, data packets and objects relative to viewable content and enabling live social networking, N-dimensional virtual environments and/or other value derivable from the content
AU2003239385A1 (en) * 2002-05-10 2003-11-11 Richard R. Reisman Method and apparatus for browsing using multiple coordinated device
JP2005026867A (ja) 2003-06-30 2005-01-27 Nhk Engineering Services Inc 放送通信融合端末、並びに、放送通信融合端末の放送関連情報取得方法及びそのプログラム
WO2007015047A2 (en) * 2005-08-04 2007-02-08 Nds Limited Advanced digital tv system
US20080106533A1 (en) 2005-08-05 2008-05-08 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080106487A1 (en) 2005-08-05 2008-05-08 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080094512A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US8046709B2 (en) 2005-08-05 2011-10-25 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080094508A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing mutliple screens and method of dynamically configuring
US20080094415A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Method and apparatus for identifying application in multiscreen environment
US20080094509A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080088744A1 (en) 2005-08-05 2008-04-17 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080094511A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080094510A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080098402A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multi screens
CA2615879A1 (en) 2005-08-05 2007-02-15 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080094513A1 (en) 2005-08-05 2008-04-24 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080109725A1 (en) 2005-08-05 2008-05-08 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
KR20070027070A (ko) * 2005-08-29 2007-03-09 삼성전자주식회사 방송/통신 결합서비스 정보 송수신 방법 및 장치
US20080106645A1 (en) 2006-08-01 2008-05-08 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
CA2672450A1 (en) 2006-12-18 2008-06-26 Samsung Electronics Co., Ltd. Method and apparatus for multiscreen management for multiple screen configuration
JP4999649B2 (ja) * 2007-11-09 2012-08-15 キヤノン株式会社 表示装置
JP2009272880A (ja) * 2008-05-07 2009-11-19 Funai Electric Co Ltd デジタル放送受信装置
JP4618384B2 (ja) * 2008-06-09 2011-01-26 ソニー株式会社 情報提示装置および情報提示方法
JP2010258707A (ja) * 2009-04-23 2010-11-11 Sharp Corp 映像表示装置、映像表示方法、プログラムおよび記録媒体

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002262246A (ja) * 2001-03-05 2002-09-13 Mitsubishi Electric Corp 出力情報制御装置及び出力情報制御方法
JP2004235734A (ja) * 2003-01-28 2004-08-19 Mitsubishi Electric Corp 受信機、放送送出装置及び補助コンテンツサーバ
JP2006333101A (ja) * 2005-05-26 2006-12-07 Sharp Corp テレビジョン情報表示システムおよび装置ならびにリモコン装置
JP2007033946A (ja) * 2005-07-27 2007-02-08 Sharp Corp 映像合成装置及びプログラム
JP2007243903A (ja) * 2006-02-10 2007-09-20 Softbank Bb Corp 番組放送方法及び番組放送システム
JP2009303062A (ja) * 2008-06-16 2009-12-24 Panasonic Corp 放送受信端末、放送データ合成方法、プログラムおよび記録媒体
JP2011120089A (ja) * 2009-12-04 2011-06-16 Nec Corp コンテンツ受信システム、コンテンツ受信装置、コンテンツ受信方法、コンテンツ受信プログラム
JP2012205075A (ja) * 2011-03-25 2012-10-22 Nippon Hoso Kyokai <Nhk> 同期制御装置及びプログラム

Cited By (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7280408B2 (ja) 2013-07-25 2023-05-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法および受信方法
JP2020031437A (ja) * 2013-07-25 2020-02-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 送信方法および受信方法
JP7057411B2 (ja) 2013-07-25 2022-04-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法および受信方法
JP2021057918A (ja) * 2013-07-25 2021-04-08 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 送信方法および受信方法
JP2022089899A (ja) * 2013-07-25 2022-06-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法および受信方法
JPWO2015019736A1 (ja) * 2013-08-07 2017-03-02 シャープ株式会社 送信装置
JP2020010356A (ja) * 2013-10-31 2020-01-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 方法
US11140433B2 (en) 2013-11-13 2021-10-05 Maxell, Ltd. Broadcast receiver
US11979629B1 (en) 2013-11-13 2024-05-07 Maxell, Ltd. Broadcast receiver and broadcast receiving system
US11516527B2 (en) 2013-11-13 2022-11-29 Maxell, Ltd. Broadcast receiver and broadcast receiving system
US11076193B2 (en) 2013-11-13 2021-07-27 Maxell, Ltd. Broadcast receiver and broadcast receiving system
US10638189B2 (en) 2013-11-13 2020-04-28 Maxell, Ltd. Broadcast receiver
US10659833B2 (en) 2013-11-13 2020-05-19 Maxell, Ltd. Broadcast receiver and broadcast receiving system
JP2015111757A (ja) * 2013-12-06 2015-06-18 船井電機株式会社 画像処理装置および通信装置
JP2015119412A (ja) * 2013-12-19 2015-06-25 日本放送協会 受信装置、およびプログラム
US12108107B2 (en) 2013-12-27 2024-10-01 Maxell, Ltd. Broadcast receiving device
EP3089465A4 (en) * 2013-12-27 2017-07-05 Hitachi Maxell, Ltd. Broadcast reception device and video display method
US11800182B2 (en) 2013-12-27 2023-10-24 Maxell, Ltd. Broadcast receiving device
US11665385B2 (en) 2014-01-13 2023-05-30 Lg Electronics Inc. Apparatuses and methods for transmitting or receiving a broadcast content via one or more networks
JP2017510119A (ja) * 2014-01-13 2017-04-06 エルジー エレクトロニクス インコーポレイティド 一つ以上のネットワークを介して放送コンテンツを送受信する装置及び方法
US10911800B2 (en) 2014-01-13 2021-02-02 Lg Electronics Inc. Apparatuses and methods for transmitting or receiving a broadcast content via one or more networks
JP2015159452A (ja) * 2014-02-25 2015-09-03 株式会社Jストリーム 放送通信連携サービス提供システム
JPWO2017002642A1 (ja) * 2015-06-30 2018-04-26 シャープ株式会社 情報機器及び表示処理方法
WO2017002642A1 (ja) * 2015-06-30 2017-01-05 シャープ株式会社 情報機器及び表示処理方法
JP7071120B2 (ja) 2015-08-05 2022-05-18 ソニーグループ株式会社 情報処理装置及び情報処理方法並びに制御装置
JPWO2017022297A1 (ja) * 2015-08-05 2018-05-24 ソニー株式会社 情報処理装置及び情報処理方法並びに制御装置
JP2017098702A (ja) * 2015-11-20 2017-06-01 日立マクセル株式会社 放送受信装置
JP2017225136A (ja) * 2017-07-13 2017-12-21 マクセルホールディングス株式会社 放送受信装置及び映像表示方法
JP7311815B2 (ja) 2018-07-25 2023-07-20 株式会社Mixi 情報処理装置、動画配信方法及び動画配信プログラム
JP2022121431A (ja) * 2018-07-25 2022-08-19 株式会社ミクシィ 情報処理装置、動画配信方法及び動画配信プログラム
JP2019140683A (ja) * 2019-03-11 2019-08-22 マクセル株式会社 放送受信装置及び表示方法
JP2019205206A (ja) * 2019-09-04 2019-11-28 マクセル株式会社 出力制御方法及び放送受信装置
JP7008761B2 (ja) 2020-07-30 2022-01-25 マクセル株式会社 放送受信装置および表示方法
JP2020191660A (ja) * 2020-07-30 2020-11-26 マクセル株式会社 放送受信装置および表示方法
JP2021005872A (ja) * 2020-08-20 2021-01-14 マクセル株式会社 放送受信装置及び表示方法
JP7117069B2 (ja) 2020-08-20 2022-08-12 マクセル株式会社 放送受信装置及び表示方法

Also Published As

Publication number Publication date
JPWO2013061526A1 (ja) 2015-04-02
US8949884B2 (en) 2015-02-03
CN103229511A (zh) 2013-07-31
US20140059590A1 (en) 2014-02-27

Similar Documents

Publication Publication Date Title
WO2013061526A1 (ja) 放送受信装置、放送受信方法およびプログラム
US8773584B2 (en) Playback apparatus, playback method, integrated circuit, broadcast system, and broadcast method using a broadcast video and additional video
WO2013061525A1 (ja) 放送受信装置、再生装置、放送通信システム、放送受信方法、再生方法およびプログラム
JP5956441B2 (ja) 受信再生装置、送信装置、受信再生方法及び送信方法
KR100782835B1 (ko) 캡션 정보의 출력시점 및 출력 우선순위를 조절하는 방법및 그 장치
WO2012017643A1 (ja) 符号化方法、表示装置、及び復号方法
JP4364176B2 (ja) 映像データ再生装置及び映像データ生成装置
WO2013136754A1 (ja) 表示装置、及び送信装置
US20120050476A1 (en) Video processing device
US20140237536A1 (en) Method of displaying contents, method of synchronizing contents, and method and device for displaying broadcast contents
WO2013099290A1 (ja) 映像再生装置、映像再生方法、映像再生プログラム、映像送信装置、映像送信方法及び映像送信プログラム
JP5981915B2 (ja) 送信装置、受信再生装置、送信方法及び受信再生方法
WO2012169204A1 (ja) 送信装置、受信装置、送信方法及び受信方法
WO2013011696A1 (ja) 送信装置、受信再生装置、送信方法及び受信再生方法
JP2010161807A (ja) 記録媒体、映像データ再生装置及び映像データ生成装置
US20130016183A1 (en) Dual Mode User Interface System and Method for 3D Video
WO2013108633A1 (ja) 送信装置、映像表示装置、送信方法、映像処理方法、映像処理プログラム及び集積回路
KR20100047734A (ko) 방송 수신 장치 및 이를 이용한 영상 재생 방법

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2013513315

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 13988912

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12843649

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12843649

Country of ref document: EP

Kind code of ref document: A1