WO2014175148A1 - 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法 - Google Patents

受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法 Download PDF

Info

Publication number
WO2014175148A1
WO2014175148A1 PCT/JP2014/060874 JP2014060874W WO2014175148A1 WO 2014175148 A1 WO2014175148 A1 WO 2014175148A1 JP 2014060874 W JP2014060874 W JP 2014060874W WO 2014175148 A1 WO2014175148 A1 WO 2014175148A1
Authority
WO
WIPO (PCT)
Prior art keywords
html document
transmission media
dom tree
unit
mmt
Prior art date
Application number
PCT/JP2014/060874
Other languages
English (en)
French (fr)
Inventor
義治 出葉
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to EP14789057.8A priority Critical patent/EP2990958A4/en
Priority to CN201480022352.5A priority patent/CN105144146B/zh
Priority to US14/763,689 priority patent/US10262072B2/en
Priority to KR1020157024938A priority patent/KR20160002711A/ko
Publication of WO2014175148A1 publication Critical patent/WO2014175148A1/ja
Priority to US16/281,957 priority patent/US20190286684A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G06F16/986—Document structures and storage, e.g. HTML extensions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV

Definitions

  • the present technology relates to a receiving device, an information processing method in a receiving device, a transmitting device, an information processing device, and an information processing method, and more specifically, receives and processes display control data such as an HTML document for displaying a web page.
  • the present invention relates to a receiver and the like.
  • the display of a web page is performed by a web browser.
  • the web browser acquires an HTML document (HTML file) from the web server, analyzes it to generate a document object model (DOM) tree, and generates various drawing elements based on the DOM tree to generate a web page. Is displayed (see, for example, Patent Document 1).
  • HTML file HTML file
  • DOM document object model
  • the W3C (World Wide Web Consortium) standard is the DOM (Document Object Model).
  • the DOM defines a tree structure in which the outermost tag ⁇ html> is the top node of one HTML document, and applies dynamic processing by JavaScript to each parameter of the tag.
  • the interface is decided. "JavaScript” is a registered trademark.
  • MMT MPEG Media Transport: ISO / IEC 23008-1
  • MMT-CI Composition Information
  • This MMT-CI constitutes presentation control information of transmission media such as video, audio, and images.
  • This MMT-CI is described in HTML5.
  • Video element in the HTML5 document from the web server.
  • moving image display by the video element is performed in a predetermined area of the web page surface displayed by the web browser.
  • MMT transmission media stream it is also conceivable to refer to the MMT transmission media stream as the source of the video element.
  • An object of the present technology is to make an element of presentation control information (HTML document) included in a transmission media stream accessible from an HTML application side.
  • HTML document presentation control information
  • a first receiving unit for receiving a first HTML document for displaying a web page
  • a second receiving unit for receiving a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media
  • a DOM tree generation unit for generating a DOM tree of the first HTML document received by the first reception unit
  • the DOM tree generation unit When a video element referencing the transmission media stream is present in the first HTML document, it is generated under the node of the video element corresponding to the second HTML document included in the transmission media stream It is in the receiver that joins the DOM tree.
  • the first receiving unit receives a first HTML document for displaying a web page. Also, the transmission media stream is received by the second receiving unit.
  • the transmission media stream includes a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media.
  • the transmission media stream may be a transmission stream in which a first transmission packet containing transmission media in a payload and a second transmission packet containing information on transmission media are multiplexed in a time division manner. It is also good.
  • the transmission packet may be an MMT packet
  • the second HTML document may be MMT-CI.
  • the second HTML document may be data having an HTML structure in which the data structure of MPEG2-TS is mapped.
  • the DOM tree generation unit generates a DOM tree of the first HTML document received by the first reception unit. Then, when there is a video element referencing the transmission media stream in the first HTML document, a DOM tree generated corresponding to the second HTML document included in the transmission media stream under the node of the video element Are combined.
  • the HTML application side when generating the DOM tree of the first HTML document, the DOM tree generated corresponding to the second HTML document is joined under the node of the video element. is there. Therefore, the HTML application side can access the elements of the presentation control information (HTML document) included in the transmission media stream.
  • HTML document presentation control information
  • the present technology may further include an element acquisition unit that acquires a predetermined element of the second HTML document based on, for example, the DOM tree generated by the DOM tree generation unit. In this case, for example, on the HTML application side, it becomes possible to obtain and use a predetermined element of the second HTML document.
  • the display control unit further controls display of the web page based on the DOM tree generated by the DOM tree generation unit, and the display control unit controls the predetermined element of the second HTML document acquired by the element acquisition unit.
  • the display control unit controls the predetermined element of the second HTML document acquired by the element acquisition unit.
  • information related to presentation control of a predetermined number of transmission media may be displayed.
  • the user can know information related to presentation control of a predetermined number of transmission media presented on the web page display surface.
  • the first HTML document includes a program for accessing a specific element of the second HTML document
  • the element acquisition unit generates the second HTML document based on the program. It may be made to acquire a specific element.
  • predetermined elements of the second HTML document can be easily acquired.
  • the first HTML document includes reference information for acquiring a program for accessing a specific element of the second HTML document, and the element acquisition unit uses the reference information. Based on the acquired program, a specific element of the second HTML document may be acquired. In this case, for example, on the HTML application side, predetermined elements of the second HTML document can be easily acquired.
  • the other concept of this technology is Program for accessing a specific element of said second HTML document, including a video element referring to a predetermined number of transmission media and a transmission media stream including a second HTML document as presentation control information of the transmission media Or a holding unit for holding a first HTML document for displaying a web page including reference information for obtaining the program. And a transmitter configured to transmit the held first HTML document.
  • the holding unit holds a first HTML document for displaying a web page.
  • the first HTML document includes a video element that references a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media.
  • the first HTML document includes a program for accessing a specific element of the second HTML document, or reference information for acquiring the program.
  • the transmission unit transmits the held first HTML document.
  • the transmission media stream may be a transmission stream in which a first transmission packet containing transmission media in a payload and a second transmission packet containing information on transmission media are multiplexed in a time division manner. It is also good.
  • the transmission packet may be an MMT packet
  • the second HTML document may be MMT-CI.
  • a program for accessing a specific element of the second HTML document included in the transmission media stream with respect to the first HTML document for displaying the web page transmitted from the transmission unit Alternatively, reference information for acquiring it is included. Therefore, in the receiving unit, the HTML application can easily obtain a predetermined element of the second HTML document.
  • the other concept of this technology is A data acquisition unit for acquiring a first HTML document for displaying a web page; A DOM tree generation unit that analyzes the first HTML document acquired by the data acquisition unit and generates a DOM tree in which a plurality of elements are linked to each other; The DOM tree generation unit When a video element referencing a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media is present in the first HTML document, the video element is subordinate to the video element,
  • the present invention is an information processing apparatus for combining a DOM tree generated corresponding to the second HTML document included in the transmission media stream.
  • the data acquisition unit acquires a first HTML document for displaying a web page. Then, the first HTML document acquired by the data acquisition unit is analyzed by the DOM tree generation unit, and a DOM tree in which a plurality of elements are linked to one another is generated.
  • a first HTML document includes a video element that references a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media
  • the video element is subordinate to the video element.
  • the DOM tree generated corresponding to the second HTML document included in the transmission media stream is combined.
  • the DOM tree generated corresponding to the second HTML document is combined under the node of the video element of the DOM tree of the first HTML document. Therefore, the HTML application side can access the elements of the presentation control information (HTML document) included in the transmission media stream.
  • HTML document presentation control information
  • a data acquisition unit that acquires first display control data including a plurality of structural units in which information related to display control is described;
  • a structured data generation unit that analyzes the first display control data acquired by the data acquisition unit and generates structured data in which a plurality of structural units are linked to each other;
  • the structured data generation unit A predetermined structure referring to a transmission media stream including, in the first display control data, a second number of transmission media and a second display control data including a plurality of structural units in which presentation control information of the transmission media is described.
  • the information processing apparatus combines structured data generated corresponding to the second display control data included in the transmission media stream under the predetermined structural unit.
  • the content of presentation control information (HTML document) included in the transmission media stream can be accessed from the HTML application side.
  • HTML document presentation control information
  • FIG. 1 is a block diagram showing a configuration example of a display system as an embodiment. It is a figure which shows the basic structure of MMT-CI. It is a figure which shows the relationship of the browser surface and MMT surface in, when the video (video) element which references MMT stream exists in HTML5 document. It is a flowchart which shows an example of a production
  • FIG. 1 shows a configuration example of a display system 10.
  • the broadcast station 110, the streaming server 120, and the web server 130 are disposed on the transmission side, and the receiver 200 is disposed on the reception side.
  • the broadcast station 110 generates a transport media stream including a transport packet having an MMT structure (see ISO / IEC CD 23008-1), that is, the MMT packet, and transmits this transport media stream to the receiving side through an RF channel.
  • this transmission media stream will be referred to as "MMT stream" as appropriate.
  • the broadcasting station 110 RF-modulates the MMT stream, for example, via an appropriate adaptation layer, and then transmits the MMT stream to the receiving side through the RF transmission path.
  • the streaming server 120 transmits the MMT stream similar to that handled by the above-mentioned broadcast station 110 to the receiving side via a communication network channel such as the Internet 300, for example.
  • the streaming server 120 converts the MMT stream into IP packets and sends them to the receiving side through the communication network channel.
  • a first MMT packet including transmission media such as video and audio in the payload, and a second MMT packet including information on the transmission media in the payload are time-divided by at least the size of a fragmented packet.
  • a data structure called MMT-CI (Composition Information) in which changes due to screen configuration and time are described as one of the information on the transmission media is defined.
  • This MMT-CI constitutes presentation control information of transmission media such as video, audio, and images. This MMT-CI is described in HTML5.
  • FIG. 2 shows the basic structure of MMT-CI.
  • the Root element is "html" and has a head element and a body element.
  • the head element has a plurality of view elements in addition to the title element, and each view element has a plurality of divLocation elements.
  • the body element has multiple div elements. In the div element, video (video), audio (audio), image (img), etc. can be placed. For each media specification, use source element or src attribute.
  • the view element determines the display position of the div of the body, but the initial position is determined by the divLocation element under it.
  • the divLocation element sequentially represents display positions that change in time series. Therefore, the display position changes according to the divLocation element without reloading the page.
  • the web server 130 holds an HTML 5 document (HTML file) for displaying a web page (HTML 5 application) in a storage unit such as a storage.
  • the web server 130 transmits the HTML5 document held in the holding unit to the receiving side through the communication network transmission line such as the Internet 300 by the IP transmitting unit.
  • HTML5 as is well known, the presence of a video element is allowed.
  • the HTML 5 document transmitted from the web server 130 to the receiving side has a video element, and the source may be an MMT stream. In that case, reference information for referring to the MMT stream exists as a video element.
  • the receiver 200 includes an IP receiving unit 201, a web (Web) browser 202, an output unit 203, an IP / RF receiving unit 204, an MMT decoding unit 205, and an MMT player 206.
  • the IP / RF receiving unit 204 receives the MMT stream sent from the broadcasting station 110 through the RF transmission line through analysis of the adaptation layer, or receives the MMT stream sent from the web server 130 through the communication network transmission line. To receive.
  • the MMT decoding unit 205 performs unpacketization of the MMT packet contained in the MMT stream received by the IP / RF receiving unit 204 and further performs decoding processing to obtain data such as video, audio, and image as media data. Besides getting, getting metadata and messages. In this case, MMT-CI in which changes due to screen configuration and time are described can also be obtained.
  • the MMT decoding unit 205 also generates a DOM (Document Object Model) tree of this MMT-CI.
  • the MMT player 206 uses the video, audio, image, etc. data obtained by the MMT decoding unit 205 to display an image or sound corresponding to a screen configuration (layout) specified by the MMT-CI or a change with time. Generate output data.
  • the output unit 203 performs image display and sound output based on the image generated by the MMT player 206, the output data of sound, or the output data of the image generated by the web browser 202 or sound.
  • the output unit includes a display for displaying an image, a speaker for outputting an audio, and the like.
  • the IP receiving unit 201 receives an HTML5 document (HTML file) sent from the web server 130 through a communication network transmission line such as the Internet 300 or the like.
  • the web browser 202 analyzes the HTML5 document received by the IP receiving unit 201 to generate a DOM tree, and generates output data of image and sound based on the DOM tree and the like.
  • the web browser 202 has an HTML parsing unit 202a that parses an HTML5 document, and an HTMLDOM processing unit 202b that creates a DOM tree based on the analysis result.
  • the web browser 202 also has an HTML layout processing unit 202c and an HTML rendering processing unit 202d that perform layout processing and rendering processing based on a DOM tree or the like to generate output data of images and sounds.
  • the HTML DOM processing unit 202 b is generated by the MMT decoding unit 205 as described above under the node of this video element. Merge the MMT-CI DOM tree. By combining such DOM trees, it is possible to access the MMT-CI elements from the HTML application side handled by the web browser 202.
  • FIG. 3 shows the relationship between the browser surface (HTML5) and the MMT surface when there is a video (video) element that references the MMT stream in the HTML5 document.
  • the MMT surface is inserted in part of the browser surface.
  • the size adjustment and the like when inserting the MMT surface into a part of the browser surface is performed in the HTML rendering processing unit 202 d of the web browser 202.
  • the flowchart in FIG. 4 illustrates an example of a DOM tree generation process in the HTMLDOM processing unit 202b of the web browser 202.
  • step ST3 the HTMLDOM processing unit 202b determines whether there is an element to be parsed (parsed) in the HTML document. When there is an element to be parsed, the HTML DOM processing unit 202b parses the element of the HTML document for each tag in step ST4.
  • step ST5 the HTMLDOM processing unit 202b determines whether the element of the parsed HTML document includes a video element. If there is a video element in the element, the HTML DOM processing unit 202 b determines in step ST 6 whether the source is an MMT stream.
  • the HTMLDOM processing unit 202b When the source is an MMT stream, the HTMLDOM processing unit 202b combines the MMT-CI DOM tree under the node of the video element in step ST7. That is, the HTMLDOM processing unit 202b connects the document of the MMT plain DOM tree as otherPlane [i] to the child node of the video element.
  • step ST8 the HTMLDOM processing unit 202b increments the value of i, and then returns to the process of step ST3 and repeats the same process as described above.
  • the process returns to step ST3 immediately.
  • the HTMLDOM processing unit 202b proceeds to step ST9 and ends the DOM tree generation processing.
  • FIG. 5 shows an example of the correlation between the DOM tree of the HTML document and the MMT-CI DOM tree coupled thereto. This DOM tree allows access to each element of MMT-CI as well as each element of HTML document.
  • access to the video element of the HTML document can be performed by the following script (script).
  • access to the video element of the HTML document can be performed by the following script, by adding an id to the video element.
  • var videoElm document.getElementByID ("v1");
  • access to each element of MMT-CI can be performed by the following script.
  • This script is an example of accessing the view element of MMT-CI from the video element of the HTML document.
  • var mmtElm videoElm.otherPlane [0] .document.getElementsByTagName ('view') [0];
  • FIG. 6 shows an example of the correlation between the DOM tree of the HTML document and the DOM tree of two MMT-CIs coupled thereto. This DOM tree allows access to each element of the two MMT-CIs as well as each element of the HTML document.
  • access to the MMT-CI view element of the DOM tree can be performed by the following script.
  • var mmtElm document.firstChild.firstChild.childNode [1] .otherPlane [1] .document.getElementsByTagName ('view') [0];
  • FIG. 7 shows an example of MMT-CI.
  • the html element has a head element and a body element. And head element has title element and view element. In the title element, text data indicating a title is present.
  • the view element has two divLocation elements. Also, the body element has two div elements. And one div element has a video element and an audio element, and the other div element has two img elements.
  • FIG. 8 shows an example of this MMT-CI DOM tree.
  • FIG. 9 shows an example of the HTML document.
  • scripts for accessing various elements and acquiring the elements exist.
  • FIG. 10 shows an example of a DOM tree of this HTML document.
  • FIG. 11 shows an example in which the MMT-CI DOM tree is joined to the subordinate of the video element of this HTML document DOM tree.
  • an MMT stream is transmitted to the receiving side through the RF transmission path.
  • an MMT stream is transmitted to the receiving side through a communication network channel such as the Internet 300.
  • the IP / RF receiver 204 of the receiver 200 receives the MMT stream sent from the broadcast station 110 or the streaming server 120. This MMT stream is supplied to the MMT decoding unit 205.
  • the MMT decoding unit 205 performs unpacketization and decoding processing of MMT packets included in the MMT stream to obtain data such as video, audio, and image as media data, and further, metadata and messages. .
  • the MMT decoding unit 205 can also obtain MMT-CI in which changes due to screen configuration and time are described. Then, the MMT decoding unit 205 analyzes this MMT-CI, and a DOM tree of this MMT-CI is generated. Various data obtained by the MMT decoding unit 205 are supplied to the MMT player 206.
  • the MMT player 206 based on the data such as video, audio, and image obtained by the MMT decoding unit 205, the image and sound corresponding to the configuration (layout) of the screen specified by the MMT-CI and changes with time, etc. Output data is generated. The output data of this image and sound is supplied to the output unit 203. When displaying the MMT surface, the output unit 203 performs image display and audio output based on the output data of the image and audio generated by the MMT player 206.
  • an HTML 5 document for displaying a web page (HTML 5 application) is transmitted to the receiving side through a communication network transmission line such as the Internet 300. Be done.
  • the IP receiving unit 201 of the receiver 200 receives the HTML5 document (HTML file) sent from the web server 130. This HTML5 document is supplied to the web browser 202.
  • the HTML 5 document received by the IP reception unit 201 is analyzed to generate a DOM tree, and output data of image and sound is generated based on the DOM tree and the like.
  • the MMT decoding unit 205 when generating a DOM tree, if there is a video (video) element referring to the MMT stream in the HTML5 document, the MMT decoding unit 205 generates it under the node of this video element as described above.
  • the MMT-CI DOM tree is combined (see FIG. 8, FIG. 10, and FIG. 11).
  • Output data of images and sounds generated by the web browser 202 is supplied to the output unit 203.
  • the output unit 203 performs image display and audio output based on the output data of the image and audio generated by the web browser 202.
  • the MMT plane is inserted and displayed in a predetermined area of the browser plane (see FIG. 3).
  • the web browser 202 accesses a predetermined element of the MMT-CI based on the combined DOM tree by operation of the viewer or automatically, and acquires and uses the element of the MMT-CI. For example, based on this acquisition element, displaying information related to presentation control of the MMT surface is performed on the browser surface.
  • the web browser 202 for example, when the HTML document includes a script for accessing a predetermined element of MMT-CI, the script is used to obtain the predetermined element of MMT-CI. In some cases, acquisition of a predetermined element of the HTML document is also performed.
  • FIG. 12 shows an example of the browser surface.
  • the MMT plane is inserted in a partial area of the browser plane.
  • the display area of this MMT plane is divided into two, in one area video (video) and audio (audio) are displayed, and in the other area Image 1 (Image 1) is displayed.
  • Image 1 Image 1
  • “Display time of Image 2: 18:00” is displayed near the display area of the MMT surface.
  • This display information is, for example, a specific element of the MMT-CI and the HTML document acquired using the script included in the HTML document of FIG. , And “text data indicating“ display start time of image 2 ”) are used. Based on this display, the viewer on the browser side knows in advance that Image 1 (Image 1) displayed in the display area on the MMT side will switch to Image 2 (Image 2) when the time becomes 18:00. be able to.
  • the elements of MMT-CI can be accessed from the HTML application side. Then, for example, information related to presentation control of the MMT plane can be displayed on the browser plane (web page display plane) based on a predetermined element of the acquired MMT-CI. Thus, the user (viewer) can know information related to presentation control of transmission media presented on the browser surface.
  • the HTML document transmitted from the web server 130 includes reference information for acquiring a program (script) for accessing a specific element of MMT-CI.
  • the web browser 202 acquires, for example, a script file including a program (script) for accessing a specific element of the MMT-CI from the web server 130 based on the reference information.
  • FIG. 13A shows an example of the HTML document in that case.
  • FIG. 13B shows an example of a script file including a program (script) for accessing a specific element of MMT-CI in that case.
  • a transmission media stream is an MMT stream
  • this technique is similarly applicable to the display system which handles the transmission media stream similar to this MMT stream.
  • the second HTML document is the MMT-CI
  • the second HTML document is, for example, data having an HTML structure mapped to the data structure of MPEG2-TS.
  • the MMT decoding unit 205 and the MMT player 206 exist separately from the web browser 202 as the receiver 200 has been shown.
  • the web browser 202 having the functions of the MMT decoding unit 205 and the MMT player 206. In that case, the MMT decoding unit 205 and the MMT player 206 become unnecessary.
  • the present technology can also be configured as follows. (1) a first receiving unit for receiving a first HTML document for displaying a web page; A second receiving unit for receiving a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media; A DOM tree generation unit for generating a DOM tree of the first HTML document received by the first reception unit; The DOM tree generation unit When a video element referencing the transmission media stream is present in the first HTML document, it is generated under the node of the video element corresponding to the second HTML document included in the transmission media stream A receiver that combines DOM trees.
  • the receiving device further including: an element acquisition unit configured to acquire a predetermined element of the second HTML document based on the DOM tree generated by the DOM tree generation unit.
  • the display device further includes a display control unit that controls the display of the web page based on the DOM tree generated by the DOM tree generation unit.
  • the display control unit The information related to the presentation control of the predetermined number of transmission media is displayed on the web page display surface based on the predetermined element of the second HTML document acquired by the element acquisition unit.
  • the first HTML document includes a program for accessing a specific element of the second HTML document, The reception device according to (2) or (3), wherein the element acquisition unit acquires a specific element of the second HTML document based on the program.
  • the first HTML document includes reference information for acquiring a program for accessing a specific element of the second HTML document,
  • the receiving device according to (2) or (3), wherein the element acquisition unit acquires a specific element of the second HTML document based on the program acquired using the reference information.
  • the transmission media stream is a transmission stream in which a first transmission packet including the transmission media in a payload and a second transmission packet including information on the transmission media are multiplexed in a time division manner.
  • the receiver according to any one of (1) to (5).
  • the transmission packet is an MMT packet,
  • the receiving apparatus according to (6), wherein the second HTML document is MMT-CI.
  • a first receiving unit for receiving a first HTML document for displaying a web page;
  • An information processing method in a receiving apparatus comprising: a predetermined number of transmission media; and a second receiving unit that receives a transmission media stream including a second HTML document as presentation control information of the transmission media.
  • Generating a DOM tree of the first HTML document received by the first receiver When a video element referencing the transmission media stream is present in the first HTML document, it is generated under the node of the video element corresponding to the second HTML document included in the transmission media stream Combining the DOM trees.
  • a specific element of the second HTML document is accessed while including a video element referring to the transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media.
  • the transmission media stream is a transmission stream in which a first transmission packet including the transmission media in a payload and a second transmission packet including information on the transmission media are multiplexed in a time division manner.
  • the transmission packet is an MMT packet
  • the transmission apparatus according to (10), wherein the second HTML document is MMT-CI.
  • a data acquisition unit that acquires a first HTML document for displaying a web page
  • a DOM tree generation unit that analyzes the first HTML document acquired by the data acquisition unit and generates a DOM tree in which a plurality of elements are linked to each other
  • the DOM tree generation unit When a video element referencing a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media is present in the first HTML document, the video element is subordinate to the video element,
  • An information processing apparatus which combines a DOM tree generated corresponding to the second HTML document included in the transmission media stream.
  • a DOM tree generation step When a video element referencing a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media is present in the first HTML document, the video element is subordinate to the video element, An information processing method for combining a DOM tree generated corresponding to the second HTML document included in the transmission media stream.
  • a data acquisition unit that acquires first display control data including a plurality of structural units in which information related to display control is described;
  • a structured data generation unit that analyzes the first display control data acquired by the data acquisition unit and generates structured data in which a plurality of structural units are linked to each other;
  • the structured data generation unit A predetermined structure referring to a transmission media stream including, in the first display control data, a second number of transmission media and a second display control data including a plurality of structural units in which presentation control information of the transmission media is described.
  • An information processing apparatus comprising: when a unit exists, structured data generated corresponding to the second display control data included in the transmission media stream under the predetermined structural unit.
  • a predetermined structure referring to a transmission media stream including, in the first display control data, a second number of transmission media and a second display control data including a plurality of structural units in which presentation control information of the transmission media is described.
  • An information processing method comprising combining structured data generated corresponding to the second display control data included in the transmission media stream under the predetermined structural unit when a unit exists.
  • a first transmitting device for transmitting a first HTML document for displaying a web page
  • a second transmission device for transmitting a transmission media stream including a predetermined number of transmission media and a second HTML document as presentation control information of the transmission media
  • a first reception unit for receiving the first HTML document transmitted from the first transmission device
  • a second reception unit for receiving the transmission media stream transmitted from the second transmission device.
  • the above receiver is A DOM tree generation unit for generating a DOM tree of the first HTML document received by the first reception unit; A display control unit configured to control display of the web page based on the DOM tree generated by the DOM tree generation unit; The DOM tree generation unit When a video element referencing the transmission media stream is present in the first HTML document, it is generated under the node of the video element corresponding to the second HTML document included in the transmission media stream A display system that combines DOM trees.
  • the main feature of this technology is that, when generating a DOM tree of HTML document (HTML application) for displaying a web page, there is a video element referring to the MMT stream under the node of the video element, By combining the MMT-CI DOM tree, the elements of the MMT-CI can be accessed from the HTML application side (see FIG. 5).
  • DESCRIPTION OF SYMBOLS 10 ... Display system 110 ... Broadcasting station 120 ... Streaming server 130 ... Web server 200 ... Receiver 201 ... IP receiving part 202 ... Web browser 202a ... HTML parsing part 202b ... HTML DOM processing unit 202c ... HTML layout processing unit 202d ... HTML rendering processing unit 203 ... Output unit 204 ... IP / RF receiving unit 205 ... MMT decoding unit 206 ... MMT Player 300 ... Internet

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Document Processing Apparatus (AREA)

Abstract

　伝送メディアストリームに含まれる提示制御情報（ＨＴＭＬ文書）の要素にＨＴＭＬアプリケーション側からアクセス可能にする。　ウェブページを表示するための第１のＨＴＭＬ文書を受信する。また、所定数の伝送メディアとこの伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを受信する。第１のＨＴＭＬ文書のＤＯＭツリーを生成する。その際、第１のＨＴＭＬ文書に伝送メディアストリームを参照するビデオ要素が存在するとき、このビデオ要素のノードの配下に、伝送メディアストリームに含まれる第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する。

Description

受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法
　本技術は、受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法に関し、詳しくは、ウェブページを表示するためのＨＴＭＬ文書などの表示制御データを受信して処理をする受信装置等に関する。
　ウェブ（Ｗｅｂ）ページの表示は、ウェブブラウザにより行われる。この際、ウェブブラウザは、ウェブサーバからＨＴＭＬ文書（ＨＴＭＬファイル）を取得し、解析してＤＯＭ（Document Object Model）ツリーを生成し、このＤＯＭツリーに基づいて各種の描画要素を生成してウェブページを表示する（例えば、特許文献１参照）。
　Ｗ３Ｃ(World Wide Web Consortium) の規格に、ＤＯＭ(Document Object Model)がある。ＤＯＭは、一つのＨＴＭＬ文書に対して、一番外側のタグである <html> を頂点のノードとするツリー構造を規定して、JavaScriptによる動的な処理をタグの各パラメタに適用させるためのインタフェースを決めたものである。なお、「JavaScript」は登録商標である。
　近年、次世代放送向けのトランスポート方式として、ＭＭＴ（MPEG Media Transport：ISO/IEC 23008-1）で規定される方式が脚光を浴びつつある。ＭＭＴには、トランスポート層だけでなく、画面の構成や時間による変化を記載したＭＭＴ－ＣＩ(Composition Information)と呼ばれるデータ構造が規定されている。このＭＭＴ－ＣＩは、ビデオ、オーディオ、イメージなどの伝送メディアの提示制御情報を構成している。このＭＭＴ－ＣＩは、ＨＴＭＬ５によって記述されている。
特開２０１１－０６５４８９号公報
　ウェブサーバからのＨＴＭＬ５文書にビデオ（Video）要素が存在する場合がある。この場合、ウェブブラウザで表示されるウェブページ面の所定領域に、そのビデオ要素による動画表示が行われる。この場合、ビデオ要素のソースとして、ＭＭＴの伝送メディアストリームを参照する場合も考えられる。
　本技術の目的は、伝送メディアストリームに含まれる提示制御情報（ＨＴＭＬ文書）の要素にＨＴＭＬアプリケーション側からアクセス可能にすることにある。
　本技術の概念は、
　ウェブページを表示するための第１のＨＴＭＬ文書を受信する第１の受信部と、
　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを受信する第２の受信部と、
　上記第１の受信部で受信された上記第１のＨＴＭＬ文書のＤＯＭツリーを生成するＤＯＭツリー生成部とを備え、
　上記ＤＯＭツリー生成部は、
　上記第１のＨＴＭＬ文書に上記伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素のノードの配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
　受信装置にある。
　本技術において、第１の受信部により、ウェブページを表示するための第１のＨＴＭＬ文書が受信される。また、第２の受信部により、伝送メディアストリームが受信される。この伝送メディアストリームには、所定数の伝送メディアとこの伝送メディアの提示制御情報としての第２のＨＴＭＬ文書が含まれている。
　例えば、伝送メディアストリームは、伝送メディアをペイロードに含む第１の伝送パケットと、伝送メディアに関する情報を含む第２の伝送パケットとが時分割的に多重化された伝送ストリームである、ようにされてもよい。そして、この場合、伝送パケットはＭＭＴパケットであり、第２のＨＴＭＬ文書はＭＭＴ－ＣＩである、ようにされてもよい。例えば、第２のＨＴＭＬ文書に関しては、ＭＰＥＧ２－ＴＳのデータ構造を写像したＨＴＭＬ構造を持つデータであってもよい。
　ＤＯＭツリー生成部により、第１の受信部で受信された第１のＨＴＭＬ文書のＤＯＭツリーが生成される。そして、第１のＨＴＭＬ文書に伝送メディアストリームを参照するビデオ要素が存在するとき、このビデオ要素のノードの配下に、伝送メディアストリームに含まれる第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーが結合される。
　このように本技術においては、第１のＨＴＭＬ文書のＤＯＭツリーを生成する際に、そのビデオ要素のノードの配下に、第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合するものである。そのため、伝送メディアストリームに含まれる提示制御情報（ＨＴＭＬ文書）の要素にＨＴＭＬアプリケーション側からアクセスすることが可能になる。
　なお、本技術において、例えば、ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づき、第２のＨＴＭＬ文書の所定の要素を取得する要素取得部をさらに備える、ようにされてもよい。この場合、例えば、ＨＴＭＬアプリケーション側において、第２のＨＴＭＬ文書の所定の要素を取得し、利用することが可能になる。
　例えば、ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づきウェブページの表示を制御する表示制御部をさらに備え、表示制御部は、要素取得部で取得された第２のＨＴＭＬ文書の所定の要素に基づき、ウェブページ表示面に、所定数の伝送メディアの提示制御に関連する情報を表示する、ようにされてもよい。この場合、例えば、ユーザはウェブページ表示面に提示される所定数の伝送メディアの提示制御に関連する情報を知ることができる。
　また、例えば、第１のＨＴＭＬ文書には、第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラムが含まれており、要素取得部は、このプログラムに基づいて、第２のＨＴＭＬ文書の特定の要素を取得する、ようにされてもよい。この場合、例えば、ＨＴＭＬアプリケーション側において、第２のＨＴＭＬ文書の所定の要素を容易に取得可能となる。
　また、例えば、第１のＨＴＭＬ文書には、第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラムを取得するための参照情報が含まれており、要素取得部は、参照情報を用いて取得されたプログラムに基づいて、第２のＨＴＭＬ文書の特定の要素を取得する、ようにされてもよい。この場合、例えば、ＨＴＭＬアプリケーション側において、第２のＨＴＭＬ文書の所定の要素を容易に取得可能となる。
　また、本技術の他の概念は、
　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素を含むと共に、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラム、あるいは該プログラムを取得するための参照情報を含む、ウェブページを表示するための第１のＨＴＭＬ文書を保持する保持部と、
　上記保持されている第１のＨＴＭＬ文書を送信する送信部とを備える
　送信装置にある。
　本技術において、保持部には、ウェブページを表示するための第１のＨＴＭＬ文書が保持される。そして、この第１のＨＴＭＬ文書には、所定数の伝送メディアとこの伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が含まれている。また、この第１のＨＴＭＬ文書には、第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラム、あるいは該プログラムを取得するための参照情報が含まれている。送信部により、保持されている第１のＨＴＭＬ文書が送信される。
　例えば、伝送メディアストリームは、伝送メディアをペイロードに含む第１の伝送パケットと、伝送メディアに関する情報を含む第２の伝送パケットとが時分割的に多重化された伝送ストリームである、ようにされてもよい。そして、この場合、伝送パケットはＭＭＴパケットであり、第２のＨＴＭＬ文書はＭＭＴ－ＣＩである、ようにされてもよい。
　このように本技術においては、送信部から送信されるウェブページを表示するための第１のＨＴＭＬ文書に、伝送メディアストリームに含まれる第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラム、あるいはそれを取得するための参照情報が含まれるものである。そのため、受信部では、ＨＴＭＬアプリケーション側において、第２のＨＴＭＬ文書の所定の要素を容易に取得可能となる。
　また、本技術の他の概念は、
　ウェブページを表示するための第１のＨＴＭＬ文書を取得するデータ取得部と、
　上記データ取得部で取得された上記第１のＨＴＭＬ文書を解析して複数の要素を相互にひも付けしたＤＯＭツリーを生成するＤＯＭツリー生成部とを備え、
　上記ＤＯＭツリー生成部は、
　上記第１のＨＴＭＬ文書に、所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素の配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
　情報処理装置にある。
　本技術において、データ取得部により、ウェブページを表示するための第１のＨＴＭＬ文書が取得される。そして、ＤＯＭツリー生成部により、データ取得部で取得された第１のＨＴＭＬ文書が解析され、複数の要素が相互にひも付けされたＤＯＭツリーが生成される。
　この場合、第１のＨＴＭＬ文書に、所定数の伝送メディアとこの伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が存在するとき、このビデオ要素の配下に、伝送メディアストリームに含まれる第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーが結合される。
　このように本技術においては、第１のＨＴＭＬ文書のＤＯＭツリーのビデオ要素のノードの配下に、第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーが結合されるものである。そのため、伝送メディアストリームに含まれる提示制御情報（ＨＴＭＬ文書）の要素にＨＴＭＬアプリケーション側からアクセスすることが可能になる。
　また、本技術の他の概念は、
　表示制御に関する情報が記述された複数の構造単位を含む第１の表示制御データを取得するデータ取得部と、
　上記データ取得部で取得された上記第１の表示制御データを解析して複数の構造単位を相互にひも付けした構造化データを生成する構造化データ生成部とを備え、
　上記構造化データ生成部は、
　上記第１の表示制御データに、所定数の伝送メディアと該伝送メディアの提示制御情報が記述された複数の構造単位を含む第２の表示制御データとを含む伝送メディアストリームを参照する所定の構造単位が存在するとき、該所定構造単位の配下に、上記伝送メディアストリームに含まれる上記第２の表示制御データに対応して生成された構造化データを結合する
　情報処理装置にある。
　本技術によれば、例えば、伝送メディアストリームに含まれる提示制御情報（ＨＴＭＬ文書）の内容をＨＴＭＬアプリケーション側からアクセスすることが可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としての表示システムの構成例を示すブロック図である。 ＭＭＴ－ＣＩの基本構造を示す図である。 ＨＴＭＬ５文書にＭＭＴストリームを参照するビデオ（video）要素が存在する場合におけるブラウザ面とＭＭＴ面の関係を示す図である。 ウェブブラウザのＨＴＭＬＤＯＭ処理部におけるＤＯＭツリーの生成処理の一例を示すフローチャートである。 ＨＴＭＬ文書のＤＯＭツリーと、これに結合されたＭＭＴ－ＣＩのＤＯＭツリーの相関関係の一例を示す図である。 ＨＴＭＬ文書のＤＯＭツリーと、これに結合された２つのＭＭＴ－ＣＩのＤＯＭツリーの相関関係の一例を示す図である。 ＭＭＴ－ＣＩの一例を示す図である。 ＭＭＴ－ＣＩのＤＯＭツリー例を示す図である。 ＨＴＭＬ文書の一例を示す図である。 ＨＴＭＬ文書のＤＯＭツリー例を示す図である。 ＨＴＭＬ文書のＤＯＭツリーのvideo要素の配下にＭＭＴ－ＣＩのＤＯＭツリーを結合した例を示す図である。 一部領域にＭＭＴ面が表示されているブラウザ面の一例を示す図である。 ＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）の参照情報を含むＨＴＭＬ文書の一例と、ＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）を含むスクリプトファイルの一例を示す図である。
　以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
　１．実施の形態
　２．変形例
　＜１．実施の形態＞
　［表示システムの構成例］
　図１は、表示システム１０の構成例を示している。この表示システム１０において、送信側には放送局１１０、ストリーミングサーバ１２０およびウェブ（Web）サーバ１３０が配置され、受信側には受信機２００が配置されている。
　放送局１１０は、ＭＭＴ構造（ISO/IEC CD 23008-1参照）のトランスポートパケット、つまりＭＭＴパケットが含まれる伝送メディアストリームを生成し、この伝送メディアストリームを、ＲＦ伝送路を通じて受信側に送信する。以下、適宜、この伝送メディアストリームを「ＭＭＴストリーム」と呼ぶことにする。この場合、放送局１１０は、ＭＭＴストリームを適切なアダプテーションレイヤを介するなどしてＲＦ変調した後、ＲＦ伝送路を通じて受信側に送る。
　ストリーミングサーバ１２０は、上述の放送局１１０で取り扱ったと同様のＭＭＴストリームを、例えば、インターネット３００などの通信ネットワーク伝送路を通じて、受信側に送信する。この場合、ストリーミングサーバ１２０は、ＭＭＴストリームをＩＰパケット化し、通信ネットワーク伝送路を通じて受信側に送る。
　このＭＭＴストリームには、ペイロードにビデオ、オーディオなどの伝送メディアを含む第１のＭＭＴパケットと、ペイロードに伝送メディアに関する情報を含む第２のＭＭＴパケットが、少なくともフラグメントされたパケットの大きさで時分割的に多重化されている。伝送メディアに関する情報の一つとして、画面の構成や時間による変化を記載したＭＭＴ－ＣＩ(Composition Information)と呼ばれるデータ構造が規定されている。このＭＭＴ－ＣＩは、ビデオ、オーディオ、イメージなどの伝送メディアの提示制御情報を構成している。このＭＭＴ－ＣＩは、ＨＴＭＬ５によって記述されている。
　図２は、ＭＭＴ－ＣＩの基本構造を示している。Root要素は、「html」であり、head要素およびbody要素を持つ。head要素は、title要素の他に、複数のview要素を持ち、各view要素は複数のdivLocation要素を持つ。また、body要素は複数のdiv要素を持つ。div要素の中には、ビデオ（video）、オーディオ（audio）、イメージ（img）などを置くことができる。各メディア指定には、source要素、あるいは、src属性を使用する。view要素は、bodyのdivの表示位置を決めるが、初期位置は、その配下にあるdivLocation要素で決定する。divLocation要素は、時系列に変化する表示位置を順次表わす。そのため、ページのreloadなしに表示位置はdivLocation要素に従って変化する。
　図１に戻って、ウェブサーバ１３０は、ウェブページ（ＨＴＭＬ５アプリケーション）を表示するためのＨＴＭＬ５文書（ＨＴＭＬファイル）をストレージなどの保持部に保持している。ウェブサーバ１３０は、受信側からの要求に応じて、保持部に保持されているＨＴＭＬ５文書を、ＩＰ送信部により、インターネット３００などの通信ネットワーク伝送路を通じて、受信側に伝送する。ＨＴＭＬ５では、周知のように、ビデオ（video）要素の存在が許容されている。例えば、ウェブサーバ１３０から受信側に送信されるＨＴＭＬ５文書にはビデオ要素が存在し、そのソースがＭＭＴストリームということもある。その場合、ビデオ要素として、ＭＭＴストリームを参照するための参照情報が存在する。
　受信機２００は、ＩＰ受信部２０１と、ウェブ（Web）ブラウザ２０２と、出力部２０３と、ＩＰ/ＲＦ受信部２０４と、ＭＭＴデコード部２０５と、ＭＭＴプレーヤ２０６を有している。ＩＰ/ＲＦ受信部２０４は、放送局１１０からＲＦ伝送路を通じて送られてくるＭＭＴストリームをアダプテーションレイヤの解析を経て受信する、あるいは、ウェブサーバ１３０から通信ネットワーク伝送路を通じて送られてくるＭＭＴストリームを受信する。
　ＭＭＴデコード部２０５は、ＩＰ/ＲＦ受信部２０４で受信されたＭＭＴストリームに含まれるＭＭＴパケットのアンパケット化、さらには復号化処理を行って、メディアデータとしてのビデオ、オーディオ、イメージなどのデータを得る他、メタデータやメッセージを得る。この場合、画面の構成や時間による変化を記載したＭＭＴ－ＣＩも得られる。ＭＭＴデコード部２０５は、このＭＭＴ－ＣＩのＤＯＭ（Document Object Model）ツリーを生成することも行う。
　ＭＭＴプレーヤ２０６は、ＭＭＴデコード部２０５で得られたビデオ、オーディオ、イメージなどのデータに基づいて、ＭＭＴ－ＣＩで指定される画面の構成（レイアウト）や時間による変化などに対応した画像、音声の出力データを生成する。
　出力部２０３は、ＭＭＴプレーヤ２０６で生成された画像、音声の出力データ、あるいはウェブブラウザ２０２で生成された画像、音声の出力データに基づいて、画像表示、音声出力を行う。この出力部は、画像表示を行うディスプレイ、音声出力を行うスピーカなどで構成される。
　ＩＰ受信部２０１は、ウェブサーバ１３０からインターネット３００などの通信ネットワーク伝送路を通じて送られてくるＨＴＭＬ５文書（ＨＴＭＬファイル）を受信する。ウェブブラウザ２０２は、ＩＰ受信部２０１で受信されたＨＴＭＬ５文書を解析してＤＯＭツリーを生成し、このＤＯＭツリーなどに基づいて、画像、音声の出力データを生成する。
　ウェブブラウザ２０２は、ＨＴＭＬ５文書を解析するＨＴＭＬパース部２０２ａと、その解析結果に基づいてＤＯＭツリーを生成するＨＴＭＬＤＯＭ処理部２０２ｂを有する。また、このウェブブラウザ２０２は、ＤＯＭツリーなどに基づいて、レイアウト処理やレンダリング処理を行って、画像、音声の出力データを生成するＨＴＭＬレイアウト処理部２０２ｃ、ＨＴＭＬレンダリング処理部２０２ｄを有する。
　この実施の形態において、ＨＴＭＬＤＯＭ処理部２０２ｂは、ＨＴＭＬ５文書にＭＭＴストリームを参照するビデオ（video）要素が存在するとき、このビデオ要素のノードの配下に、上述したようにＭＭＴデコード部２０５で生成されたＭＭＴ－ＣＩのＤＯＭツリーを結合する。このようなＤＯＭツリーの結合を行うことで、ウェブブラウザ２０２が取り扱うＨＴＭＬアプリケーション側からＭＭＴ－ＣＩの要素にアクセスすることが可能となる。
　図３は、ＨＴＭＬ５文書にＭＭＴストリームを参照するビデオ（video）要素が存在する場合におけるブラウザ面（ＨＴＭＬ５）とＭＭＴ面の関係を示している。この場合、ブラウザ面の一部に、ＭＭＴ面が挿入された状態となる。ここで、ブラウザ面の一部にＭＭＴ面を挿入する際のサイズ調整などはウェブブラウザ２０２のＨＴＭＬレンダリング処理部２０２ｄにおいて行われる。
　図４のフローチャートは、ウェブブラウザ２０２のＨＴＭＬＤＯＭ処理部２０２ｂにおけるＤＯＭツリーの生成処理の一例を示している。ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ１において、ＤＯＭツリーの生成処理を開始し、その後に、ステップＳＴ２において、ｉ＝０に設定する。
　次に、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ３において、ＨＴＭＬ文書にパース（解析）する要素があるか否かを判断する。パースする要素があるとき、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ４において、ＨＴＭＬ文書の要素をタグ毎にパースする。
　次に、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ５において、パースしたＨＴＭＬ文書の要素にvideo要素があるか否かを判断する。要素にvideo要素があるとき、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ６において、ソースがＭＭＴストリームであるか否かを判断する。
　ソースがＭＭＴストリームであるとき、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ７において、video要素のノードの配下に、ＭＭＴ－ＣＩのＤＯＭツリーを結合する。すなわち、ＨＴＭＬＤＯＭ処理部２０２ｂは、otherPlane[i]としてのＭＭＴプレーンのＤＯＭツリーのdocumentを、video要素の子ノードにつなぐ。
　次に、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ８において、ｉの値をインクリメントし、その後に、ステップＳＴ３の処理に戻り、上述したと同様の処理を繰り返す。なお、ステップＳＴ５でvideo要素がないとき、およびステップＳＴ６でvideo要素のソースがＭＭＴストリームでないとき、直ちに、ステップＳＴ３の処理に戻る。また、ステップＳＴ３でＨＴＭＬ文書の全ての要素がパースされてパースする要素がないとき、ＨＴＭＬＤＯＭ処理部２０２ｂは、ステップＳＴ９に進み、ＤＯＭツリーの生成処理を終了する。
　図５は、ＨＴＭＬ文書のＤＯＭツリーと、これに結合されたＭＭＴ－ＣＩのＤＯＭツリーの相関関係の一例を示している。このＤＯＭツリーにより、ＨＴＭＬ文書の各要素と共に、ＭＭＴ－ＣＩの各要素にもアクセスできる。
　例えば、ＨＴＭＬ文書のvideo要素へのアクセスは、以下のようなスクリプト（script）により行うことができる。
　var videoElm =
　document.getElementsByTagName('video')[0];
　または、ＨＴＭＬ文書のvideo要素へのアクセスは、video要素にidをつければ、以下のようなスクリプトにより行うことができる。
　var videoElm =
　 document.getElementByID("v1");
　また、ＭＭＴ－ＣＩの各要素、例えばview要素へのアクセスは、以下のようなスクリプトにより行うことができる。このスクリプトは、ＨＴＭＬ文書のvideo要素からＭＭＴ－ＣＩのview要素にアクセスする場合の例である。
　var mmtElm =
 videoElm.otherPlane[0].document.getElementsByTagName('view')[0];
　また、ＨＴＭＬ文書のトップからＭＭＴ－ＣＩのview要素への相対アクセスも考えられる。その場合のスクリプト例は、以下のようになる。
　var mmtElm =
 document.firstChild.firstChild.childNode [1].otherPlane
[0].document.getElementsByTagName('view')[0];
　なお、ＭＭＴ－ＣＩのＤＯＭは、時系列に沿って適宜更新されていくので、ＨＴＭＬアプリケーションから動的に書き換えると整合性がとれなくなる。そのため、読み出しのみ（read only）とする必要がある。つまり、otherPlane以降のＤＯＭアクセスは全てリードオンリー（read only）とされる。
　図６は、ＨＴＭＬ文書のＤＯＭツリーと、これに結合された２つのＭＭＴ－ＣＩのＤＯＭツリーの相関関係の一例を示している。このＤＯＭツリーにより、ＨＴＭＬ文書の各要素と共に、２つのＭＭＴ－ＣＩの各要素にもアクセスできる。
　例えば、ＤＯＭツリー（otherPlane[i]）のＭＭＴ－ＣＩのview要素へのアクセスは、以下のようなスクリプト（script）により行うことができる。
　var mmtElm =
 document.firstChild.firstChild.childNode [1].otherPlane[1].document.getElementsByTagName('view')[0];
　図７は、ＭＭＴ－ＣＩの一例を示している。html要素は、head要素とbody要素を持つ。そして、head要素は、title要素とview要素を持つ。title要素には、タイトルを示すテキストデータが存在する。view要素は、２つのdivLocation要素を持つ。また、body要素は、２つのdiv要素を持つ。そして、一方のdiv要素はvideo要素とaudio要素を持ち、他方のdiv要素は２つのimg要素を持つ。図８は、このＭＭＴ－ＣＩのＤＯＭツリー例を示している。
　図９は、ＨＴＭＬ文書の一例を示している。html要素は、head要素とbody要素を持つ。そして、head要素は、title要素を持つ。title要素には、タイトルを示すテキストデータが存在する。また、body要素は、div要素とscript要素を持つ。div要素は、p要素とvideo要素を持つ。p要素には、「image2の表示開始時間」を示すテキストデータが存在する。video要素として、ＭＭＴストリームの参照情報「src="http://sample.mmt"」が存在する。
　script要素として、各種要素にアクセスしてその要素を取得するためのスクリプトが存在する。ここで、「var videoElm = document.getElementsByTagName('video')[0];」は、ＨＴＭＬ文書のvideo要素にアクセスするためのスクリプトである。また、「var mmtElm = videoElm.otherPlain[0].document.getElementsByTagName('view')[0];」は、ＨＴＭＬ文書のvideo要素からＭＭＴ－ＣＩのview要素にアクセスするためのスクリプトである。
　さらに、「var endtime = mmtElm.getElememtById('Image1').getAttributeNode("MMT-CI:end").nodeValue;」は、ＭＭＴ－ＣＩのimage1要素にアクセスして、“end”の値を取得するためのスクリプトである。このスクリプトにより、表示終了時間の値である“18:00”を取得できる。
　また、「var pelm = document.getElementsByTagName('p')[0];」および「pelm.innerText = pelm.innerText + endtime;」は、ＭＭＴ－ＣＩのp要素にアクセスして、「image2の表示開始時間」を示すテキストデータを取得するためのスクリプトである。
　図１０は、このＨＴＭＬ文書のＤＯＭツリー例を示している。そして、図１１は、このＨＴＭＬ文書のＤＯＭツリーのvideo要素の配下にＭＭＴ－ＣＩのＤＯＭツリーを結合した例を示している。
　図１に示す表示システム１０の動作を簡単に説明する。放送局１１０から、ＭＭＴストリームが、ＲＦ伝送路を通じて、受信側に送信される。あるいは、ストリーミングサーバ１２０から、ＭＭＴストリームが、インターネット３００などの通信ネットワーク伝送路を通じて、受信側に送信される。
　受信機２００のＩＰ/ＲＦ受信部２０４では、放送局１１０あるいはストリーミングサーバ１２０から送られてくるＭＭＴストリームが受信される。このＭＭＴストリームは、ＭＭＴデコード部２０５に供給される。ＭＭＴデコード部２０５では、ＭＭＴストリームに含まれるＭＭＴパケットのアンパケット化、さらには復号化処理が行われて、メディアデータとしてのビデオ、オーディオ、イメージなどのデータ、さらにはメタデータやメッセージが得られる。
　また、ＭＭＴデコード部２０５では、画面の構成や時間による変化を記載したＭＭＴ－ＣＩも得られる。そして、ＭＭＴデコード部２０５では、このＭＭＴ－ＣＩの解析が行われ、このＭＭＴ－ＣＩのＤＯＭツリーが生成される。ＭＭＴデコード部２０５で得られる各種のデータは、ＭＭＴプレーヤ２０６に供給される。
　ＭＭＴプレーヤ２０６では、ＭＭＴデコード部２０５で得られたビデオ、オーディオ、イメージなどのデータに基づいて、ＭＭＴ－ＣＩで指定される画面の構成（レイアウト）や時間による変化などに対応した画像、音声の出力データが生成される。この画像、音声の出力データは、出力部２０３に供給される。出力部２０３では、ＭＭＴ面の表示時には、ＭＭＴプレーヤ２０６で生成された画像、音声の出力データに基づいて、画像表示、音声出力が行われる。
　また、ウェブサーバ１３０からは、受信側からの要求に応じて、ウェブページ（ＨＴＭＬ５アプリケーション）を表示するためのＨＴＭＬ５文書（ＨＴＭＬファイル）が、インターネット３００などの通信ネットワーク伝送路を通じて、受信側に伝送される。受信機２００のＩＰ受信部２０１では、ウェブサーバ１３０から送られてくるＨＴＭＬ５文書（ＨＴＭＬファイル）が受信される。このＨＴＭＬ５文書は、ウェブブラウザ２０２に供給される。
　ウェブブラウザ２０２では、ＩＰ受信部２０１で受信されたＨＴＭＬ５文書が解析されてＤＯＭツリーが生成され、このＤＯＭツリーなどに基づいて、画像、音声の出力データが生成される。ウェブブラウザ２０２では、ＤＯＭツリーを生成する際、ＨＴＭＬ５文書にＭＭＴストリームを参照するビデオ（video）要素が存在するときには、このビデオ要素のノードの配下に、上述したようにＭＭＴデコード部２０５で生成されたＭＭＴ－ＣＩのＤＯＭツリーが結合される（図８、図１０、図１１参照）。
　ウェブブラウザ２０２で生成された画像、音声の出力データは、出力部２０３に供給される。出力部２０３では、ブラウザ面の表示時には、ウェブブラウザ２０２で生成された画像、音声の出力データに基づいて、画像表示、音声出力が行われる。ここで、ＨＴＭＬ文書にＭＭＴストリームを参照するビデオ（video）要素が存在するときには、ブラウザ面の所定の領域に、ＭＭＴ面が挿入表示される（図３参照）。
　ウェブブラウザ２０２では、視聴者の操作により、あるいは、自動的に、結合ＤＯＭツリーに基づき、ＭＭＴ－ＣＩの所定の要素にアクセスし、その要素を取得して、利用することが行われる。例えば、この取得要素に基づき、ブラウザ面に、ＭＭＴ面の提示制御に関連する情報を表示することが行われる。ウェブブラウザ２０２では、例えば、ＨＴＭＬ文書にＭＭＴ－ＣＩの所定の要素にアクセスするためのスクリプトが含まれているとき、そのスクリプトを用いて、ＭＭＴ－ＣＩの所定の要素の取得が行われる。なお、場合によっては、ＨＴＭＬ文書の所定の要素の取得も行われる。
　図１２は、ブラウザ面の一例を示している。このブラウザ面の一部領域にＭＭＴ面が挿入されている。このＭＭＴ面の表示領域は２つに分割され、一方の領域にはビデオ（video）およびオーディオ（audio）が表示され、他方の領域にはイメージ１（Image 1）が表示されている。ブラウザ面には、ＭＭＴ面の表示領域の近傍に「Image 2の表示時間：18:00」が表示されている。
　この表示情報は、例えば、上述の図９のＨＴＭＬ文書に含まれているスクリプトを用いて取得されたＭＭＴ－ＣＩおよびＨＴＭＬ文書の特定要素（表示終了時間の値である“18:00”の値、「image2の表示開始時間」を示すテキストデータ）が利用されたものである。ブラウザ面の視聴者は、この表示に基づいて、ＭＭＴ面の表示領域に表示されるイメージ１（Image 1）が、時刻が18:00になると、イメージ２（Image 2）に切り替わることを予め知ることができる。
　上述したように、図１に示す表示システム１０において、受信機２００のウェブブラウザ２０２では、ＨＴＭＬ文書のＤＯＭツリーを生成する際、そのＨＴＭＬ文書にＭＭＴストリームを参照するビデオ要素が存在するとき、そのビデオ要素のノードの配下に、ＭＭＴ－ＣＩに対応して生成されたＤＯＭツリーを結合するものである。
　そのため、例えば、ＭＭＴ－ＣＩの要素にＨＴＭＬアプリケーション側からアクセスできる。そして、例えば、取得されたＭＭＴ－ＣＩの所定の要素に基づき、ブラウザ面（ウェブページ表示面）に、ＭＭＴ面の提示制御に関連する情報を表示できる。これにより、ユーザ（視聴者）はブラウザ面に提示される伝送メディアの提示制御に関連する情報を知ることができる。
　＜２．変形例＞
　なお、上述実施の形態においては、ウェブサーバ１３０から送信されるＨＴＭＬ文書に、ＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）が含まれている例を示した（図９参照）。
　しかし、ウェブサーバ１３０から送信されるＨＴＭＬ文書に、ＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）を取得するための参照情報を含む構成も考えられる。この場合、ウェブブラウザ２０２は、この参照情報に基づいて、例えば、ウェブサーバ１３０からＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）を含むスクリプトファイルを取得することとなる。
　図１３（ａ）は、その場合におけるＨＴＭＬ文書の一例を示している。ここで、「"　src="http://sample.mmt"」は、ＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）を取得するための参照情報である。また、図１３（ｂ）は、その場合におけるＭＭＴ－ＣＩの特定の要素にアクセスするためのプログラム（スクリプト）を含むスクリプトファイルの一例を示している。
　また、上述実施の形態においては、伝送メディアストリームがＭＭＴストリームである例を示したが、本技術は、このＭＭＴストリームと同様の伝送メディアストリームを取り扱う表示システムに同様に適用できることは勿論である。すなわち、上述実施の形態においては、第２のＨＴＭＬ文書がＭＭＴ－ＣＩである例を示したが、例えば、ＭＰＥＧ２－ＴＳのデータ構造を写像したＨＴＭＬ構造を持つデータである場合も考えられる。
　また、上述実施の形態においては、ストリーミングサーバ１２０とウェブサーバ１３０とが別個に存在する例を示したが、これらのサーバが１つのサーバからなる構成も考えられる。
　また、上述実施の形態においては、受信機２００として、ＭＭＴデコード部２０５およびＭＭＴプレーヤ２０６がウェブブラウザ２０２とは別個に存在する例を示した。しかし、ＭＭＴデコード部２０５およびＭＭＴプレーヤ２０６の機能を備えるウェブブラウザ２０２を備えることも考えられる。その場合には、ＭＭＴデコード部２０５およびＭＭＴプレーヤ２０６は不要となる。
　また、本技術は、以下のような構成を取ることもできる。
　（１）ウェブページを表示するための第１のＨＴＭＬ文書を受信する第１の受信部と、
　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを受信する第２の受信部と、
　上記第１の受信部で受信された上記第１のＨＴＭＬ文書のＤＯＭツリーを生成するＤＯＭツリー生成部とを備え、
　上記ＤＯＭツリー生成部は、
　上記第１のＨＴＭＬ文書に上記伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素のノードの配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
　受信装置。
　（２）上記ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づき、上記第２のＨＴＭＬ文書の所定の要素を取得する要素取得部をさらに備える
　前記（１）に記載の受信装置。
　（３）上記ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づき上記ウェブページの表示を制御する表示制御部をさらに備え、
　上記表示制御部は、
　上記要素取得部で取得された上記第２のＨＴＭＬ文書の所定の要素に基づき、上記ウェブページ表示面に、上記所定数の伝送メディアの提示制御に関連する情報を表示する
　前記（２）に記載の受信装置。
　（４）上記第１のＨＴＭＬ文書には、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラムが含まれており、
　上記要素取得部は、上記プログラムに基づいて、上記第２のＨＴＭＬ文書の特定の要素を取得する
　前記（２）または（３）に記載の受信装置。
　（５）上記第１のＨＴＭＬ文書には、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラムを取得するための参照情報が含まれており、
　上記要素取得部は、上記参照情報を用いて取得された上記プログラムに基づいて、上記第２のＨＴＭＬ文書の特定の要素を取得する
　前記（２）または（３）に記載の受信装置。
　（６）上記伝送メディアストリームは、上記伝送メディアをペイロードに含む第１の伝送パケットと、上記伝送メディアに関する情報を含む第２の伝送パケットとが時分割的に多重化された伝送ストリームである
　前記（１）から（５）のいずれかに記載の受信装置。
　（７）上記伝送パケットはＭＭＴパケットであり、
　上記第２のＨＴＭＬ文書はＭＭＴ－ＣＩである
　前記（６）に記載の受信装置。
　（８）ウェブページを表示するための第１のＨＴＭＬ文書を受信する第１の受信部と、
　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを受信する第２の受信部とを備える受信装置における情報処理方法であって、
　上記第１の受信部で受信された上記第１のＨＴＭＬ文書のＤＯＭツリーを生成するステップと、
　上記第１のＨＴＭＬ文書に上記伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素のノードの配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合するステップとを有する
　受信装置における情報処理方法。
　（９）所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素を含むと共に、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラム、あるいは該プログラムを取得するための参照情報を含む、ウェブページを表示するための第１のＨＴＭＬ文書を保持する保持部と、
　上記保持されている第１のＨＴＭＬ文書を送信する送信部とを備える
　送信装置。
　（１０）上記伝送メディアストリームは、上記伝送メディアをペイロードに含む第１の伝送パケットと、上記伝送メディアに関する情報を含む第２の伝送パケットとが時分割的に多重化された伝送ストリームである
　前記（９）に記載の送信装置。
　（１１）上記伝送パケットはＭＭＴパケットであり、
　上記第２のＨＴＭＬ文書は、ＭＭＴ－ＣＩである
　前記（１０）に記載の送信装置。
　（１２）ウェブページを表示するための第１のＨＴＭＬ文書を取得するデータ取得部と、
　上記データ取得部で取得された上記第１のＨＴＭＬ文書を解析して複数の要素を相互にひも付けしたＤＯＭツリーを生成するＤＯＭツリー生成部とを備え、
　上記ＤＯＭツリー生成部は、
　上記第１のＨＴＭＬ文書に、所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素の配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
　情報処理装置。
　（１３）ウェブブラウザがウェブページを表示するための第１のＨＴＭＬ文書を取得するデータ取得ステップと、
　上記ウェブブラウザが上記取得された上記第１のＨＴＭＬ文書を解析して複数の要素を相互にひも付けしたＤＯＭツリーを生成するＤＯＭツリー生成ステップとを備え、
　上記ＤＯＭツリー生成ステップでは、
　上記第１のＨＴＭＬ文書に、所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素の配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
　情報処理方法。
　（１４）表示制御に関する情報が記述された複数の構造単位を含む第１の表示制御データを取得するデータ取得部と、
　上記データ取得部で取得された上記第１の表示制御データを解析して複数の構造単位を相互にひも付けした構造化データを生成する構造化データ生成部とを備え、
　上記構造化データ生成部は、
　上記第１の表示制御データに、所定数の伝送メディアと該伝送メディアの提示制御情報が記述された複数の構造単位を含む第２の表示制御データとを含む伝送メディアストリームを参照する所定の構造単位が存在するとき、該所定の構造単位の配下に、上記伝送メディアストリームに含まれる上記第２の表示制御データに対応して生成された構造化データを結合する
　情報処理装置。
　（１５）表示制御に関する情報が記述された複数の構造単位を含む第１の表示制御データを取得するデータ取得ステップと、
　上記取得された上記第１の表示制御データを解析して複数の構造単位を相互にひも付けした構造化データを生成する構造化データ生成ステップとを備え、
　上記構造化データ生成ステップでは、
　上記第１の表示制御データに、所定数の伝送メディアと該伝送メディアの提示制御情報が記述された複数の構造単位を含む第２の表示制御データとを含む伝送メディアストリームを参照する所定の構造単位が存在するとき、該所定の構造単位の配下に、上記伝送メディアストリームに含まれる上記第２の表示制御データに対応して生成された構造化データを結合する
　情報処理方法。
　（１６）ウェブページを表示するための第１のＨＴＭＬ文書を送信する第１の送信装置と、
　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを送信する第２の送信装置と、
　上記第１の送信装置から送信される上記第１のＨＴＭＬ文書を受信する第１の受信部と、上記第２の送信装置から送信される上記伝送メディアストリームを受信する第２の受信部とを有する受信装置とを備え、
　上記受信装置は、
　上記第１の受信部で受信された上記第１のＨＴＭＬ文書のＤＯＭツリーを生成するＤＯＭツリー生成部と、
　上記ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づいて上記ウェブページの表示を制御する表示制御部とを備え、
　上記ＤＯＭツリー生成部は、
　上記第１のＨＴＭＬ文書に上記伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素のノードの配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
　表示システム。
　本技術の主な特徴は、ウェブページを表示するためのＨＴＭＬ文書（ＨＴＭＬアプリケーション）のＤＯＭツリーを生成する際に、ＭＭＴストリームを参照するビデオ要素があるとき、そのビデオ要素のノードの配下に、ＭＭＴ－ＣＩのＤＯＭツリーを結合することで、ＭＭＴ－ＣＩの要素にＨＴＭＬアプリケーション側からアクセスすることを可能にしたことである（図５参照）。
　１０・・・表示システム
　１１０・・・放送局
　１２０・・・ストリーミングサーバ
　１３０・・・ウェブサーバ
　２００・・・受信機
　２０１・・・ＩＰ受信部
　２０２・・・ウェブブラウザ
　２０２ａ・・・ＨＴＭＬパース部
　２０２ｂ・・・ＨＴＭＬＤＯＭ処理部
　２０２ｃ・・・ＨＴＭＬレイアウト処理部
　２０２ｄ・・・ＨＴＭＬレンダリング処理部
　２０３・・・出力部
　２０４・・・ＩＰ/ＲＦ受信部
　２０５・・・ＭＭＴデコード部
　２０６・・・ＭＭＴプレーヤ
　３００・・・インターネット

Claims (15)

  1. 　ウェブページを表示するための第１のＨＴＭＬ文書を受信する第１の受信部と、
    　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを受信する第２の受信部と、
    　上記第１の受信部で受信された上記第１のＨＴＭＬ文書のＤＯＭツリーを生成するＤＯＭツリー生成部とを備え、
    　上記ＤＯＭツリー生成部は、
    　上記第１のＨＴＭＬ文書に上記伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素のノードの配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
    　受信装置。
  2. 　上記ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づき、上記第２のＨＴＭＬ文書の所定の要素を取得する要素取得部をさらに備える
    　請求項１に記載の受信装置。
  3. 　上記ＤＯＭツリー生成部で生成されたＤＯＭツリーに基づき上記ウェブページの表示を制御する表示制御部をさらに備え、
    　上記表示制御部は、
    　上記要素取得部で取得された上記第２のＨＴＭＬ文書の所定の要素に基づき、上記ウェブページ表示面に、上記所定数の伝送メディアの提示制御に関連する情報を表示する
    　請求項２に記載の受信装置。
  4. 　上記第１のＨＴＭＬ文書には、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラムが含まれており、
    　上記要素取得部は、上記プログラムに基づいて、上記第２のＨＴＭＬ文書の特定の要素を取得する
    　請求項２に記載の受信装置。
  5. 　上記第１のＨＴＭＬ文書には、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラムを取得するための参照情報が含まれており、
    　上記要素取得部は、上記参照情報を用いて取得された上記プログラムに基づいて、上記第２のＨＴＭＬ文書の特定の要素を取得する
    　請求項２に記載の受信装置。
  6. 　上記伝送メディアストリームは、上記伝送メディアをペイロードに含む第１の伝送パケットと、上記伝送メディアに関する情報を含む第２の伝送パケットとが時分割的に多重化された伝送ストリームである
    　請求項１に記載の受信装置。
  7. 　上記伝送パケットはＭＭＴパケットであり、
    　上記第２のＨＴＭＬ文書はＭＭＴ－ＣＩである
    　請求項６に記載の受信装置。
  8. 　ウェブページを表示するための第１のＨＴＭＬ文書を受信する第１の受信部と、
    　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを受信する第２の受信部とを備える受信装置における情報処理方法であって、
    　上記第１の受信部で受信された上記第１のＨＴＭＬ文書のＤＯＭツリーを生成するステップと、
    　上記第１のＨＴＭＬ文書に上記伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素のノードの配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合するステップとを有する
    　受信装置における情報処理方法。
  9. 　所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素を含むと共に、上記第２のＨＴＭＬ文書の特定の要素にアクセスするためのプログラム、あるいは該プログラムを取得するための参照情報を含む、ウェブページを表示するための第１のＨＴＭＬ文書を保持する保持部と、
    　上記保持されている第１のＨＴＭＬ文書を送信する送信部とを備える
    　送信装置。
  10. 　上記伝送メディアストリームは、上記伝送メディアをペイロードに含む第１の伝送パケットと、上記伝送メディアに関する情報を含む第２の伝送パケットとが時分割的に多重化された伝送ストリームである
    　請求項９に記載の送信装置。
  11. 　上記伝送パケットはＭＭＴパケットであり、
    　上記第２のＨＴＭＬ文書は、ＭＭＴ－ＣＩである
    　請求項１０に記載の送信装置。
  12. 　ウェブページを表示するための第１のＨＴＭＬ文書を取得するデータ取得部と、
    　上記データ取得部で取得された上記第１のＨＴＭＬ文書を解析して複数の要素を相互にひも付けしたＤＯＭツリーを生成するＤＯＭツリー生成部とを備え、
    　上記ＤＯＭツリー生成部は、
    　上記第１のＨＴＭＬ文書に、所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素の配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
    　情報処理装置。
  13. 　ウェブブラウザがウェブページを表示するための第１のＨＴＭＬ文書を取得するデータ取得ステップと、
    　上記ウェブブラウザが上記取得された上記第１のＨＴＭＬ文書を解析して複数の要素を相互にひも付けしたＤＯＭツリーを生成するＤＯＭツリー生成ステップとを備え、
    　上記ＤＯＭツリー生成ステップでは、
    　上記第１のＨＴＭＬ文書に、所定数の伝送メディアと該伝送メディアの提示制御情報としての第２のＨＴＭＬ文書を含む伝送メディアストリームを参照するビデオ要素が存在するとき、該ビデオ要素の配下に、上記伝送メディアストリームに含まれる上記第２のＨＴＭＬ文書に対応して生成されたＤＯＭツリーを結合する
    　情報処理方法。
  14. 　表示制御に関する情報が記述された複数の構造単位を含む第１の表示制御データを取得するデータ取得部と、
    　上記データ取得部で取得された上記第１の表示制御データを解析して複数の構造単位を相互にひも付けした構造化データを生成する構造化データ生成部とを備え、
    　上記構造化データ生成部は、
    　上記第１の表示制御データに、所定数の伝送メディアと該伝送メディアの提示制御情報が記述された複数の構造単位を含む第２の表示制御データとを含む伝送メディアストリームを参照する所定の構造単位が存在するとき、該所定の構造単位の配下に、上記伝送メディアストリームに含まれる上記第２の表示制御データに対応して生成された構造化データを結合する
    　情報処理装置。
  15. 　表示制御に関する情報が記述された複数の構造単位を含む第１の表示制御データを取得するデータ取得ステップと、
    　上記取得された上記第１の表示制御データを解析して複数の構造単位を相互にひも付けした構造化データを生成する構造化データ生成ステップとを備え、
    　上記構造化データ生成ステップでは、
    　上記第１の表示制御データに、所定数の伝送メディアと該伝送メディアの提示制御情報が記述された複数の構造単位を含む第２の表示制御データとを含む伝送メディアストリームを参照する所定の構造単位が存在するとき、該所定の構造単位の配下に、上記伝送メディアストリームに含まれる上記第２の表示制御データに対応して生成された構造化データを結合する
    　情報処理方法。
PCT/JP2014/060874 2013-04-26 2014-04-16 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法 WO2014175148A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
EP14789057.8A EP2990958A4 (en) 2013-04-26 2014-04-16 Reception device, information processing method in reception device, transmission device, information processing device, and information processing method
CN201480022352.5A CN105144146B (zh) 2013-04-26 2014-04-16 接收装置、接收装置中的信息处理方法、传输装置、信息处理装置和信息处理方法
US14/763,689 US10262072B2 (en) 2013-04-26 2014-04-16 Reception device, information processing method in reception device, transmission device, information processing device, and information processing method
KR1020157024938A KR20160002711A (ko) 2013-04-26 2014-04-16 수신 장치, 수신 장치에 있어서의 정보 처리 방법, 송신 장치, 정보 처리 장치 및 정보 처리 방법
US16/281,957 US20190286684A1 (en) 2013-04-26 2019-02-21 Reception device, information processing method in reception device, transmission device, information processing device, and information processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013093436A JP2014215859A (ja) 2013-04-26 2013-04-26 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法
JP2013-093436 2013-04-26

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/763,689 A-371-Of-International US10262072B2 (en) 2013-04-26 2014-04-16 Reception device, information processing method in reception device, transmission device, information processing device, and information processing method
US16/281,957 Continuation US20190286684A1 (en) 2013-04-26 2019-02-21 Reception device, information processing method in reception device, transmission device, information processing device, and information processing method

Publications (1)

Publication Number Publication Date
WO2014175148A1 true WO2014175148A1 (ja) 2014-10-30

Family

ID=51791727

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/060874 WO2014175148A1 (ja) 2013-04-26 2014-04-16 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法

Country Status (6)

Country Link
US (2) US10262072B2 (ja)
EP (1) EP2990958A4 (ja)
JP (1) JP2014215859A (ja)
KR (1) KR20160002711A (ja)
CN (1) CN105144146B (ja)
WO (1) WO2014175148A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110545471A (zh) * 2018-05-29 2019-12-06 北京字节跳动网络技术有限公司 基于离线转换的播放控制方法、装置及存储介质
CN110837614A (zh) * 2019-11-05 2020-02-25 上海嘉道信息技术有限公司 一种高效地生成网页信息抽取规则的方法及系统

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014215859A (ja) * 2013-04-26 2014-11-17 ソニー株式会社 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法
US20170344523A1 (en) * 2016-05-25 2017-11-30 Samsung Electronics Co., Ltd Method and apparatus for presentation customization and interactivity
CH715553B1 (fr) * 2018-11-15 2024-07-15 Thidima Sa Procédé de communication d'informations à travers un réseau de télécommunication.
CN111327566B (zh) * 2018-12-13 2023-05-02 阿里巴巴集团控股有限公司 流媒体数据的确定方法、装置和系统
US10922476B1 (en) * 2019-12-13 2021-02-16 Microsoft Technology Licensing, Llc Resource-efficient generation of visual layout information associated with network-accessible documents
US11461535B2 (en) * 2020-05-27 2022-10-04 Bank Of America Corporation Video buffering for interactive videos using a markup language
JP7372020B2 (ja) * 2021-03-10 2023-10-31 株式会社Bloom Act 動画生成配信処理装置、動画生成配信方法、および動画生成配信プログラム
US11995889B2 (en) 2021-04-19 2024-05-28 International Business Machines Corporation Cognitive generation of HTML pages based on video content

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011065489A (ja) 2009-09-17 2011-03-31 Sony Corp 情報処理装置、データ表示方法及びプログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6781609B1 (en) * 2000-05-09 2004-08-24 International Business Machines Corporation Technique for flexible inclusion of information items and various media types in a user interface
US7028331B2 (en) * 2001-02-28 2006-04-11 Sharp Laboratories, Inc. Content proxy method and apparatus for digital television environment
US7117216B2 (en) * 2001-06-07 2006-10-03 Sun Microsystems, Inc. Method and apparatus for runtime merging of hierarchical trees
KR20030095048A (ko) * 2002-06-11 2003-12-18 엘지전자 주식회사 멀티미디어 재생 방법 및 장치
EP2414970A1 (en) * 2009-03-30 2012-02-08 Nokia Corporation Methods and systems for processing document object models (dom) to process video content
US8713420B2 (en) * 2011-06-30 2014-04-29 Cable Television Laboratories, Inc. Synchronization of web applications and media
US8913068B1 (en) * 2011-07-12 2014-12-16 Google Inc. Displaying video on a browser
JP2014534695A (ja) * 2011-10-13 2014-12-18 サムスン エレクトロニクス カンパニー リミテッド コンテンツディスプレイ方法、コンテンツ同期化方法、放送コンテンツディスプレイ方法及びディスプレイ装置
US9635394B2 (en) * 2013-01-24 2017-04-25 Electronics And Telecommunications Research Institute Method and device for flexible MMT asset transmission and reception
JP2014215859A (ja) * 2013-04-26 2014-11-17 ソニー株式会社 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法
EP2866436A1 (en) * 2013-10-23 2015-04-29 Thomson Licensing Method and apparatus for transmission and reception of media data

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011065489A (ja) 2009-09-17 2011-03-31 Sony Corp 情報処理装置、データ表示方法及びプログラム

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
"IPTV Kitei Hoso Tsushin Renkei System Shiyo IPTVFJ STD-0010", IPTV FORUM JAPAN, 29 March 2013 (2013-03-29), pages 46 - 77 , 79 TO 98, XP055288949, Retrieved from the Internet <URL:http://www.iptvforum.jp/info/ 2012/03291507.html> [retrieved on 20140502] *
"IPTV Kitei HTML5 Browser Shiyo IPTVFJ STD-0011", IPTV FORUM JAPAN, 29 March 2013 (2013-03-29), pages 5 - 9 , 16 TO 27, 65 TO 73, XP055288940, Retrieved from the Internet <URL:http://www. iptvforum.jp/info/2012/03291507.html> [retrieved on 20140502] *
See also references of EP2990958A4 *
SHUICHI AOKI: "MMT o Mochiita Hoso.Tsushin Hybrid Haishin no Kento", DAI 75 KAI (HEISEI 25 NEN) ZENKOKU TAIKAI KOEN RONBUNSHU (3) NETWORK SECURITY, 6 March 2013 (2013-03-06), pages 3-25 - 3-26, XP008181631 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110545471A (zh) * 2018-05-29 2019-12-06 北京字节跳动网络技术有限公司 基于离线转换的播放控制方法、装置及存储介质
CN110545471B (zh) * 2018-05-29 2021-12-14 北京字节跳动网络技术有限公司 基于离线转换的播放控制方法、装置及存储介质
CN110837614A (zh) * 2019-11-05 2020-02-25 上海嘉道信息技术有限公司 一种高效地生成网页信息抽取规则的方法及系统

Also Published As

Publication number Publication date
US20150363505A1 (en) 2015-12-17
CN105144146A (zh) 2015-12-09
EP2990958A1 (en) 2016-03-02
JP2014215859A (ja) 2014-11-17
US10262072B2 (en) 2019-04-16
CN105144146B (zh) 2018-06-05
KR20160002711A (ko) 2016-01-08
US20190286684A1 (en) 2019-09-19
EP2990958A4 (en) 2017-03-01

Similar Documents

Publication Publication Date Title
WO2014175148A1 (ja) 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法
KR102303582B1 (ko) 웹 콘텐츠에 대한 파일 트랙들을 사용하여 미디어 데이터를 프로세싱
US20170289616A1 (en) Receiving device, transmitting device, and data processing method
JP7468575B2 (ja) 受信装置および受信方法
KR101895443B1 (ko) 방송 시스템에서 컨텐츠 전송/수신 방법 및 장치
CN101247511A (zh) Iptv内容相关信息展现方法及系统
CN103747365B (zh) 基于http流的媒体内容动态插播方法、装置及系统
US11622088B2 (en) Reception apparatus, transmission apparatus, and data processing method
US20160073137A1 (en) Transmission apparatus, transmission method, reception apparatus, and reception method
US20200053427A1 (en) Reception apparatus, transmission apparatus, and data processing method
KR101610862B1 (ko) 스트리밍 서비스에서의 광고 삽입 방법 및 그 장치
US11012761B1 (en) Techniques for replacement content signaling in advanced television systems committee (ATSC) 3.0 television
KR102611253B1 (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
JP4755717B2 (ja) 放送受信端末装置
US11368730B2 (en) Apparatus and method for transmitting broadcast content based on ATSC 3.0, and apparatus and method for receiving broadcast content based ATSC 3.0
KR102600762B1 (ko) Atsc 3.0 기반의 방송 콘텐츠 전송 장치 및 방법과, 방송 콘텐츠 수신 장치 및 방법
KR20110117568A (ko) 멀티미디어 전송 시스템에서 서비스 발견 정보를 송수신하는 방법 및 장치와 이를 위한 파일 구조
WO2018012315A1 (ja) 情報処理装置、及び、情報処理方法

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201480022352.5

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14789057

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14763689

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2014789057

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20157024938

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE