WO2012108393A1 - 電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法 - Google Patents

電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法 Download PDF

Info

Publication number
WO2012108393A1
WO2012108393A1 PCT/JP2012/052648 JP2012052648W WO2012108393A1 WO 2012108393 A1 WO2012108393 A1 WO 2012108393A1 JP 2012052648 W JP2012052648 W JP 2012052648W WO 2012108393 A1 WO2012108393 A1 WO 2012108393A1
Authority
WO
WIPO (PCT)
Prior art keywords
stereoscopic image
information
image information
external device
mhl
Prior art date
Application number
PCT/JP2012/052648
Other languages
English (en)
French (fr)
Inventor
昭彦 田尾
武比古 齋藤
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to KR1020127025447A priority Critical patent/KR101905918B1/ko
Priority to RU2012141875/08A priority patent/RU2604987C2/ru
Priority to CN201280001902.6A priority patent/CN102972034B/zh
Priority to AU2012215788A priority patent/AU2012215788A1/en
Priority to BR112012025208A priority patent/BR112012025208A2/pt
Priority to US13/638,793 priority patent/US9628872B2/en
Priority to CA2800347A priority patent/CA2800347A1/en
Priority to EP12745048.4A priority patent/EP2541955B1/en
Publication of WO2012108393A1 publication Critical patent/WO2012108393A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0007Image acquisition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/371Image reproducers using viewer tracking for tracking viewers with different interocular distances; for tracking rotational head movements around the vertical axis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/378Image reproducers using viewer tracking for tracking rotational head movements around an axis perpendicular to the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17336Handling of requests in head-ends

Definitions

  • the present technology relates to an electronic device, a stereoscopic image information transmission method in the electronic device, and a stereoscopic image information reception method in the electronic device, and more particularly, to an electronic device constituting an image display system for displaying a stereoscopic image.
  • Non-Patent Document 1 describes details of the HDMI standard.
  • 3D capability transmission means of the sink device is transmitted to the source device by EDID (Enhanced Extended Extended Identification Data).
  • EDID Enhanced Extended Extended Identification Data
  • the sink device When a change occurs in the EDID, the sink device generates a low (LOW) pulse having a length of at least 100 ms for the HPD (Hot Plug Detect) signal and notifies the source device to that effect. This is at least 100 ms from when the change occurs on the sink device side until the source device recognizes it, and further adding the time to read the EDID and recognize 3D information results in a time lag and affects the response of the source device.
  • LOW low
  • the means for transmitting 3D information between a sink device and a source device is only EDID from the sink device to the source device, and only HDMI Vendor Info InfoFrame from the source device to the sink device.
  • EDID from the sink device to the source device
  • Vendor Info InfoFrame from the source device to the sink device.
  • means for transmitting more 3D information in both directions at high speed is necessary.
  • no such means is defined in HDMI.
  • the purpose of the present technology is to enable efficient and high-speed transfer of stereoscopic image information (3D information) between electronic devices.
  • a register to write function information When there is a change in the stereoscopic image information written in the register, a change notification transmission unit that transmits a change notification to an external device;
  • a read command receiving unit that receives a read command sent from the external device in response to the change notification transmitted from the change notification sending unit and address information of stereoscopic image information in the register;
  • an electronic apparatus comprising: a stereoscopic image information transmitting unit that reads the stereoscopic image information from an address of the register corresponding to the address information received by the read command receiving unit and transmits the stereoscopic image information to the external device.
  • a register for writing various function information including stereoscopic image information (3D information) is provided.
  • the change notification transmission unit transmits a change notification to the external device.
  • a read command and address information of stereoscopic image information in the register are sent from the external device.
  • the read command receiving unit receives these read commands and address information. Then, the stereoscopic image information transmission unit reads the stereoscopic image information from the address of the register corresponding to the address information and transmits it to the external device.
  • the stereoscopic image information includes information on the structure and video format of stereoscopic image data that can be handled by itself.
  • a change notification is transmitted to the external device, and a read command sent from the external device in response to the change notification is sent. Based on this, the changed stereoscopic image information is immediately transmitted to the external device.
  • the stereoscopic image information is read from the register based on the address information from the external device and transmitted to the external device. Therefore, stereoscopic image information can be transmitted to an external device efficiently and at high speed.
  • a change notification receiving unit for receiving a change notification of stereoscopic image information notified from an external device having a register in which function information is written;
  • a read command transmission unit that transmits a read command and address information of stereoscopic image information in the register to the external device in response to the change notification received by the change notification reception unit;
  • 3D image information reception for receiving the 3D image information read and sent from the register of the external device corresponding to the read command and the address information of the 3D image information transmitted from the read command transmission unit
  • an electronic device comprising a part.
  • the external device has a register in which function information is written.
  • a change notification is transmitted from the external device.
  • This change notification is received by the change notification receiving unit.
  • the command transmission unit transmits the read command and the address information of the stereoscopic image information in the register to the external device.
  • the 3D image information is read from the address of the register corresponding to the address information and transmitted from the external device.
  • the stereoscopic image information transmitted from the external device is received by the stereoscopic image information receiving unit.
  • the stereoscopic image information includes information on the structure and video format of stereoscopic image data that can be handled by an external device.
  • the change notification is transmitted from the external device, and the change is immediately performed by transmitting the read command to the external device.
  • 3D image information is transmitted from an external device.
  • the external device reads only the stereoscopic image information from the register and transmits it. Therefore, it is possible to efficiently receive stereoscopic image information from an external device at high speed.
  • a write request transmission unit that transmits a request to write stereoscopic image information to an external device having a register capable of writing stereoscopic image information;
  • a write permission receiver that receives a write permission sent from the external device in response to the write request transmitted by the write request transmitter;
  • an electronic device including a write command, a stereoscopic image information address information in the register, and a stereoscopic image information transmitting unit that transmits stereoscopic image information to the external device.
  • the external device is provided with a register in which various function information including stereoscopic image information (3D information) is written.
  • the writing request transmission unit transmits a request for writing stereoscopic image information to the external device.
  • write permission is sent from the external device.
  • This write permission is received by the write permission receiving unit.
  • the stereoscopic image information transmitting unit transmits a write command, address information of stereoscopic image information in the register, and stereoscopic image information to the external device.
  • the write command transmitted in this way the address information of the stereoscopic image information in the register, and the stereoscopic image information are received, and the stereoscopic image information is written to the address of the register corresponding to the address information.
  • the stereoscopic image information transmitted to the external device includes information on the structure and video format of stereoscopic image data that can be handled by itself.
  • a stereoscopic image display unit is further provided, and the stereoscopic image information transmitted to the external device includes information on the stereoscopic image display method in the stereoscopic image display unit.
  • a stereoscopic image display unit is further provided, and the stereoscopic image information transmitted to the external device includes the position information of the viewer of the stereoscopic image display unit.
  • the external device further includes a stereoscopic image display unit, and the stereoscopic image information transmitted to the external device includes the position information of the viewer of the stereoscopic image display unit.
  • the external device includes a stereoscopic image display unit in which a lenticular lens is arranged on the display surface, and the stereoscopic image information transmitted to the external device includes the vertical and horizontal shift amounts and rotation angles of the lenticular lens. Information, and information on one or both of the shift amount and the rotation angle of the upper, lower, left, and right of the image are included.
  • the external device further includes a stereoscopic image display unit, and the stereoscopic image information transmitted to the external device includes information on the display position of the caption.
  • a stereoscopic image display unit that perceives a stereoscopic image using shutter glasses is further provided, and the stereoscopic image information transmitted to the external device includes on / off information of the stereoscopic image.
  • the external device includes a stereoscopic image display unit that perceives a stereoscopic image using shutter glasses, and the stereoscopic image information transmitted to the external device includes the on / off information of the stereoscopic image.
  • the stereoscopic image information transmitted to the external device includes the on / off information of the stereoscopic image.
  • an image data transmission unit that transmits stereoscopic image data to an external device is further provided, and the stereoscopic image information transmitted to the external device includes information on the structure of the stereoscopic image data and the video format. To be done.
  • stereoscopic image information 3D information
  • stereoscopic image information can be transmitted to an external device efficiently and at high speed.
  • a register capable of writing stereoscopic image information
  • a write request receiving unit for receiving a write request for stereoscopic image information from an external device to the register
  • a write permission transmitter that transmits a write permission to the external device in response to the write request received by the write request receiver
  • the write command received from the external device corresponding to the write permission transmitted by the write permission transmitting unit, the address information of the stereoscopic image information and the stereoscopic image information in the register are received, and the received stereoscopic image
  • a write control unit that writes information to an address of the register corresponding to the received address information.
  • the writing request receiving unit receives a writing request for stereoscopic image information transmitted from an external device.
  • the write permission is transmitted to the external device by the write permission transmitter.
  • a write command, address information of stereoscopic image information in the register, and stereoscopic image information are transmitted from the external device.
  • the write control unit receives the write command, the address information of the stereoscopic image information in the register, and the stereoscopic image information, and the stereoscopic image information is written to the address of the register corresponding to the address information.
  • stereoscopic image information (3D information) is immediately sent from the external device by sending a write permission to the external device. Therefore, it is possible to efficiently receive a stereoscopic image from an external device at high speed.
  • stereoscopic image information (3D information) can be efficiently and quickly transferred between electronic devices.
  • MHL a process corresponding to a low (L) of an HDMI HPD line is simulated using an MSC command, and a time corresponding to a low of the HPD line is set to 50 ms or more.
  • MHL parameter allocation status of the present capability register (Capabiliry
  • MHL apparatus request side
  • Registers capability register
  • MHL apparatus response side
  • interrupt register Device
  • FIG. It is a figure for demonstrating correct
  • An example of information transferred from an MHL sink device to an MHL source device when position information input using a position detection sensor (face detection sensor) or a remote controller is performed by an MHL sink device and correction processing is performed by an MHL source device is shown.
  • FIG. It is a figure for demonstrating the structure of the lenticular system which is one system of a direct view system. It is a figure for demonstrating the structure of the lenticular system which is one system of a direct view system.
  • FIG. It is a figure which shows the display frame of the closed caption (CC) on 2D screen.
  • CC closed caption
  • FIG. 10 is a diagram illustrating an example of information transferred from an MHL sink device to an MHL source device when an AV stream with closed caption (CC) is transferred from the MHL source device. It is a block diagram which shows the structural example of an image display system in case a television receiver is non-MHL compatible.
  • CC closed caption
  • FIG. 1 shows a configuration example of an image display system 10 for displaying a stereoscopic image (3D image) as an embodiment.
  • the image display system 10 includes a mobile phone 100 as an MHL (Mobile High-definition Link) source device and a television receiver 200 as an MHL sink device. These devices are connected by an MHL cable 300.
  • MHL Mobile High-definition Link
  • MHL is mainly an AV (Audio Visual) digital interface standard for mobile devices.
  • the MHL connects the MHL source device and the MHL sink device with an MHL cable, and plays back the contents such as moving images, still images, and audio held by the MHL source device on the MHL sink device (AV stream / unidirectional).
  • EDID reading, HDCP authentication, register read / write, remote control control, and the like are performed between devices by transmitting and receiving DDC commands and MSC (MHL Sideband channel) commands (link control / bidirectional).
  • DDC commands DDC commands
  • MSC MHL Sideband channel
  • the image display system 10 performs detailed processing by transferring 3D information, that is, stereoscopic image information (hereinafter, referred to as “3D information” as appropriate) between the mobile phone 100 and the television receiver 200. It can.
  • 3D information that is, stereoscopic image information (hereinafter, referred to as “3D information” as appropriate) between the mobile phone 100 and the television receiver 200. It can.
  • the image display system 10 uses an MHL-specific scratch pad register (Scratchpad ⁇ Register) or a capability register (CapabilityRegister) for transferring the 3D information. Details of these registers will be described later.
  • the structure of the stereoscopic image data (3D structure) and the video format that can be handled by the television receiver 200 is supplied from the television receiver 200 to the mobile phone 100.
  • the 3D structure means a transmission format of stereoscopic image data (3D image data), such as frame packing, side-by-side, top-and-bottom, and the like.
  • the video format means the resolution of 3D image data, the number of frames (number of fields), and the like, for example, 1920 ⁇ 1080i @ 60 Hz, 1280 ⁇ 720P @ 60 Hz, and the like.
  • information on a stereoscopic image display method is supplied from the television receiver 200 to the mobile phone 100.
  • the 3D display method includes, for example, a 3D glasses method (shutter glasses method), a direct view method, a head mount method, and the like.
  • the position information of the viewer (viewer) of the 3D image is supplied from the television receiver 200 to the mobile phone 100.
  • the position information of the viewer (viewer) of the stereoscopic image (3D image) is supplied from the mobile phone 100 to the television receiver 200.
  • the position information is, for example, information such as a distance indicating a viewer's face position with respect to the image display unit, an angle (vertical angle, horizontal angle, twist angle), and the like.
  • the 3D display system of the television receiver 200 may be a direct viewing system, and a lenticular lens may be arranged on the display surface.
  • the mobile phone 100 is supplied to the television receiver 200 with one or both of up / down / left / right shift amount and rotation angle information of the lenticular lens and up / down / left / right shift amount and rotation angle information of the image.
  • information on the display position (horizontal, vertical, depth) of closed captions or the like is supplied from the television receiver 200 to the mobile phone 100.
  • 3D on / off information is supplied from the television receiver 200 to the mobile phone 100.
  • 3D on / off information is supplied from the mobile phone 100 to the television receiver 200.
  • the power supply on / off information of the shutter glasses is supplied from the mobile phone 100 to the television receiver 200.
  • 3D structure and video format information of 3D image data transmitted from the mobile phone 100 to the television receiver 200 is supplied.
  • FIG. 2 shows a configuration example of the mobile phone 100 and the television receiver 200.
  • the mobile phone 100 includes a control unit 101, a user operation unit 102, a display unit 103, a 3G / 4G modem unit 104, a camera unit 105, a recording / playback unit 106, a transmission processing unit 107, an MHL transmission unit 108, and an MHL terminal 109. is doing.
  • the control unit 101 controls the operation of each unit of the mobile phone 100.
  • the user operation unit 102 and the display unit 103 constitute a user interface and are connected to the control unit 101.
  • the user operation unit 102 includes a key, a button, a dial disposed on a housing (not shown) of the mobile phone 100, a touch panel disposed on the display surface of the display unit 103, or the like.
  • the display unit 103 includes an LCD (Liquid Crystal Display), an organic EL (ElectroLuminescence), and the like.
  • the 3G / 4G modem 104 performs mobile phone communication.
  • the camera unit 105 captures moving images and still images.
  • the recording / reproducing unit 106 performs recording / reproduction (writing / reading) by driving to a recording medium such as a built-in memory (non-volatile memory) or a memory card, for example.
  • the recording / reproducing unit 106 performs recording / reproducing of a call performed through the modem unit 104.
  • the recording / playback unit 106 records and plays moving images, still image data and audio data acquired through the modem unit 104, and moving and still images captured by the camera unit (including a microphone) 105. Performs recording and playback of data and audio data.
  • the recording / playback unit 106 also performs codec processing for data compression on the moving image and still image data obtained by the camera unit 105.
  • the user can display the content recorded in the recording medium in the recording / playback unit 106 as a content list by giving an instruction from the user operation unit 102.
  • the data of the designated content is reproduced from the recording medium in the recording / reproducing unit 106 and transferred to the transmission processing unit 107.
  • image data and audio data acquired by the 3G / 4G modem 104 or image data and audio data obtained by the camera unit 105 may be transmitted in real time.
  • the content data is directly transferred to the transmission processing unit 107, although not shown. It is also conceivable to insert the memory card into another device and write the content data, and then attach it to the recording / playback unit 106 and transmit it to the transmission processing unit 107.
  • the transmission processing unit 107 processes data such as a moving image, a still image, and audio that are reproduced by the recording / reproducing unit 106 and transmitted to the television receiver 200 in an appropriate form. For example, the transmission format and video format of 3D image data are converted so that the television receiver 200 can handle them.
  • the MHL transmission unit 108 is connected to the MHL terminal 109.
  • the MHL transmitting unit 108 transmits data such as images and sounds processed by the transmission processing unit 107 to the television receiver 200 from the MHL terminal 109 via the MHL cable 300 by communication conforming to the MHL standard. Send in the direction. Details of the MHL transmission unit 108 will be described later.
  • the television receiver 200 includes a control unit 201, a user operation unit 202, an MHL terminal 203, an MHL reception unit 204, a tuner 205, an antenna terminal 206, a switching unit 207, a display processing unit 208, and a display panel 209.
  • the control unit 201 controls the operation of each unit of the television receiver 200.
  • the user operation unit 202 constitutes a user interface and is connected to the control unit 201.
  • the user operation unit 202 is configured by keys, buttons, dials, a remote controller, or the like arranged in a housing (not shown) of the television receiver 200.
  • the MHL receiving unit 204 is connected to the MHL terminal 203.
  • the MHL receiving unit 204 receives data such as images and sounds transmitted in one direction from the MHL transmitting unit 108 of the mobile phone 100 connected via the MHL cable 300 by communication conforming to the MHL standard. .
  • the MHL receiving unit 204 supplies the received image data to the switching unit 207.
  • the audio data received by the MHL receiving unit 204 is supplied to an audio data switching unit (not shown). Details of the MHL receiving unit 204 will be described later.
  • the tuner 205 receives BS broadcasting, terrestrial digital broadcasting, and the like.
  • the tuner 205 is supplied with a broadcast signal captured by an antenna (not shown) connected to the antenna terminal 206.
  • the tuner 205 acquires image data (video signal) and audio data of a predetermined program based on the broadcast signal.
  • the switching unit 207 selectively extracts image data received by the MHL receiving unit 204 or image data acquired by the tuner 205.
  • the display processing unit 208 performs subtitle superimposition processing such as closed captioning on the image data extracted by the switching unit 207.
  • the display processing unit 208 performs processing for creating image data according to the 3D display method in the television receiver 200 based on the image data.
  • the display panel 209 displays an image based on the image data processed by the display processing unit 208.
  • the display panel 209 includes, for example, an LCD (Liquid Crystal Display), an organic EL (ElectroLuminescence), a PDP (Plasma Display Panel), and the like.
  • FIG. 3 shows a configuration example of the MHL transmission unit 108 of the mobile phone 100 of FIG. 2 and the MHL reception unit 204 of the television receiver 200.
  • the MHL transmission unit 108 includes a transmitter
  • the MHL reception unit 204 includes a receiver.
  • the MHL transmitting unit 108 and the MHL receiving unit 204 are connected via pins and MHL cables with five lines (MHL +, MHL-, CBUS, VBUS, GND). Since the pin assignment varies depending on the connector, it is not described here.
  • “MHL +” and “MHL ⁇ ” transmit an AV stream and its synchronization signal (MHL clock) as a pair of twisted pairs.
  • the CBUS is used to transmit DDC commands and MSC commands in both directions.
  • the DDC command is used for EDID reading and HDCP authentication.
  • the MSC command is used for EDID reading control, reading / writing various registers, remote control and the like.
  • the VBUS is used to supply + 5V power from the MHL sink device to the MHL source device or from the MHL source device to the MHL sink device.
  • FIG. 4 shows the configuration of registers used in MHL.
  • Each of the MHL transmitting unit 108 and the MHL receiving unit 204 has four types of registers, and can access each other with an MSC command. Their roles are as follows.
  • Capability Registers It is a register which shows the function of each MHL apparatus. By reading with the “MSC READ_DEVCAP command”, function information of the counterpart device can be obtained.
  • Interrupt registers Used for event notification to the partner MHL device. Use the “MSC SET_INT command” to set the interrupt register on the other side.
  • MSC Offset Range indicates an offset value when reading from and writing to each register of the counterpart MHL device.
  • MSC Offset Size indicates the maximum capacity (bytes) of each register.
  • Req′d Size indicates a register capacity (byte) that each MHL device must have at least.
  • “UsageMHL CBUS” indicates the access method (read, write, set bit) for each register of the partner MHL device and the MSC command to be used.
  • the capability register (Capability Registers) of the counterpart MHL device can only be read (read), and the “READ_DEVCAP command” can be used at that time.
  • the set bit (Set Bits) means setting a specific bit (multiple bits are allowed) in the interrupt register (Interrupt Registers) of the counterpart MHL device.
  • the “SET_INT command” is used at that time. It is. Various applications related to 3D will be described using these registers.
  • the source device Prior to 3D transmission, the source device needs to know the 3D capability of the sink device and transmit 3D image data in a range that can be supported by the sink device. Specifically, it is a 3D structure supported by the sink device and a video format supported by each 3D structure.
  • the 3D structure includes frame packing, side-by-side, top and bottom, and the like.
  • the video format is 1920 ⁇ 1080i, 60 Hz, 1280 ⁇ 720p, 60 Hz, or the like.
  • HDMI-LLC Vendor-Specific block In HDMI, these pieces of information are defined in the HDMI-LLC Vendor-Specific block (VSDB) in EDID, and are read together with other EDID information by the HDMI source device.
  • the 3D information itself in the VSDB has a data amount of about several bytes to several tens of bytes.
  • the data length of EDID is from a minimum of 2 blocks (256 bytes) to a maximum of 256 blocks (32768 bytes).
  • HDMIVSDB is normally included in block 1 (second block from the top).
  • FIG. 5 shows a configuration example of the HDMI transmission unit in the HDMI source device and the HDMI reception unit in the HDMI sink device.
  • the HDMI sink device sets the HPD line (PIN 19) to 100 ms or more (L: Low) as shown in FIG.
  • the HDMI source device uses the DDC line (PIN 15, 16, 17) and reads the EDID from the EDID ROM of FIG. 5 based on the I2C bus standard.
  • the HDMI source device can read the EDID at any time during the period when the HPD line is high (H: High). Conversely, when the HPD line is low, EDID reading is prohibited.
  • the HPD line is set to low, the EDID is changed, and then the HPD line is set to high again. .
  • the HDMI source device reads EDID again using this as a trigger. If there is a change in the 3D information supported on the HDMI sink device side, it is necessary to change the EDID according to the procedure described above and to read the HDMI source device.
  • An example of a case where there is a change in the 3D information supported by the HDMI sink device is, for example, a case where the user has changed 3D reception prohibition / permission, 3D structure, video format support range, or the like on the 3D support menu of the television. is there.
  • the MHL sink device has EDID, but does not have the HPD line, like HDMI. Therefore, a process corresponding to a low on the HDMI HPD line is simulated using an MSC command. At that time, the time corresponding to the low of the HPD line is defined as 50 ms or more.
  • FIG. 7 is a timing chart showing the situation at that time.
  • the MHL sink device transmits a “CLR_HPD command” to the MHL source device as shown in FIG. 7, and an “ACK command” indicating that the MHL source device has accepted the command. return.
  • a “SET_HPD command” is transmitted from the MHL sink device with an interval of at least 50 ms, and the process is completed when the “ACK command” is received.
  • the MHL source device is prohibited from reading EDID until it receives the “SET_HPD command” after receiving the “CLR_HPD command”, and can read it at any other time. Reading of EDID is performed using a DDC command on the CBUS line of FIG. Thereafter, when the content of the EDID is changed on the MHL sink device side, the procedure shown in FIG. 7 is executed again, and the EDID is changed during the EDID read prohibition period.
  • each MHL device writes its own capability in advance.
  • the MHL device (MHL source device, MHL sink device) can know the capability by reading the capability register on the other side using the “READ_DEVCAP command”.
  • FIG. 8 shows the parameter assignment status of the current capability register (Capabiliry Registers).
  • the parameter with “X” on the right side of FIG. 8 indicates that the MHL sink device, the MHL source device, and the MHL dongle device support the parameter.
  • FIG. 9 shows a procedure in which the right MHL device (request side) reads the capability register (Capability Registers) of the left MHL device (response side).
  • the right MHL device transmits the “DEAD_DEVCAP command” and the OFFSET value (address) of the information to be read to the left MHL device.
  • the left MHL device transmits an ACK indicating that the command has been accepted and a value corresponding to the designated OFFSET value to the right MHL device.
  • FIG. 10 shows the structure of the interrupt register.
  • FIG. 11 shows the details of “RCHANGE_INT Register” of “address 0x20”.
  • FIG. 12 shows a procedure for notifying the other MHL device (responding side) after the right MHL device (changing side) has changed its capability register (Capability Registers). .
  • the right MHL device changes somewhere in its capability register.
  • the right MHL device transmits “SET_INT command”, “OFFSET 0x20”, and “Value 0x01” to the left MHL device. This means that “1” is set to DCAP_CHANGE (Bit0) of RCHANGE_INT (offset0x20) shown in FIG.
  • the left MHL device returns an ACK indicating that the command has been correctly received to the right MHL device. Also, the left MHL device knows that the other party's capability register (CapabilityRegisters) has been changed by setting its own DCAP_CHG bit to “1”, and repeats the procedure shown in FIG. Read again.
  • CapabilityRegisters the other party's capability register
  • the supported 3D structure and video format are written in the unused offset values in FIG. 8, for example, 0x0F to 0x1F. Then, this is read by the MHL source device according to the procedure shown in FIG. 9, so that the 3D support status of the MHL sink device can be known.
  • FIG. 13 is an example in which parameters related to 3D are defined, but other definitions may be used.
  • 3D_present 1
  • the MHL sink device supports 3D.
  • 3D supports a mandatory format plus an optional format specified from address 0x10.
  • 3D_present 0
  • 3D is not supported.
  • VIC Video ID ID Code
  • CEA-861 the video format supported as 2D in the MHL sink device is specified by using the VIC number in “Short Video Descriptor” in “Video Data Block” in EDID.
  • 3D_Structure_n indicates a 3D structure that can be transmitted as a 3D video format specified by “2D_VIC_order_n” by a numerical value from 0 to 3. The meaning of each numerical value is as follows. 0: Frame Packing 1: Side-by-Side 2: Top-and-Bottom 3: (Reserved)
  • the specification is such that a maximum of 16 optional 3D video formats can be specified. Normally, there should be no problem if such an area is secured. However, it is possible to specify more 3D video formats if the specifications are changed. Further, a 3D_CHG flag is added to Bit 4 in FIG. 11 as a flag for notifying that the 3D information has changed.
  • the MHL source device read the 3D information of the MHL sink device using the following procedure. That is, (1) The MHL sink device performs the following immediately after connection with the MHL source device or immediately after the 3D information shown in FIGS. 13 and 14 is changed. That is, the MHL sink device sends a “SET_INT command (SET_INT + OFFSET 0x20 + Value0x10)” and sets “3” to the 3D_CHG flag on the MHL source device side. (2) The MHL source device makes an ACK response. (3) The MHL source device recognizes that 1 is set in the 3D_CHG flag, and reads 3D information by repeating the procedure shown in FIG. The sequence diagram of FIG. 15 shows the procedure at this time.
  • Each MHL device has a scratch pad register with a length of 16 bytes to 64 bytes, and is used to transfer messages and data to the other MHL device (see FIG. 4).
  • the scratch pad register is used to transfer 3D information from the MHL sink device to the MHL source device.
  • FIG. 16 shows a transfer method using a general scratchpad register (Scratchpad Registers).
  • the basic procedure of this transfer method is the following (1) to (3).
  • (1) Request write permission from the transfer destination MHL device (set the transfer destination REQ_WRT bit with the SET_INT command).
  • (2) The transfer destination MHL device permits writing (set the transfer source GRT_WRT bit with the SET_INT command).
  • (3) The transfer source MHL device transfers write data (WRITE_BURST command + write head offset + data of maximum 16 bytes + EOF).
  • FIG. 17 shows 3D information transferred from the MHL sink device to the MHL source device by using the transfer method using the above-described scratchpad register (Scratchpad ⁇ Registers).
  • an identifier “3D_ID_CODE (3D Capability)” indicating that the data to be transferred is 3D information is arranged.
  • the parameters after the second byte have the same meaning as in FIG. If the data length exceeds 16 bytes and cannot be transferred by one “WRITE_BURST command”, the procedure shown in FIG. 16 is repeated again to transfer the remaining data.
  • 3D ON / OFF control function In this application, while the MHL sink device having the 3D display function is receiving 3D content from the MHL source device, a request to temporarily switch the display to 2D or return to 3D in the middle is received. Allows to be performed on MHL source devices. This is effective, for example, when the viewer (viewer) removes the 3D glasses or when the 3D glasses are temporarily turned off.
  • the MHL sink device requests 2D from the MHL source device when detecting that the 3D glasses are removed, the power of the 3D glasses is turned off, or the 3D / 2D button of the remote control button is pressed. At this time, the MHL sink device requests 2D by transmitting, for example, 2-byte information (data string) as shown in FIG. 18 to the MHL source device.
  • the MHL sink device transfers this 2-byte information to the MHL source device by writing it into the scratch pad register (Scratchpad Registers) of the MHL source device (transfer destination) by the procedure shown in FIG.
  • an identifier “3D_ID_CODE (3D3ON / OFF)” indicating 3D on / off information is arranged in the first byte.
  • 3D on / off information “3D_ON / OFF” is arranged in the seventh bit of the second byte.
  • the display When the viewer removes the 3D glasses or turns off the 3D glasses by the above-mentioned 3D on / off control, the display is instantaneously switched to 2D. Therefore, the viewer can continuously view the content in 2D seamlessly. Further, by the above-described 3D on / off control, when the viewer wears 3D glasses or turns on the power of the 3D glasses, the display is instantaneously switched to 3D. Therefore, the viewer can continuously view the content in 3D seamlessly.
  • the MHL sink device performs 3D / 2D control of content transmission of the MHL source device.
  • the MHL source device performs 3D / 2D display control of the MHL sink device.
  • the above-described 2-byte information (data string) shown in FIG. 18 is transferred from the MHL source device to the MHL sink device according to the procedure shown in FIG.
  • the shutter of the 3D glasses can be stopped and left and right can be opened. This makes it possible to view the 2D image more clearly than when the shutter is operating.
  • 3D content information being transmitted is sent to an HDMI sink device in an HDMI VSI (Vendor Specific InfoFrame) packet during a vertical blanking period. Therefore, it is also conceivable to transfer 3D / 2D switching information to the MHL sink device using the vertical blanking period in the MHL as well.
  • a time lag of 16.7 ms at maximum occurs.
  • the transmission rate is performed via a CBUS of about 1 Mbps, which is advantageous compared to the case where vertical blanking is used.
  • 3D glasses method “Function to detect the viewer's position and display an appropriate 3D image: 3D glasses method” This application is an application for the 3D glasses method (shutter glasses method). Therefore, prior to processing, the MHL sink device notifies the MHL source device that the 3D display method is the 3D glasses method.
  • the MHL sink device notifies the MHL source device by transmitting, for example, 2-byte information (data string) as shown in FIG.
  • the MHL sink device transfers this 2-byte information to the MHL source device by writing it into the scratch pad register (Scratchpad Registers) of the MHL source device (transfer destination) according to the procedure shown in FIG.
  • an identifier “3D_ID_CODE (SinkSClass)” indicating 3D display method information is arranged in the first byte.
  • 3D display method information “Sink ⁇ Class ” is arranged in the 7th to 5th bits of the 2nd byte.
  • the MHL source device is 3D glasses
  • this application will function.
  • the maximum 3D effect is usually obtained when a viewer (viewer) views a 3D image vertically from the front direction of the television.
  • a viewer views a 3D image in an oblique direction on the TV or with his / her face tilted, not only the 3D effect is reduced but also a physiological discomfort is felt.
  • the position detection sensor face detection sensor attached to the MHL sink device is used to detect the position and inclination of the viewer's face from the TV screen. Detected.
  • FIG. 21 shows an example in which a 3D image is corrected so as to be easy for a viewer to see. As shown in the figure, the viewer is displayed as if viewing the image from the front so that the 3D effect is maximized. Although illustration is omitted, when there are two or more viewers, a method of correcting the viewer to an average position or a viewer with the shortest distance is conceivable.
  • the MHL sink device When the position information input using the position detection sensor (face detection sensor) or the remote control is performed by the MHL sink device and the correction process is performed by the MHL source device, for example, 5-byte information (data string) as shown in FIG. Are transferred from the MHL sink device to the MHL source device.
  • the MHL sink device transfers this 5-byte information to the MHL source device by writing it to the scratch pad register (Scratchpad Registers) of the MHL source device (transfer destination) in the procedure shown in FIG.
  • an identifier “3D_ID_CODE (3D Adjust 1)” indicating 3D image correction information is arranged in the first byte.
  • information on the distance r is arranged in the second byte, and information on the vertical angle ⁇ 1 (90 ° to ⁇ 90 °) is arranged in the third byte.
  • information on the left-right angle ⁇ 2 is arranged in the 4th byte, and information on the twist angle ⁇ 3 (90 ° to ⁇ 90 °) is arranged in the 5th byte. Be placed.
  • the MHL source device that has received this 5-byte information corrects the 3D image to the optimum state for the position viewed by the viewer based on the information of the distance r, the vertical angle ⁇ 1, the horizontal angle ⁇ 2, and the twist angle ⁇ 3. Perform correction processing.
  • the MHL source device transmits the corrected image data to the MHL sink device via the TMDS channel shown in FIG.
  • position information input using a position detection sensor or a remote controller is performed by an MHL source device, and image correction processing is performed by an MHL sink device.
  • the MHL source device transfers the 5-byte information (data string) shown in FIG. 23 to the MHL sink device.
  • the image data transmitted from the MHL source device via the TMDS channel remains uncorrected. Therefore, the MHL sink device performs an image correction process for correcting the 3D image to an optimal state with respect to the position viewed by the viewer based on the information on the distance r, the vertical angle ⁇ 1, the horizontal angle ⁇ 2, and the twist angle ⁇ 3.
  • Direct view method This application is an application especially for the direct viewing method. Therefore, prior to processing, the MHL sink device notifies the MHL source device that the 3D display method is the direct view method.
  • the MHL sink device notifies the MHL source device by transmitting, for example, 2-byte information (data string) as shown in FIG.
  • 2-byte information data string
  • the MHL sink device transfers this 2-byte information to the MHL source device by writing it into the scratch pad register (Scratchpad Registers) of the MHL source device (transfer destination) by the procedure shown in FIG. If the MHL source device is a direct view method, this application functions.
  • the lenticular lens shown in FIG. 24A is arranged on the television display screen as shown in FIG. As shown in FIG. 25, the lenticular lens has a kamaboko cross section. This lenticular lens is superimposed on the television screen, and the 3D display of the direct view system is realized by utilizing refraction when the light emitter on the television screen passes through the lenticular lens.
  • the maximum 3D effect can be obtained when viewed vertically from the front of the television.
  • the 3D effect is optimized according to the position of the viewer even in the direct view method, as in the above-described 3D glasses method.
  • the 3D effect can be enhanced according to the viewing position of the viewer. it can.
  • an MHL source device When input of position information using a position detection sensor (face detection sensor) or a remote controller is performed by an MHL source device and correction processing is performed by an MHL sink device, for example, 8-byte information (data string) as shown in FIG. Are transferred from the MHL source device to the MHL sink device.
  • the MHL source device transfers this 8-byte information to the MHL sink device by writing it into the scratch pad register (Scratchpad Registers) of the MHL sink device (transfer destination) in the procedure shown in FIG.
  • an identifier “3D_ID_CODE (3D Adjust 2)” indicating 3D image correction information is arranged in the first byte. Further, in this 8-byte information, information on the distance r is arranged in the second byte.
  • the third byte, the fourth byte, and the fifth byte include a vertical shift amount (+ 100% to ⁇ 100%), a horizontal shift amount (+ 100% to ⁇ 100%) of the lenticular lens, A twist angle ⁇ (90 ° to ⁇ 90 °) is arranged.
  • the 6th, 7th, and 8th bytes include the vertical shift amount (+ 100% to -100%), the horizontal shift amount (+ 100% to -100%), and the twist.
  • An angle ⁇ (90 ° to ⁇ 90 °) is arranged.
  • the MHL sink device that has received this 8-byte information performs a process of correcting the 3D image to an optimum state with respect to the position viewed by the viewer based on the information included therein.
  • the MHL sink device performs a shift and rotation process on one or both of the lenticular lens and the television display screen.
  • Closed captioning is a subtitle display function that is performed in the United States and displays text on a television screen in synchronism with images, such as conversation and sound effects.
  • closed captions characters to be displayed and control information are encoded and added to a specific track in a package content such as a broadcast wave or a DVD.
  • the CC code received by the TV tuner is decoded by the TV CC decoder and displayed as characters on the TV screen.
  • the display position of characters on the television screen can be changed by the television remote controller.
  • the CC display position changes in the order of upper right ⁇ lower right ⁇ upper left ⁇ lower left.
  • HDMI and MHL do not have a function to transmit the CC code as it is from the source device to the sink device. Therefore, for example, when a source device having a tuner receives a broadcast wave and views it on the sink device side, or when a source device having a DVD playback function tries to play a DVD including a CC code, the CC code is left as it is. It cannot be transmitted to the sink device.
  • the data is decoded by the CC decoder on the source device side, developed as characters on the screen (open caption), and then transferred as an AV stream to the sink device via the HDMI or MHL cable.
  • the character display position on the screen is changed using the remote control on the source side.
  • the display position can be changed using the sink side, that is, the remote control of the television.
  • a rectangle indicated by a broken line in FIG. 28 indicates a CC display frame on the conventional 2D screen. In this case, two vertical and horizontal positions are designated. In the case of 3D, as shown in FIG. 29, three display depths are designated in addition to vertical and horizontal.
  • the MHL sink device When an AV stream with closed caption (CC) is transferred from the MHL source device, the MHL sink device transfers, for example, 7-byte information (data string) as shown in FIG. 30 to the MHL source device.
  • the MHL sink device transfers this 7-byte information to the MHL source device by writing it into the scratch pad register (Scratchpad Registers) of the MHL source device (transfer destination) by the procedure shown in FIG.
  • an identifier “3D_ID_CODE (ClosedCloseCaption)” indicating CC information is arranged in the first byte.
  • the character size (extra large, large, medium, small) information is arranged in the second byte, and the point A in the horizontal direction (0 to 255) of point A is arranged.
  • Information is arranged, and information in the vertical direction (0 to 255) of point A is arranged in the fourth byte.
  • the information in the horizontal direction (0 to 255) of point B is arranged in the fifth byte, and the information in the vertical direction (0 to 255) of point B is arranged in the sixth byte.
  • information on the depths (0 to 255) of points A and B is arranged.
  • Character size Designates the size of characters to be displayed. There are four types: extra large, large, medium and small.
  • Horizontal direction of point A The horizontal position at the upper left of the rectangular display frame indicated by the broken line in FIG. 28 is designated. When the value is 0, there is no designation. When the value is 1 to 255, the position from the left side when the width of the sync screen is divided into 254 is designated. For example, in the case of “1”, the left end of the screen is designated as the horizontal position of the point A, and in the case of “255”, the right end of the screen is designated as the horizontal position of the point A.
  • Horizontal direction of point B Designates the horizontal position at the lower right of the rectangular display frame indicated by the broken line in FIG. When the value is 0, there is no designation. When the value is 1 to 255, the position from the left side when the width of the sync screen is divided into 254 is designated. For example, in the case of “1”, the left end of the screen is specified as the horizontal position of the point B, and in the case of “255”, the right end of the screen is specified as the horizontal position of the point B.
  • Vertical direction of point B Designate the vertical position at the lower right of the rectangular display frame indicated by the broken line in FIG. When the value is 0, there is no designation. When the value is 1 to 255, the position from the top when the height of the sync screen is divided into 254 is designated. For example, in the case of “1”, the upper end of the screen is specified as the vertical position of point B, and in the case of “255”, the lower end of the screen is specified as the vertical and horizontal position of point B.
  • Depth of display frame AB The depth position of the rectangular display frame AB indicated by the broken line in FIG. 29 is designated. When the value is 0, there is no designation. When the value is 1 to 255, the position from the forefront when the depth of the sync screen is divided into 254 is designated. For example, in the case of “1”, the frontmost part of the screen is designated as the depth position of the rectangular display frame AB, and in the case of “255”, the rearmost part of the screen is designated as the depth position of the rectangular display frame AB.
  • the MHL source device that has received the 7-byte information expands (open captions) the character within the rectangular frame AB having the specified position and depth based on the information included in the specified character size. . Then, the MHL source device transfers the AV stream to the MHL sink device through the TMDS channel. Since the closed caption (CC) has already been developed in the AV stream, the MHL sink device does not need to decode the CC code and only displays the image as it is.
  • closed caption CC
  • 3D information is transferred between devices by using an MHL capability register (Capability Register) or a scratchpad register (ScratchpadRegister). Therefore, 3D information can be transferred efficiently and at high speed.
  • MHL capability register Capability Register
  • SctchpadRegister scratchpad register
  • the 3D capability of the MHL sink device can be transferred to the MHL source device at high speed and efficiently.
  • it is very effective for a mobile device that is battery-driven and has a low CPU performance because it can improve response and reduce battery consumption.
  • This is consistent with the gist of the MHL standard based on the use of mobile devices.
  • various types of registers of the MHL device are used to transfer data bidirectionally between the sink and the source, various fine 3D processing that cannot be realized with an HDMI device can be realized.
  • FIG. 1 an example in which the television receiver 200 is an MHL sink device is illustrated.
  • the present invention can be similarly applied to an image display system 10A as shown in FIG.
  • the mobile phone 100 and the MHL dongle 400 are connected by an MHL cable 300.
  • the MHL dongle 400 and the television receiver 200 ⁇ / b> A are connected by the HDMI cable 500.
  • the MHL dongle 400 performs MHL-HDMI conversion processing.
  • the television receiver 200A is compatible with HDMI but not MHL.
  • the AV stream from the mobile phone 100 is converted from MHL to HDMI using the MHL dongle 400 and then input to the HDMI input terminal of the television television receiver 200A.
  • the MHL source device is the mobile phone 100 and the MHL sink device is the television receiver 200 is shown.
  • the combination of the MHL source device and the MHL sink device is not limited to this. Even in such a case, 3D information can be transferred efficiently and at high speed by transferring 3D information between devices using MHL capability registers or scratch pad registers, etc. It is possible to perform simple control.
  • the 3D structure and video format of 3D image data transmitted from the MHL source device to the MHL sink device are transferred from the MHL source device to the MHL sink device using the scratch pad register. You can also. Since this transfer method is the same as the transfer using the scratch pad register of various 3D information described above, the description is omitted here.
  • closed captions are shown as subtitles.
  • the present technology can be similarly applied to other subtitles such as DVB subtitles, ARIB subtitles, and the like.
  • the present technology can be applied to, for example, an electronic device constituting an image display system for displaying a 3D image.

Abstract

立体画像情報(3D情報)を電子機器間で効率よく高速に転送可能とする。 MHLのケーパビリティ・レジスタ(Capability Register)を使用して、機器間において3D情報の転送を行う。(1)MHLシンク機器は、ケーパビリティ・レジスタの3D情報を変更した直後、"SET_INTコマンドを送出し、MHLソース機器側の3D_CHGフラグに「1」をセットし、MHLソース機器に3D情報を通知する。(2)MHLソース機器は、ACK応答する。(3)MHLソース機器は、3D_CHGフラグに1がセットされたことを認識し、MHLシンク機器に、ケーパビリティ・レジスタにおける3D情報のアドレス情報が付加された"READ_DEVCAPコマンド"を送信し、当該ケーパビリティ・レジスタから3D情報のみを読み込む。MHLのスクラッチパッド・レジスタ(Scratchpad Register)を使用して、機器間において3D情報の転送を行って、きめの細かな3D制御を行うことも考えられる。

Description

電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法
 本技術は、電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法に関し、特に、立体画像表示のための画像表示システムを構成する電子機器に関する。
 近年、例えば、ソース機器からシンク機器に画像および音声のデータを高速に伝送する通信インタフェースとして、HDMI(High Definition Multimedia Interface)等のデジタルインタフェースが普及しつつある。ソース機器は、例えば、携帯電話、ゲーム機、DVD(Digital Versatile Disc)レコーダや、セットトップボックス、その他のAVソース(Audio Visual source)である。シンク機器は、例えば、テレビ受信機、プロジェクタ、その他のディスプレイである。例えば、非特許文献1には、HDMI規格の詳細についての記載がある。
High-Definition Multimedia Interface Specification Version 1.4,June5 2009
 HDMIでは、シンク機器の3Dケーパビリティ伝達手段をEDID(Enhanced Extended Display Identification Data)によってソース機器に伝達している。この伝達手段に関し、以下の様な欠点がある。
 (1)シンク機器とソース機器がリンクしているときに、シンク機器側の3Dケーパビリティに変更が生じた場合、ソース機器は3D以外の情報を含め、最低でもEDID2ブロック(256バイト)を毎回読み出さなければならない。3Dの情報だけならば数バイトから10数バイト程度で済むのに対し、これは冗長であり、読出しに余分な電力を消費するため、バッテリ駆動のモバイル機器に対しては厳しい。
 (2)シンク機器はEDIDに変更が生じた場合、HPD(Hot Plug Detect)信号を最低100ms長のロー(LOW)パルスを発生させ、その旨をソース機器に通知する。これは、シンク機器側で変更が生じてからソース機器が認識するまで少なくとも100ms、さらにEDIDを読出して3D情報を認識する時間を加算したものが、タイムラグとなり、ソース機器のレスポンスに影響する。
 また、HDMIでは、シンク-ソース機器間で3D情報を伝達する手段は、シンク機器からソース機器へはEDID、ソース機器からシンク機器へはHDMI Vendor Specific InfoFrameだけである。3D機能を充実させるためには、さらに多くの3D情報を双方向で高速に伝達する手段が必要である。しかし、現在HDMIではそのような手段は定義されていない。
 本技術の目的は、立体画像情報(3D情報)を電子機器間で効率よく高速に転送可能とすることにある。
 本技術の概念は、
 機能情報を書き込んでおくレジスタと、
 上記レジスタに書き込まれている立体画像情報に変更があるとき、外部機器に変更通知を送信する変更通知送信部と、
 上記変更通知送信部から送信される上記変更通知に応じて上記外部機器から送られてくる読み出しコマンドおよび上記レジスタにおける立体画像情報のアドレス情報を受信する読み出しコマンド受信部と、
 上記読み出しコマンド受信部で受信された上記アドレス情報に対応した上記レジスタのアドレスから上記立体画像情報を読み出して上記外部機器に送信する立体画像情報送信部と
 を備える電子機器にある。
 本技術において、立体画像情報(3D情報)を含む種々の機能情報を書き込んでおくレジスタが備えられている。このレジスタに書き込まれている立体画像情報に変更があるとき、変更通知送信部により、外部機器に変更通知が送信される。この変更通知の送信に対応して、外部機器からは読み出しコマンドおよびレジスタにおける立体画像情報のアドレス情報が送られてくる。
 読み出しコマンド受信部により、これら読み出しコマンドおよびアドレス情報が受信される。そして、立体画像情報送信部により、アドレス情報に対応したレジスタのアドレスから立体画像情報が読み出されて外部機器に送信される。本技術において、例えば、立体画像情報には、自身が取り扱い可能な立体画像データのストラクチャおよびビデオフォーマットの情報が含まれるようにされる。
 このように、本技術においては、レジスタに書き込まれている立体画像情報に変更があるとき、外部機器に変更通知を送信し、この変更通知に対応して外部機器から送られてくる読み出しコマンドに基づいて、直ちに変更された立体画像情報を外部機器に送信するものである。そして、この場合、外部機器からのアドレス情報に基づいてレジスタから立体画像情報のみを読み出して外部機器に送信するものである。そのため、外部機器に立体画像情報を効率よく高速に送信できる。
 また、本技術の他の概念は、
 機能情報を書き込んでおくレジスタを有する外部機器から通知される立体画像情報の変更通知を受信する変更通知受信部と、
 上記変更通知受信部で受信される上記変更通知に応じて、上記外部機器に読み出しコマンドおよび上記レジスタにおける立体画像情報のアドレス情報を送信する読み出しコマンド送信部と、
 上記読み出しコマンド送信部から送信される上記読み出しコマンドおよび上記立体画像情報のアドレス情報に対応して上記外部機器の上記レジスタから読み出されて送られてくる上記立体画像情報を受信する立体画像情報受信部と
 を備える電子機器にある。
 本技術において、外部機器は、機能情報を書き込んでおくレジスタを有するものとされる。このレジスタに書き込まれている立体画像情報(3D情報)に変更があるとき、外部機器から変更通知が送信されている。変更通知受信部により、この変更通知が受信される。この変更通知に応じて、コマンド送信部により、外部機器に、読み出しコマンドおよびレジスタにおける立体画像情報のアドレス情報が送信される。
 外部機器からは、アドレス情報に対応したレジスタのアドレスから立体画像情報が読み出されて、送信されてくる。このように外部機器から送信されてくる立体画像情報は、立体画像情報受信部により受信される。本技術において、例えば、立体画像情報には、外部機器が取り扱い可能な立体画像データのストラクチャおよびビデオフォーマットの情報が含まれるようにされる。
 このように、本技術においては、外部機器においてレジスタに書き込まれている立体画像情報に変更があるとき、外部機器から変更通知が送信され、外部機器に読み出しコマンドを送信することで、直ちに変更された立体画像情報が外部機器から送信されてくる。そして、この場合、外部機器に送信するアドレス情報に基づいて、外部機器ではレジスタから立体画像情報のみが読み出されて送信されてくる。そのため、外部機器から立体画像情報を効率よく高速に受信できる。
 また、本技術の他の概念は、
 立体画像情報の書き込みが可能なレジスタを有する外部機器に立体画像情報の書き込み要求を送信する書き込み要求送信部と、
 上記書き込み要求送信部で送信される上記書き込み要求に対応して上記外部機器から送られてくる書き込み許可を受信する書き込み許可受信部と、
 上記書き込み許可受信部で受信される書き込み許可に応じて、上記外部機器に、書き込みコマンド、上記レジスタにおける立体画像情報のアドレス情報および立体画像情報を送信する立体画像情報送信部と
 を備える電子機器にある。
 本技術において、外部機器には、立体画像情報(3D情報)を含む種々の機能情報を書き込んでおくレジスタが備えられている。書き込み要求送信部により、外部機器に立体画像情報の書き込み要求が送信される。この書き込み要求に対応して、外部機器から書き込み許可が送られてくる。書き込み許可受信部により、この書き込み許可が受信される。立体画像情報送信部により、この書き込み許可に応じて、外部機器に、書き込みコマンド、レジスタにおける立体画像情報のアドレス情報および立体画像情報が送信される。外部機器では、このように送信される書き込みコマンド、レジスタにおける立体画像情報のアドレス情報および立体画像情報が受信され、立体画像情報がアドレス情報に対応したレジスタのアドレスに書き込まれる。
 本技術において、例えば、外部機器に送信する立体画像情報には、自身が取り扱い可能な立体画像データのストラクチャおよびビデオフォーマットの情報が含まれるようにされる。また、本技術において、例えば、立体画像表示部をさらに備え、外部機器に送信する立体画像情報には、立体画像表示部における立体画像表示方式の情報が含まれるようにされる。また、本技術において、例えば、立体画像表示部をさらに備え、外部機器に送信する立体画像情報には、立体画像表示部の観視者の位置情報が含まれるようにされる。
 また、本技術において、例えば、外部機器は立体画像表示部をさらに備え、外部機器に送信する立体画像情報には、立体画像表示部の観視者の位置情報が含まれるようにされる。また、本技術において、例えば、外部機器は表示面上にレンチキュラレンズが配された立体画像表示部を備え、外部機器に送信する立体画像情報には、レンチキュラレンズの上下左右のシフト量と回転角の情報、および画像の上下左右のシフト量と回転角の情報のいずれかまたは両方が含まれるようにされる。
 また、本技術において、例えば、外部機器は立体画像表示部をさらに備え、外部機器に送信する立体画像情報には、字幕の表示位置の情報が含まれるようにされる。また、本技術において、例えば、シャッタメガネを用いて立体画像を知覚させる立体画像表示部をさらに備え、外部機器に送信する立体画像情報には、立体画像のオン/オフ情報が含まれるようにされる。
 また、本技術において、例えば、外部機器はシャッタメガネを用いて立体画像を知覚させる立体画像表示部を備え、外部機器に送信する立体画像情報には、立体画像のオン/オフ情報が含まれるようにされる。また、本技術において、例えば、外部機器に立体画像データを送信する画像データ送信部をさらに備え、外部機器に送信する立体画像情報には、上記立体画像データのストラクチャおよびビデオフォーマットの情報が含まれるようにされる。
 このように、本技術においては、外部機器に書き込み要求を送信し、これに対応して外部機器から書き込み許可が受信されるとき、外部機器に立体画像情報(3D情報)を送信するものである。そのため、外部機器に立体画像情報を効率よく高速に送信できる。
 また、この発明の他の概念は、
 立体画像情報の書き込みが可能なレジスタと、
 外部機器から上記レジスタへの立体画像情報の書き込み要求を受信する書き込み要求受信部と、
 上記書き込み要求受信部で受信される上記書き込み要求に応じて、上記外部機器に書き込み許可を送信する書き込み許可送信部と、
 上記書き込み許可送信部で送信される上記書き込み許可に対応して上記外部機器から送られてくる書き込みコマンド、上記レジスタにおける立体画像情報のアドレス情報および立体画像情報を受信し、該受信された立体画像情報を、該受信されたアドレス情報に対応した上記レジスタのアドレスに書き込む書き込み制御部と
 を備える電子機器にある。
 本技術において、立体画像情報の書き込みが可能なレジスタを有するものとされる。書き込み要求受信部により、外部機器から送信されてくる立体画像情報の書き込み要求が受信される。この書き込み情報に応じて、書き込み許可送信部により、外部機器に書き込み許可が送信される。この書き込み許可に応じて、外部機器から、書き込みコマンド、レジスタにおける立体画像情報のアドレス情報および立体画像情報が送信されてくる。そして、書き込み制御部により、この書き込みコマンド、レジスタにおける立体画像情報のアドレス情報および立体画像情報が受信され、この立体画像情報が、アドレス情報に対応したレジスタのアドレスに書き込まれる。
 このように、本技術においては、外部機器から書き込み要求が送られてくるとき、外部機器に書き込み許可を送信することで、直ちに外部機器から立体画像情報(3D情報)が送信されてくる。そのため、外部機器から立体画像を効率よく高速に受信できる。
 本技術によれば、立体画像情報(3D情報)を電子機器間で効率よく高速に転送することができる。
本技術の実施の形態としての画像表示システムの構成例を示すブロック図である。 画像表示システムを構成するモバイルフォーンおよびテレビ受信機の構成例を示すブロック図である。 MHLソース機器であるモバイルフォーンのMHL送信部と、MHLシンク機器であるテレビ受信機のMHL受信部の構成例を示す図である。 MHLで使用するレジスタの構成を示す図である。 HDMIソース機器におけるHDMI送信部と、HDMIシンク機器におけるHDMI受信部の構成例を示す図である。 HDMIシンク機器が、HDMIソース機器との接続直後に、HPDライン(PIN 19)を100ms以上ロー(L)にすることを示す図である。 MHLにおいて、HDMIのHPDラインのロー(L)に相当する処理は、MSCコマンドを使ってシミュレートされ、HPDラインのローに相当する時間が50ms以上とされることを示す図である。 MHLにおける現在のケーパビリティ・レジスタ(Capabiliry Registers)のパラメータ割当状況を示す図である。 MHL機器(要求側)がMHL機器(応答側)のケーパビリティ・レジスタ(Capability Registers)を読み出す手順を示す図である。 インタラプト・レジスタ(Device Interrupt Registers)の構造を示す図である。 インタラプト・レジスタの「address 0x20」の「RCAHNGE_INT Register」の詳細を示す図である。 MHL機器(変更側)が自分のケーパビリティ・レジスタ(Capability Registers)を変更してから相手のMHL機器(応答側)にその旨を通知する手順を示す図である。 MHLシンク機器からMHLソース機器に転送する3Dに関するパラメータの一例を示す図である。 MHLシンク機器がサポートする3Dのマンダトリフォーマットを示す図である。 MHLソース機器にMHLシンク機器の3D情報を読ませる手順を示すシーケンス図である。 一般的なスクラッチパッド・レジスタ(Scratchpad Registers)を使った転送方法を示すシーケンス図である。 スクラッチパッド・レジスタ(Scratchpad Registers)を使った転送方法を使ってMHLシンク機器からMHLソース機器に転送する3D情報の一例を示す図である。 MHLシンク機器からMHLソース機器に送信する3Dのオンオフ情報の一例を示す図である。 MHLシンク機器がMHLソース機器に3D表示方式を通知するために送信する情報の一例を示す図である。 視聴者の顔位置のテレビに対する距離、角度などの情報を説明するための図である。 視聴者の顔位置に基づいて、視聴者に対して3D画像を見やすく補正する例を示す図である。 位置検出センサにより視聴者の顔位置を検出することが困難な場合に、テレビリモコンの上下左右・回転ボタン等を使ってマニュアル操作で補正を行うことを説明するための図である。 位置検出センサ(顔検出センサ)やリモコンを使った位置情報の入力をMHLシンク機器で行って補正処理をMHLソース機器で行う場合に、MHLシンク機器からMHLソース機器に転送する情報の一例を示す図である。 直視方式の一方式であるレンチキュラ方式の構造を説明するための図である。 直視方式の一方式であるレンチキュラ方式の構造を説明するための図である。 直視方式で視聴者の位置によって3D効果を最適化する場合に、レンチキュラレンズか画像のどちらか一方、または両方を上下左右方向にシフトさせたり、回転させたりすることを説明するための図である。 位置検出センサ(顔検出センサ)やリモコンを使った位置情報の入力をMHLソース機器で行って補正処理をMHLシンク機器で行う場合に、MHLソース機器からMHLシンク機器に転送する情報の一例を示す図である。 2D画面上でのクローズド・キャプション(CC)の表示枠を示す図である。 3Dの場合、クローズド・キャプション(CC)の表示枠の位置として、縦、横に加えて、奥行きの3つを指定することを説明するための図である。 MHLソース機器からクローズド・キャプション(CC)入りのAVストリームが転送される場合に、MHLシンク機器からMHLソース機器に転送される情報の一例を示す図である。 テレビ受信機がMHL非対応である場合の画像表示システムの構成例を示すブロック図である。
 以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明は以下の順序で行う。
 1.実施の形態
 2.変形例
 <1.実施の形態>
 [画像表示システム]
 図1は、実施の形態としての立体画像(3D画像)を表示するための画像表示システム10の構成例を示している。この画像表示システム10は、MHL(Mobile High-definition Link)ソース機器としてのモバイルフォーン(Mobile Phone)100と、MHLシンク機器としてのテレビ受信機200とにより構成されている。これらの機器はMHLケーブル300によって接続されている。
 MHLの概要を説明する。MHLは、主に、モバイル機器用のAV(Audio Visual)デジタルインタフェース規格である。MHLは、MHLソース機器とMHLシンク機器をMHLケーブルで接続し、MHLソース機器が持っている動画、静止画、音声等のコンテンツをMHLシンク機器で再生する(AVストリーム・単方向)。また、機器間ではEDID読出し、HDCP認証、レジスタリード/ライト、リモコン制御等のコントロールをDDCコマンド、およびMSC(MHL Sideband channel)コマンドを送受信することで行う(リンクコントロール・双方向)。
 画像表示システム10では、モバイルフォーン100とテレビ受信機200との間で3Dに関する情報、すなわち立体画像情報(以下、適宜、「3D情報」という)の転送を行って、きめ細かな処理を行うことができる。この画像表示システム10では、この3D情報の転送のために、MHL特有のスクラッチパッド・レジスタ(Scratchpad Register)、または、ケーパビリティ・レジスタ(CapabilityRegister)を利用する。これらのレジスタの詳細については、後述する。
 例えば、テレビ受信機200からモバイルフォーン100に、テレビ受信機200で取り扱い可能な立体画像データのストラクチャ(3Dストラクチャ)およびビデオフォーマットの情報が供給される。ここで、3Dストラクチャは、立体画像データ(3D画像データ)の伝送フォーマットを意味し、例えば、フレームパッキング、サイドバイサイド、トップアンドボトム等である。また、ビデオフォーマットは、3D画像データの解像度、フレーム数(フィールド数)等を意味し、例えば、1920×1080i@60Hz、1280×720P@60Hz等である。
 また、例えば、テレビ受信機200からモバイルフォーン100に、立体画像表示方式(3D表示方式)の情報が供給される。ここで、3D表示方式は、例えば、3Dメガネ(3D Glass)方式(シャッタメガネ方式)、直視方式、ヘッドマウント方式等である。また、例えば、テレビ受信機200からモバイルフォーン100に、3D画像の視聴者(観視者)の位置情報が供給される。また、例えば、逆に、モバイルフォーン100からテレビ受信機200に、立体画像(3D画像)の視聴者(観視者)の位置情報が供給される。ここで、位置情報は、例えば、画像表示部に対する視聴者の顔位置を示す距離、角度(上下角、左右角、ねじれ角)等の情報である。
 また、例えば、テレビ受信機200の3D表示方式が直視方式であり、表示面上にレンチキュラレンズが配されている場合がある。この場合、モバイルフォーン100からテレビ受信機200に、レンチキュラレンズの上下左右のシフト量と回転角の情報、および画像の上下左右のシフト量と回転角の情報のいずれかまたは両方が供給される。また、例えば、テレビ受信機200からモバイルフォーン100に、クローズド・キャプション等の字幕の表示位置(水平、垂直、奥行き)の情報が供給される。
 また、例えば、テレビ受信機200の3D表示方式が3Dメガネ方式(シャッタメガネ方式)である場合、テレビ受信機200からモバイルフォーン100に、3Dのオンオフ情報が供給される。また、この場合、モバイルフォーン100からテレビ受信機200に、3Dのオンオフ情報が供給される。また、例えば、テレビ受信機200の3D表示方式が3Dメガネ方式(シャッタメガネ方式)である場合、モバイルフォーン100からテレビ受信機200に、シャッタメガネの電源オン/オフ情報が供給される。また、例えば、モバイルフォーン100からテレビ受信機200に送信される3D画像データの3Dストラクチャおよびビデオフォーマットの情報が供給される。
 [モバイルフォーンおよびテレビ受信機の構成例]
 図2は、モバイルフォーン100およびテレビ受信機200の構成例を示している。最初にモバイルフォーン100について説明する。モバイルフォーン100は、制御部101、ユーザ操作部102、表示部103、3G/4Gモデム部104、カメラ部105、記録再生部106、送信処理部107、MHL送信部108、およびMHL端子109を有している。
 制御部101は、モバイルフォーン100の各部の動作を制御する。ユーザ操作部102および表示部103は、ユーザインタフェースを構成し、制御部101に接続されている。ユーザ操作部102は、モバイルフォーン100の図示しない筐体に配置されたキー、釦、ダイアル、あるいは表示部103の表示面に配置されたタッチパネル等で構成される。表示部103は、LCD(Liquid Crystal Display)、有機EL(ElectroLuminescence)等で構成される。
 3G/4Gモデム104は、携帯電話通信を行う。カメラ部105は、動画、静止画の撮像を行う。記録再生部106は、例えば、内蔵メモリ(不揮発性メモリ)、あるいはメモリカード等の記録媒体にドライブして記録再生(書き込み読み出し)を行う。この記録再生部106は、モデム部104を通じて行われる通話の記録再生を行う。また、この記録再生部106は、モデム部104を通じて取得される動画、静止画の画像データ、音声データの記録再生、カメラ部(マイクロホンを含む)105で撮像されて得られる動画、静止画の画像データ、音声データの記録再生等を行う。なお、記録再生部106では、カメラ部105で撮像されて得られた動画、静止画の画像データに対して、データ圧縮のためのコーデック処理も行う。
 ユーザは、ユーザ操作部102から指示することで、記録再生部106における記録媒体内の記録内容を、コンテンツリストとして表示させることができる。また、このコンテンツリスト中の任意の1つをユーザがユーザ操作部102から指定すると、記録再生部106において記録媒体からその指定されたコンテンツのデータが再生され、送信処理部107に転送される。
 なお、3G/4Gモデム104で取得された画像データ、音声データ、あるいはカメラ部105で得られた画像データ、音声データを、リアルタイムで送信する場合も考えられる。その場合、それらのコンテンツデータは、図示していないが、直接、送信処理部107に転送される。また、メモリカードを他のデバイスに挿入してコンテンツデータを書き込んだ後、記録再生部106に装着して、送信処理部107に送信する場合も考えられる。
 送信処理部107は、記録再生部106で再生され、テレビ受信機200に送信するための動画、静止画、音声等のデータを適切な形態となるように処理する。例えば、3D画像データの伝送フォーマットおよびビデオフォーマットを、テレビ受信機200で取り扱い可能となるように変換する。MHL送信部108は、MHL端子109に接続されている。このMHL送信部108は、MHL規格に準拠した通信により、送信処理部107で処理された画像、音声等のデータを、MHL端子109から、MHLケーブル300を介して、テレビ受信機200に、一方向に送信する。このMHL送信部108の詳細については後述する。
 次に、テレビ受信機200について説明する。テレビ受信機200は、制御部201、ユーザ操作部202、MHL端子203、MHL受信部204、チューナ205、アンテナ端子206、切替部207、表示処理部208、および表示パネル209を有している。制御部201は、テレビ受信機200の各部の動作を制御する。ユーザ操作部202は、ユーザインタフェースを構成し、制御部201に接続されている。ユーザ操作部202は、テレビ受信機200の図示しない筐体に配置されたキー、釦、ダイアル、あるいはリモコン等で構成される。
 MHL受信部204は、MHL端子203に接続されている。このMHL受信部204は、MHL規格に準拠した通信により、MHLケーブル300を介して接続されているモバイルフォーン100のMHL送信部108から一方向に送信されてくる画像、音声等のデータを受信する。MHL受信部204は、受信した画像データを切替部207に供給する。なお、MHL受信部204が受信した音声のデータは、図示していない音声データ用の切替部に供給される。このMHL受信部204の詳細については後述する。
 チューナ205は、BS放送、地上波デジタル放送等を受信する。このチューナ205には、アンテナ端子206に接続された図示しないアンテナで捕らえられた放送信号が供給される。このチューナ205は、放送信号に基づいて、所定の番組の画像データ(映像信号)および音声データを取得する。切替部207は、MHL受信部204で受信された画像データまたはチューナ205で取得された画像データを選択的に取り出す。
 表示処理部208は、切替部207で取り出された画像データに対して、クローズド・キャプション等の字幕の重畳処理を行う。また、表示処理部208は、切替部207で取り出された画像データが3D画像データである場合、その画像データに基づいて、テレビ受信機200における3D表示方式に応じた画像データを作成する処理を行う。表示パネル209は、表示処理部208で処理された画像データによる画像を表示する。表示パネル209は、例えば、LCD(Liquid Crystal Display)、有機EL(ElectroLuminescence)、PDP(Plasma Display Panel)等で構成される。
 [MHL送信部、MHL受信部の構成例]
 図3は、図2のモバイルフォーン100のMHL送信部108と、テレビ受信機200のMHL受信部204の構成例を示している。MHL送信部108はトランスミッタ(Transmitter)を備え、MHL受信部204はレシーバ(Receiver)を備えている。MHL送信部108およびMHL受信部204は、5本のライン(MHL+、MHL-、CBUS、VBUS、GND)でピンおよびMHLケーブルを介して接続される。ピンアサインはコネクタによって異なるため、ここでは記述しない。“MHL+”と“MHL-”は1対のツイストペアでAVストリーム、および、その同期信号(MHLクロック)を伝送する。
 CBUSは、DDCコマンドとMSCコマンドを双方向に伝送するために使用する。DDCコマンドは、EDID読出しやHDCPの認証に使用する。また、MSCコマンドは、EDID読出し制御、各種レジスタのリードライト、リモコン制御等に使用する。VBUSは、MHLシンク機器からMHLソース機器、またはMHLソース機器からMHLシンク機器に+5Vの電源を供給するために使用する。
 図4は、MHLで使用するレジスタの構成を示している。MHL送信部108、MHL受信部204は、それぞれ、4種類のレジスタを持ち、MSCコマンドで相互にアクセスすることが可能である。それぞれの役割は以下の通りである。
 (1)ケーパビリティ・レジスタ(Capability Registers)
 各MHL機器の機能を示すレジスタである。“MSC READ_DEVCAPコマンド”で読み出すことで、相手側機器の機能情報を得ることができる。
 (2)インタラプト・レジスタ(Interrupt Registers)
 相手側MHL機器へのイベント通知に使われる。“MSC SET_INTコマンド”で、相手側のインタラプト・レジスタにセットする。
 (3)ステータス・レジスタ(Status Registers)
 相手側MHL機器に自分のケーパビリティ・レジスタが読出し可能であること、およびTMDSチャネル(TMDS Channel)の状態を通知する。“MSC WRITE_STATコマンド”で相手側ステータス・レジスタに書き込む。
 (4)スクラッチパッド・レジスタ(Scratchpad Registers)
 相手側MHL機器に対するメッセージやデータの送出に使う。“MSC WRITE_BURSTコマンド”で相手側スクラッチパッド・レジスタに書き込む。 
 また、図4において、「MSC Offset Range」、「Max. Size」、「Req’d Size」、「UsageMHL CBUS」は、それぞれ、以下を意味する。すなわち、「MSC Offset Range」は、相手側MHL機器の各レジスタに対して読み書きするときのオフセット値を示す。「Max. Size」は、各レジスタの最大容量(バイト)を示す。「Req’d Size」は、各MHL機器が最低限持たなければならないレジスタ容量(バイト)を示す。
 「UsageMHL CBUS」は、相手側MHL機器の各レジスタに対するアクセス方法(リード、ライト、セットビット)と使用するMSCコマンドを示す。例えば、相手側MHL機器のケーパビリティ・レジスタ(Capability Registers)は、読み出しのみ(リード)可能で、その時に使用できるのが“READ_DEVCAPコマンド”である。また、セットビット(Set Bits)とは、相手側MHL機器のインタラプト・レジスタ(Interrupt Registers)の特定のビット(複数ビット可)をセットすることを意味し、そのとき使用するのが“SET_INTコマンド”である。これらのレジスタを活用して3Dに関する各種アプリケーションの説明を行う。
 [3アプリケーションの説明]
 図1、図2に示す画像表示システム10における3Dに関する各種アプリケーションの説明を行う。以下、適宜、モバイルフォーン100をMHLソース機器とし、テレビ受信機200をMHLシンク機器として説明する。
 「3Dケーパビリティの伝送」
 3D伝送に先立ち、ソース機器はシンク機器の3Dケーパビリティを知り、シンク機器がサポート可能な範囲の3D画像データを伝送する必要がある。具体的には、シンク機器がサポートしている3Dストラクチャおよび各3Dストラクチャでサポートするビデオフォーマットである。3Dストラクチャは、フレームパッキング、サイドバイサイド、トップアンドボトム等である。また、ビデオフォーマットは、1920x1080i,60Hz、1280x720p ,60Hz等である。
 HDMIでは、これらの情報はEDID内のHDMI-LLC Vendor-Specific Block(VSDB)中で定義され、HDMIソース機器によって他のEDID情報と共に読み込まれる。VSDB中の3D情報自体は数バイト~10数バイト程度のデータ量である。EDIDのデータ長は最低2ブロック(256バイト)から最大256ブロック(32768バイト)である。このうち、HDMIVSDBは通常ブロック1(先頭から2ブロック目)に含まれる。
 図5は、HDMIソース機器におけるHDMI送信部と、HDMIシンク機器におけるHDMI受信部の構成例を示している。HDMIシンク機器は、HDMIソース機器との接続直後、図6に示すように、HPDライン(PIN 19)を100ms以上ロー(L:Low)にする。HDMIソース機器は、これをトリガとして、DDCライン(PIN 15, 16, 17)を使い、I2C Bus規格に基づいて、図5のEDID ROMからEDIDを読み出す。また、HPDラインがハイ(H:High)の期間において、HDMIソース機器はいつでもEDIDを読むことができる。逆に、また、HPDラインがローの期間は、EDID読出し禁止である。
 また、HDMIシンク機器は、HDMIソース機器と接続中に3D情報を含めEDIDの内容に変更があった場合、HPDラインをローにして、EDIDの変更を行なった後、再びHPDラインをハイにする。HDMIソース機器は、これをトリガにして再度EDIDを読むことになる。もし、HDMIシンク機器側でサポートする3D情報に変更があった場合、上述の手順に従ってEDIDの変更を行い、HDMIソース機器に読ませる必要がある。HDMIシンク機器側でサポートする3D情報に変更があった場合としては、例えば、テレビの3Dサポートメニュー上でユーザが3D受信禁止/許可、3Dストラクチャやビデオフォーマットサポート範囲等の変更を行った場合等がある。
 MHLでは、HDMIと同様にMHLシンク機器はEDIDを持つが、HPDラインを持たない。そのため、HDMIのHPDラインのローに相当する処理は、MSCコマンドを使ってシミュレートされる。そのとき、HPDラインのローに相当する時間は、50ms以上と定義される。
 図7は、そのときの様子を示したタイミングチャートである。MHLシンク機器は、MHLソース機器との接続直後、図7で示すように、MHLソース機器に対し、“CLR_HPDコマンド”を伝送し、MHLソース機器はコマンドを受け付けたことを示す“ACKコマンド”を返す。そして、最低50msの間隔を空け、MHLシンク機器から“SET_HPDコマンド”を伝送し、これに対する“ACKコマンド”の受信をもって完了する。
 MHLソース機器は、“CLR_HPDコマンド”を受信してから“SET_HPDコマンド”を受信するまでの間は、EDID読出しが禁止され、それ以外の期間ではいつでも読み出すことができる。EDIDの読出しは、図3のCBUSライン上で、DDCコマンドを使って行われる。その後、MHLシンク機器側でEDIDの内容に変更が生じた場合、図7で示す手順を再度実行し、EDID読出禁止期間中にEDIDを変更する。
 MHLにおいてHDMIと同じようにEDID内部に3D情報を定義すると、50ms以上のタイムラグが生じる。また、MHLにおいてHDMIと同じようにEDID内部に3D情報を定義すると、僅か10数バイト変更しただけなのに最低256バイト、最大32768バイトものデータを読み込む必要があり、さらに余分な時間がかかり、余分な電力を消費する。これは、モバイル機器のようにCPUの処理能力が低く、かつバッテリ駆動の場合に不利となる。本技術では、MHLソース機器、MHLシンク機器に標準装備される上述のレジスタを活用し、必要最小限の情報を伝送することで、これらの欠点を解消できる。以下、ケーパビリティ・レジスタ(Capability Register)を使用する方法と、スクラッチパッド・レジスタ(ScratchpadRegister)を使用する方法の2つを記述する。
 (ケーパビリティ・レジスタ(Capability Registers)を利用する方法)
 最初に、ケーパビリティ・レジスタを使用する方法を説明する。ケーパビリティ・レジスタには、各MHL機器が、予め自分のケーパビリティ(能力)を書き込んでおく。MHL機器(MHLソース機器、MHLシンク機器)は、相手側のケーパビリティ・レジスタを、“READ_DEVCAPコマンド”を使って読み出すことにより、そのケーパビリティを知ることができる。
 図8は、現在のケーパビリティ・レジスタ(Capabiliry Registers)のパラメータ割当状況を示す。この図8の右側の”X”が付いたパラメータは、MHLシンク機器、MHLソース機器、およびMHLドングル機器がそのパラメータをサポートしていることを示す。
 図9は、右側のMHL機器(要求側)が左側のMHL機器(応答側)のケーパビリティ・レジスタ(Capability Registers)を読み出す手順を示したものである。右側のMHL機器は、“DEAD_DEVCAPコマンド”と、読み出したい情報のOFFSET値(アドレス)を、左側のMHL機器に送信する。これに対して、左側のMHL機器は、コマンドを受け付けたことを示すACKと、指定されたOFFSET値に対応する値を、右側のMHL機器に送信する。
 また、途中で自分のケーパビリティ・レジスタを変更した場合、変更を行ったMHL機器は、その旨を相手側のインタラプト・レジスタ(Device Interrupt Registers)の当該ビットをオンすることにより通知できる。図10は、インタラプト・レジスタの構造を示している。また、図11は、「address 0x20」の「RCHANGE_INT Register」の詳細を示す。
 図12は、右側のMHL機器(変更側)が自分のケーパビリティ・レジスタ(Capability Registers)を変更してから、相手のMHL機器(応答側)にその旨を通知する手順を示したものである。まず、右側のMHL機器は自分のケーパビリティ・レジスタのどこかを変更する。次に、右側のMHL機器は、“SET_INTコマンド”、“OFFSET 0x20”、“Value 0x01”を、左側のMHL機器に続けて送信する。これは、図11に示すRCHANGE_INT(offset0x20)のDCAP_CHANGE(Bit0)に「1」をセットすることを意味する。
 左側のMHL機器は、コマンドが正しく受け付けられたことを示すACKを、右側のMHL機器に返す。また、左側のMHL機器は、自身のDCAP_CHGビットが「1」にセットされることで、相手側のケーパビリティ・レジスタ(CapabilityRegisters)に変更があったことを知り、図9で示す手順を繰返すことにより、再度読み込む。
 ここで、3DをサポートするMHLシンク機器の場合、図8の未使用オフセット値、例えば0x0F~0x1Fに、サポートしている3Dストラクチャ、およびビデオフォーマットを書きこむ。そして、これを、図9で示す手順でMHLソース機器が読むことで、MHLシンク機器の3Dサポート状況を知ることができる。図13は、3Dに関するパラメータを定義した例であるが、他の定義でも構わない。
 図13における3Dに関する各パラメータを説明する。「3D_present=1」の場合、当該MHLシンク機器は、3Dをサポートする。3Dは、マンダトリフォーマット、およびアドレス0x10から指定されるオプショナルフォーマットを加えたものをサポートする。「3D_present=0」の場合、3Dをサポートしない。
 マンダトリフォーマットとは、例えば、図14に示すものである。この図14において、VIC(Video ID Code)は、CEA-861で定義されているビデオフォーマットに付加されたビデオ番号である。このVICは、MHLシンク機器で2DとしてサポートしているビデオフォーマットはEDID中の「Video Data Block」内の「Short Video Descriptor」においてVIC番号を使って指定されている。
 「MHL_3D_LEN」は、「3D_present=1」の場合に有効となる。この「MHL_3D_LEN」は、アドレス0x10からの有効なパラメータ長を示す。3つのパラメータ、つまり、「2D_VIC_order_n」、「3D_Structure_n」、「3D_Detail_n 」は、三つ一組でオプショナルの3Dビデオフォーマット情報1つを定義する。nは0~15までの数字とする。
 「2D_VIC_order_n」は、3D伝送可能なビデオフォーマットを0-15までのインデックスで指定する。このインデックスは、EDIDにおける「Video Data Block」内の「Short Video Descriptor」2D用に指定されている先頭から16番目までのVIC列の特定の1つを指し示す。例えば、「2D_VIC_order_n=0」ならば1番目(先頭)のVICを、「2D_VIC_order_n=15」ならば16番目のVICを指す。
 「3D_Structure_n」は、「2D_VIC_order_n」で指定したビデオフォーマットを3Dとして送出可能な3Dストラクチャを0~3までの数値で示す。それぞれの数値の意味は以下の通りである。
   0:Frame Packing
   1:Side-by-Side
   2:Top-and-Bottom
   3:(Reserved)
 「3D_Detail」は、「3D_Structure_n=1(Side-by-Side)」の場合のみ有効となり、0~3の数値のいずれかとなる。それぞれの数値の意味は以下の通りである。
   0:Horizontal sub-sampling odd position
   1:Horizontalsub-sampling even position
   2:Quincunx matrixsub-sampling odd position
   3:Quincunx matrixsub-sampling even position
 ここでは、最大16個のオプショナル3Dビデオフォーマットを指定可能な仕様にしていて、通常は、この程度のエリアを確保しておけば問題ないはずである。しかし、仕様を変えれば、さらに多くの3Dビデオフォーマットを指定することも可能である。また、3D情報に変更があったことを通知するフラグとして、図11のBit4に、3D_CHGフラグを追加する。
 以上の追加されたパラメータを使い、次の手順でMHLソース機器にMHLシンク機器の3D情報を読ませる。すなわち、(1)MHLシンク機器は、MHLソース機器との接続直後、または、図13、図14で示す3D情報を変更した直後に以下のことを行う。すなわち、MHLシンク機器は、“SET_INTコマンド(SET_INT + OFFSET 0x20 + Value0x10)”を送出し、MHLソース機器側の3D_CHGフラグに「1」をセットする。(2)MHLソース機器は、ACK応答する。(3)MHLソース機器は、3D_CHGフラグに1がセットされたことを認識し、図9で示す手順を繰返すことにより3D情報を読み込む。図15のシーケンス図は、このときの手順を示している。
 (スクラッチパッド・レジスタ(Scratchpad Registers)を利用する方法)
 次に、スクラッチパッド・レジスタを使用する方法を説明する。各MHL機器は16バイト~64バイト長のスクラッチパッド・レジスタを持ち、相手側のMHL機器にメッセージやデータを転送するのに使用する(図4参照)。本技術では、スクラッチパッド・レジスタを、MHLシンク機器からMHLソース機器に対して3D情報を転送することに利用する。
 図16は、一般的なスクラッチパッド・レジスタ(Scratchpad Registers)を使った転送方法を示している。この転送方法の基本的な手順は、以下の(1)~(3)である。
 (1)転送先MHL機器に書込み許可を要求する(SET_INTコマンドで転送先REQ_WRTビットのセット)。
 (2)転送先MHL機器が書込みを許可する(SET_INTコマンドで転送元GRT_WRTビットのセット)。
 (3)転送元MHL機器が書込みデータを転送する(WRITE_BURSTコマンド+書込み先頭オフセット+最大16バイトのデータ+EOF)。
 図17は、上述のスクラッチパッド・レジスタ(Scratchpad Registers)を使った転送方法を使い、MHLシンク機器からMHLソース機器に転送する3D情報である。先頭1バイト目には、これから転送するデータが3D情報であることを示す識別子「3D_ID_CODE(3D Capability)」が配置される。2バイト目以降のパラメータは、上述の図13と同じ意味を持つ。データ長が16バイトを超えて、1回の“WRITE_BURSTコマンド”では転送しきれない場合には、再度、図16で示す手順を繰返して残りのデータを転送する。
 [3Dの機器間連携]
 上述の3D情報に加え、MHLシンク機器とソース機器の間で、スクラッチパッド・レジスタ(Scratchpad Registers)を介して、以下に示す情報を伝送する。これにより、3Dの機器間連携を行って、きめ細かな制御を行う。
 (1)3DのON/OFF:シンク→ソース、およびソース→シンク
 (2)シンク側の3D表示方式(3Dメガネ、ヘッドマウント、直視):シンク→ソース
 (3)視聴者の位置(距離、上下角θ1、左右角θ2、ねじれ角θ3):シンク→ソース、およびソース→シンク
 (4)レンチキュラレンズ、あるいは画像の上下シフト量、左右シフト量、回転角θ:ソース→シンク
 (5)クローズド・キャプション(CC)等の字幕の表示位置等:シンク→ソース
 「3DのON/OFF制御機能」
 本アプリケーションは、3D表示機能を持っているMHLシンク機器が、MHLソース機器から3Dコンテンツを受信中に、途中で一時的に表示を2Dに切替えたり、3Dに戻したりする要求を、転送元のMHLソース機器に行うことを可能にする。これは、例えば視聴者(観視者)が3Dメガネを外した場合、あるいは3Dメガネの電源を一時的に切った場合などに有効である。
 MHLシンク機器は、3Dメガネが外された、3Dメガネの電源がOFFされた、あるいはリモコンボタンの3D/2Dボタンが押下された等を検出するとき、MHLソース機器に、2Dを要求する。このとき、MHLシンク機器は、MHLソース機器に、例えば、図18に示すような2バイトの情報(データ列)を送信して、2Dを要求する。MHLシンク機器(転送元)は、この2バイトの情報を、図16に示す手順でMHLソース機器(転送先)のスクラッチパッド・レジスタ(Scratchpad Registers)に書き込むことで、MHLソース機器に転送する。
 図18に示す2バイトの情報において、1バイト目には、3Dのオンオフ情報であることを示す識別子「3D_ID_CODE(3D ON/OFF)」が配置される。また、この2バイトの情報において、2バイト目の第7ビットには、3Dのオンオフ情報「3D_ON/OFF」が配置される。ここでは、「3D_ON/OFF=0」とされ、「3Dのオフ」、すなわち「2Dの要求」が示される。なお、「3D_ON/OFF=1」とされることで、「3Dのオン」、すなわち「3Dの要求」を示すことができる。
 この2バイトの情報を受信したMHLソース機器は、転送コンテンツを直ぐに3Dから2Dに切り替える。逆に、転送コンテンツを3Dに戻したい場合、MHLシンク機器は、再度、図18の2バイトの情報を、MHLソース機器に送信する。この場合、「3D_ON/OFF=1」とされ、「3Dのオン」、すなわち「3Dの要求」が示される。この2バイトの情報を受信したMHLソース機器は、転送コンテンツを直ぐに2Dから3Dに切り替える。
 上述の3Dのオンオフ制御により、視聴者が3Dメガネの取り外し、あるいは3Dメガネの電源のオフ等を行うとき、瞬時に表示が2Dに切り替わる。そのため、視聴者はシームレスに2Dでコンテンツを続けて見ることができる。また、上述の3Dのオンオフ制御により、視聴者が3Dメガネの装着、あるいは3Dメガネの電源のオン等を行うとき、瞬時に表示が3Dに切り替わる。そのため、視聴者はシームレスに3Dでコンテンツを続けて見ることができる。
 上述は、MHLシンク機器がMHLソース機器のコンテンツ送出を3D/2D制御するものであった。逆に、MHLソース機器がMHLシンク機器の3D/2D表示制御を行うケースも考えられる。その場合は、上述の図18に示す2バイトの情報(データ列)を、MHLソース機器からMHLシンク機器に、図16に示す手順で転送する。3Dコンテンツの間に2Dコンテンツが挿入されているような場合、3D→2D切り替えのタイミングで本処理を行うことで、例えば、3Dメガネのシャッタを止めて左右とも開放状態にすることができる。これにより、シャッタが動作しているときよりもクリアに2D画像を視聴可能となる。
 HDMIでは,垂直ブランキング期間にHDMI VSI(Vendor Specific InfoFrame)パケットで、伝送中の3Dコンテンツ情報をHDMIシンク機器に送っている。そのため、MHLでも同様に垂直ブランキング期間を利用して3D/2Dの切り替え情報をMHLシンク機器に転送することも考えられる。しかし、60Hzのフレームレートのビデオフォーマットの場合、垂直ブランキングを使うと、最大16.7msのタイムラグが発生する。一方、スクラッチパッド・レジスタ(Scratchpad Registers)で情報交換を行った場合、伝送レートが、およそ1MbpsのCBUS経由で行うため、垂直ブランキングを使った場合に比べて有利となる。
 「視聴者の位置を検出し、適正な3D画像を表示する機能:3Dメガネ方式の場合」
 本アプリケーションは、3Dメガネ方式(シャッタメガネ方式)向けのアプリケーションである。そのため、処理に先立ち、MHLシンク機器は、MHLソース機器に、3D表示方式が3Dメガネ方式であることを通知する。
 そのため、MHLシンク機器は、MHLソース機器に、例えば、図19に示すような2バイトの情報(データ列)を送信して、通知する。MHLシンク機器(転送元)は、この2バイトの情報を、図16に示す手順でMHLソース機器(転送先)のスクラッチパッド・レジスタ(Scratchpad Registers)に書き込むことで、MHLソース機器に転送する。
 図19に示す2バイトの情報において、1バイト目には、3D表示方式情報であることを示す識別子「3D_ID_CODE(Sink Class)」が配置される。また、この2バイトの情報において、2バイト目の第7ビット~第5ビットには、3D表示方式情報「Sink Class」が配置される。ここでは、「Sink Class = 001」とされ、「3Dメガネ方式」が示される。なお、その他、例えば、「Sink Class = 010」は「直視方式」を示し、「Sink Class =011」は「ヘッドマウント方式」を示すものとされる。
 MHLソース機器は、3Dメガネ方式ならば本アプリケーションを機能する。3Dメガネ方式のMHLシンク機器の場合、通常は、視聴者(観視者)が3D画像をテレビの正面方向から垂直に見た場合に最大限の3D効果が得られるようになっている。視聴者がテレビの斜め方向や、顔を傾けた状態で3D画像を見ると、3D効果が低下するばかりでなく、生理的な違和感を感ずるようになる。
 そこで、本アプリケーションでは、視聴者の見る位置に対して3D画像を最適な状態に補正する処理が行われる。この場合、例えば、図20(a)に示すように、MHLシンク機器に装着されている位置検出センサ(顔検出センサ)を使用して、テレビ画面からの視聴者の顔の位置や傾き等が検出される。
 図20に示すように、視聴者が1人の場合を考える。この場合、テレビ画面中心から視聴者の顔までの距離をrとし(図20(a)参照)、テレビ画面中心を通る法線に対する左右方向の角θ1とする(図20(b)参照)。また、この場合、テレビ画面中心を通る法線に対する上下方向の角θ2とし(図20(c)参照)、顔の傾きθ3とする(図20(d)参照)。
 図21は、視聴者に対して3D画像を見やすく補正する例を示している。図示のように、3D効果が最大になるように、視聴者に対して、画像を正面から見ているように表示させる。なお、図示は省略するが、視聴者が2人以上いる場合は、その平均的な位置、またはいちばん距離の近い視聴者に補正するなどの方法が考えられる。
 図22(a)示すように位置検出センサ(顔検出センサ)を使って視聴者の顔位置を検出するのが困難な場合、例えば、図22(b)に示すに、テレビリモコンの上下左右・回転ボタン等を使って画面を見ながらマニュアル操作で補正する方法も考えられる。これらの例で示すような、3D画像補正技術、およびセンサによる顔検出技術に関しては、従来周知の技術を用いることができ、ここでは、その詳細説明を省略する。
 位置検出センサ(顔検出センサ)やリモコンを使った位置情報の入力をMHLシンク機器で行い、補正処理をMHLソース機器で行う場合、例えば、図23に示すような5バイトの情報(データ列)を、MHLシンク機器からMHLソース機器に転送する。MHLシンク機器(転送元)は、この5バイトの情報を、図16に示す手順でMHLソース機器(転送先)のスクラッチパッド・レジスタ(Scratchpad Registers)に書き込むことで、MHLソース機器に転送する。
 図23に示す5バイトの情報において、1バイト目には、3D画像補正情報であることを示す識別子「3D_ID_CODE(3D Adjust 1)」が配置される。また、この5バイトの情報において、2バイト目には距離rの情報が配置され、3バイト目には上下角θ1(90°~-90°)の情報が配置される。また、この5バイトの情報において、4バイト目には左右角θ2(90°~-90°)の情報が配置され、5バイト目にはねじれ角θ3(90°~-90°)の情報が配置される。
 この5バイトの情報を受信したMHLソース機器は、距離r、上下角θ1、左右角θ2、ねじれ角θ3の情報に基づき、視聴者の見る位置に対して3D画像を最適な状態に補正する画像補正処理を行う。MHLソース機器は、補正後の画像データを、図3に示すTMDSチャネル経由で、MHLシンク機器に伝送する。
 また、逆に、位置検出センサやリモコンを使った位置情報の入力を、MHLソース機器で行い、画像補正処理をMHLシンク機器で行う場合も考えられる。この場合、MHLソース機器は、図23に示す5バイトの情報(データ列)を、MHLシンク機器に転送する。この場合、MHLソース機器からTMDSチャネル経由で伝送される画像データは未補正のままである。そのため、MHLシンク機器は、距離r、上下角θ1、左右角θ2、ねじれ角θ3の情報に基づき、視聴者の見る位置に対して3D画像を最適な状態に補正する画像補正処理を行う。
 「視聴者の位置を検出し、適正な3D画像を表示する機能:直視方式の場合」
 本アプリケーションは、特に直視方式向けのアプリケーションである。そのため、処理に先立ち、MHLシンク機器は、MHLソース機器に、3D表示方式が直視方式であることを通知する。
 そのため、MHLシンク機器は、MHLソース機器に、例えば、図19に示すような2バイトの情報(データ列)を送信して、通知する。ここでは、「Sink Class = 010」とされ、「直視方式」が示される。MHLシンク機器(転送元)は、この2バイトの情報を、図16に示す手順でMHLソース機器(転送先)のスクラッチパッド・レジスタ(Scratchpad Registers)に書き込むことで、MHLソース機器に転送する。MHLソース機器は、直視方式ならば本アプリケーションを機能する。
 図24、図25は直視方式の一方式であるレンチキュラ方式の構造を示している。レンチキュラ方式の場合、図24(a)に示すレンチキュラレンズが、図24(b)に示すように、テレビ表示画面上に重ねて配設されている。レンチキュラレンズは、図25に示すように、断面がカマボコ形をしている。このレンチキュラレンズをテレビ画面に重ね合わせ、テレビ画面上の発光体がこのレンチキュラレンズを通過する際の屈折を利用することにより、直視方式の3D表示を実現している。
 この場合も、上述した3Dメガネ方式と同様に、テレビの正面から垂直に見た場合に最大限の3D効果が得られるようになっている。ここで、上述の3Dメガネ方式のように、直視方式でも、視聴者の位置によって3D効果を最適化する場合を考える。この場合、図26のように、レンチキュラレンズか画像のどちらか一方、または両方を上下左右方向にシフトさせたり、回転させたりすることで、視聴者の見る位置に応じて3D効果を高めることができる。
 位置検出センサ(顔検出センサ)やリモコンを使った位置情報の入力をMHLソース機器で行い、補正処理をMHLシンク機器で行う場合、例えば、図27に示すような8バイトの情報(データ列)を、MHLソース機器からMHLシンク機器に転送する。MHLソース機器(転送元)は、この8バイトの情報を、図16に示す手順でMHLシンク機器(転送先)のスクラッチパッド・レジスタ(Scratchpad Registers)に書き込むことで、MHLシンク機器に転送する。
 図27に示す8バイトの情報において、1バイト目には、3D画像補正情報であることを示す識別子「3D_ID_CODE(3D Adjust 2)」が配置される。また、この8バイトの情報において、2バイト目には距離rの情報が配置される。また、この8バイトの情報において、3バイト目、4バイト目、5バイト目には、レンチキュラレンズの上下シフト量(+100%~-100%)、左右シフト量(+100%~-100%)、ねじれ角θ(90°~-90°)が配置される。また、この8バイトの情報において、6バイト目、7バイト目、8バイト目には、画像の上下シフト量(+100%~-100%)、左右シフト量(+100%~-100%)、ねじれ角θ(90°~-90°)が配置される。
 この8バイトの情報を受信したMHLシンク機器は、それに含まれる情報に基づき、視聴者の見る位置に対して3D画像を最適な状態に補正する処理を行う。この場合、MHLシンク機器は、レンチキュラレンズとテレビ表示画面のどちらか一方、または両方に対してシフト、回転処理を行う。
 「クローズド・キャプション(Closed Caption)表示位置の3D制御」
 クローズド・キャプション(CC)は、米国内において行われており、テレビの画面上に会話や効果音等を画像に同期させて文字表示させる字幕表示機能である。クローズド・キャプションは、表示すべき文字や制御情報がコード化され、放送波やDVD等のパッケージコンテンツ内の特定トラックに付加される。
 テレビのチューナで受信されたCCコードはテレビが持つCCデコーダでデコードされ、テレビ画面上に文字として表示される。このとき、テレビ画面の文字の表示位置は、テレビリモコンによって変えることができる。操作方法の一例として、リモコン上の位置決めボタンを1回押下する毎に、CCの表示位置が右上→右下→左上→左下の順に変化してゆく、といった具合である。
 HDMIおよびMHLは、ソース機器からシンク機器にCCコードをそのまま伝送する機能を持たない。そのため、例えばチューナを持つソース機器が放送波を受信してシンク機器側で視聴する場合や、DVD再生機能を持つソース機器がCCコードを含むDVDを再生しようとする場合などでは、CCコードをそのままシンク機器側に伝送することができない。
 そのため、ソース機器側のCCデコーダでデコードし、画面上に文字として展開してから(オープンキャプション)、AVストリームとしてHDMIまたはMHLケーブルを経由してシンク機器に転送する。その場合、画面上における文字の表示位置は、ソース側のリモコンを使って変えることになる。この場合、シンク側、つまりテレビのリモコンを使って表示位置の変更を行うことができれば便利である。
 図28に破線で示す矩形は、従来の2D画面上でのCC表示枠を示す。この場合、縦横2つの位置を指定する。3Dの場合、図29に示すように、表示位置として、縦、横に加えて、奥行きの3つを指定する。
 MHLソース機器からクローズド・キャプション(CC)入りのAVストリームが転送されているとき、MHLシンク機器は、MHLソース機器に、例えば、図30示すような7バイトの情報(データ列)を転送する。MHLシンク機器(転送元)は、この7バイトの情報を、図16に示す手順でMHLソース機器(転送先)のスクラッチパッド・レジスタ(Scratchpad Registers)に書き込むことで、MHLソース機器に転送する。
 図30に示す7バイトの情報において、1バイト目には、CC情報であることを示す識別子「3D_ID_CODE(Closed Caption)」が配置される。また、この7バイトの情報において、2バイト目には文字の大きさ(特大、大、中、小)の情報が配配置され、3バイト目には点Aの横方向(0~255)の情報が配置され、4バイト目には点Aの縦方向(0~255)の情報が配置される。また、この7バイトの情報において、5バイト目には点Bの横方向(0~255)の情報が配置され、6バイト目には点Bの縦方向(0~255)の情報が配置され、7バイト目には点A,Bの奥行き(0~255)の情報が配置される。
 なお、図30に示す7バイトの情報に含まれる各情報の意味は、以下の通りである。
 (1)文字の大きさ:表示する文字の大きさを指定する。特大、大、中、小の4種類である。
 (2)点Aの横方向:図28の破線で示す矩形表示枠左上の横位置を指定する。値が0のときは指定無しである。値が1~255のとき、シンク画面の幅を254分割した時の左側からの位置を指定する。例えば、「1」の場合は点Aの横方向位置として画面左端を指定し、「255」の場合は点Aの横方向位置として画面右端を指定する。
 (3)点Aの縦方向:図28の破線で示す矩形表示枠左上の縦位置を指定する。値が0のときは指定無しである。値が1~255のとき、シンク画面の高さを254分割した時の上部からの位置を指定する。例えば、「1」の場合は点Aの縦方向位置として画面上端を指定し、「255」の場合は点Aの縦横方向位置として画面下端を指定する。
 (4)点Bの横方向:図28の破線で示す矩形表示枠右下の横位置を指定する。値が0のときは指定無しである。値が1~255のとき、シンク画面の幅を254分割した時の左側からの位置を指定する。例えば、「1」の場合は点Bの横方向位置として画面左端を指定し、「255」の場合は点Bの横方向位置として画面右端を指定する。
 (5)点Bの縦方向:図28の破線で示す矩形表示枠右下の縦位置を指定する。値が0のときは指定無しである。値が1~255のとき、シンク画面の高さを254分割した時の上部からの位置を指定する。例えば、「1」の場合は点Bの縦方向位置として画面上端を指定し、「255」の場合は点Bの縦横方向位置として画面下端を指定する。
 (6)表示枠ABの奥行:図29の破線で示す矩形表示枠ABの奥行位置を指定する。値が0のときは指定無しである。値が1~255のとき、シンク画面の奥行を254分割した時の最前部からの位置を指定する。例えば、「1」の場合は矩形表示枠ABの奥行き位置として画面最前部を指定し、「255」の場合は矩形表示枠ABの奥行き位置として画面最後部を指定する。
 この7バイトの情報を受信したMHLソース機器は、それに含まれる情報に基づき、指定された文字の大きさで、指定された位置、奥行きを持つ矩形枠AB内部に文字を展開(オープンキャプション)する。そして、MHLソース機器は、AVストリームとしてMHLシンク機器にTMDSチャネルを通じて転送する。MHLシンク機器は、クローズド・キャプション(CC)が既にAVストリーム中に展開されているので、CCコードをデコードする必要がなく、そのまま画像を表示させるだけでよい。
 図1、図2に示す画像表示システム10においては、MHLのケーパビリティ・レジスタ(Capability Register)、あるいはスクラッチパッド・レジスタ(ScratchpadRegister)を使用して、機器間において3D情報の転送を行う。そのため、3D情報を効率よく高速に転送できる。
 例えば、HDMIの場合と比較して、MHLシンク機器の3DケーパビリティをMHLソース機器に高速かつ効率良く転送することができる。その結果、バッテリ駆動で、かつCPUの性能が低いモバイル機器に対しては、レスポンスの向上、バッテリ消費の低減等を実現できるため、大変有効である。これは、モバイル機器の使用を前提としたMHL規格の主旨とも一致する。また、MHL機器が持つ各種レジスタを用いて、シンク-ソース間で双方向にデータを転送するため、HDMI機器では実現できなかったきめ細かな各種3D処理を実現できる。
 <2.変形例>
 なお、上述実施の形態の画像表示システム10は、図1に示すように、テレビ受信機200がMHLシンク機器である例を示した。しかし、図31に示すような画像表示システム10Aにも、この発明を同様に適用できる。この画像表示システム10Aでは、モバイルフォーン100とMHLドングル400とがMHLケーブル300により接続されている。また、MHLドングル400とテレビ受信機200AとがHDMIケーブル500により接続されている。MHLドングル400は、MHL-HDMIの変換処理を行っている。
 この画像表示システム10Aにおいて、テレビ受信機200Aは、HDMIに対応しているが、MHL非対応である。この画像表示システム10Aにおいて、モバイルフォーン100からのAVストリームは、MHLドングル400を使ってMHL→HDMI変換された後、テレビテレビ受信機200AのHDMI Input端子に入力される。
 また、上述実施の形態において、MHLソース機器がモバイルフォーン100であり、MHLシンク機器がテレビ受信機200である例を示した。しかし、MHLソース機器、MHLシンク機器の組み合わせはこれに限定されるものでないことは勿論ある。その場合にあっても、MHLのケーパビリティ・レジスタ、あるいはスクラッチパッド・レジスタ等を使用して、機器間において3D情報の転送を行うことで、3D情報を効率よく高速に転送でき、きめの細かな制御を行うことが可能となる。
 また、上述していないが、MHLソース機器からMHLシンク機器に伝送される3D画像データの3Dストラクチャおよびビデオフォーマットを、スクラッチパッド・レジスタを使用して、MHLソース機器からMHLシンク機器に転送することもできる。この転送方法については、上述した各種の3D情報のスクラッチパッド・レジスタを使用した転送と同様であるので、ここでは省略する。
 また、上述実施の形態において、字幕としてクローズ・キャプションを示したが、その他の字幕、例えば、DVBのサブタイトル、ARIBの字幕等であっても、本技術を同様に適用できる。
 本技術は、例えば、3D画像表示のための画像表示システムを構成する電子機器等に適用できる。
 10,10A・・・画像表示システム
 100・・・モバイルフォーン
 101・・・制御部
 102・・・ユーザ操作部
 103・・・表示部
 104・・・3G/4Gモデム部
 105・・・カメラ部
 106・・・記録再生部
 107・・・送信処理部
 108・・・MHL送信部
 109・・・MHL端子
 200,200A・・・テレビ受信機
 201・・・制御部
 202・・・ユーザ操作部
 203・・・MHL端子
 204・・・MHL受信部
 205・・・チューナ
 206・・・アンテナ端子
 207・・・切替部
 208・・・表示処理部
 209・・・表示パネル
 300・・・MHLケーブル
 400・・・MHLドングル
 500・・・HDMIケーブル

Claims (18)

  1.  機能情報を書き込んでおくレジスタと、
     上記レジスタに書き込まれている立体画像情報に変更があるとき、外部機器に変更通知を送信する変更通知送信部と、
     上記変更通知送信部から送信される上記変更通知に応じて上記外部機器から送られてくる読み出しコマンドおよび上記レジスタにおける立体画像情報のアドレス情報を受信する読み出しコマンド受信部と、
     上記読み出しコマンド受信部で受信された上記アドレス情報に対応した上記レジスタのアドレスから上記立体画像情報を読み出して上記外部機器に送信する立体画像情報送信部と
     を備える電子機器。
  2.  上記立体画像情報には、
     取り扱い可能な立体画像データのストラクチャおよびビデオフォーマットの情報が含まれる
     請求項1に記載の電子機器。
  3.  機能情報を書き込んでおくレジスタに書き込まれている立体画像情報に変更があるとき、外部機器に変更通知を送信する変更通知送信ステップと、
     上記変更通知送信ステップで送信される上記変更通知に応じて上記外部機器から送られてくる読み出しコマンドおよび上記レジスタにおける立体画像情報のアドレス情報を受信する読み出しコマンド受信ステップと、
     上記読み出しコマンド受信ステップで受信された上記アドレス情報に対応した上記レジスタのアドレスから立体画像情報を読み出して上記外部機器に送信する立体画像情報送信ステップと
     を備える電子機器における立体画像情報送信方法。
  4.  機能情報を書き込んでおくレジスタを有する外部機器から通知される立体画像情報の変更通知を受信する変更通知受信部と、
     上記変更通知受信部で受信される上記変更通知に応じて、上記外部機器に読み出しコマンドおよび上記レジスタにおける立体画像情報のアドレス情報を送信する読み出しコマンド送信部と、
     上記読み出しコマンド送信部から送信される上記読み出しコマンドおよび上記立体画像情報のアドレス情報に対応して上記外部機器の上記レジスタから読み出されて送られてくる上記立体画像情報を受信する立体画像情報受信部と
     を備える電子機器。
  5.  機能情報を書き込んでおくレジスタを有する外部機器から通知される立体画像情報の変更通知を受信する変更通知受信ステップと、
     上記変更通知受信ステップで受信される上記変更通知に応じて、上記外部機器に読み出しコマンドおよび上記レジスタにおける立体画像情報のアドレス情報を送信する読み出しコマンド送信ステップと、
     上記読み出しコマンド送信ステップで送信される上記読み出しコマンドおよび上記立体画像情報のアドレス情報に対応して上記外部機器の上記レジスタから読み出されて送られてくる上記立体画像情報を受信する立体画像情報受信ステップと
     を備える電子機器における立体画像情報受信方法。
  6.  立体画像情報の書き込みが可能なレジスタを有する外部機器に立体画像情報の書き込み要求を送信する書き込み要求送信部と、
     上記書き込み要求送信部で送信される上記書き込み要求に対応して上記外部機器から送られてくる書き込み許可を受信する書き込み許可受信部と、
     上記書き込み許可受信部で受信される書き込み許可に応じて、上記外部機器に、書き込みコマンド、上記レジスタにおける立体画像情報のアドレス情報および立体画像情報を送信する立体画像情報送信部と
     を備える電子機器。
  7.  上記外部機器に送信する立体画像情報には、
     取り扱い可能な立体画像データのストラクチャおよびビデオフォーマットの情報が含まれる
     請求項6に記載の電子機器。
  8.  立体画像表示部をさらに備え、
     上記外部機器に送信する立体画像情報には、
     上記立体画像表示部における立体画像表示方式の情報が含まれる
     請求項6に記載の電子機器。
  9.  立体画像表示部をさらに備え、
     上記外部機器に送信する立体画像情報には、上記立体画像表示部の観視者の位置情報が含まれる
     請求項6に記載の電子機器。
  10.  上記外部機器は、立体画像表示部を備え、
     上記外部機器に送信する立体画像情報には、上記立体画像表示部の観視者の位置情報が含まれる
     請求項6に記載の電子機器。
  11.  上記外部機器は、表示面上にレンチキュラレンズが配された立体画像表示部を備え、
     上記外部機器に送信する立体画像情報には、上記レンチキュラレンズの上下左右のシフト量と回転角の情報、および画像の上下左右のシフト量と回転角の情報のいずれかまたは両方が含まれる
     請求項6に記載の電子機器。
  12.  上記外部機器は、立体画像表示部を備え、
     上記外部機器に送信する立体画像情報には、字幕の表示位置の情報が含まれる
     請求項6に記載の電子機器。
  13.  シャッタメガネを用いて立体画像を知覚させる立体画像表示部をさらに備え、
     上記外部機器に送信する立体画像情報には、立体画像のオン/オフ情報が含まれる
     請求項6に記載の電子機器。
  14.  上記外部機器は、シャッタメガネを用いて立体画像を知覚させる立体画像表示部を備え、
     上記外部機器に送信する立体画像情報には、立体画像のオン/オフ情報が含まれる
     請求項6に記載の電子機器。
  15.  上記外部機器に立体画像データを送信する画像データ送信部をさらに備え、
     上記外部機器に送信する立体画像情報には、上記立体画像データのストラクチャおよびビデオフォーマットの情報が含まれる
     請求項6に記載の電子機器。
  16.  立体画像情報の書き込みが可能なレジスタを有する外部機器に立体画像情報の書き込み要求を送信する書き込み要求送信ステップと、
     上記書き込み要求送信ステップで送信される上記書き込み要求に対応して上記外部機器から送られてくる書き込み許可を受信する書き込み許可受信ステップと、
     上記書き込み許可受信ステップで受信される書き込み許可に応じて、上記外部機器に、書き込みコマンド、上記レジスタにおける立体画像情報のアドレス情報および立体画像情報を送信する立体画像情報送信ステップと
     を備える電子機器における立体画像情報送信方法。
  17.  立体画像情報の書き込みが可能なレジスタと、
     外部機器から上記レジスタへの立体画像情報の書き込み要求を受信する書き込み要求受信部と、
     上記書き込み要求受信部で受信される上記書き込み要求に応じて、上記外部機器に書き込み許可を送信する書き込み許可送信部と、
     上記書き込み許可送信部で送信される上記書き込み許可に対応して上記外部機器から送られてくる書き込みコマンド、上記レジスタにおける立体画像情報のアドレス情報および立体画像情報を受信し、該受信された立体画像情報を、該受信されたアドレス情報に対応した上記レジスタのアドレスに書き込む書き込み制御部と
     を備える電子機器。
  18.  外部機器から立体画像情報の書き込みが可能なレジスタへの立体画像情報の書き込み要求を受信する書き込み要求受信ステップと、
     上記書き込み要求受信ステップで受信される上記書き込み要求に応じて、上記外部機器に書き込み許可を送信する書き込み許可送信ステップと、
     上記書き込み許可送信ステップで送信される上記書き込み許可に対応して上記外部機器から送られてくる書き込みコマンド、書き込みアドレス情報および立体画像情報を受信し、該受信された立体画像情報を、該受信された書き込みアドレス情報に対応した上記レジスタのアドレスに書き込む書き込み制御ステップと
     を備える電子機器における立体画像情報受信方法。
PCT/JP2012/052648 2011-02-09 2012-02-06 電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法 WO2012108393A1 (ja)

Priority Applications (8)

Application Number Priority Date Filing Date Title
KR1020127025447A KR101905918B1 (ko) 2011-02-09 2012-02-06 전자기기, 전자기기에서의 입체화상 정보 송신 방법, 및 전자기기에서의 입체화상 정보 수신 방법
RU2012141875/08A RU2604987C2 (ru) 2011-02-09 2012-02-06 Электронное устройство, способ передачи информации стереоскопического изображения электронным устройством и способ приема информации стереоскопического изображения электронным устройством
CN201280001902.6A CN102972034B (zh) 2011-02-09 2012-02-06 电子设备、发送电子设备中的立体图像信息的方法和接收电子设备中的立体图像信息的方法
AU2012215788A AU2012215788A1 (en) 2011-02-09 2012-02-06 Electronic device, method for transmitting stereoscopic image information in electronic device, and method for receiving stereoscopic image information in electronic device
BR112012025208A BR112012025208A2 (pt) 2011-02-09 2012-02-06 dispositivo eletrônico, e, métodos de transmissão e de recepção de informação de imagem estereoscópica
US13/638,793 US9628872B2 (en) 2011-02-09 2012-02-06 Electronic device, stereoscopic image information transmission method of electronic device and stereoscopic information receiving method of electronic device
CA2800347A CA2800347A1 (en) 2011-02-09 2012-02-06 Electronic device, stereoscopic image information transmission method of electronic device and stereoscopic information receiving method of electronic device
EP12745048.4A EP2541955B1 (en) 2011-02-09 2012-02-06 Electronic device, method for transmitting stereoscopic image information in electronic device, and method for receiving stereoscopic image information in electronic device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011026482A JP5673172B2 (ja) 2011-02-09 2011-02-09 電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法
JP2011-026482 2011-02-09

Publications (1)

Publication Number Publication Date
WO2012108393A1 true WO2012108393A1 (ja) 2012-08-16

Family

ID=46638608

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/052648 WO2012108393A1 (ja) 2011-02-09 2012-02-06 電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法

Country Status (10)

Country Link
US (1) US9628872B2 (ja)
EP (1) EP2541955B1 (ja)
JP (1) JP5673172B2 (ja)
KR (1) KR101905918B1 (ja)
CN (1) CN102972034B (ja)
AU (1) AU2012215788A1 (ja)
BR (1) BR112012025208A2 (ja)
CA (1) CA2800347A1 (ja)
RU (1) RU2604987C2 (ja)
WO (1) WO2012108393A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102833418A (zh) * 2012-08-31 2012-12-19 广东欧珀移动通信有限公司 一种rcp通信过程选择联系人方法及移动智能终端
CN102945076A (zh) * 2012-10-19 2013-02-27 广东欧珀移动通信有限公司 一种显示终端图像旋转方法、装置及一种显示控制系统
CN102984568A (zh) * 2012-11-21 2013-03-20 广东欧珀移动通信有限公司 一种遥控器控制移动终端的方法和系统
CN105578233A (zh) * 2016-01-29 2016-05-11 四川长虹电器股份有限公司 一种实现智能电视控制手机应用的方法
WO2016103916A1 (ja) * 2014-12-24 2016-06-30 ソニー株式会社 通信装置及び通信方法

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10231017B2 (en) * 2012-10-16 2019-03-12 Sony Corporation Electronic device, charging control method of electronic device, battery power-level display method of electronic device, source device, and sink device
JPWO2014141425A1 (ja) * 2013-03-14 2017-02-16 株式会社東芝 映像表示システム、ソース機器、シンク機器及び映像表示方法
JP2015029209A (ja) * 2013-07-30 2015-02-12 株式会社東芝 受信装置、送信装置、及び送受信システム
KR101549164B1 (ko) 2013-08-08 2015-09-03 주식회사 넥시아 디바이스 엠에이치엘 인터페이스를 통한 문자 송수신 방법
US20150172589A1 (en) * 2013-12-16 2015-06-18 Kabushiki Kaisha Toshiba Electronic device and method for controlling the same
JP6442836B2 (ja) * 2014-02-28 2018-12-26 セイコーエプソン株式会社 表示装置、および、表示装置の制御方法
US9779687B2 (en) * 2014-03-13 2017-10-03 Lg Electronics Inc. Device and method for transmitting and receiving data using HDMI
KR20160050296A (ko) * 2014-10-29 2016-05-11 삼성전자주식회사 전자 장치 및 그 제어 방법
JP2016116178A (ja) * 2014-12-17 2016-06-23 ソニー株式会社 通信装置及び通信方法
EP3038358A1 (en) 2014-12-22 2016-06-29 Thomson Licensing A method for adapting a number of views delivered by an auto-stereoscopic display device, and corresponding computer program product and electronic device
JP2016127433A (ja) 2014-12-29 2016-07-11 ソニー株式会社 通信装置及び通信方法
US9736531B2 (en) * 2015-09-08 2017-08-15 Google Inc. Video media streaming device
US10277275B2 (en) 2015-09-08 2019-04-30 Google Llc Audio media streaming device
CN105868130A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术(北京)有限公司 一种控制接口应用程序的方法及移动终端
EP3433698A4 (en) * 2016-05-04 2020-02-12 Hewlett-Packard Development Company, L.P. PLUG-IN COMPUTER DEVICES

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000022743A (ja) * 1998-06-30 2000-01-21 Fuji Photo Film Co Ltd 非同期データ通信方法
JP2005332032A (ja) * 2004-05-18 2005-12-02 Murata Mach Ltd データ転送システム
WO2010146847A1 (ja) * 2009-06-17 2010-12-23 パナソニック株式会社 3d映像を再生するための情報記録媒体、及び再生装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6115823A (en) * 1997-06-17 2000-09-05 Amphus, Inc. System and method for task performance based dynamic distributed power management in a computer system and design method therefor
KR20010097455A (ko) * 2000-04-24 2001-11-08 윤종용 온 스크린 디스플레이 커서 표시방법 및 osd 영상 표시장치
RU2328830C2 (ru) * 2001-12-21 2008-07-10 Тинкинг Пикчерс, Инк. Способ, система и устройство для распределения аудиовизуальной информации и верификации просмотра
JP2003322824A (ja) * 2002-02-26 2003-11-14 Namco Ltd 立体視映像表示装置および電子機器
JP2004062220A (ja) * 2002-07-24 2004-02-26 Matsushita Electric Ind Co Ltd 情報処理装置、情報処理方法、およびプログラム変換装置
JP3958150B2 (ja) * 2002-08-22 2007-08-15 シャープ株式会社 表示補正装置、表示補正方法、表示補正プログラム、および表示補正プログラムを記録した記録媒体
US7535841B1 (en) * 2003-05-14 2009-05-19 Nortel Networks Limited Flow-rate-regulated burst switches
US20100091206A1 (en) * 2007-02-07 2010-04-15 Vr21 Pty Ltd Multi-view stereoscopic display
JP2009100456A (ja) * 2007-09-27 2009-05-07 Panasonic Corp ビデオ・オーディオ出力装置および記録媒体
JP4483939B2 (ja) * 2007-12-19 2010-06-16 船井電機株式会社 映像信号処理装置
JP5338166B2 (ja) * 2008-07-16 2013-11-13 ソニー株式会社 送信装置、立体画像データ送信方法、受信装置および立体画像データ受信方法
WO2010064118A1 (en) * 2008-12-01 2010-06-10 Imax Corporation Methods and systems for presenting three-dimensional motion pictures with content adaptive information
JP2010147542A (ja) * 2008-12-16 2010-07-01 Panasonic Corp データ送信回路
JP5351960B2 (ja) * 2009-05-14 2013-11-27 パナソニック株式会社 ビデオデータの伝送方法
TW201119353A (en) * 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
EP2460361B1 (en) * 2009-07-27 2020-05-20 Koninklijke Philips N.V. Switching between 3d video and 2d video

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000022743A (ja) * 1998-06-30 2000-01-21 Fuji Photo Film Co Ltd 非同期データ通信方法
JP2005332032A (ja) * 2004-05-18 2005-12-02 Murata Mach Ltd データ転送システム
WO2010146847A1 (ja) * 2009-06-17 2010-12-23 パナソニック株式会社 3d映像を再生するための情報記録媒体、及び再生装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102833418A (zh) * 2012-08-31 2012-12-19 广东欧珀移动通信有限公司 一种rcp通信过程选择联系人方法及移动智能终端
CN102833418B (zh) * 2012-08-31 2016-08-24 广东欧珀移动通信有限公司 一种rcp通信过程选择联系人方法及移动智能终端
CN102945076A (zh) * 2012-10-19 2013-02-27 广东欧珀移动通信有限公司 一种显示终端图像旋转方法、装置及一种显示控制系统
CN102945076B (zh) * 2012-10-19 2016-08-24 广东欧珀移动通信有限公司 一种显示终端图像旋转方法、装置及一种显示控制系统
CN102984568A (zh) * 2012-11-21 2013-03-20 广东欧珀移动通信有限公司 一种遥控器控制移动终端的方法和系统
CN102984568B (zh) * 2012-11-21 2016-08-03 广东欧珀移动通信有限公司 一种遥控器控制移动终端的方法和系统
WO2016103916A1 (ja) * 2014-12-24 2016-06-30 ソニー株式会社 通信装置及び通信方法
US10545551B2 (en) 2014-12-24 2020-01-28 Sony Corporation Communication device and communication method for transmitting data according to a predetermined communication standard
CN105578233A (zh) * 2016-01-29 2016-05-11 四川长虹电器股份有限公司 一种实现智能电视控制手机应用的方法

Also Published As

Publication number Publication date
JP2012169702A (ja) 2012-09-06
RU2012141875A (ru) 2014-04-10
JP5673172B2 (ja) 2015-02-18
KR20140000137A (ko) 2014-01-02
EP2541955A1 (en) 2013-01-02
BR112012025208A2 (pt) 2017-06-27
RU2604987C2 (ru) 2016-12-20
CN102972034A (zh) 2013-03-13
EP2541955B1 (en) 2016-01-13
CA2800347A1 (en) 2012-08-16
CN102972034B (zh) 2015-07-15
US9628872B2 (en) 2017-04-18
KR101905918B1 (ko) 2018-10-08
EP2541955A4 (en) 2013-11-06
US20130021439A1 (en) 2013-01-24
AU2012215788A1 (en) 2012-11-01

Similar Documents

Publication Publication Date Title
JP5673172B2 (ja) 電子機器、電子機器における立体画像情報送信方法、および電子機器における立体画像情報受信方法
JP4772928B2 (ja) 映像再生装置
CN102804789B (zh) 接收系统和提供3d图像的方法
US8810563B2 (en) Transmitting apparatus, stereoscopic image data transmitting method, receiving apparatus, and stereoscopic image data receiving method
US8854434B2 (en) Transmission device, receiving device, program, and communication system
JP5754080B2 (ja) データ送信装置、データ受信装置、データ送信方法およびデータ受信方法
US20130100247A1 (en) Image data transmission apparatus, control method for image data transmission apparatus, image data transmission method, and image data reception apparatus
US9848185B2 (en) Video display system, display device and source device
JP5577477B1 (ja) 立体画像データ受信方法および立体画像データ受信装置
JP5583297B2 (ja) 立体画像データ受信方法および立体画像データ受信装置
JP2014039269A (ja) 立体画像データ送信方法および立体画像データ送信装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201280001902.6

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2012745048

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20127025447

Country of ref document: KR

Kind code of ref document: A

Ref document number: 2800347

Country of ref document: CA

WWE Wipo information: entry into national phase

Ref document number: 8496/DELNP/2012

Country of ref document: IN

WWE Wipo information: entry into national phase

Ref document number: 2012141875

Country of ref document: RU

Ref document number: 13638793

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12745048

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2012215788

Country of ref document: AU

Date of ref document: 20120206

Kind code of ref document: A

REG Reference to national code

Ref country code: BR

Ref legal event code: B01A

Ref document number: 112012025208

Country of ref document: BR

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 112012025208

Country of ref document: BR

Kind code of ref document: A2

Effective date: 20121002