WO2016047030A1 - 表示装置及び表示方法 - Google Patents
表示装置及び表示方法 Download PDFInfo
- Publication number
- WO2016047030A1 WO2016047030A1 PCT/JP2015/004188 JP2015004188W WO2016047030A1 WO 2016047030 A1 WO2016047030 A1 WO 2016047030A1 JP 2015004188 W JP2015004188 W JP 2015004188W WO 2016047030 A1 WO2016047030 A1 WO 2016047030A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- block
- visible light
- light communication
- signal
- display device
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
- G09G3/3406—Control of illumination source
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
- G09G3/36—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B10/00—Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
- H04B10/11—Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
- H04B10/114—Indoor or close-range type systems
- H04B10/116—Visible light communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/38—Transmitter circuitry for the transmission of television signals according to analogue transmission standards
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/02—Networking aspects
- G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/06—Consumer Electronics Control, i.e. control of another device by a display or vice versa
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/16—Use of wireless transmission of display information
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/18—Use of optical transmission of display information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/66—Transforming electric information into light information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
Definitions
- the present disclosure relates to a display device and a display method capable of outputting a visible light communication signal.
- Patent Documents 1 and 2 disclose a display device that superimposes and displays communication information using visible light in a video signal.
- This disclosure provides a display device that outputs a visible light communication signal that can be restored by a receiving device.
- a display device is a display device capable of outputting a visible light communication signal composed of a plurality of signal units by a carousel method, which encodes a display panel that displays a video signal, a signal unit, and a plurality of blocks
- a visible light communication processing unit that generates a plurality of transmission frames using a plurality of blocks and generates a backlight control signal, and a backlight that emits light from the back of the display panel based on the backlight control signal.
- the plurality of transmission frames for one signal unit generated by the visible light communication processing unit differ in the order of the plurality of blocks of at least two transmission frames.
- the display device of the present disclosure can output a visible light communication signal that can be restored by the receiving device.
- FIG. 1 is a schematic diagram of a visible light communication system according to the first embodiment.
- FIG. 2 is a block diagram of the display device according to the first embodiment.
- FIG. 3 is a diagram for explaining an example of generating a visible light communication signal according to the first embodiment.
- FIG. 4 is a block diagram of the receiving apparatus according to the first embodiment.
- FIG. 5 is a diagram for explaining a captured image of the receiving device with respect to turning on / off of the backlight of the display device according to the first embodiment.
- FIG. 6 is a diagram for explaining a captured image of the receiving device with respect to the transmission frame of the display device according to the first embodiment.
- FIG. 1 is a schematic diagram of a visible light communication system according to the first embodiment.
- FIG. 2 is a block diagram of the display device according to the first embodiment.
- FIG. 3 is a diagram for explaining an example of generating a visible light communication signal according to the first embodiment.
- FIG. 4 is a block diagram of the receiving apparatus according to the first
- FIG. 7 is a diagram for explaining the relationship between the frequency of the transmission clock of the display device according to the first embodiment and the frame rate of the imaging unit of the reception device.
- FIG. 8 is a diagram for explaining a first generation example of a transmission frame for one signal unit according to the first embodiment.
- FIG. 9A is a diagram for explaining a second generation example of the transmission frame for one signal unit according to the first embodiment.
- FIG. 9B is a diagram for explaining a third generation example of the transmission frame for one signal unit according to the first embodiment.
- FIG. 9C is a diagram for explaining a fourth generation example of the transmission frame for one signal unit according to the first embodiment.
- FIG. 9D is a diagram for explaining a fifth generation example of the transmission frame for one signal unit according to the first embodiment.
- FIG. 9A is a diagram for explaining a second generation example of the transmission frame for one signal unit according to the first embodiment.
- FIG. 9B is a diagram for explaining a third generation example of the transmission frame for one signal unit according to the
- FIG. 9E is a diagram for explaining a sixth generation example of a transmission frame for one signal unit according to the first embodiment.
- FIG. 10 is a flowchart for explaining the operation of the visible light communication signal processing unit of the display device according to the first embodiment.
- FIG. 11 is a flowchart for explaining the operation of the visible light communication signal processing unit of the display device according to the second embodiment.
- FIG. 12 is a diagram for explaining an example of a method for determining the number of transmissions of an arbitrary block of a transmission frame for one signal unit according to the second embodiment.
- FIG. 13 is a diagram for explaining an example of transmission frame generation for one signal unit according to the second embodiment.
- FIG. 14 is a flowchart for explaining the operation of the visible light communication signal processing unit of the display device according to the third embodiment.
- FIG. 10 is a flowchart for explaining the operation of the visible light communication signal processing unit of the display device according to the first embodiment.
- FIG. 11 is a flowchart for explaining the operation of the visible light communication
- FIG. 15 is a diagram for explaining an example of a method for determining the number of transmissions of an arbitrary block of a transmission frame for one signal unit according to the third embodiment.
- FIG. 16 is a diagram for explaining a generation example of a transmission frame for one signal unit output from the display device according to the third embodiment.
- FIG. 17 is a diagram for explaining another example of generating a transmission frame for one signal unit output from the display device according to the third embodiment.
- FIG. 18 is a diagram for explaining a first generation example of a transmission frame for one signal unit according to the fourth embodiment.
- FIG. 19A is a diagram for explaining a second generation example of a transmission frame for one signal unit according to the fourth embodiment.
- FIG. 19B is a diagram for explaining a third generation example of the transmission frame for one signal unit according to the fourth embodiment.
- FIG. 19C is a diagram for explaining a fourth generation example of a transmission frame for one signal unit according to the fourth embodiment.
- FIG. 20 is a flowchart for explaining the operation of the visible light communication signal processing unit of the display device according to the fourth embodiment.
- FIG. 1 is a schematic diagram of a visible light communication system according to the first embodiment.
- the visible light communication system 10 includes a display device 100 and a receiving device 200.
- the display device 100 is a display, for example, and displays an image on the display surface 110.
- a visible light communication signal is inserted or superimposed on the video displayed on the display surface 110 as information related to the displayed video.
- the receiving device 200 receives the visible light communication signal output by being displayed on the display surface 110 of the display device 100 by capturing an image displayed on the display surface 110.
- the receiving device 200 is configured as a smartphone in which a sequential exposure type image sensor is incorporated. Accordingly, the user of the receiving device 200 can receive information related to the video displayed on the display device 100.
- a display is taken as an example of the display device 100, but is not limited thereto.
- the display device 100 may be a projection display device such as a projector.
- an electronic device is a “JEITA-CP1222 Visible Light ID System (Visible Light ID System) compliant with the JEITA-CP1222 Visible Light ID System” defined by the Japan Electronics Information Industry Association (JEITA: Japan Electronics and Information Technology Association). Good.
- the electronic device may be a general communication terminal.
- a visible light communication signal can be received means that a visible light communication signal can be received and information can be obtained by decoding the received visible light communication signal.
- the communication method of the visible light communication signal is, for example, a communication method compliant with “JEITA-CP-1223 Visible Light Beacon System” defined by JEITA, or IEEE (The Institute of Electrical and Electronic). It may be a communication system conforming to IEEE-P8015 which is a standard of WPAN (Wireless Personal Area Network) standardized by Engineers, Inc.).
- the receiving device 200 may be any electronic device that can communicate with these communication methods and can receive visible light communication signals.
- FIG. 2 is a block diagram of the display device according to the first embodiment.
- the display device 100 includes a video signal input unit 120, a video signal processing unit 130, a display control unit 140, a display panel 150, a visible light communication signal input unit 160, and a visible light communication signal processing unit 170. And a backlight control unit 180 and a backlight 190.
- the video signal input unit 120 is a video related to video displayed on the display panel 150 through an antenna cable, a composite cable, an HDMI (registered trademark) (High-Definition Multimedia Interface) cable, a PJLink cable, a LAN (Local Area Network) cable, and the like. A signal is input.
- the video signal input unit 120 outputs the input video signal to the video signal processing unit 130.
- a video signal stored in a recording medium may be used as the video signal.
- the video signal processing unit 130 performs general image processing such as decoding processing on the input video signal.
- the video signal processing unit 130 transmits the video signal subjected to the image processing to the display control unit 140 and the backlight control unit 180.
- the video signal includes information about the brightness of the video.
- the display control unit 140 controls the display panel 150 to display a video on the display surface 110 of the display panel 150 based on the input video signal. More specifically, the display control unit 140 performs liquid crystal opening control of the display panel 150 based on the video signal input from the video signal processing unit 130.
- the display panel 150 is a liquid crystal panel, for example, and has a display surface 110 for displaying an image.
- the visible light communication signal input unit 160 receives a visible light communication signal via a visible light communication signal dedicated cable or a LAN cable.
- the visible light communication signal may be a visible light communication signal stored in a recording medium. Furthermore, the visible light communication signal may be superimposed on the video signal.
- the visible light communication signal input unit 160 outputs the input visible light communication signal to the visible light communication signal processing unit 170.
- the visible light communication signal processing unit 170 encodes the input visible light communication signal by a predetermined encoding method, and further performs a process of determining the transmission order of the visible light communication signal.
- the visible light communication signal processing unit 170 converts the encoded visible light communication signal into a backlight control signal.
- the visible light communication signal processing unit 170 outputs the generated backlight control signal to the backlight control unit 180.
- the backlight control unit 180 divides the light emitting surface of the backlight 190 into a plurality of regions, performs light emission control in each of the plurality of regions, and performs control for providing a light extinction period at different timings in each of the plurality of regions on the light emitting surface. Do.
- the backlight control unit 180 controls the brightness and timing of the backlight 190 based on information about the brightness of the video included in the input video signal.
- the backlight control unit 180 controls the light emission of the backlight 190 based on the input backlight control signal.
- the backlight 190 is installed on the back surface of the display panel 150 and has a light emitting surface that illuminates the display surface 110 of the display panel 150 from the back surface.
- the backlight 190 emits light from the back surface of the display panel 150. The viewer can visually recognize the video displayed on the display panel 150.
- the entire display surface 110 is a visible light communication region.
- FIG. 3 is a diagram for explaining an example of generating a visible light communication signal.
- the visible light communication signal input to the visible light communication signal input unit 160 is composed of a plurality of signal units having a predetermined length.
- the visible light communication signal processing unit 170 divides the signal unit into a predetermined number of data.
- one signal unit is composed of four data having the same data length. That is, one signal unit is divided into data 1, data 2, data 3, and data 4.
- the division of one signal unit is based on the carrier frequency of the visible light communication signal output from the display device 100, the data length of the signal unit of the visible light communication signal, and further based on the period during which the backlight 190 does not emit light. Just decide.
- the data length of the data that divides one signal unit is the same.
- the data length of the data that divides one signal unit may be different from each other.
- the data length of one data may be different from the data length of the remaining data.
- the visible light communication signal processing unit 170 encodes the divided data, adds a header part to each data, determines a transmission order, and generates a block. Specifically, block 1, block 2, block 3, and block 4 are generated from data 1, data 2, data 3, and data 4. The visible light communication signal processing unit 170 transmits the generated blocks to the backlight control unit 180 in the order of block 1, block 2, block 3, and block 4 as a backlight control signal.
- the header part of the block consists of “preamble”, “address”, and “parity”.
- the preamble is a pattern indicating the beginning of a block, and includes an identifier indicating that the data is a visible light communication signal. For example, a signal deviating from a coding rule such as quaternary pulse position modulation (4PPM: 4 Pulse Position Modulation) or i-4PPM (Inverted 4PPM) is used. Parity is used to detect data errors.
- the address indicates the transmission order of the blocks in the signal unit.
- the four blocks generated from one signal unit are called transmission frames.
- FIG. 4 is a block diagram of the receiving apparatus according to the first embodiment.
- the receiving device 200 includes an imaging unit 210, a captured image generation unit 220, and a captured image processing unit 230.
- the imaging unit 210 captures an image displayed in the visible light communication area of the display device 100.
- the imaging unit 210 is, for example, a sequential exposure type image sensor. When the image sensor starts imaging, it sequentially performs exposure and sends exposure data to the captured image generation unit 220.
- the captured image generation unit 220 temporarily stores the exposure data sent from the imaging unit 210 in a built-in memory. A captured image is generated based on the exposure data stored in the memory.
- the captured image processing unit 230 restores the visible light communication signal from the captured image generated by the captured image generation unit 220.
- FIG. 5 is a diagram illustrating a captured image of the receiving device 200 with respect to turning on / off of the backlight 190 of the display device 100.
- the imaging unit 210 is a sequential exposure type image sensor, and performs exposure while scanning temporally for each line.
- the exposure elements of the image sensor are 8 lines. It is assumed that the exposure line is configured in a vertically long band shape of the receiving device 200.
- the backlight 190 of the display device 100 is turned on and off as time elapses.
- the image sensor sequentially exposes from the first line to the eighth line, and when the exposure is sequentially performed to the eighth line, the captured image generation unit 220 of the receiving apparatus 200 captures the captured image based on the exposure data of the eight lines.
- a sequential exposure period of the image sensor is defined as an imaging period
- a captured image generated based on exposure data sequentially exposed by the image sensor during the imaging period is defined as a reception frame L.
- the first exposure returns to the first line, and the next exposure starts from the first line.
- the generated captured image is set as a reception frame L + 1.
- There is a blanking period such as the time for storing exposure data in the memory from the end of exposure until the start of the next first line until the 8th line, and this time is not exposed. .
- the reception frame L is the first line, the second line, the fifth line, the sixth line, and the eighth line of exposure of the image sensor of the receiving apparatus 200 when the backlight 190 of the display apparatus 100 is lit. bright.
- the third and fourth lines of exposure of the image sensor of the receiving device 200 are when the backlight 190 of the display device 100 is turned off, and each line is dark. Based on the received frame L, the visible light communication signal is restored.
- the reception frame L + 1 is the first line, the second line, the third line, the seventh line, and the eighth line of exposure of the image sensor of the receiving apparatus 200 when the backlight 190 of the display apparatus 100 is lit. bright.
- the fourth, fifth and sixth lines of exposure of the image sensor of the receiving device 200 are when the backlight 190 of the display device 100 is turned off, and each line is dark.
- the visible light communication signal is restored based on the reception frame L + 1.
- FIG. 6 is a schematic diagram illustrating a captured image of the reception device 200 with respect to a transmission frame of the display device 100.
- the visible light communication signal is composed of a plurality of signal units, and one signal unit is divided into four data, encoded, and divided into four blocks.
- the receiving device 200 cannot receive the transmission frame output from the display device 100 during this period.
- a transmission frame output from the backlight 190 of the display device 100 uses a carousel method in which a transmission frame generated from one signal unit is repeatedly output a plurality of times.
- the display device 100 outputs a transmission frame twice in succession using a visible light communication signal as one signal unit.
- a transmission frame is output by turning on / off the backlight 190 of the display device 100.
- the first to eighth lines are sequentially exposed.
- the captured image generation unit 220 of the reception device 200 generates a captured image based on the exposure data of the eight lines.
- a received frame L that is a captured image receives block 1 at the first and second lines of exposure of the image sensor of the receiving apparatus 200, receives block 2 at the third and fourth lines, and receives the fifth line.
- Block 3 is received on the sixth line
- block 4 is received on the seventh and eighth lines.
- the reception frame L corresponds to the first transmission frame of one signal unit output from the display device 100.
- a received frame L + 1 which is a captured image, receives block 1 on the first and second lines of exposure of the image sensor of the receiving apparatus 200, and receives block 2 on the third and fourth lines. Then, block 3 is received on the 5th and 6th lines, and block 4 is received on the 7th and 8th lines.
- the reception frame L + 1 corresponds to the second transmission frame of one signal unit output from the display device 100.
- the display device 100 When the transmission frame is continuously output by the carousel method, the display device 100 indicates that the current signal unit has been switched to the next signal unit before outputting the transmission frame of the next signal unit. May be output.
- This reset signal may be included in the preamble or data of the block of the transmission frame.
- FIG. 7 is a diagram for explaining the relationship between the frequency of the transmission clock of the display device 100 and the frame rate of the imaging unit 210 of the reception device 200.
- the driving frequency of the liquid crystal panel which is the display panel 150 of the display device 100 in this embodiment is 120 Hz.
- the frame rate of the image sensor of the imaging unit 210 of the receiving apparatus 200 in the present embodiment operates at 30 fps (frame per second).
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integral multiple or a fraction of an integer.
- the timing of turning on and off the backlight 190 of the display device 100 may be synchronized with the driving frequency of the liquid crystal panel in order to control the luminance control, moving image resolution, and the like in the backlight control unit 180 of the display device 100. That is, as shown in FIG. 7, the transmission frame of the display device 100 is output in synchronization with the drive frequency of the liquid crystal panel.
- FIG. 7 shows a case where a transmission frame generated from one signal unit output from the display device 100 in such a situation is output three times by the carousel method.
- the image sensor is exposed during the imaging period of one frame rate for the first transmission frame output from the display device 100.
- the receiving apparatus 200 generates a reception frame L that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L. Only the blocks 2 and 3 in which all data is included in the received frame L can be restored as visible light communication signals.
- the image sensor is exposed during the imaging period of one frame rate for the second transmission frame output from the display device 100.
- the receiving apparatus 200 generates a received frame L + 1 that is a captured image based on the exposure data.
- the receiving apparatus 200 restores the visible light communication signal from the received frame L + 1. Only block 2 and block 3 in which all data is included in the reception frame L + 1 can be restored as visible light communication signals.
- the image sensor is exposed during the imaging period of one frame rate for the third transmission frame output from the display device 100.
- the receiving apparatus 200 generates a received frame L + 2 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 2. Only block 2 and block 3 in which all data is included in the reception frame L + 2 can be restored as visible light communication signals.
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integral multiple or a fraction of an integer, and a transmission frame for one signal unit output from the display device 100 is transmitted to the liquid crystal panel.
- a transmission frame for one signal unit output from the display device 100 is transmitted to the liquid crystal panel.
- Transmission frame generation method In order to solve the above problem, a carousel system is used for one signal unit in order to restore all four blocks included in one signal unit output from the display device 100 as visible light communication signals by the communication device 200. Instead of using the same transmission frame for each transmission frame output multiple times, a different transmission frame is generated and output each time. That is, a transmission frame that is output multiple times for one signal unit by the carousel method is generated so that the transmission order of blocks of the transmission frame for one signal unit is not the same every time.
- FIG. 8 is a diagram for explaining a first generation example of a transmission frame for one signal unit according to the first embodiment.
- FIG. 8 shows a case where one signal unit output from the display device 100 is output three times by the carousel method, as in FIG. The difference from FIG. 7 is that the transmission order of blocks of three transmission frames output from the display device 100 is not the same, but is different every time.
- the order of the blocks of the first transmission frame output from the display device 100 is block 1, block 2, block 3, and block 4.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a reception frame L that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L. Only the blocks 2 and 3 in which all data is included in the received frame L can be restored as visible light communication signals.
- the block order of the second transmission frame output from the display device 100 is block 2, block 3, block 4, and block 1.
- the image sensor is exposed during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 1 that is a captured image based on the exposure data.
- the receiving apparatus 200 restores the visible light communication signal from the received frame L + 1. Only blocks 3 and 4 in which all data is included in the reception frame L + 1 can be restored as visible light communication signals.
- the block order of the third transmission frame output from the display device 100 is block 3, block 4, block 1, and block 2.
- the image sensor is exposed during the imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 2 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 2. Only block 4 and block 1 in which all data is included in the reception frame L + 2 can be restored as visible light communication signals.
- the second and third blocks of the transmission frame output from the display device 100 are blocks that can be restored as visible light communication signals, all the blocks are the second and third in three outputs.
- the transmission order of the block of signal units is changed so that it is output first.
- the transmission frame that is output a plurality of times for one signal unit by the carousel method is changed so that the transmission order of the blocks of the transmission frame for one signal unit is not the same every time.
- a transmission frame that is output a plurality of times for one signal unit by the carousel method may be changed such that the transmission order of blocks of two adjacent transmission frames for one signal unit is different.
- the generation example of the transmission frame output from the display device 100 is not limited to this.
- FIG. 9A is a diagram for explaining a second generation example of a transmission frame for one signal unit according to the first embodiment.
- FIG. 9A shows the transmission order of blocks in a transmission frame in ascending order, that is, block 1, block 2, block 3, order of block 4, and descending order, that is, order of block 4, block 3, block 2, block 1. repeat.
- the transmission frame as in the second generation example is output a plurality of times by the carousel method, thereby blocking one signal unit. All of 1, 1, 2, 3, and 4 can be restored as visible light communication signals.
- FIG. 9B is a diagram for explaining a third generation example of a transmission frame for one signal unit according to the first embodiment.
- FIG. 9B omits one of the four blocks of the signal unit and changes the transmission order for each transmission frame.
- the order of the blocks of the first transmission frame output from the display device 100 is block 1, block 2, block 3, and block 2, omitting block 4.
- the order of the blocks of the second transmission frame output from the display device 100 is block 3, block 4, block 1, and block 3, omitting block 2.
- the order of the blocks of the third transmission frame output from the display device 100 is block 4, block 1, block 2, and block 4 with the block 3 omitted.
- FIG. 9C is a diagram illustrating a fourth generation example of a transmission frame for one signal unit according to the first embodiment.
- the blocks of the signal unit are arranged in the order of block 1, block 2, block 3, and block 4, and one block is added therein.
- the block order of the first transmission frame output from the display device 100 is Block 1, Block 1, Block 2, and Block 3, with Block 1 added.
- the order of the blocks of the second transmission frame output from the display device 100 starts from the block 4 which is not included in the first time, and the block 2 is added, followed by the order of block 4, block 1, block 2, and block 2. is there.
- the order of the blocks of the third transmission frame output from the display device 100 is the order of the block 3, the block 4, the block 1, and the block 2, starting from the block 3 that is not included in the second time.
- the transmission frame as in the fourth generation example is output a plurality of times by the carousel method, all of the block 1, block 2, block 3, and block 4 of one signal unit are used as visible light communication signals. Can be restored.
- FIG. 9D is a diagram for explaining a fifth generation example of the transmission frame for one signal unit according to the first embodiment.
- FIG. 9D randomly changes the order of the blocks of the signal unit.
- the order of the blocks of the first transmission frame output from the display device 100 is block 1, block 3, block 2, and block 4.
- the order of blocks of the second transmission frame output from the display device 100 is block 3, block 1, block 2, and block 4.
- the order of the blocks of the third transmission frame output from the display device 100 is block 2, block 3, block 1, and block 4.
- the transmission frame block order for one signal unit is randomly changed and output multiple times by the carousel method, all of block 1, block 2, block 3 and block 4 of one signal unit are visible light communication. It can be restored as a signal.
- FIG. 9E is a diagram for explaining a sixth generation example of a transmission frame for one signal unit according to the first embodiment.
- the same block is continued twice in one transmission frame.
- the order of the blocks of the first transmission frame output from the display device 100 is block 1, block 1, block 2, and block 2.
- the block order of the second transmission frame output from the display device 100 is block 3, block 3, block 4, and block 4.
- the order of the blocks of the third transmission frame output from the display apparatus 100 is block 1, block 1, block 2, and block 2.
- FIG. 10 is a flowchart for explaining the operation of the visible light communication signal processing unit 170 of the display device 100.
- Step S1001 The visible light communication signal processing unit 170 determines whether or not a visible light communication signal is input from the visible light communication signal input unit 160. When it is determined that the input of the visible light communication signal is “present” (in the case of Yes), the process proceeds to step S1002. When it is determined that the input of the visible light communication signal is “none” (in the case of No), the process of step S1001 is repeated.
- the input visible light communication signal is composed of a plurality of signal units.
- the visible light communication signal processing unit 170 reads one signal unit.
- the visible light communication signal processing unit 170 divides each read signal unit into a predetermined number of data, encodes each data, adds a header to each data, and generates a block. .
- Step S1004 Based on the generated block, the visible light communication signal processing unit 170 determines a transmission order of blocks to be included in each transmission frame of a plurality of transmission frames transmitted by the carousel method.
- Step S1005 The visible light communication signal processing unit 170 generates a plurality of transmission frames and outputs them to the backlight control unit 180.
- Step S1006 The visible light communication signal processing unit 170 determines the presence or absence of the remaining signal units. If it is determined that the remaining signal units are “present” (Yes), the process returns to step S1001. If it is determined that the remaining signal units are “none” (No), the process is terminated.
- the display device is a display device that can output a visible light communication signal including a plurality of signal units by the carousel method, and includes a display panel that displays a video signal, and a signal unit. Is divided into a plurality of blocks, a plurality of transmission frames are generated using the plurality of blocks, and a visible light communication processing unit which generates a backlight control signal and a display panel from the back based on the backlight control signal A backlight that emits light.
- the plurality of transmission frames for one signal unit generated by the visible light communication processing unit differ in the order of the plurality of blocks of at least two transmission frames.
- the display device 100 can restore the visible light communication signal by outputting a plurality of transmission frames having different block transmission orders to one signal unit.
- the plurality of transmission frames for one signal unit generated by the visible light communication processing unit includes the same block in at least two adjacent transmission frames.
- the display device 100 can restore the visible light communication signal by including the same block in at least two adjacent transmission frames for one signal unit.
- the plurality of transmission frames for one signal unit generated by the visible light communication processing unit includes a plurality of the same blocks in at least one transmission frame, and the plurality of transmission frames Contains all the blocks.
- the display device 100 can restore the visible light communication signal by including a plurality of the same blocks in one transmission frame and including all the blocks in the plurality of transmission frames.
- the visible light communication signal processing unit inserts a reset signal between two adjacent signal units.
- the display device 100 can indicate that the current signal unit has been switched to the next signal unit.
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integer multiple or a fraction of an integer
- the transmission frame from the display device 100 is the driving frequency of the liquid crystal panel. This is particularly effective when output is synchronized with the output.
- the number of transmissions of the transmission frame output from the display device 100 by the carousel method has been described as three, but the present invention is not limited to this.
- the number of transmissions of the transmission frame output by the carousel method may be any number as long as it is a plurality of times.
- the visible light communication system in the present embodiment has the same configuration as the visible light communication system 10 described in the first embodiment. Different points in the visible light communication system according to the present embodiment will be mainly described.
- Display panel 150 of display device 100 in the present embodiment is a liquid crystal panel.
- the liquid crystal panel When displaying an image, the liquid crystal panel is visually recognized as an image by opening and closing a liquid crystal shutter on the display surface 110 or controlling the gradation and the backlight 190.
- the backlight 190 is set to be very bright, if the video signal is dark, a dark area is formed in the visible light communication area. In the dark area of the video signal, the light of the backlight 190 is shielded by the liquid crystal shutter of the display panel 150. When a visible light communication signal is output in a dark area, the visible light communication signal may not be restored from a captured image captured by the imaging unit 210 of the receiving device 200.
- one signal unit is used when the ratio of the high-luminance area, which is an area having a predetermined brightness or more, to the visible light communication area that is the entire display surface 110 of the display device 100 is small.
- the visible light communication signal can be restored by outputting the number of transmissions of the block included in the plurality of times.
- the ratio of the high luminance area is large with respect to the visible light communication area
- the number of transmissions of the blocks included in one signal unit is reduced or one signal is compared with the case where the ratio of the high luminance area is small.
- the block included in the unit is transmitted once.
- FIG. 11 is a flowchart for explaining the operation of the visible light communication signal processing unit 170 of the display device 100 according to the second embodiment.
- step S1001 to step S1003 is the same as the operation in the first embodiment.
- the visible light communication signal processing unit 170 detects the high luminance area of the visible light communication area from the video signal input from the video signal processing unit 130.
- the visible light communication signal processing unit determines the number of transmissions of each block of the transmission unit based on the ratio of the high luminance region in the visible light communication region. A method for determining the number of transmissions will be described later.
- Step S1102 The visible light communication signal processing unit 170 determines the block transmission order based on the number of transmissions of each block of the signal unit. A method for determining the block transmission order will be described later.
- step S1005 and step S106 are the same as those in the first embodiment.
- FIG. 12 is a diagram for explaining an example of a method for determining the number of transmissions of an arbitrary block of a transmission frame for one signal unit.
- the horizontal axis represents the ratio of the high-luminance area of the visible light communication area
- the vertical axis represents the number of transmissions of an arbitrary block in the signal unit.
- FIG. 12 assumes that the visible light communication signal can be restored by the receiving apparatus 200 when the high-luminance region of the visible light communication region is about 80% or more and the number of times of transmission of any block in the signal unit is one. Then, it is assumed that the visible light communication signal can be restored by the receiving device 200 by increasing the number of times of transmission of an arbitrary block in the signal unit as the ratio of the high luminance region in the visible light communication region decreases. Specifically, if the high-luminance area is 90% (point A) in the visible light communication area, the number of transmissions of an arbitrary block in the signal unit is one, and the high-luminance area is in the visible light communication area.
- the number of transmissions of an arbitrary block in the signal unit is 3 and if the high-luminance area is 10% (point C) in the visible light communication area, an arbitrary block in the signal unit Is sent 6 times.
- the number of transmissions of an arbitrary block in the signal unit is 80% to about 15% in the high-luminance region in the visible light communication region, and the number of transmissions of the arbitrary block in the signal unit is one time. Increasing by one.
- ratio of the number of transmissions is not limited to this, and may be changed as appropriate.
- FIG. 13 is a diagram for explaining an example of transmission frame generation for one signal unit according to the second embodiment.
- the driving frequency of the liquid crystal panel that is the display panel 150 of the display device 100 in this embodiment is 120 Hz
- the frame rate of the image sensor of the imaging unit 210 of the receiving device 200 operates at 30 fps.
- the transmission frame of the display device 100 is output in synchronization with the driving frequency of the liquid crystal panel.
- FIG. 13 shows a case where one signal unit of a visible light communication signal output from the display device 100 is output three times by the carousel method.
- One signal unit is composed of six data having the same data length, and is encoded to generate six blocks.
- the number of transmissions of blocks included in three transmission frames for one signal unit is determined according to the ratio of the high-luminance area of the visible light communication area.
- the first transmission frame output from the display device 100 has a high luminance area ratio of 80%, so the number of transmissions of any block of the signal unit is one. Accordingly, the block order of the first transmission frame output from the display device 100 is block 1, block 2, block 3, block 4, block 5, and block 6.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a reception frame L that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L.
- Block 2, block 3, block 4, and block 5 in which all data is included in the received frame L can be restored as visible light communication signals.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 1 that is a captured image based on the exposure data.
- a block in a region that is not a high luminance region cannot be restored.
- the receiving apparatus 200 restores the visible light communication signal from the received frame L + 1. Blocks 1 and 2 in which all data is included in the reception frame L + 1 can be restored as visible light communication signals.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 2 that is a captured image based on the exposure data.
- a block in a region that is not a high luminance region cannot be restored.
- the receiving device 200 restores the visible light communication signal from the received frame L + 2.
- the block 6 in which all data is included in the reception frame L + 2 can be restored as a visible light communication signal.
- the block 1, block 2, block 3, block 4, All of the blocks 5 and 6 can be restored as visible light communication signals.
- the visible light communication processing unit detects an area having a luminance higher than a predetermined level of the display panel, and includes the same block included in the transmission frame according to the size of the area And a plurality of transmission frames for the signal unit are generated.
- the display device 100 restores the visible light communication signal by changing the number of transmissions of the block according to the ratio of the high luminance area to one signal unit and outputting a plurality of transmission frames. it can.
- three transmission frames are output by the carousel method for one signal unit output from the display device 100, but the present invention is not limited to this.
- a transmission frame may be used in which a transmission frame is output three or more times by the carousel method, and the combination of repeating block 1 and block 2 three times is changed as the block order of the second transmission frame.
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integer multiple or a fraction of an integer
- the transmission frame from the display device 100 is the driving frequency of the liquid crystal panel. This is particularly effective when output is synchronized with the output.
- Embodiment 3 will be described with reference to FIGS.
- the visible light communication system in the present embodiment has the same configuration as the visible light communication system 10 described in the first embodiment. Different points in the visible light communication system according to the present embodiment will be mainly described.
- the captured image that can be generated by the imaging unit 210 of the receiving device 200 is relatively large, and the distance between the display device 100 and the receiving device 200 is relative. This is because the captured image that can be generated by the imaging unit 210 of the receiving device 200 is relatively small.
- the display device 100 changes the number of transmissions of an arbitrary block of the transmission frame of one signal unit according to the distance from the reception device 200.
- FIG. 14 is a flowchart for explaining the operation of the visible light communication signal processing unit 170 of the display device 100 according to the third embodiment.
- step S1001 to step S1003 is the same as the operation in the first embodiment.
- the visible light communication signal processing unit 170 determines the number of transmissions of each block of the transmission unit according to the distance from the receiving device 200. A method for determining the number of transmissions will be described later.
- the visible light communication signal processing unit 170 determines the block transmission order based on the number of block transmissions of the signal unit. A method for determining the transmission order will be described later.
- step S1005 and step S1006 are the same as those in the first embodiment.
- FIG. 15 is a diagram for explaining an example of a method for determining the number of transmissions of an arbitrary block of a transmission frame for one signal unit.
- the horizontal axis represents the distance between the display device 100 and the receiving device 200
- the vertical axis represents the number of transmissions of an arbitrary block in the signal unit.
- the number of transmissions of each block of the signal unit is reduced. In FIG. 15, if the distance is 3 m or less, the number of transmissions of each block of the signal unit is set to one.
- the number of transmissions of each block of the signal unit is increased once at a rate of 2 m from a distance of 3 m or more.
- FIG. 16 is a diagram for explaining a generation example of a transmission frame for one signal unit output from the display device 100 according to the third embodiment.
- FIG. 16 shows a case where the distance is 3 m.
- the drive frequency of the liquid crystal panel which is the display panel 150 of the display device 100 in this embodiment is 120 Hz, and the frame rate of the image sensor of the imaging unit 210 of the reception device 200 operates at 30 fps.
- the transmission frame of the display device 100 is output in synchronization with the driving frequency of the liquid crystal panel.
- FIG. 16 shows a case where one signal unit of a visible light communication signal output from the display device 100 is transmitted four times by the carousel method.
- One signal unit is composed of four data having the same data length and is encoded to generate four blocks.
- the order of the blocks of the first transmission frame output from the display device 100 is Block 1, Block 1, Block 2, and Block 2 so that Block 1 and Block 2 are output twice, respectively.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a reception frame L that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L. Blocks 1 and 2 in which all data is included in the reception frame L can be restored as visible light communication signals.
- the block order of the second transmission frame output from the display device 100 is block 3, block 3, block 4, and block 4 so that block 3 and block 4 are output twice.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 1 that is a captured image based on the exposure data.
- the receiving apparatus 200 restores the visible light communication signal from the received frame L + 1. Blocks 3 and 4 in which all data is included in the reception frame L + 1 can be restored as visible light communication signals.
- the order of the blocks of the third transmission frame output from the display device 100 is Block 1, Block 1, Block 2, and Block 2 so that Block 1 and Block 2 are output twice, respectively.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 2 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 2. Blocks 1 and 2 in which all data is included in the reception frame L + 2 can be restored as visible light communication signals.
- the order of the blocks of the fourth transmission frame output from the display device 100 is block 3, block 3, block 4, and block 4 so that block 3 and block 4 are output twice, respectively.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 3 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 3. Blocks 3 and 4 in which all data is included in the reception frame L + 3 can be restored as visible light communication signals.
- each received frame can receive one block in which an arbitrary block included in the transmitted frame is output twice. That is, two different blocks can be received from each received frame.
- FIG. 17 is a diagram for explaining another generation example of a transmission frame for one signal unit output from the display device according to the third embodiment.
- FIG. 17 shows a case where the distance is 8 m.
- the drive frequency of the liquid crystal panel which is the display panel 150 of the display device 100 in this embodiment is 120 Hz, and the frame rate of the image sensor of the imaging unit 210 of the reception device 200 operates at 30 fps.
- the transmission frame of the display device 100 is output in synchronization with the driving frequency of the liquid crystal panel.
- FIG. 17 shows a case where one signal unit of a visible light communication signal output from the display device 100 is transmitted four times by the carousel method.
- One signal unit is composed of four data having the same data length and is encoded to generate four blocks.
- the block order of the first transmission frame output from the display device 100 is output block 1 four times.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a reception frame L that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L.
- the block 1 in which all data is included in the reception frame L can be restored as a visible light communication signal.
- the block order of the second transmission frame output from the display device 100 is that the block 2 is output four times.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 1 that is a captured image based on the exposure data.
- the receiving apparatus 200 restores the visible light communication signal from the received frame L + 1.
- Block 2 in which all data is included in reception frame L + 1 can be restored as a visible light communication signal.
- the block order of the third transmission frame output from the display device 100 is the output of block 3 four times.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 2 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 2.
- the block 3 in which all data is included in the reception frame L + 2 can be restored as a visible light communication signal.
- the block order of the fourth transmission frame output from the display device 100 is that the block 4 is output four times.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 3 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 3.
- the block 4 in which all data is included in the reception frame L + 3 can be restored as a visible light communication signal.
- each received frame can receive one block in which an arbitrary block included in the transmitted frame is output four times. That is, one block can be received from each received frame.
- the visible light communication processing unit determines the number of the same blocks included in the transmission frame according to the distance between the display device and the receiving device that can receive the output visible light communication signal. Determining and generating a plurality of transmission frames for the signal unit.
- the display apparatus 100 can restore the visible light communication signal by changing the number of block transmissions and outputting a plurality of transmission frames according to the distance between the display apparatus 100 and the reception apparatus 200. .
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integer multiple or a fraction of an integer
- the transmission frame from the display device 100 is the driving frequency of the liquid crystal panel. This is particularly effective when output is synchronized with the output.
- the distance between the display device 100 and the receiving device 200 can be set in advance by the display device 100, and is preferably changed as appropriate depending on the application and the installation status of the display device 100.
- the receiving device 200 may request the display device 100 to set the distance via wireless communication such as Wi-Fi (Wireless Fidelity), Bluetooth (registered trademark), LTE (Long Term Evolution), or the like.
- wireless communication such as Wi-Fi (Wireless Fidelity), Bluetooth (registered trademark), LTE (Long Term Evolution), or the like.
- the distance may be estimated using a sensor or a camera on either the display device 100 or the receiving device 200.
- the generated transmission frame is an example, and the present invention is not limited to this.
- the visible light communication system in the present embodiment has the same configuration as the visible light communication system 10 described in the first embodiment. Different points in the visible light communication system according to the present embodiment will be mainly described.
- FIG. 18 is a diagram for explaining an example of transmission frame generation for one signal unit according to the fourth embodiment.
- the driving frequency of the liquid crystal panel that is the display panel 150 of the display device 100 in this embodiment is 120 Hz, and the frame rate of the image sensor of the imaging unit 210 of the receiving device 200 operates at 30 fps.
- the transmission frame of the display device 100 is output in synchronization with the driving frequency of the liquid crystal panel.
- One signal unit of the visible light communication signal output from the display device 100 is output four times by the carousel method.
- One signal unit is composed of four data having the same data length and is encoded to generate four blocks.
- a blank having the same size as the block is inserted into the transmission frame so that the same block does not become the same position.
- the first transmission frame output from the display device 100 is in the order of block 1, block 2, block 3, block 4, and blank.
- the receiving device 200 exposes the image sensor during an imaging period of one frame rate.
- the receiving apparatus 200 generates a reception frame L that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L. Only the blocks 2 and 3 in which all data is included in the received frame L can be restored as visible light communication signals.
- the second transmission frame output from the display device 100 is in the order of block 1, block 2, block 3, block 4, and blank.
- the image sensor is exposed during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 1 that is a captured image based on the exposure data.
- the receiving apparatus 200 restores the visible light communication signal from the received frame L + 1. Only block 1 and block 2 in which all data is included in the reception frame L + 1 can be restored as visible light communication signals.
- the third transmission frame output from the display device 100 is in the order of block 1, block 2, block 3, block 4, and blank.
- the image sensor is exposed during the imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 2 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 2. Only the block 1 in which all data is included in the reception frame L + 2 can be restored as a visible light communication signal.
- the fourth transmission frame output from the display device 100 is in the order of block 1, block 2, block 3, block 4, and blank.
- the image sensor is exposed during an imaging period of one frame rate.
- the receiving apparatus 200 generates a received frame L + 3 that is a captured image based on the exposure data.
- the receiving device 200 restores the visible light communication signal from the received frame L + 3. Only the block 4 in which all data is included in the reception frame L + 3 can be restored as a visible light communication signal.
- the blank signal pattern to be inserted may be any pattern as long as it is different from the data included in the signal unit.
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integer multiple or a fraction of an integer
- the transmission frame is output from the display device 100 in synchronization with the driving frequency of the liquid crystal panel.
- the timing of turning on and off the backlight 190 of the display device 100 is prevented from synchronizing with the driving frequency of the liquid crystal panel, and the same transmission frame is used four times.
- All of block 1, block 2, block 3, and block 4 of one signal unit can be restored as visible light communication signals.
- the size of the blank to be inserted the same as the block size, it is possible to prevent fluctuations in the luminance of the video signal, and it is also effective as a luminance adjustment period.
- the size of the blank to be inserted is the same as the block size, this is not restrictive.
- the size of the blank to be inserted may be determined so that the timing of turning on and off the backlight 190 of the display device 100 is not synchronized with the driving frequency of the liquid crystal panel.
- the size of the blank to be inserted need not always be the same size.
- the generation example of the transmission frame in which the blank is inserted is not limited to this.
- FIG. 19A is a diagram for explaining a second generation example of a transmission frame for one signal unit according to the fourth embodiment.
- FIG. 19A a blank is inserted at the end of the transmission frame, and the transmission order of the blocks of the transmission frame is changed every time as described in the first embodiment. That is, the block order of the first transmission frame output from the display device 100 is block 1, block 2, block 3, block 3, and blank.
- the second transmission frame output from the display device 100 is in the order of block 4, block 3, block 2, block 1, and blank.
- the third transmission frame output from the display device 100 is in the order of block 2, block 3, block 4, block 1, and blank.
- FIG. 19B is a diagram for explaining a third generation example of a transmission frame for one signal unit according to the fourth embodiment.
- FIG. 19B inserts a blank after each block of the transmission frame. That is, the transmission frames output from the display device 100 are in the order of block 1, blank, block 2, blank, block 3, blank, block 4, and blank.
- the size of the blank to be inserted is block length ⁇ ⁇ (0 ⁇ ⁇ 1 decimal), and ⁇ is determined so that the timing of turning on / off the backlight 190 of the display device 100 is not synchronized with the driving frequency of the liquid crystal panel. To do.
- FIG. 19C is a diagram for explaining a fourth generation example of the transmission frame for one signal unit according to the fourth embodiment.
- FIG. 19C inserts a blank after an arbitrary block of a transmission frame. That is, the transmission frames output from the display device 100 are in the order of block 1, blank, block 2, blank, block 3, and block 4.
- FIG. 20 is a flowchart for explaining the operation of the visible light communication signal processing unit 170 of the display device 100 according to the fourth embodiment.
- step S1001 to step S1002 is the same as that in the first embodiment.
- the visible light communication signal processing unit 170 determines the position where the blank of the transmission unit is inserted.
- Step 2002 The visible light communication signal processing unit 170 determines the size of the blank.
- step S1003 to step S106 is the same as that in the first embodiment.
- the visible light communication processing unit inserts a blank into at least one transmission frame among a plurality of transmission frames for one signal unit.
- the timing of turning on and off the backlight 190 of the display device 100 is avoided from being synchronized with the driving frequency of the liquid crystal panel, and the receiving device 200 can perform visible light communication.
- the signal can be restored.
- the relationship between the driving frequency of the liquid crystal panel and the frame rate of the image sensor is an integer multiple or a fraction of an integer
- the transmission frame from the display device 100 is the driving frequency of the liquid crystal panel. This is particularly effective when output is synchronized with the output.
- Embodiments 1 to 4 have been described as examples of the technology of the present disclosure.
- the technology of the present disclosure is not limited to this, and can also be applied to embodiments in which changes, replacements, additions, omissions, and the like are made.
- the display apparatus of this indication showed the example of generation of a transmission frame in case a transmission frame is outputted synchronizing with the drive frequency of a liquid crystal panel, it is not limited to this.
- this embodiment is effective when the carrier frequency at which the transmission frame is output is an integral multiple of the frequency of the image sensor. It is.
- the present invention is not limited to this.
- the carrier frequency of the transmission frame output from the display device is an integral multiple of the frequency of the image sensor of the reception device.
- the present embodiment is effective.
- the display device is applicable to a display device that can output a visible light communication signal, for example, a device such as a television, a personal computer, or a tablet terminal in a home, a signage terminal, an information terminal, or an information display device at a go Is possible.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Crystallography & Structural Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Multimedia (AREA)
- Optical Communication System (AREA)
- Liquid Crystal Display Device Control (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本開示の表示装置は、複数の信号ユニットで構成される可視光通信信号をカルーセル方式で出力可能な表示装置であって、映像信号を表示する表示パネルと、信号ユニットを符号化し、複数のブロックに分割し、複数のブロックを用いて送信フレームを複数生成してバックライト制御信号とする可視光通信処理部と、バックライト制御信号に基づいて、表示パネルを背面から発光するバックライトと、を備える。可視光通信処理部で生成された1つの信号ユニットに対する複数の送信フレームは、少なくとも2つの送信フレームの複数のブロックの順序が異なる。
Description
本開示は、可視光通信信号を出力可能な表示装置及び表示方法に関する。
ディスプレイのバックライトを用いた可視光通信技術が開示されている。特許文献1および特許文献2では、映像信号の中に可視光による通信情報を重畳して表示する表示装置が開示されている。
本開示は、受信装置で復元可能な可視光通信信号を出力する表示装置を提供する。
本開示における表示装置は、複数の信号ユニットで構成される可視光通信信号をカルーセル方式で出力可能な表示装置であって、映像信号を表示する表示パネルと、信号ユニットを符号化し、複数のブロックに分割し、複数のブロックを用いて送信フレームを複数生成してバックライト制御信号とする可視光通信処理部と、バックライト制御信号に基づいて、表示パネルを背面から発光するバックライトと、を備える。可視光通信処理部で生成された1つの信号ユニットに対する複数の送信フレームは、少なくとも2つの送信フレームの複数のブロックの順序が異なる。
本開示の表示装置は、受信装置で復元可能な可視光通信信号を出力することできる。
以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために、提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
(実施の形態1)
以下、図1~9Eを用いて、実施の形態1を説明する。
以下、図1~9Eを用いて、実施の形態1を説明する。
[1-1.可視光通信システムの構成]
図1は、実施の形態1にかかる可視光通信システムの概略図である。図1において、可視光通信システム10は、表示装置100と、受信装置200とから構成される。
図1は、実施の形態1にかかる可視光通信システムの概略図である。図1において、可視光通信システム10は、表示装置100と、受信装置200とから構成される。
表示装置100は、例えば、ディスプレイであり、表示面110に映像を表示する。また表示面110に表示されている映像には、表示されている映像に関連する情報として可視光通信信号が挿入または重畳されている。
表示装置100の表示面110に表示されることによって出力された可視光通信信号を、受信装置200は表示面110に表示された映像を撮像することで受信する。受信装置200は、例えば、順次露光型のイメージセンサーが内蔵されているスマートフォンとして構成される。これにより、受信装置200のユーザーは、表示装置100に表示されている映像に関連する情報などを受け取ることができる。
なお、本実施の形態では、表示装置100としてディスプレイを例に挙げているが、これに限らない。表示装置100は、プロジェクターのように投影型の表示装置であってもよい。
また、受信装置200としてスマートフォンを例に挙げているが、可視光通信信号を受信可能な電子機器であればよい。例えば、電子機器は、電子機器情報産業協会(JEITA:Japan Electronics and Information Technology Industries Assosiation)で規定された「JEITA-CP1222 可視光IDシステム(Visible Light ID System)」に準拠する受信装置であってもよい。さらに、電子機器は、一般的な通信端末であってもよい。
また、「可視光通信信号を受信可能」とは、可視光通信信号を受信し、受信した可視光通信信号をデコードして情報を得ることができるということである。
また、可視光通信信号の通信方式は、例えば、JEITAで規定された「JEITA-CP-1223 可視光ビーコンシステム(Visible Light Beacon System)」に準拠する通信方式、或いはIEEE(The Institute of Electrial and Electronics Engineers, Inc.)で標準化されたWPAN(Wireless Personal Area Network)の規定であるIEEE-P802.15に準拠する通信方式等であってもよい。
換言すると、受信装置200は、これらの通信方式で通信可能であり、さらに可視光通信信号を受信可能な電子機器であればよい。
[1-2.表示装置の構成]
図2は、実施の形態1にかかる表示装置のブロック図である。図2において、表示装置100は、映像信号入力部120と、映像信号処理部130と、表示制御部140と、表示パネル150と、可視光通信信号入力部160と、可視光通信信号処理部170と、バックライト制御部180と、バックライト190と、を有する。
図2は、実施の形態1にかかる表示装置のブロック図である。図2において、表示装置100は、映像信号入力部120と、映像信号処理部130と、表示制御部140と、表示パネル150と、可視光通信信号入力部160と、可視光通信信号処理部170と、バックライト制御部180と、バックライト190と、を有する。
映像信号入力部120は、アンテナケーブル、コンポジットケーブル、HDMI(登録商標)(High-Definition Multimedia Interface)ケーブル、PJLinkケーブル、LAN(Local Area Network)ケーブルなどを通じて、表示パネル150に表示される映像に関する映像信号が入力される。映像信号入力部120は、入力された映像信号を、映像信号処理部130に出力する。
なお、映像信号は、記録媒体に保存した映像信号を用いてもよい。
映像信号処理部130は、入力された映像信号に対して復号処理などの一般的な画像処理を施す。映像信号処理部130は、画像処理を施した映像信号を表示制御部140およびバックライト制御部180に送信する。映像信号には、映像の明るさ等に関する情報が含まれている。
表示制御部140は、入力された映像信号に基づいて、表示パネル150の表示面110に映像を表示するように表示パネル150を制御する。より具体的には、表示制御部140は、映像信号処理部130から入力された映像信号に基づいて表示パネル150の液晶の開口制御等を行う。
表示パネル150は、例えば液晶パネルであり、映像を表示する表示面110を有する。
可視光通信信号入力部160は、可視光通信信号専用ケーブルやLANケーブルなどを通じて、可視光通信信号が入力される。
なお、可視光通信信号は、記録媒体に保存した可視光通信信号を用いてもよい。さらに、可視光通信信号は、映像信号と重畳していてもよい。
可視光通信信号入力部160は、入力された可視光通信信号を、可視光通信信号処理部170に出力する。
可視光通信信号処理部170は、入力された可視光通信信号を所定の符号化方法で符号化し、さらに可視光通信信号の送信順序を決定する処理などを行う。可視光通信信号処理部170は、符号化された可視光通信信号をバックライト制御用信号に変換する。可視光通信信号処理部170は、生成したバックライト制御用信号を、バックライト制御部180に出力する。
バックライト制御部180は、バックライト190の発光面を複数の領域に分割し、複数の領域それぞれにおいて発光の制御を行い、発光面の複数の領域それぞれにおいて異なるタイミングで消灯の期間を設ける制御を行う。
バックライト制御部180は、入力された映像信号に含まれる映像の明るさ等に関する情報に基づいてバックライト190の輝度やタイミングを制御する。また、バックライト制御部180は、入力されたバックライト制御用信号に基づいて、バックライト190の発光を制御する。
バックライト190は、表示パネル150の背面に設置され、表示パネル150の表示面110を背面から照明する発光面を有している。バックライト190は、表示パネル150の背面から光を照射する。視聴者は、表示パネル150に表示される映像を視認できる。
本実施の形態において、表示面110全体を可視光通信領域とする。
図3は、可視光通信信号の生成例を説明する図である。図3に示すように、可視光通信信号入力部160に入力される可視光通信信号は、複数の所定長の信号ユニットで構成されている。可視光通信信号処理部170は、信号ユニットを所定数のデータに分割する。図3において、1つの信号ユニットは、データ長の同じ4つのデータで構成されている。すなわち、1つの信号ユニットは、データ1、データ2、データ3、データ4に分割される。1つの信号ユニットの分割は、表示装置100から出力する可視光通信信号の搬送周波数、可視光通信信号の信号ユニットのデータ長に基づいて、更には、バックライト190の発光しない期間等に基づいて決定すればよい。
なお、図3において、1つの信号ユニットを分割するデータのデータ長は同じであるとして説明したが、1つの信号ユニットを分割するデータのデータ長は互いに異なっていても良いし、1つの信号ユニットを分割するデータのうち、一つのデータのデータ長が残りのデータのデータ長と異なっていても良い。
次に、可視光通信信号処理部170は、分割されたデータを符号化し、各データに対してヘッダー部を付加し、送信順序を決定し、ブロックを生成する。具体的には、データ1、データ2、データ3、データ4から、ブロック1、ブロック2、ブロック3、ブロック4を生成する。可視光通信信号処理部170は、バックライト制御用信号として、生成したブロックをブロック1、ブロック2、ブロック3、ブロック4の順でバックライト制御部180へ送信する。
ブロックのヘッダー部は、「プリアンブル」、「アドレス」、「パリティ」で構成される。プリアンブルは、ブロックの始まりを示すパターンであり、データが可視光通信信号であることを示す識別子を含む。例えば、4値パルス位置変調(4PPM:4 Pulse Position Modulation)あるいはi-4PPM(Inverted 4PPM)などの符号化規則から外れた信号を用いる。パリティは、データの誤りを検出するために使用される。アドレスは、信号ユニットにおけるブロックの送信順序を示す。
1つの信号ユニットから生成された4つのブロックを、送信フレームと呼ぶ。
[1-3.受信装置の構成]
図4は、実施の形態1にかかる受信装置のブロック図である。図4において、受信装置200は、撮像部210と、撮像画像生成部220と、撮像画像処理部230と、を有する。
図4は、実施の形態1にかかる受信装置のブロック図である。図4において、受信装置200は、撮像部210と、撮像画像生成部220と、撮像画像処理部230と、を有する。
撮像部210は、表示装置100の可視光通信領域に表示されている映像を撮像する。撮像部210は、例えば、順次露光型のイメージセンサーである。イメージセンサーは撮像を開始すると、順次露光を行い、露光データを撮像画像生成部220へ送る。
撮像画像生成部220は、撮像部210から送られた露光データを内蔵するメモリに一時記憶する。メモリに格納されている露光データに基づいて、撮像画像を生成する。
撮像画像処理部230は、撮像画像生成部220で生成した撮像画像から、可視光通信信号を復元する。
[1-4.可視光通信信号の出力と受信]
次に、表示装置100の可視光通信領域から出力された送信フレームを、受信装置200にて受信する基本的な動作を説明する。
次に、表示装置100の可視光通信領域から出力された送信フレームを、受信装置200にて受信する基本的な動作を説明する。
[1-4-1.バックライトの点灯/消灯に対する撮像画像]
図5は、表示装置100のバックライト190の点灯/消灯に対する受信装置200の撮像画像を説明する図である。
図5は、表示装置100のバックライト190の点灯/消灯に対する受信装置200の撮像画像を説明する図である。
撮像部210は、順次露光型のイメージセンサーであり、1ライン毎に時間的にスキャンしながら露光する。本実施の形態では説明を簡略化するために、イメージセンサーの露光素子が8ラインであるとして説明する。露光ラインは受信装置200の縦長の帯状に構成されているものとする。
図5に示すように、時間経過とともに、表示装置100のバックライト190の点灯と消灯が行われる。イメージセンサーは、1ライン目から8ライン目まで順次露光していき、8ライン目まで順次露光が行われると、受信装置200の撮像画像生成部220は8ラインの露光データに基づいて撮像画像を生成する。ここで、イメージセンサーの順次露光の期間を撮像期間とし、この撮像期間中にイメージセンサーにより順次露光された露光データに基づいて生成された撮像画像を受信フレームLとする。イメージセンサーの露光は、8ライン目まで行われると、1ライン目に戻り、1ライン目から次の露光が開始される。次に生成された撮像画像を受信フレームL+1とする。8ライン目まので露光の終了から、次の1ライン目の露光が開始するまでの間に、露光データをメモリに格納する時間等のブランキング期間が存在し、この時間は、露光していない。
受信フレームLは、受信装置200のイメージセンサーの露光の1ライン目、2ライン目、5ライン目、6ライン目と8ライン目は、表示装置100のバックライト190の点灯時で、各ラインは明るい。受信装置200のイメージセンサーの露光の3ライン目と4ライン目は、表示装置100のバックライト190の消灯時であり、各ラインは暗い。受信フレームLに基づいて可視光通信信号が復元される。
受信フレームL+1は、受信装置200のイメージセンサーの露光の1ライン目、2ライン目、3ライン目、7ライン目と8ライン目は、表示装置100のバックライト190の点灯時で、各ラインは明るい。受信装置200のイメージセンサーの露光の4ライン目、5ライン目と6ライン目は、表示装置100のバックライト190の消灯時であり、各ラインは暗い。受信フレームL+1に基づいて可視光通信信号が復元される。
[1-4-2.送信フレームに対する撮像画像]
図6は、表示装置100の送信フレームに対する受信装置200の撮像画像を説明する概略図である。
図6は、表示装置100の送信フレームに対する受信装置200の撮像画像を説明する概略図である。
図3で説明したように、可視光通信信号は複数の信号ユニットで構成され、1つの信号ユニットは4つのデータに分割され、符号化し、4つのブロックに分割される。
表示装置100の表示面110である可視光通信領域において、映像信号の内容によってバックライト190の点灯/消灯を判別できない期間が発生する場合がある。この期間中に表示装置100から出力される送信フレームを受信装置200は受信できない可能性がある。
そこで、表示装置100のバックライト190から出力される送信フレームは、1つの信号ユニットから生成される送信フレームを複数回繰り返して出力するカルーセル方式を用いる。図6において、表示装置100は、可視光通信信号を1つの信号ユニットとして、送信フレームを2回連続して出力している。
図6に示すように、時間経過とともに、表示装置100のバックライト190の点灯/消灯により送信フレームが出力される。受信装置200のイメージセンサーの露光は、1ライン目から8ライン目まで順次露光していく。イメージセンサーの露光が8ライン目まで行われると、受信装置200の撮像画像生成部220は、8ラインの露光データに基づいて撮像画像を生成する。撮像画像である受信フレームLは、受信装置200のイメージセンサーの露光の1ライン目と2ライン目でブロック1を受信し、3ライン目と4ライン目でブロック2を受信し、5ライン目と6ライン目でブロック3を受信し、7ライン目と8ライン目でブロック4を受信する。受信フレームLは、表示装置100から出力される1つの信号ユニットの1回目の送信フレームに対応する。
また、図6において、撮像画像である受信フレームL+1は、受信装置200のイメージセンサーの露光の1ライン目と2ライン目でブロック1を受信し、3ライン目と4ライン目でブロック2を受信し、5ライン目と6ライン目でブロック3を受信し、7ライン目と8ライン目でブロック4を受信する。受信フレームL+1は、表示装置100から出力される1つの信号ユニットの2回目の送信フレームに対応する。
このように、1つの信号ユニットから生成される送信フレームをカルーセル方式で連続して出力することで、1回目の送信フレームの送信に対し受信障害が発生しても、2回目の送信フレームで、1回目の送信フレームで受信できなかったブロックを受信できる。2回分の送信フレームに対し、全てのブロック、すなわち4つのブロックを受信することで、1つの信号ユニットが復元できる。
また、送信フレームをカルーセル方式で連続して出力する場合、表示装置100は、次の信号ユニットの送信フレームを出力する前に、現在の信号ユニットから次の信号ユニットに切り替わったことを示すリセット信号を出力しても良い。
このリセット信号は、送信フレームのブロックのプリアンブルやデータに含めても良い。
[1-5.可視光通信信号の出力と受信における課題]
次に、可視光通信信号の出力と受信における課題について説明する。図7は、表示装置100の送信クロックの周波数と受信装置200の撮像部210のフレームレートの関係を説明する図である。
次に、可視光通信信号の出力と受信における課題について説明する。図7は、表示装置100の送信クロックの周波数と受信装置200の撮像部210のフレームレートの関係を説明する図である。
本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数は120Hzである。
なお、液晶パネルの種類によっては、駆動周波数が60Hzで動作するものや、駆動周波数が240Hzで動作するものもある。
また、本実施の形態における受信装置200の撮像部210のイメージセンサーのフレームレートは30fps(frame per second)で動作する。
このとき、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係は、互いに整数倍または整数分の一の関係になる。さらに、表示装置100のバックライト制御部180における輝度制御や動画解像度などの制御のために、表示装置100のバックライト190の点灯と消灯のタイミングが液晶パネルの駆動周波数と同期する場合がある。すなわち、図7に示すように、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力されることになる。図7は、このような状況で表示装置100から出力される1つの信号ユニットから生成される送信フレームをカルーセル方式で3回出力する場合を示している。
表示装置100から出力される1回目の送信フレームに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームLを生成する。受信装置200は、受信フレームLから可視光通信信号を復元する。受信フレームLにデータが全て含まれるブロック2、ブロック3のみが可視光通信信号として復元できる。
表示装置100から出力される2回目の送信フレームに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+1を生成する。受信装置200は、受信フレームL+1から可視光通信信号を復元する。受信フレームL+1にデータが全て含まれるブロック2、ブロック3のみが可視光通信信号として復元できる。
表示装置100から出力される3回目の送信フレームに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+2を生成する。受信装置200は、受信フレームL+2から可視光通信信号を復元する。受信フレームL+2にデータが全て含まれるブロック2、ブロック3のみが可視光通信信号として復元できる。
このように、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から出力される1つの信号ユニットに対する送信フレームを液晶パネルの駆動周波数に同期して出力する場合、カルーセル方式で同じ送信フレームを3回出力したとしても、ブロック1、ブロック2、ブロック3、ブロック4のうち、可視光通信信号として復元できるのは、ブロック2、ブロック3のみである。ブロック1とブロック4は可視光通信信号として復元できない。
[1-6.送信フレームの生成方法]
上記課題を解決するために、表示装置100から出力される1つの信号ユニットに含まれる4つのブロックを信装置200で全て可視光通信信号として復元するために、1つの信号ユニットに対してカルーセル方式で複数回出力する送信フレームを毎回同じ送信フレームを用いるのではなく、毎回異なる送信フレームを生成して出力する。すなわち、1つの信号ユニットに対してカルーセル方式で複数回出力する送信フレームを、1つの信号ユニットに対する送信フレームのブロックの送信順序が毎回同じにならないように送信フレームを生成する。
上記課題を解決するために、表示装置100から出力される1つの信号ユニットに含まれる4つのブロックを信装置200で全て可視光通信信号として復元するために、1つの信号ユニットに対してカルーセル方式で複数回出力する送信フレームを毎回同じ送信フレームを用いるのではなく、毎回異なる送信フレームを生成して出力する。すなわち、1つの信号ユニットに対してカルーセル方式で複数回出力する送信フレームを、1つの信号ユニットに対する送信フレームのブロックの送信順序が毎回同じにならないように送信フレームを生成する。
図8は実施の形態1にかかる1つの信号ユニットに対する送信フレームの第1の生成例を説明する図である。図8は、図7の場合と同様、表示装置100から出力される1つの信号ユニットをカルーセル方式で3回出力する場合を示している。図7と異なる点は、表示装置100から出力される3回の送信フレームのブロックの送信順序が同じではなく、毎回異なっている点である。
表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック1、ブロック2、ブロック3、ブロック4である。表示装置100から出力される1回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームLを生成する。受信装置200は、受信フレームLから可視光通信信号を復元する。受信フレームLにデータが全て含まれるブロック2、ブロック3のみが可視光通信信号として復元できる。
表示装置100から出力される2回目の送信フレームのブロックの順は、ブロック2、ブロック3、ブロック4、ブロック1である。表示装置100から出力される2回目の信号ユニットに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+1を生成する。受信装置200は、受信フレームL+1から可視光通信信号を復元する。受信フレームL+1にデータが全て含まれるブロック3、ブロック4のみが可視光通信信号として復元できる。
表示装置100から出力される3回目の送信フレームのブロックの順は、ブロック3、ブロック4、ブロック1、ブロック2である。表示装置100から出力される3回目の送信フレームに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+2を生成する。受信装置200は、受信フレームL+2から可視光通信信号を復元する。受信フレームL+2にデータが全て含まれるブロック4、ブロック1のみが可視光通信信号として復元できる。
液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から送信フレームが液晶パネルの駆動周波数に同期して出力される場合、1つの信号ユニットに対する送信フレームを、ブロックの送信順序を毎回変更してカルーセル方式で3回出力すると、1つの信号ユニットのブロック1、ブロック2、ブロック3、ブロック4の全てを、可視光通信信号として復元できる。
図8の生成例では、表示装置100から出力される送信フレームの2番目と3番目のブロックが可視光通信信号として復元できるブロックであるので、3回の出力で全てのブロックが2番目と3番目に出力するように信号ユニットのブロックの送信順序を変更している。
なお、図8の生成例では、1つの信号ユニットに対してカルーセル方式で複数回出力する送信フレームを、1つの信号ユニットに対する送信フレームのブロックの送信順序が毎回同じにならないように変更したが、これに限らない。1つの信号ユニットに対してカルーセル方式で複数回出力する送信フレームを、1つの信号ユニットに対する隣り合う2つの送信フレームのブロックの送信順序が異なるようにブロックの送信順序を変更するとしてもよい。
さらに、表示装置100から出力される送信フレームの生成例はこれに限らない。
図9Aは、実施の形態1にかかる1つの信号ユニットに対する送信フレームの第2の生成例を説明する図である。
図9Aは、送信フレームのブロックの送信順序を昇順、すなわち、ブロック1、ブロック2、ブロック3、ブロック4の順、と降順、すなわち、ブロック4、ブロック3、ブロック2、ブロック1の順、を繰り返す。
受信装置200の生成する受信フレームが送信フレームの前半部分または後半部分で構成される場合、第2の生成例のような送信フレームをカルーセル方式で複数回出力することで、1つの信号ユニットのブロック1、ブロック2、ブロック3、ブロック4の全てを、可視光通信信号として復元できる。
図9Bは、実施の形態1にかかる1つの信号ユニットに対する送信フレームの第3の生成例を説明する図である。図9Bは、信号ユニットの4つのブロックのうち、1つのブロックを省きかつ送信フレームごとに送信順序を変更する。表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック4を省き、ブロック1、ブロック2、ブロック3、ブロック2である。表示装置100から出力される2回目の送信フレームのブロックの順序は、ブロック2を省き、ブロック3、ブロック4、ブロック1、ブロック3である。表示装置100から出力される3回目の送信フレームのブロックの順序は、ブロック3を省き、ブロック4、ブロック1、ブロック2、ブロック4である。このような送信順序に変更し、すべてのブロックを同じ回数送信することができる。
図9Cは、実施の形態1にかかる1つの信号ユニットに対する送信フレームの第4の生成例を説明する図である。図9Cは、信号ユニットのブロックをブロック1、ブロック2、ブロック3、ブロック4の順に並べ、その中に1つのブロックを追加する。表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック1を追加し、ブロック1、ブロック1、ブロック2、ブロック3である。表示装置100から出力される2回目の送信フレームのブロックの順序は、1回目に含まれなかったブロック4から始め、ブロック2を追加し、ブロック4、ブロック1、ブロック2、ブロック2の順である。表示装置100から出力される3回目の送信フレームのブロックの順序は、2回目に含まれなかったブロック3から始め、ブロック3、ブロック4、ブロック1、ブロック2の順である。
このように、第4の生成例のような送信フレームをカルーセル方式で複数回出力するうちに、1つの信号ユニットのブロック1、ブロック2、ブロック3、ブロック4の全てを、可視光通信信号として復元できる。
図9Dは、実施の形態1にかかる1つの信号ユニットに対する送信フレームの第5の生成例を説明する図である。図9Dは、信号ユニットのブロックの順序をランダム変更する。表示装置100から出力される1回目の送信フレームのブロックの順は、ブロック1、ブロック3、ブロック2、ブロック4である。表示装置100から出力される2回目の送信フレームのブロックの順は、ブロック3、ブロック1、ブロック2、ブロック4である。表示装置100から出力される3回目の送信フレームのブロックの順は、ブロック2、ブロック3、ブロック1、ブロック4である。1つの信号ユニットに対する送信フレームのブロックの順序をランダムに変更してカルーセル方式で複数回出力するうちに、1つの信号ユニットのブロック1、ブロック2、ブロック3、ブロック4の全てを、可視光通信信号として復元できる。
図9Eは、実施の形態1にかかる1つの信号ユニットに対する送信フレームの第6の生成例を説明する図である。図9Eは、1つの送信フレームにおいて、同一ブロックを2回連続する。表示装置100から出力される1回目の送信フレームのブロックの順は、ブロック1、ブロック1、ブロック2、ブロック2である。表示装置100から出力される2回目の送信フレームのブロックの順は、ブロック3、ブロック3、ブロック4、ブロック4である。表示装置100から出力される3回目の送信フレームのブロックの順は、ブロック1、ブロック1、ブロック2、ブロック2である。
[1-7.可視光通信信号処理部の動作]
次に、表示装置100の可視光通信信号処理部170の動作を説明する。図10は、表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
次に、表示装置100の可視光通信信号処理部170の動作を説明する。図10は、表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
(ステップS1001)可視光通信信号処理部170は、可視光通信信号入力部160から可視光通信信号の入力の有無を判定する。可視光通信信号の入力が「有り」と判断された場合(Yesの場合)、ステップS1002へ処理を進める。可視光通信信号の入力が「無し」と判断された場合(Noの場合)、ステップS1001の処理を繰り返す。
(ステップS1002)入力された可視光通信信号は複数の信号ユニットで構成されている。可視光通信信号処理部170は、1つの信号ユニットを読み込む。
(ステップS1003)可視光通信信号処理部170は、読み込んだ1つの信号ユニットに対し、所定数のデータに分割し、各データを符号化し、各データに対しヘッダー部を付加し、ブロックを生成する。
(ステップS1004)可視光通信信号処理部170は、生成したブロックに基づいて、カルーセル方式で送信する複数の送信フレームのそれぞれの送信フレームに含めるブロックの送信順序を決定する。
(ステップS1005)可視光通信信号処理部170は、複数の送信フレームを生成し、バックライト制御部180に出力する。
(ステップS1006)可視光通信信号処理部170は、残りの信号ユニットの有無を判定する。残りの信号ユニットが「有り」と判定された場合(Yesの場合)は、ステップS1001に戻る。残りの信号ユニットが「無し」と判定された場合(Noの場合)は、処理を終了する。
[1-8.効果等]
以上のように、本実施の形態における表示装置は、複数の信号ユニットで構成される可視光通信信号をカルーセル方式で出力可能な表示装置であって、映像信号を表示する表示パネルと、信号ユニットを符号化し、複数のブロックに分割し、複数のブロックを用いて送信フレームを複数生成してバックライト制御信号とする可視光通信処理部と、バックライト制御信号に基づいて、表示パネルを背面から発光するバックライトと、を備える。可視光通信処理部で生成された1つの信号ユニットに対する複数の送信フレームは、少なくとも2つの送信フレームの複数のブロックの順序が異なる。
以上のように、本実施の形態における表示装置は、複数の信号ユニットで構成される可視光通信信号をカルーセル方式で出力可能な表示装置であって、映像信号を表示する表示パネルと、信号ユニットを符号化し、複数のブロックに分割し、複数のブロックを用いて送信フレームを複数生成してバックライト制御信号とする可視光通信処理部と、バックライト制御信号に基づいて、表示パネルを背面から発光するバックライトと、を備える。可視光通信処理部で生成された1つの信号ユニットに対する複数の送信フレームは、少なくとも2つの送信フレームの複数のブロックの順序が異なる。
これにより、表示装置100は、1つの信号ユニットに対しブロックの送信順序の異なる複数の送信フレームを出力することで、受信装置200は可視光通信信号を復元できる。
また、本実施の形態における表示装置は、可視光通信処理部で生成された1つの信号ユニットに対する複数の送信フレームは、少なくとも隣接する2つの送信フレームに同一のブロックを含む。
これにより、表示装置100は、1つの信号ユニットに対し少なくとも隣接する2つの送信フレームに同一のブロックを含めることで、受信装置200は可視光通信信号を復元できる。
また、本実施の形態における表示装置は、可視光通信処理部で生成された1つの信号ユニットに対する複数の送信フレームは、少なくとも1つの送信フレームに、同一のブロックを複数個含み、複数の送信フレームで複数のブロックを全て含む。
これにより、表示装置100は、1つの送信フレームに同一のブロックを複数項含め、複数の送信フレームでブロックを全て含めることで、受信装置200は可視光通信信号を復元できる。
また、本実施の形態における表示装置は、可視光通信信号処理部は、隣接する2つの信号ユニットの間にリセット信号を挿入する。
これにより、表示装置100は、現在の信号ユニットから次の信号ユニットに切り替わったことを示すことができる。
本実施の形態の表示装置100は、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から送信フレームが液晶パネルの駆動周波数に同期して出力される場合に、特に有効である。
なお、本実施の形態において、表示装置100からカルーセル方式で出力する送信フレームの送信回数を3回として説明したが、これに限らない。カルーセル方式で出力する送信フレームの送信回数は、複数回であれば、何回でもよい。
(実施の形態2)
以下、実施の形態2について、図11~図13を用いて説明する。
以下、実施の形態2について、図11~図13を用いて説明する。
[2-1.可視光通信システムの構成]
本実施の形態における可視光通信システムは、実施の形態1で説明した可視光通信システム10と同じ構成である。本実施の形態における可視光通信システムにおいて異なる点を中心に説明する。
本実施の形態における可視光通信システムは、実施の形態1で説明した可視光通信システム10と同じ構成である。本実施の形態における可視光通信システムにおいて異なる点を中心に説明する。
[2-2.映像の明暗と可視光通信信号の出力の関係]
本実施の形態における表示装置100の表示パネル150は、液晶パネルである。液晶パネルは、映像を表示する際に、表示面110の液晶のシャッターを開閉する、或いは階調性の制御とバックライト190の制御を行うことで、映像として視認する。
本実施の形態における表示装置100の表示パネル150は、液晶パネルである。液晶パネルは、映像を表示する際に、表示面110の液晶のシャッターを開閉する、或いは階調性の制御とバックライト190の制御を行うことで、映像として視認する。
そのため、バックライト190が非常に明るい設定であっても、映像信号が暗い場合、可視光通信領域に暗い領域ができる。映像信号の暗い領域は、表示パネル150の液晶のシャッターによってバックライト190の光が遮蔽される。暗い領域に可視光通信信号を出力する場合は、受信装置200の撮像部210で撮像された撮像画像から可視光通信信号を復元できないことがある。
そこで、本実施の形態では、表示装置100の表示面110全体である可視光通信領域に対して、所定以上の明るさを有する領域である高輝度領域の割合が小さい場合は、1つの信号ユニットに含まれるブロックの送信回数を複数回出力することで、可視光通信信号を復元できるようにする。逆に、可視光通信領域に対して、高輝度領域の割合が大きい場合は、高輝度領域の割合が小さい場合に比べて1つの信号ユニットに含まれるブロックの送信回数を減らす、または1つの信号ユニットに含まれるブロックの送信回数は1回にする。
[2-3.可視光通信信号処理部の動作]
実施の形態2の実施の形態1と異なる点は主に可視光通信信号処理部170の動作である。次に、可視光通信信号処理部170の動作を説明する。図11は、実施の形態2にかかる表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
実施の形態2の実施の形態1と異なる点は主に可視光通信信号処理部170の動作である。次に、可視光通信信号処理部170の動作を説明する。図11は、実施の形態2にかかる表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
ステップS1001~ステップS1003までの動作は、実施の形態1の動作と同じである。
(ステップS1101)可視光通信信号処理部170は、可視光通信領域の高輝度領域を、映像信号処理部130より入力された映像信号から検出する。可視光通信信号処理部は、可視光通信領域における高輝度領域の割合に基づいて送信ユニットの各ブロックの送信回数を決定する。送信回数の決定方法は、後述する。
(ステップS1102)可視光通信信号処理部170は、信号ユニットの各ブロックの送信回数に基づいて、ブロックの送信順序を決定する。ブロックの送信順序の決定方法は後述する。
ステップS1005、ステップS106の動作は、実施の形態1の動作と同じである。
[2-4.ブロックの送信回数の決定方法]
次に、ブロックの送信回数の決定方法について説明する。図12は、1つの信号ユニットに対する送信フレームの任意のブロックの送信回数を決定する方法の一例を説明する図である。
次に、ブロックの送信回数の決定方法について説明する。図12は、1つの信号ユニットに対する送信フレームの任意のブロックの送信回数を決定する方法の一例を説明する図である。
図12において、横軸は、可視光通信領域の高輝度領域の割合であり、縦軸は、信号ユニットにおける任意のブロックの送信回数を示している。
図12は、可視光通信領域のうち、高輝度領域が約80%以上であれば、信号ユニットにおける任意のブロックの送信回数は1回で、受信装置200で可視光通信信号を復元できると想定し、可視光通信領域のうち、高輝度領域の割合が小さくなるに従って、信号ユニットにおける任意のブロックの送信回数を増やすことで、受信装置200で可視光通信信号を復元できると想定する。具体的には、可視光通信領域のうち、高輝度領域が90%(A点)であれば、信号ユニットにおける任意のブロックの送信回数は1回、可視光通信領域のうち、高輝度領域が50%(B点)であれば、信号ユニットにおける任意のブロックの送信回数は3回、可視光通信領域のうち、高輝度領域が10%(C点)であれば、信号ユニットにおける任意のブロックの送信回数は6回とする。図12において、信号ユニットにおける任意のブロックの送信回数は、可視光通信領域のうち、高輝度領域の割合が80%から約15%の割合で、信号ユニットにおける任意のブロックの送信回数を1回ずつ増やしている。
なお、送信回数の割合は、これに限らず適宜変更してもよい。
[2-5.ブロックの送信順序の決定方法]
次に、1つの信号ユニットに対するブロックの送信順序の決定方法について説明する。図13は、実施の形態2にかかる1つの信号ユニットに対する送信フレームの生成例を説明する図である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数は120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。図13において、表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で3回出力する場合を示している。1つの信号ユニットは、データ長の同じ6つのデータで構成され、符号化され6つのブロックが生成されるものとする。
次に、1つの信号ユニットに対するブロックの送信順序の決定方法について説明する。図13は、実施の形態2にかかる1つの信号ユニットに対する送信フレームの生成例を説明する図である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数は120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。図13において、表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で3回出力する場合を示している。1つの信号ユニットは、データ長の同じ6つのデータで構成され、符号化され6つのブロックが生成されるものとする。
図13において、1つの信号ユニットに対する3回の送信フレームに含むブロックの送信回数を可視光通信領域の高輝度領域の割合に応じて、決定している。
表示装置100から出力される1回目の送信フレームは、高輝度領域の割合が80%であることから、信号ユニットの任意のブロックの送信回数は1回である。従って、表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック1、ブロック2、ブロック3、ブロック4、ブロック5、ブロック6である。表示装置100から出力される1回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームLを生成する。受信装置200は、受信フレームLから可視光通信信号を復元する。受信フレームLにデータが全て含まれるブロック2、ブロック3、ブロック4、ブロック5が可視光通信信号として復元できる。
次に、表示装置100から出力される2回目の送信フレームは、高輝度領域の割合が50%であることから、信号ユニットの任意のブロックの送信回数は、3回である。従って、表示装置100から出力される2回目の送信フレームのブロックの順序は、ブロック1、ブロック2を順に3回繰り返している。表示装置100から出力される2回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+1を生成する。受信フレームL+1のうち、高輝度領域でない領域のブロックは、復元できない。受信装置200は、受信フレームL+1から可視光通信信号を復元する。受信フレームL+1にデータが全て含まれるブロック1、ブロック2が可視光通信信号として復元できる。
次に、表示装置100から出力される3回目の送信フレームは、高輝度領域の割合が10%であることから、信号ユニットの任意のブロックの送信回数は6回である。表示装置100から出力される3回目の送信フレームのブロックの順序は、ブロック6を連続して6回繰り返す。表示装置100から出力される3回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+2を生成する。受信フレームL+2のうち、高輝度領域でない領域のブロックは、復元できない。受信装置200は、受信フレームL+2から可視光通信信号を復元する。受信フレームL+2にデータが全て含まれるブロック6が可視光通信信号として復元できる。
1つの信号ユニットに対する送信フレームを、高輝度領域の割合に基づいてブロックの送信順序を決定してカルーセル方式で3回出力すると、1つの信号ユニットのブロック1、ブロック2、ブロック3、ブロック4、ブロック5、ブロック6の全てを、可視光通信信号として復元できる。
[2-6.効果等]
以上のように、本実施の形態の表示装置は、可視光通信処理部は、表示パネルの所定以上の輝度を有する領域を検出し、領域の大きさに応じて、送信フレームに含める同一のブロックの個数を決定し、信号ユニットに対する複数の送信フレームを生成する。
以上のように、本実施の形態の表示装置は、可視光通信処理部は、表示パネルの所定以上の輝度を有する領域を検出し、領域の大きさに応じて、送信フレームに含める同一のブロックの個数を決定し、信号ユニットに対する複数の送信フレームを生成する。
これにより、表示装置100は、1つの信号ユニットに対し高輝度領域の割合に応じてブロックの送信回数を変更して複数の送信フレームを出力することで、受信装置200は可視光通信信号を復元できる。
なお、本実施の形態では表示装置100から出力する1つの信号ユニットに対して、カルーセル方式で3回の送信フレームを出力したが、これに限らない。例えば、カルーセル方式で3回以上の送信フレームを出力し、その組み合わせとして2回目の送信フレームのブロックの順序として、ブロック1、ブロック2を3回繰り返す組み合わせを変更した送信フレームを用いてもよい。
本実施の形態の表示装置100は、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から送信フレームが液晶パネルの駆動周波数に同期して出力される場合に、特に有効である。
(実施の形態3)
以下、実施の形態3について、図14~図17を用いて説明する。
以下、実施の形態3について、図14~図17を用いて説明する。
[3-1.可視光通信システムの構成]
本実施の形態における可視光通信システムは、実施の形態1で説明した可視光通信システム10と同じ構成である。本実施の形態における可視光通信システムにおいて異なる点を中心に説明する。
本実施の形態における可視光通信システムは、実施の形態1で説明した可視光通信システム10と同じ構成である。本実施の形態における可視光通信システムにおいて異なる点を中心に説明する。
[3-2.表示装置からの距離との可視光通信信号の送信の関係]
表示装置100と受信装置200の距離が相対的に近い場合と遠い場合を比較する。表示装置100と受信装置200の距離が相対的に近い場合は、表示装置100と受信装置200の距離が相対的に遠い場合に比べて、受信装置200で撮像した撮像画像に含まれるブロックが多くなる。
表示装置100と受信装置200の距離が相対的に近い場合と遠い場合を比較する。表示装置100と受信装置200の距離が相対的に近い場合は、表示装置100と受信装置200の距離が相対的に遠い場合に比べて、受信装置200で撮像した撮像画像に含まれるブロックが多くなる。
これは、表示装置100と受信装置200の距離が相対的に近い場合、受信装置200の撮像部210で生成できる撮像画像は相対的に大きくなり、表示装置100と受信装置200の距離が相対的に遠い場合、受信装置200の撮像部210で生成できる撮像画像は相対的に小さくなるためである。
そこで、本実施の形態における表示装置100は、受信装置200との距離に応じて、1つの信号ユニットの送信フレームの任意のブロックの送信回数を変更する。
[3-3.可視光通信信号処理部の動作]
実施の形態3の実施の形態1と異なる点は主に可視光通信信号処理部170の動作である。可視光通信信号処理部170の動作を説明する。図14は、実施の形態3にかかる表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
実施の形態3の実施の形態1と異なる点は主に可視光通信信号処理部170の動作である。可視光通信信号処理部170の動作を説明する。図14は、実施の形態3にかかる表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
ステップS1001~ステップS1003までの動作は、実施の形態1の動作と同じである。
(ステップ1401)可視光通信信号処理部170は、受信装置200との距離に応じて、送信ユニットの各ブロックの送信回数を決定する。送信回数の決定方法は、後述する。
(ステップ1402)可視光通信信号処理部170は、信号ユニットの各ブロック送信回数に基づいて、ブロックの送信順序を決定する。送信順序の決定方法は、後述する。
ステップS1005、ステップS1006の動作は、実施の形態1の動作と同じである。
[3-4.ブロックの送信回数の決定方法]
次に、ブロックの送信回数の決定方法について説明する。図15は、1つの信号ユニットに対する送信フレームの任意のブロックの送信回数を決定する方法の一例を説明する図である。
次に、ブロックの送信回数の決定方法について説明する。図15は、1つの信号ユニットに対する送信フレームの任意のブロックの送信回数を決定する方法の一例を説明する図である。
図15において、横軸は、表示装置100と受信装置200の距離であり、縦軸は、信号ユニットにおける任意のブロックの送信回数を示している。距離が近い場合は、信号ユニットの各ブロックの送信回数を少なくする。図15において、距離が3m以下であれば信号ユニットの各ブロックの送信回数を1回にする。
距離が遠い場合は、信号ユニットの各ブロック送信回数を多くする。図15において、距離が3m以上より2mの割合で1回ずつ信号ユニットの各ブロックの送信回数を増やしている。
なお、この割合は適宜変更してもよい。
[3-5.ブロックの送信順序の決定方法]
次に、1つの信号ユニットに対するブロックの送信順序の決定方法について説明する。図16は、実施の形態3にかかる表示装置100から出力される1つの信号ユニットに対する送信フレームの生成例を説明する図である。図16は、距離が3mの場合である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数が、120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。図16において、表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で4回送信する場合を示している。1つの信号ユニットは、データ長の同じ4つのデータで構成され、符号化され4つのブロックが生成されるものとする。
次に、1つの信号ユニットに対するブロックの送信順序の決定方法について説明する。図16は、実施の形態3にかかる表示装置100から出力される1つの信号ユニットに対する送信フレームの生成例を説明する図である。図16は、距離が3mの場合である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数が、120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。図16において、表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で4回送信する場合を示している。1つの信号ユニットは、データ長の同じ4つのデータで構成され、符号化され4つのブロックが生成されるものとする。
図15において、距離が3mの場合は、信号ユニットの1つの送信フレームの任意のブロックの送信回数は2回である。従って、図16に示すように、1つの送信フレームに任意のブロックを2回ずつ送信する。
表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック1、ブロック2がそれぞれ2回出力されるように、ブロック1、ブロック1、ブロック2、ブロック2である。表示装置100から出力される1回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームLを生成する。受信装置200は、受信フレームLから可視光通信信号を復元する。受信フレームLにデータが全て含まれるブロック1、ブロック2が可視光通信信号として復元できる。
表示装置100から出力される2回目の送信フレームのブロックの順序は、ブロック3、ブロック4がそれぞれ2回出力されるように、ブロック3、ブロック3、ブロック4、ブロック4である。表示装置100から出力される2回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+1を生成する。受信装置200は、受信フレームL+1から可視光通信信号を復元する。受信フレームL+1にデータが全て含まれるブロック3、ブロック4が可視光通信信号として復元できる。
表示装置100から出力される3回目の送信フレームのブロックの順序は、ブロック1、ブロック2がそれぞれ2回出力されるように、ブロック1、ブロック1、ブロック2、ブロック2である。表示装置100から出力される3回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+2を生成する。受信装置200は、受信フレームL+2から可視光通信信号を復元する。受信フレームL+2にデータが全て含まれるブロック1、ブロック2が可視光通信信号として復元できる。
表示装置100から出力される4回目の送信フレームのブロックの順序は、ブロック3、ブロック4がそれぞれ2回出力されるように、ブロック3、ブロック3、ブロック4、ブロック4である。表示装置100から出力される4回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+3を生成する。受信装置200は、受信フレームL+3から可視光通信信号を復元する。受信フレームL+3にデータが全て含まれるブロック3、ブロック4が可視光通信信号として復元できる。
以上のように、各受信フレームは、送信フレームに含まれる任意のブロックが2回出力される内の1つのブロックを受信できる。すなわち、各受信フレームから異なる2個のブロックを受信できる。
図17は、実施の形態3にかかる表示装置から出力される1つの信号ユニットに対する送信フレームの別の生成例を説明する図である。図17は、距離が8mの場合である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数が、120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。図17において、表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で4回送信する場合を示している。1つの信号ユニットは、データ長の同じ4つのデータで構成され、符号化され4つのブロックが生成されるものとする。
図15において、距離が8mの場合は、信号ユニットの1つの送信フレームの任意のブロックの送信回数は4回である。従って、図17に示すように、1つの送信フレームに任意のブロックを4回ずつ送信する。
表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック1を4回出力する。表示装置100から出力される1回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームLを生成する。受信装置200は、受信フレームLから可視光通信信号を復元する。受信フレームLにデータが全て含まれるブロック1が可視光通信信号として復元できる。
表示装置100から出力される2回目の送信フレームのブロックの順序は、ブロック2を4回出力する。表示装置100から出力される2回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+1を生成する。受信装置200は、受信フレームL+1から可視光通信信号を復元する。受信フレームL+1にデータが全て含まれるブロック2が可視光通信信号として復元できる。
表示装置100から出力される3回目の送信フレームのブロックの順序は、ブロック3を4回出力する。表示装置100から出力される3回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+2を生成する。受信装置200は、受信フレームL+2から可視光通信信号を復元する。受信フレームL+2にデータが全て含まれるブロック3が可視光通信信号として復元できる。
表示装置100から出力される4回目の送信フレームのブロックの順序は、ブロック4を4回出力する。表示装置100から出力される4回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+3を生成する。受信装置200は、受信フレームL+3から可視光通信信号を復元する。受信フレームL+3にデータが全て含まれるブロック4が可視光通信信号として復元できる。
以上のように、各受信フレームは、送信フレームに含まれる任意のブロックが4回出力される内の1つのブロックを受信できる。すなわち、各受信フレームから1個のブロックを受信できる。
[3-6.効果等]
以上のように、本実施の形態において、可視光通信処理部は、表示装置と出力された可視光通信信号を受信可能な受信装置との距離に応じて、送信フレームに含める同一ブロックの個数を決定し、信号ユニットに対する複数の送信フレームを生成する。
以上のように、本実施の形態において、可視光通信処理部は、表示装置と出力された可視光通信信号を受信可能な受信装置との距離に応じて、送信フレームに含める同一ブロックの個数を決定し、信号ユニットに対する複数の送信フレームを生成する。
これにより、表示装置100は、表示装置100と受信装置200の距離に応じて、ブロックの送信回数を変更して複数の送信フレームを出力することで、受信装置200は可視光通信信号を復元できる。
本実施の形態の表示装置100は、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から送信フレームが液晶パネルの駆動周波数に同期して出力される場合に、特に有効である。
なお、表示装置100と受信装置200の距離は、表示装置100であらかじめ設定でき、さらに、用途や、表示装置100の設置状況によって適宜変更することが望ましい。
受信装置200は、距離の指定を、Wi-Fi(Wireless Fidelity)、Bluetooth(登録商標)、LTE(Long Term Evolution)などの無線通信を通して表示装置100に設定の要求をしてもよい。
さらに、距離は、表示装置100または受信装置200のいずれか一方で、センサーやカメラを用いて推定してもよい。
また、本実施の形態では、生成した送信フレームは一例であり、これに限定されない。
また、本実施の形態においては、送信フレームに2つのブロックを複数回出力する場合、同じ回数にしたが、同じ回数にしなくてもよい。
(実施の形態4)
以下、実施の形態4について、図18~図20を用いて説明する。
以下、実施の形態4について、図18~図20を用いて説明する。
[4-1.可視光通信システムの構成]
本実施の形態における可視光通信システムは、実施の形態1で説明した可視光通信システム10と同じ構成である。本実施の形態における可視光通信システムにおいて異なる点を中心に説明する。
本実施の形態における可視光通信システムは、実施の形態1で説明した可視光通信システム10と同じ構成である。本実施の形態における可視光通信システムにおいて異なる点を中心に説明する。
[4-2.ブランクの挿入]
図18は、実施の形態4にかかる1つの信号ユニットに対する送信フレームの生成例を説明する図である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数は120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で4回出力する。1つの信号ユニットは、データ長の同じ4つのデータで構成され、符号化され4つのブロックが生成される。
図18は、実施の形態4にかかる1つの信号ユニットに対する送信フレームの生成例を説明する図である。本実施の形態における表示装置100の表示パネル150である液晶パネルの駆動周波数は120Hzであり、受信装置200の撮像部210のイメージセンサーのフレームレートは30fpsで動作する。さらに、液晶パネルの駆動周波数に同期して、表示装置100の送信フレームが出力される。表示装置100から出力される可視光通信信号の1つの信号ユニットをカルーセル方式で4回出力する。1つの信号ユニットは、データ長の同じ4つのデータで構成され、符号化され4つのブロックが生成される。
本実施の形態において、同じブロックが同じ位置にならないように、送信フレームに、ブロックと同じサイズのブランクを挿入する。
図18において、表示装置100から出力される1回目の送信フレームは、ブロック1、ブロック2、ブロック3、ブロック4、ブランクの順である。表示装置100から出力される1回目の送信フレームに対し、受信装置200は1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームLを生成する。受信装置200は、受信フレームLから可視光通信信号を復元する。受信フレームLにデータが全て含まれるブロック2、ブロック3のみが可視光通信信号として復元できる。
表示装置100から出力される2回目の送信フレームは、ブロック1、ブロック2、ブロック3、ブロック4、ブランクの順である。表示装置100から出力される2回目の信号ユニットに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+1を生成する。受信装置200は、受信フレームL+1から可視光通信信号を復元する。受信フレームL+1にデータが全て含まれるブロック1、ブロック2のみが可視光通信信号として復元できる。
表示装置100から出力される3回目の送信フレームは、ブロック1、ブロック2、ブロック3、ブロック4、ブランクの順である。表示装置100から出力される3回目の送信フレームに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+2を生成する。受信装置200は、受信フレームL+2から可視光通信信号を復元する。受信フレームL+2にデータが全て含まれるブロック1のみが可視光通信信号として復元できる。
表示装置100から出力される4回目の送信フレームは、ブロック1、ブロック2、ブロック3、ブロック4、ブランクの順である。表示装置100から出力される4回目の送信フレームに対し、1フレームレートの撮像期間にイメージセンサーの露光を行う。受信装置200は、露光データに基づいて撮像画像である受信フレームL+3を生成する。受信装置200は、受信フレームL+3から可視光通信信号を復元する。受信フレームL+3にデータが全て含まれるブロック4のみが可視光通信信号として復元できる。
なお、挿入するブランクの信号パターンは、信号ユニットに含まれるデータと異なるパターンであれば、何でもよい。
以上のように、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から送信フレームが液晶パネルの駆動周波数に同期して出力される場合、1つの信号ユニットに対する送信フレームにブランクを挿入することで表示装置100のバックライト190の点灯と消灯のタイミングが液晶パネルの駆動周波数と同期することを避け、4回とも同じ送信フレームを出力しても、1つの信号ユニットのブロック1、ブロック2、ブロック3、ブロック4の全てを、可視光通信信号として復元できる。
また、挿入するブランクのサイズをブロックのサイズと同じにすることで、映像信号の輝度の揺れを防ぐことができる上、輝度調整期間としても有効である。
なお、挿入するブランクのサイズをブロックのサイズと同じにする、として説明したが、これに限らない。表示装置100のバックライト190の点灯と消灯のタイミングが液晶パネルの駆動周波数と同期しないように、挿入するブランクのサイズを決定すればよい。
なお、挿入するブランクのサイズは、常に同じサイズでなくてもよい。
さらに、ブランクが挿入された送信フレームの生成例はこれに限らない。
図19Aは、実施の形態4にかかる1つの信号ユニットに対する送信フレームの第2の生成例を説明する図である。
図19Aは、送信フレームの一番後ろにブランクを挿入し、かつ送信フレームのブロックの送信順序を実施の形態1で説明したように、毎回異ならせている。すなわち、表示装置100から出力される1回目の送信フレームのブロックの順序は、ブロック1、ブロック2、ブロック3、ブロック3、ブランクである。表示装置100から出力される2回目の送信フレームは、ブロック4、ブロック3、ブロック2、ブロック1、ブランクの順である。表示装置100から出力される3回目の送信フレームは、ブロック2、ブロック3、ブロック4、ブロック1、ブランクの順である。
図19Bは、実施の形態4にかかる1つの信号ユニットに対する送信フレームの第3の生成例を説明する図である。
図19Bは、送信フレームの各ブロックの後にブランクを挿入する。すなわち、表示装置100から出力される送信フレームは、ブロック1、ブランク、ブロック2、ブランク、ブロック3、ブランク、ブロック4、ブランクの順である。挿入するブランクのサイズは、ブロック長×α(0<α≦1の小数)であり、表示装置100のバックライト190の点灯と消灯のタイミングが液晶パネルの駆動周波数と同期しないようにαを決定する。
図19Cは、実施の形態4にかかる1つの信号ユニットに対する送信フレームの第4の生成例を説明する図である。
図19Cは、送信フレームの任意のブロックの後にブランクを挿入する。すなわち、表示装置100から出力される送信フレームは、ブロック1、ブランク、ブロック2、ブランク、ブロック3、ブロック4の順である。
[4-3.可視光通信信号処理部の動作]
実施の形態4の実施の形態1と異なる点は主に可視光通信信号処理部170の動作である。次に、可視光通信信号処理部170の動作を説明する。図20は、実施の形態4にかかる表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
実施の形態4の実施の形態1と異なる点は主に可視光通信信号処理部170の動作である。次に、可視光通信信号処理部170の動作を説明する。図20は、実施の形態4にかかる表示装置100の可視光通信信号処理部170の動作を説明するフローチャートである。
ステップS1001~ステップS1002までの動作は、実施の形態1の動作と同じである。
(ステップ2001)可視光通信信号処理部170は、送信ユニットのブランクを挿入する位置を決定する。
(ステップ2002)可視光通信信号処理部170は、ブランクのサイズを決定する。
ステップS1003~ステップS106の動作は、実施の形態1の動作と同じである。
[4-4.効果等]
以上のように、本実施の形態の表示装置は、可視光通信処理部は、1つの信号ユニットに対する複数の送信フレームのうち少なくとも1つの送信フレームにブランクを挿入する。
以上のように、本実施の形態の表示装置は、可視光通信処理部は、1つの信号ユニットに対する複数の送信フレームのうち少なくとも1つの送信フレームにブランクを挿入する。
これにより、1つの信号ユニットに対する送信フレームにブランクを挿入することで表示装置100のバックライト190の点灯と消灯のタイミングが液晶パネルの駆動周波数と同期することを避け、受信装置200は可視光通信信号を復元できる。
本実施の形態の表示装置100は、液晶パネルの駆動周波数とイメージセンサーのフレームレートの関係が、互いに整数倍または整数分の一の関係であり、表示装置100から送信フレームが液晶パネルの駆動周波数に同期して出力される場合に、特に有効である。
(他の実施の形態)
以上のように、本開示の技術の例示として、実施の形態1~4を説明した。本開示の技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施の形態にも適用できる。また、上記実施の形態1~4で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
以上のように、本開示の技術の例示として、実施の形態1~4を説明した。本開示の技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施の形態にも適用できる。また、上記実施の形態1~4で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
なお、本開示の表示装置は、液晶パネルの駆動周波数に同期して送信フレームが出力される場合の送信フレームの生成例を示したが、これに限定されない。
例えば、表示装置から液晶パネルの駆動周波数に同期しないで送信フレームが出力される場合でも、送信フレームが出力される搬送周波数がイメージセンサーの周波数の整数倍となる場合は、本実施の形態が有効である。
また、表示装置の表示パネルが液晶パネルである場合について説明したが、これに限定されない。
例えば、表示装置が、画像フィルムが背面からLEDなどの照明で照らされるような看板であっても、表示装置から出力される送信フレームの搬送周波数が受信装置のイメージセンサーの周波数の整数倍となった場合は、本実施の形態が有効である。
本開示にかかる表示装置は、可視光通信信号を出力可能な表示装置、例えば、家庭におけるテレビ、パーソナルコンピュータ、タブレット端末などの機器、外出先でのサイネージ端末や、情報端末、情報表示機器に適用可能である。
10 可視光通信システム
100 表示装置
110 表示面
120 映像信号入力部
130 映像信号処理部
140 表示制御部
150 表示パネル
160 可視光通信信号入力部
170 可視光通信信号処理部
180 バックライト制御部
190 バックライト
100 表示装置
110 表示面
120 映像信号入力部
130 映像信号処理部
140 表示制御部
150 表示パネル
160 可視光通信信号入力部
170 可視光通信信号処理部
180 バックライト制御部
190 バックライト
Claims (8)
- 複数の信号ユニットで構成される可視光通信信号をカルーセル方式で出力可能な表示装置であって、
映像信号を表示する表示パネルと、
前記信号ユニットを符号化し、複数のブロックに分割し、前記複数のブロックを用いて送信フレームを複数生成してバックライト制御信号とする可視光通信処理部と、
前記バックライト制御信号に基づいて、前記表示パネルを背面から発光するバックライトと、を備え、
前記可視光通信処理部で生成された1つの前記信号ユニットに対する複数の前記送信フレームは、少なくとも2つの前記送信フレームの前記複数のブロックの順序が異なる、
表示装置。 - 前記可視光通信処理部で生成された1つの前記信号ユニットに対する複数の前記送信フレームは、少なくとも隣接する2つの前記送信フレームに同一のブロックを含む、
請求項1に記載の表示装置。 - 前記可視光通信処理部で生成された1つの前記信号ユニットに対する複数の前記送信フレームは、少なくとも1つの前記送信フレームに、同一のブロックを複数個含み、複数の前記送信フレームで前記複数のブロックを全て含む、
請求項1に記載の表示装置。 - 前記可視光通信処理部は、前記表示パネルの所定以上の輝度を有する領域を検出し、前記領域の大きさに応じて、前記送信フレームに含める同一のブロックの個数を決定し、前記信号ユニットに対する複数の前記送信フレームを生成する、
請求項3に記載の表示装置。 - 前記可視光通信処理部は、前記表示装置と出力された前記可視光通信信号を受信可能な受信装置との距離に応じて、前記送信フレームに含める同一ブロックの個数を決定し、前記信号ユニットに対する複数の前記送信フレームを生成する、
請求項3に記載の表示装置。 - 前記可視光通信信号処理部は、隣接する2つの前記信号ユニットの間にリセット信号を挿入する、
請求項1に記載の表示装置。 - 前記可視光通信処理部は、1つの前記信号ユニットに対する複数の前記送信フレームのうち少なくとも1つの前記送信フレームにブランクを挿入する、
請求項1に記載の表示装置。 - 複数の信号ユニットで構成される可視光通信信号をカルーセル方式で出力可能な表示方法であって、
前記信号ユニットを符号化し、複数のブロックに分割し、前記複数のブロックを用いてカルーセル方式で出力するための送信フレームを複数生成し、バックライト制御信号として出力する第1のステップと、
前記バックライト制御信号に基づいてバックライトを制御する第2のステップと、
前記第1のステップで生成された1つの前記信号ユニットに対する複数の前記送信フレームは、少なくとも2つの前記送信フレームの前記複数のブロックの順序が異なる、
表示方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016549908A JP6670996B2 (ja) | 2014-09-26 | 2015-08-21 | 表示装置及び表示方法 |
US15/352,640 US10181296B2 (en) | 2014-09-26 | 2016-11-16 | Display device and display method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014196568 | 2014-09-26 | ||
JP2014-196568 | 2014-09-26 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US15/352,640 Continuation US10181296B2 (en) | 2014-09-26 | 2016-11-16 | Display device and display method |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2016047030A1 true WO2016047030A1 (ja) | 2016-03-31 |
Family
ID=55580584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2015/004188 WO2016047030A1 (ja) | 2014-09-26 | 2015-08-21 | 表示装置及び表示方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10181296B2 (ja) |
JP (1) | JP6670996B2 (ja) |
WO (1) | WO2016047030A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2018016642A1 (ja) * | 2016-07-22 | 2019-05-16 | 国立大学法人 東京大学 | 送信装置、受信装置及びプログラム |
WO2019097882A1 (ja) * | 2017-11-14 | 2019-05-23 | パナソニックIpマネジメント株式会社 | 表示装置および表示方法 |
JPWO2018070366A1 (ja) * | 2016-10-12 | 2019-07-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 送信装置、受信装置、通信システム、送信方法、受信方法および通信方法 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6670996B2 (ja) * | 2014-09-26 | 2020-03-25 | パナソニックIpマネジメント株式会社 | 表示装置及び表示方法 |
US10069572B1 (en) * | 2017-09-07 | 2018-09-04 | Osram Sylvania Inc. | Decoding light-based communication signals captured with a rolling shutter image capture device |
EP3503566A1 (en) * | 2017-12-21 | 2019-06-26 | Vestel Elektronik Sanayi ve Ticaret A.S. | Apparatus and method for encoding light communication information |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006011515A1 (ja) * | 2004-07-28 | 2006-02-02 | Matsushita Electric Industrial Co., Ltd. | 映像表示装置及び映像表示システム |
JP2007074268A (ja) * | 2005-09-06 | 2007-03-22 | Sony Corp | 非接触データ通信システム、表示装置、データ受信装置、非接触データ送信方法及びデータ受信方法 |
WO2010128629A1 (ja) * | 2009-05-07 | 2010-11-11 | Jx日鉱日石金属株式会社 | 酸化物焼結体スパッタリングターゲット、同ターゲットの製造方法、酸化物からなるゲート絶縁膜及び同ゲート絶縁膜の熱処理方法 |
WO2014103333A1 (ja) * | 2012-12-27 | 2014-07-03 | パナソニック株式会社 | 表示方法 |
WO2014103157A1 (ja) * | 2012-12-27 | 2014-07-03 | パナソニック株式会社 | 映像表示方法 |
WO2015075937A1 (ja) * | 2013-11-22 | 2015-05-28 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報処理プログラム、受信プログラムおよび情報処理装置 |
Family Cites Families (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10135909A (ja) | 1996-10-31 | 1998-05-22 | Sony Corp | 光信号送信装置、光信号受信装置、光信号伝送装置および光信号伝送方法 |
US7213254B2 (en) * | 2000-04-07 | 2007-05-01 | Koplar Interactive Systems International Llc | Universal methods and device for hand-held promotional opportunities |
US7650624B2 (en) * | 2002-10-01 | 2010-01-19 | Koplar Interactive Systems International, L.L.C. | Method and apparatus for modulating a video signal with data |
JP4627084B2 (ja) * | 2005-04-12 | 2011-02-09 | パイオニア株式会社 | 通信システム、通信装置及び方法、並びにコンピュータプログラム |
US7570246B2 (en) | 2005-08-01 | 2009-08-04 | Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. | Method and apparatus for communication using pulse-width-modulated visible light |
JP2007028682A (ja) | 2006-10-23 | 2007-02-01 | Sony Corp | 光信信号受信装置 |
JP2009212768A (ja) | 2008-03-04 | 2009-09-17 | Victor Co Of Japan Ltd | 可視光通信光送信装置、情報提供装置、及び情報提供システム |
JPWO2010098020A1 (ja) * | 2009-02-26 | 2012-08-30 | パナソニック株式会社 | バックライト装置およびこれを用いた映像表示装置 |
KR101583729B1 (ko) * | 2009-05-28 | 2016-01-11 | 삼성디스플레이 주식회사 | 표시 장치 |
US8502926B2 (en) * | 2009-09-30 | 2013-08-06 | Apple Inc. | Display system having coherent and incoherent light sources |
KR20110084730A (ko) * | 2010-01-18 | 2011-07-26 | 삼성전자주식회사 | 액정표시장치 및 이의 구동 방법 |
KR101653169B1 (ko) * | 2010-03-02 | 2016-09-02 | 삼성디스플레이 주식회사 | 가시광 통신 장치 및 그 방법 |
US8179933B1 (en) * | 2010-10-29 | 2012-05-15 | Corning Incorporated | Systems and methods for visible light source evaluation |
EP2538584B1 (en) | 2011-06-23 | 2018-12-05 | Casio Computer Co., Ltd. | Information Transmission System, and Information Transmission Method |
KR20130013720A (ko) * | 2011-07-28 | 2013-02-06 | 삼성전자주식회사 | Led 백라이트유닛을 구비한 정보 디스플레이 장치에서의 가시광 통신 방법 및 이를 위한 정보 디스플레이 장치 |
KR20130093699A (ko) * | 2011-12-23 | 2013-08-23 | 삼성전자주식회사 | 광정보 전송장치 및 광정보 수신장치 |
KR101974366B1 (ko) * | 2012-02-10 | 2019-05-03 | 삼성전자주식회사 | 디지털 정보 디스플레이 장치에서 영상 내 각 객체에 대한 부가 정보를 제공하기 위한 방법 및 이를 위한 디지털 정보 디스플레이 장치 그리고 상기 부가 정보를 제공받는 가시광 통신 단말 |
JP2013197843A (ja) * | 2012-03-19 | 2013-09-30 | Toshiba Corp | 伝送システムおよび送信装置 |
WO2013166958A1 (zh) * | 2012-05-07 | 2013-11-14 | 深圳光启创新技术有限公司 | 基于可见光通信的加密、解密及加解密方法和系统 |
WO2013171954A1 (ja) * | 2012-05-17 | 2013-11-21 | パナソニック株式会社 | 撮像装置、半導体集積回路および撮像方法 |
US9166810B2 (en) * | 2012-05-24 | 2015-10-20 | Panasonic Intellectual Property Corporation Of America | Information communication device of obtaining information by demodulating a bright line pattern included in an image |
KR101391128B1 (ko) * | 2012-07-06 | 2014-05-02 | 주식회사 아이디로 | 가시광 통신용 oled 표시 장치 |
JP5978852B2 (ja) * | 2012-08-17 | 2016-08-24 | セイコーエプソン株式会社 | 情報端末、携帯情報端末および映像表示システム |
US8988574B2 (en) * | 2012-12-27 | 2015-03-24 | Panasonic Intellectual Property Corporation Of America | Information communication method for obtaining information using bright line image |
WO2014103329A1 (ja) * | 2012-12-27 | 2014-07-03 | パナソニック株式会社 | 可視光通信信号表示方法及び表示装置 |
JP5606655B1 (ja) * | 2012-12-27 | 2014-10-15 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報通信方法 |
US9608727B2 (en) * | 2012-12-27 | 2017-03-28 | Panasonic Intellectual Property Corporation Of America | Switched pixel visible light transmitting method, apparatus and program |
US9088360B2 (en) * | 2012-12-27 | 2015-07-21 | Panasonic Intellectual Property Corporation Of America | Information communication method |
US8922666B2 (en) * | 2012-12-27 | 2014-12-30 | Panasonic Intellectual Property Corporation Of America | Information communication method |
JP5590431B1 (ja) * | 2012-12-27 | 2014-09-17 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報通信方法 |
US9407367B2 (en) * | 2013-04-25 | 2016-08-02 | Beijing Guo Cheng Wan Tong Information Co. Ltd | Methods and devices for transmitting/obtaining information by visible light signals |
JP5713061B2 (ja) | 2013-07-19 | 2015-05-07 | カシオ計算機株式会社 | 情報送信装置、情報送信方法、及び、プログラム |
EP3043551B1 (en) * | 2013-09-04 | 2019-05-01 | Panasonic Corporation | Display device |
JP2018032884A (ja) * | 2014-04-02 | 2018-03-01 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 受信プログラムおよび受信装置 |
JP2018032885A (ja) * | 2014-05-15 | 2018-03-01 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報処理プログラム、受信プログラムおよび情報処理装置 |
JP6670996B2 (ja) * | 2014-09-26 | 2020-03-25 | パナソニックIpマネジメント株式会社 | 表示装置及び表示方法 |
WO2016075948A1 (ja) * | 2014-11-14 | 2016-05-19 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 再生方法、再生装置およびプログラム |
KR102419544B1 (ko) * | 2015-02-27 | 2022-07-11 | 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 | 신호 생성 방법, 신호 생성 장치 및 프로그램 |
KR20180120560A (ko) * | 2016-02-25 | 2018-11-06 | 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 | 신호 복호 방법, 신호 복호 장치 및 프로그램 |
-
2015
- 2015-08-21 JP JP2016549908A patent/JP6670996B2/ja active Active
- 2015-08-21 WO PCT/JP2015/004188 patent/WO2016047030A1/ja active Application Filing
-
2016
- 2016-11-16 US US15/352,640 patent/US10181296B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006011515A1 (ja) * | 2004-07-28 | 2006-02-02 | Matsushita Electric Industrial Co., Ltd. | 映像表示装置及び映像表示システム |
JP2007074268A (ja) * | 2005-09-06 | 2007-03-22 | Sony Corp | 非接触データ通信システム、表示装置、データ受信装置、非接触データ送信方法及びデータ受信方法 |
WO2010128629A1 (ja) * | 2009-05-07 | 2010-11-11 | Jx日鉱日石金属株式会社 | 酸化物焼結体スパッタリングターゲット、同ターゲットの製造方法、酸化物からなるゲート絶縁膜及び同ゲート絶縁膜の熱処理方法 |
WO2014103333A1 (ja) * | 2012-12-27 | 2014-07-03 | パナソニック株式会社 | 表示方法 |
WO2014103157A1 (ja) * | 2012-12-27 | 2014-07-03 | パナソニック株式会社 | 映像表示方法 |
WO2015075937A1 (ja) * | 2013-11-22 | 2015-05-28 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報処理プログラム、受信プログラムおよび情報処理装置 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2018016642A1 (ja) * | 2016-07-22 | 2019-05-16 | 国立大学法人 東京大学 | 送信装置、受信装置及びプログラム |
JP7051107B2 (ja) | 2016-07-22 | 2022-04-11 | 国立大学法人 東京大学 | 送信装置、受信装置及びプログラム |
JPWO2018070366A1 (ja) * | 2016-10-12 | 2019-07-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 送信装置、受信装置、通信システム、送信方法、受信方法および通信方法 |
JP7128742B2 (ja) | 2016-10-12 | 2022-08-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 送信装置、受信装置、通信システム、送信方法、受信方法および通信方法 |
US11575435B2 (en) | 2016-10-12 | 2023-02-07 | Panasonic Intellectual Property Corporation Of America | Transmission device, reception device, communication system, transmission method, reception method, and communication method |
WO2019097882A1 (ja) * | 2017-11-14 | 2019-05-23 | パナソニックIpマネジメント株式会社 | 表示装置および表示方法 |
JPWO2019097882A1 (ja) * | 2017-11-14 | 2020-12-17 | パナソニックIpマネジメント株式会社 | 表示装置および表示方法 |
US11132964B2 (en) | 2017-11-14 | 2021-09-28 | Panasonic Intellectual Property Management Co., Ltd. | Display device and display method |
JP7209195B2 (ja) | 2017-11-14 | 2023-01-20 | パナソニックIpマネジメント株式会社 | 表示装置および表示方法 |
Also Published As
Publication number | Publication date |
---|---|
US20170061900A1 (en) | 2017-03-02 |
JP6670996B2 (ja) | 2020-03-25 |
JPWO2016047030A1 (ja) | 2017-07-06 |
US10181296B2 (en) | 2019-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2016047030A1 (ja) | 表示装置及び表示方法 | |
EP2940901B1 (en) | Display method | |
US9613596B2 (en) | Video display method using visible light communication image including stripe patterns having different pitches | |
EP2940889B1 (en) | Visible-light-communication-signal display method and display device | |
JP6430952B2 (ja) | 表示装置およびその制御方法 | |
US8477179B2 (en) | Method of transmitting video data for wirelessly transmitting three-dimensional video data | |
US10152946B2 (en) | Video display method using visible/visual light communication with stripe patterns having different orientations and color combinations | |
US20100158100A1 (en) | Information processing apparatus and signal transmission method | |
US20130106996A1 (en) | Timing controller with video format conversion, method therefor and display system | |
CN116113970A (zh) | 用于施加自适应视频水印的系统和方法 | |
US20120019632A1 (en) | Display device, shutter device, shutter control circuit, method of controlling shutters, and display system | |
KR20130093432A (ko) | 구동 장치, 이를 포함하는 표시 장치 및 그 구동 방법 | |
GB2526148A (en) | Seamless display of a video sequence with increased frame rate | |
WO2019097882A1 (ja) | 表示装置および表示方法 | |
CN109799964B (zh) | 显示数据处理方法、装置、系统和计算机可读存储介质 | |
KR20170059757A (ko) | 영상 신호 송신 장치, 그의 영상 신호 송신 방법, 영상 신호 수신 장치 및 그의 영상 신호 수신 방법 | |
JP2009060541A (ja) | データ送信装置、データ送信方法、視聴環境制御装置、及び視聴環境制御方法 | |
JP2015145911A (ja) | 表示装置、表示装置の制御方法 | |
WO2013092198A1 (en) | Tv frame play-out in sync with line cycle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 15845226 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2016549908 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 15845226 Country of ref document: EP Kind code of ref document: A1 |