WO2012077766A2 - 機械可読ドットパターンの表示装置を用いた表示フォーマット - Google Patents

機械可読ドットパターンの表示装置を用いた表示フォーマット Download PDF

Info

Publication number
WO2012077766A2
WO2012077766A2 PCT/JP2011/078482 JP2011078482W WO2012077766A2 WO 2012077766 A2 WO2012077766 A2 WO 2012077766A2 JP 2011078482 W JP2011078482 W JP 2011078482W WO 2012077766 A2 WO2012077766 A2 WO 2012077766A2
Authority
WO
WIPO (PCT)
Prior art keywords
dot
dot pattern
machine
pixel color
display device
Prior art date
Application number
PCT/JP2011/078482
Other languages
English (en)
French (fr)
Other versions
WO2012077766A3 (ja
Inventor
吉田　健治
Original Assignee
Yoshida Kenji
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yoshida Kenji filed Critical Yoshida Kenji
Priority to CN201180058752.8A priority Critical patent/CN103250426B/zh
Priority to EP11846449.4A priority patent/EP2650826A4/en
Priority to KR1020137017893A priority patent/KR101988919B1/ko
Priority to US13/992,952 priority patent/US9626934B2/en
Publication of WO2012077766A2 publication Critical patent/WO2012077766A2/ja
Publication of WO2012077766A3 publication Critical patent/WO2012077766A3/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/0028—Adaptive watermarking, e.g. Human Visual System [HVS]-based watermarking
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2201/00—General purpose image data processing
    • G06T2201/005—Image watermarking
    • G06T2201/0051—Embedding of the watermark in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/025—Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Definitions

  • the present invention relates to a display format for causing a display device to display a dot pattern, which is a kind of two-dimensional code, in a mechanically readable state.
  • a two-dimensional barcode is displayed on a television monitor in a television shopping program or a television commercial.
  • the mobile terminal reads the two-dimensional bar code
  • the mobile terminal acquires a URL for ordering goods / services and accesses the sales server of the mail order system. Subsequent communication between the server and the mobile terminal confirms the order contents.
  • Patent Documents 2 and 3 disclose a dot pattern that is a two-dimensional code that can be overprinted with an image.
  • Patent Document 4 discloses a method of embedding a digital watermark in one frame in a video.
  • Patent Document 5 discloses the effect of irreversible compression on pixel information embedded as an index in one frame in a video.
  • Patent Document 1 occupies a certain area on the TV screen, as apparent from the figure of the same document, there is a problem that the beauty of the TV program is impaired.
  • Patent Documents 2 and 3 disclose a technique for reading a printed dot pattern, but a specific technical technique for reading and writing information on a dot pattern displayed on the screen of a display device. Challenges arise.
  • the present invention has been made in view of these points, and an object of the present invention is to provide a characteristic display format of a machine-readable dot pattern that does not impair the aesthetic appearance of an image displayed on a display device.
  • a display format using the machine-readable dot pattern display device of the present invention is a machine-readable dot in which a plurality of dots are arranged based on a predetermined rule in at least an entire area or one or more predetermined areas in a predetermined frame.
  • a pattern is displayed using a display device, and the plurality of dots are composed of a plurality of information dots or a plurality of information dots and reference dots.
  • a contrast control area distinguishable from the dots is provided between the dots and the peripheral pixel area.
  • the pixel color of the dot or the contrast control region is changed from the pixel color of the peripheral pixel region.
  • An anti-aliasing region in which the pixel color gradually changes to the pixel color is provided.
  • the pixel color of the contrast control region is a complementary color of the pixel color of the dot.
  • the pixel color of the contrast control region is an achromatic color
  • the pixel color of the dot is a chromatic color
  • the pixel color of the contrast control region is a chromatic color
  • the pixel color of the dot is either an achromatic color.
  • the pixel color of the contrast control region is white and the pixel color of the dot is black
  • the pixel color of the contrast control region is black
  • the pixel of the dot The color is either white.
  • the pixel color of the dot is a pixel color distinguishable from the pixel color of the peripheral pixel region.
  • the pixel color of the contrast control region is a pixel color distinguishable from the pixel color of the peripheral pixel region, and the pixel color of the dot is distinguishable from the pixel color of the contrast control region.
  • the pixel color is a pixel color distinguishable from the pixel color of the peripheral pixel region, and the pixel color of the dot is distinguishable from the pixel color of the contrast control region.
  • the machine-readable dot pattern is a region defining one dot code and / or XY coordinates based on reference dots arranged based on a predetermined rule, the direction of the dot pattern, and the information
  • the dot code is defined by determining the arrangement of dots.
  • a plurality of machine-readable dot patterns in which the dot code and / or the XY coordinates are defined are connected to or connected to the predetermined area in the vertical and horizontal directions.
  • a dot code and / or an XY coordinate is defined by a pixel color of the dot and / or contrast control region.
  • the plurality of information dots or the plurality of information dots and the reference dot are arranged at predetermined positions in a predetermined frame, thereby determining whether or not the machine-readable dot pattern is displayed.
  • an index for specifying an image displayed on the display device is displayed in the same frame as the frame for displaying the machine-readable dot pattern. To do.
  • the machine-readable dot pattern can be properly displayed on the display device.
  • dots can be reliably recognized by providing a contrast control area and / or an anti-aliasing area.
  • each dot is small, a two-dimensional code that is invisible to the viewer and machine-readable can be embedded in the video or image on the screen of the display device.
  • a camera that records visible light such as a digital camera, video camera, mobile phone camera, or web camera
  • a plurality of dot patterns in which dot codes and / or XY coordinates are defined are connected vertically or horizontally in one or more predetermined areas or in one or more predetermined areas. This information can be acquired by photographing or capturing only the part.
  • FIG. 6 is a diagram illustrating an example of a dot pattern 101.
  • 5 is a diagram illustrating an example of how information is defined by information dots 602.
  • FIG. 6 is a figure which shows the information which can define the dot pattern 101.
  • FIG. 6 is a diagram showing an example in which a dot pattern 101 is displayed on a display device 201.
  • FIG. 701 It is a figure explaining the process in which a viewer uses the service using this invention. It is a figure which shows the Example which embeds the index 701.
  • FIG. It is a figure which shows the dot pattern 101 comprised by the dot matrix 102 in 2nd Embodiment. It is a figure which shows the dot pattern 101 comprised by the dot matrix 102 in 3rd Embodiment. It is a figure which shows the dot pattern 101 comprised by the dot matrix 102 in 4th Embodiment.
  • the dot pattern is machine-readable. Further, the dot pattern is based on reference dots arranged based on a predetermined rule, and defines a region defining one dot code and / or XY coordinates, the direction of the dot pattern, and the arrangement of the information dots. By defining the dot code, the dot code can be read depending on whether or not there is a dot at the position where it is arranged.
  • “1 dot” may be treated as synonymous with 1 pixel (1 pixel), but the dot 103 in the present invention means a dot as an element constituting the dot pattern 101.
  • the concept is different from the “dot” as the pixel of the display device.
  • a dot body as a constituent element of the dot pattern 101 is referred to as “dot 103”.
  • the dots that are actually displayed on the display device 201 using the display format of the present invention are referred to as “dot matrix 102”.
  • an area other than the area occupied by the dot matrix 102 in the image 301 is referred to as a peripheral pixel area 106.
  • FIG. 1 is a diagram showing a dot matrix 102 constituting a dot pattern 101 displayed on the display device 201 in the first embodiment.
  • the dot matrix 102 is composed of only dots 103.
  • the color of the dot 103 is determined by comparison with the peripheral pixel area 106. That is, a pixel color that can be identified with respect to the pixel color of the peripheral pixel region 106 is used. Most preferably, colors that are not used in the peripheral pixel area 106 are used.
  • the arrangement of the dot matrix 102 is recognized by the RGB value of the dot 103.
  • the size of the dot 103 excludes one pixel due to a defect in the display device, including the case where the compression standard of the image or video including the dot pattern 101 is irreversible compression, and influences from the peripheral pixel region 106 Considering the above, it is about 2 to 4 pixels x 2 to 4 pixels, and the reference dot interval is about 10 to 40 pixels.
  • the pattern 101 can be captured and recognized.
  • the dots are large or when the dot size is relatively large with respect to the reference dot interval, about 1 to 2 frames per 10 to 30 frames at 30 frames / second when the image is displayed on the display device. At 60 frames / second, the dot pattern is displayed only for about 1 to 4 frames per 20 to 60 frames, thereby making it impossible for the viewer to visually recognize the dot pattern.
  • a pixel color that is difficult to visually recognize may be used on the assumption that the pixel color of the dot or the contrast region can be recognized with respect to the peripheral pixel color.
  • FIG. 2 is a diagram showing a dot matrix 102 constituting the dot pattern 101 displayed on the display device 201 in the second embodiment.
  • the dot matrix 102 includes dots 103 and a contrast control area 104.
  • the dot 103 is arranged on the innermost side of the dot matrix 102, and the contrast control region 104 is arranged so as to circumscribe the dot 103 without a gap.
  • the color of the contrast control area 104 is displayed in a color that is complementary to the color of the dot 103.
  • the pixel color of the contrast control region 104 is an achromatic color.
  • the pixel color of the contrast control region 104 is a chromatic color.
  • the pixel color of the dot 103 is black
  • the pixel color of the contrast control region 104 is white.
  • the pixel color of the contrast control region 104 is black.
  • the pixel color of the contrast control area 104 is a pixel color that can be identified with respect to the pixel color of the peripheral pixel area 106
  • the pixel color of the dot 103 is a pixel color that can be identified with respect to the pixel color of the contrast control area 104.
  • the size of the contrast control area 104 is 2 to 4 pixels ⁇ considering the influence from the peripheral pixel area 106. It is preferably about 2 to 4 pixels.
  • FIG. 3 is a diagram showing a dot matrix 102 constituting the dot pattern 101 displayed on the display device 201 in the third embodiment.
  • the dot matrix 102 includes dots 103 and an anti-aliasing area 105.
  • the dot 103 is arranged on the innermost side of the dot matrix 102, and the anti-aliasing region 105 is arranged so as to circumscribe the dot 103 without a gap.
  • Anti-aliasing area The anti-aliasing region 105 will be described in detail. This description is common to other embodiments described later.
  • anti-aliasing is a neutral-colored dot around the boundary line in order to obscure stair-like jagged edges (jagged lines) that appear on diagonal lines and curves when displaying images on a computer screen. It is a method of arranging.
  • the anti-aliasing region means a region where the pixel color gradually changes from the pixel color of the peripheral pixel region 106 to the pixel color of the dot 103.
  • the size of the anti-aliasing region 105 is 2 to 4 pixels in consideration of the influence from the peripheral pixel region 106. ⁇ 2 to about 4 to 4 pixels are preferable.
  • FIG. 4 is a diagram showing a dot matrix 102 constituting the dot pattern 101 displayed on the display device 201 in the fourth embodiment.
  • the dot matrix 102 includes dots 103, a contrast control area 104, and an anti-aliasing area 105.
  • the dot 103 is arranged on the innermost side of the dot matrix 102, and the contrast control region 104 is arranged so as to circumscribe the dot 103 without a gap.
  • the anti-aliasing area 105 is arranged so as to circumscribe the contrast control area 104 without a gap.
  • the anti-aliasing area 105 means an area where the pixel color gradually changes from the pixel color of the peripheral pixel area 106 to the pixel color of the contrast control area 104.
  • each configuration of the dot matrix 102 is arranged in a vertical and horizontal grid pattern, but each configuration of the dot matrix 102 may be arranged in a diagonal grid pattern as shown in FIG.
  • the dot pattern 101 defines information according to the arrangement rule of the dot matrix 102.
  • Patent Documents 2 and 3 As for the arrangement rule of the dot matrix 102 and how to define information, known methods represented by Patent Documents 2 and 3 can be used.
  • Patent Documents 2 and 3 describe not a dot pattern displayed on a display device but a dot pattern printed mainly on a medium, the dot arrangement rule and how to define information are described in the display device. There is basically no difference between the dot pattern 101 displayed on the screen and the dot pattern printed on the medium.
  • FIG. 6 shows a dot pattern described in Patent Document 2 as a representative example of the dot pattern 101.
  • the grid dots 601 reference dots 601
  • information dots 602 and key dots 603 in FIG. 6 are expressed by the dot matrix 102 which is the display format of the present invention.
  • a plurality of dot patterns 101 are usually provided in a connected or connected manner in the vertical and horizontal directions.
  • the information dot 602 is arranged in an area surrounded by four grid dots 601, and the distance and direction (vector) based on the virtual point 604 at the center of the area. To define information (see FIG. 7).
  • the information dot 602 defines information depending on the presence or absence of the arrangement.
  • the information dot 602 defines information by a combination of a vector and presence / absence of an arrangement.
  • the key dots 603 are recognized as the key dots 603 when a part of the lattice dots 601 arranged at equal intervals is arranged at a position (upward direction according to FIG. 6) that is shifted in a predetermined direction from the original position. Then, the direction and size (boundary) of the dot pattern 101 are defined.
  • Various methods for defining the direction and size of the dot pattern are known from Japanese Patent Application Laid-Open No. 2003-228688, and can be similarly adopted in the dot pattern 101 of the present invention.
  • the dot pattern 101 is not easily viewed by the viewer because the dot matrix 102 is separated.
  • the dot pattern 101 can include XY coordinate information and other code information (dot code) in one block as one unit of information.
  • the dot pattern 101 can also define a dot code and / or an XY coordinate by the pixel color of the dot 103, the pixel color of the contrast control region 104, or a combination of these pixel colors.
  • the reference dot 601 (or information dot 602) is arranged at a predetermined position in the image 301. Whether or not the dot pattern 101 exists in the image 301 is easily determined based on whether or not the reference dot 601 is displayed at a predetermined position.
  • the dot pattern 101 may be composed only of information dots 602.
  • the information dot 602 defines information based on the presence / absence of the arrangement at a predetermined position or the distance and direction from the predetermined position.
  • approximately 1 to 4 pixels ⁇ 2 to 4 pixels in the first embodiment in consideration of the influence from the peripheral pixel region 106 by eliminating one pixel, in any display device that is generally distributed Also displays the dot pattern 101 appropriately.
  • the size is approximately 4 to 8 pixels ⁇ 4 to 8 pixels, so that the dot pattern 101 is appropriately displayed on any display device that is generally distributed.
  • the size is approximately 6 to 12 pixels ⁇ 6 to 12 pixels, so that the dot pattern 101 is appropriately displayed on any display device generally available.
  • the dot matrix 102 may be enlarged.
  • a dot pattern is continuously displayed on the display device for an arbitrary time.
  • the dot pattern is displayed only about 1 to 2 frames per 10 to 30 frames at 30 frames / second when the image is displayed on the display device, and about 1 to 4 frames per 20 to 60 frames at 60 frames / second. This makes it impossible for the viewer to visually recognize the dot pattern.
  • a pixel color that is difficult to visually recognize may be used on the assumption that the pixel color of the dot or the contrast region can be recognized with respect to the peripheral pixel color.
  • the arrangement interval of the dot matrix 102 is about 10 to 40 pixels on the premise of a display device having a resolution of about half & full high-definition resolution, so that the dot pattern 101 can be properly displayed on any display device in general distribution. To do. Needless to say, when one or several dot patterns are embedded as in the QR code (registered trademark), the arrangement interval of the dot matrix 102 may be increased.
  • the dot pattern 101 can be properly displayed on any display device that is generally distributed, and the information dot 602 is displayed. It becomes possible to recognize.
  • the distance at which the key dot 603 transitions from the position where the grid dot 601 is arranged is approximately 10 to 30% of the interval between the reference dots, so that the dot pattern 101 can be properly displayed on any display device in general distribution.
  • the key dot 603 can be recognized.
  • FIG. 9 is a diagram illustrating a display device 201 on which a dot pattern 101 (machine-readable dot pattern) according to the present invention is displayed.
  • an image 301 is displayed on the display device 201.
  • the image 301 includes a dot pattern 101 in addition to visual information that the viewer originally wants to visually recognize.
  • the dot matrix 102 is distributed over the entire image 301, but the dot matrix 102 may be distributed only in a partial region of the image 301.
  • the dot pattern 101 includes the title of the program, introduction of the content of the program, the performers and staff of the program, the URL of the official WEB site of the program, and the relationship of the program Information such as the URL of a WEB site that sells products is defined.
  • FIG. 1 A process in which a viewer uses a service using the present invention is illustrated with reference to FIG.
  • the camera 402 captures the image 301.
  • a storage unit 403 (not shown) in the terminal 401 stores image data 302 taken by the camera 402.
  • the CPU 404 (not shown) in the terminal 401 activates the dot pattern analysis application stored in the storage unit 403.
  • the CPU 404 analyzes the image data 302 using a dot pattern analysis application.
  • the CPU 404 recognizes the dot pattern 101 in the image data 302 and decodes information defined in the dot pattern 101.
  • the CPU 404 outputs the decrypted information to output means 405 (not shown) of the terminal 401, and the viewer browses the information.
  • Whether the dot pattern 101 directly defines information or whether the numerical value defined by the dot pattern 101 is associated with the information can be arbitrarily designed by the service provider according to the amount of information that the dot pattern 101 can define. .
  • the terminal 401 transmits the image data 302 to the server 406 (not shown), the dot pattern 101 in the image data 302 is analyzed and the information is decoded on the server 406, and the terminal 401 receives the combined information again. It is needless to say that such a configuration is used, and the service provider can arbitrarily design it.
  • the contrast control region 104 and the anti-aliasing region 105 are provided around the dot 103, the influence of the compression / expansion on the dot 103 from the peripheral pixel region 106 is reduced.
  • ⁇ Frame displaying dot pattern> In order to make it difficult for the viewer to visually recognize the dot pattern 101, it is preferable not to display the dot pattern 101 in all frames of the video 501 but to display the dot pattern 101 only in some frames.
  • ⁇ Index> Preferably, as shown in FIG. 11, a well-known index 701 (watermark information) that can be photographed by the camera 402 is embedded at the end of the video 501 (image 301) separately from the dot pattern 101.
  • the index 701 indicates information that the dot pattern 101 is embedded in one frame of the shot video 501. This captures only that frame and analyzes the dot code.
  • the present invention described above relates to a display format using a machine-readable dot pattern display device.
  • the present invention relates to a machine-readable dot pattern display device and display method, and generation of an image including a machine-readable dot pattern. It can be used as an apparatus and a generation method or an image generation program. Moreover, you may use for another apparatus, method, and program.
  • the present invention has industrial applicability as a display format for adding information in video or image distribution to a display device, represented by television broadcasting.

Abstract

　表示装置に表示される画像の美観を損なわない、機械可読ドットパターンの特徴的な表示フォーマットを提供することを技術的課題とする。ドットの周辺に周辺画像と識別可能なコントラスト制御領域および／またはアンチエリアシング領域を設けることによりドットパターンを機械可読とする。これにより、視聴者が視認できない、且つ機械可読の二次元コードを表示装置の画面上の映像または画像に埋め込むことができる。視聴者は、デジカメやビデオカメラ、携帯電話のカメラ、webカメラなどを用いて表示装置の画面を撮影するか、データとしてキャプチャーすれば、ドットパターンに定義された情報を容易に取得することができる。

Description

機械可読ドットパターンの表示装置を用いた表示フォーマット
　本発明は、表示装置に二次元コードの一種であるドットパターンを機械的に読み取り可能な状態で表示させるための表示フォーマットに関する。
　映像（動画像）または画像（静止画像）への情報付加は、画像に二次元コードを描画することにより簡易に実現される。
　特許文献１では、テレビショッピング番組やテレビコマーシャル等において、テレビモニタに二次元バーコードが表示されている。携帯端末が二次元バーコードを読み取ると、携帯端末は、商品・サービス注文用URLを取得し、通信販売システムの販売元サーバーにアクセスする。その後のサーバーと携帯端末とのやりとりにより、注文内容が確定する。
　特許文献２および３には、画像と重畳印刷可能な二次元コードであるドットパターンが開示されている。
　特許文献４には、映像中の１フレームに電子透かしを埋め込む方法が開示されている。
　特許文献５には、映像中の１フレームにインデックスとして埋め込まれた画素情報が非可逆性圧縮により受ける影響について開示されている。
特開２００５－１５９５６９号公報 特許第３７０６３８５号公報 特許第３７７１２５２号公報 特開２００７－３６８３３号公報 特許第４４７８９９２号公報
　しかし、特許文献１で使用されている二次元コードは、同文献の図からも明らかのようにテレビ画面上の一定の面積を占めるため、テレビ番組の美観を損なうという問題点がある。
　また、特許文献２および３には印刷したドットパターンを読み取るための技術が開示されているが、表示装置の画面上に表示したドットパターンを読み取って情報入出力を行うためには特有の技術的課題が生じる。
　本発明はこのような点に鑑みてなされたものであり、表示装置に表示される画像の美観を損なわない、機械可読ドットパターンの特徴的な表示フォーマットを提供することを技術的課題とする。
　＜１＞本発明の機械可読ドットパターンの表示装置を用いた表示フォーマットは、少なくとも所定のフレーム中の全領域または１以上の所定領域に、複数のドットを所定規則に基づいて配置した機械可読ドットパターンを、表示装置を用いて表示させる表示フォーマットであって、該複数のドットは、複数の情報ドットまたは、複数の情報ドットおよび基準ドットからなる。
　＜２＞好ましくは、前記ドットと周辺画素領域の間には、該ドットと識別可能なコントラスト制御領域が設けられている。
　＜３＞好ましくは、前記ドットと周辺画素領域との間、または前記コントラスト制御領域と周辺画素領域との間、には、該周辺画素領域の画素色から該ドットの画素色またはコントラスト制御領域の画素色まで徐々に画素色が変化するアンチエリアシング領域が設けられている。
　＜４＞好ましくは、前記コントラスト制御領域の画素色は、前記ドットの画素色の補色である。
　＜５＞好ましくは、（１）前記コントラスト制御領域の画素色は無彩色であり、前記ドットの画素色は有彩色である、（２）前記コントラスト制御領域の画素色は有彩色であり、前記ドットの画素色は無彩色である、のいずれかである。
　＜６＞好ましくは、（１）前記コントラスト制御領域の画素色は白色であり、前記ドットの画素色は黒色である、（２）前記コントラスト制御領域の画素色は黒色であり、前記ドットの画素色は白色である、のいずれかである。
　＜７＞好ましくは、前記ドットの画素色は周辺画素領域の画素色に対して識別可能な画素色である。
　＜８＞好ましくは、前記コントラスト制御領域の画素色は周辺画素領域の画素色に対して識別可能な画素色であり、前記ドットの画素色は前記コントラスト制御領域の画素色に対して識別可能な画素色である。
　＜９＞好ましくは、前記機械可読ドットパターンは、所定の規則に基づいて配置された基準ドットを基に、１つのドットコードおよび／またはXY座標を定義する領域と該ドットパターンの向きおよび前記情報ドットの配置を定めて該ドットコードが定義される。
　＜１０＞好ましくは、前記ドットコードおよび／またはXY座標が定義される機械可読ドットパターンは、前記所定の領域に上下左右に連結または連接して複数設けられる。
　＜１１＞前記機械可読ドットパターンは、前記ドットおよび／またはコントラスト制御領域の画素色によって、ドットコードおよび／またはXY座標が定義される。
　＜１２＞前記複数の情報ドットまたは、前記複数の情報ドットおよび基準ドットは、所定のフレーム中の予め決められた所定位置に配置されることにより、前記機械可読ドットパターンの表示の有無を判定可能とする。
　＜１３＞好ましくは、前記機械可読ドットパターンが表示される場合には、該機械可読ドットパターンを表示するフレームと同一のフレームに、前記表示装置に表示される画像を特定するためのインデックスを表示する。
　本発明によれば、機械可読ドットパターンを表示装置において適正に表示可能とする。
　本発明によれば、圧縮された映像および画像が放映・再生されても、コントラスト制御領域および／またはアンチエリアシング領域を設けることにより、確実にドットを認識できる。
　また、ドットパターンを用いることにより、ドット一つ一つが小さいため、視聴者が視認できない、且つ機械可読の二次元コードを表示装置の画面上の映像または画像に埋め込むことができる。
　これにより、デジカメやビデオカメラ、携帯電話のカメラ、webカメラなどの可視光を記録するカメラを用いて表示装置の画面を撮影するか、データとしてキャプチャーすれば、ドットパターンに定義された情報を容易に取得することができる。
　さらに、所定の画面の全部または、所定の１以上の領域に、ドットコードおよび／またはXY座標が定義されるドットパターンが上下左右に連結または連接して複数設けることにより、表示装置の画面の一部だけを撮影またはキャプチャーすることにより、当該情報を取得することができる。
第１の実施形態におけるドットマトリクス１０２を示す図である。 第２の実施形態におけるドットマトリクス１０２を示す図である。 第３の実施形態におけるドットマトリクス１０２を示す図である。 第４の実施形態におけるドットマトリクス１０２を示す図である。 ドットマトリクス１０２の他の形状を示す図である。 ドットパターン１０１の実施例を示す図である。 情報ドット６０２による情報の定義の仕方の例を示す図である。 ドットパターン１０１が定義可能な情報を示す図である。 表示装置２０１にドットパターン１０１を表示した例を示す図である。 視聴者が本発明を用いたサービスを利用する過程を説明する図である。 インデックス７０１を埋め込む実施例を示す図である。 第２の実施形態におけるドットマトリクス１０２により構成されるドットパターン１０１を示す図である。 第３の実施形態におけるドットマトリクス１０２により構成されるドットパターン１０１を示す図である。 第４の実施形態におけるドットマトリクス１０２により構成されるドットパターン１０１を示す図である。
　以下、本発明の実施形態について、図面を参照しながら説明する。
　本発明について要約すると、映像または画像が放映・再生される際に周辺画像とドットの識別が困難となるため、ドットの周辺に周辺画像と識別可能なコントラスト制御領域および／またはアンチエリアシング領域を設けることによりドットパターンを機械可読とする。さらに、当該ドットパターンは、所定の規則に基づいて配置された基準ドットを基に、１つのドットコードおよび／またはXY座標を定義する領域と該ドットパターンの向きおよび前記情報ドットの配置を定めて該ドットコードを定義することにより、配置される位置にドットが存在するか、否かでドットコードを読み取れるものである。
　＜ドットの表示フォーマット＞
表示装置２０１に表示されるドットパターン１０１を構成するドット１０３について説明する。
　なお、表示装置の技術分野において「１ドット」は１画素（１ピクセル）と同義のものと扱われる場合があるが、本発明におけるドット１０３はドットパターン１０１を構成する要素としてのドットを意味するものであって、表示装置の画素としての「ドット」とは概念が異なる。
　本発明においては、ドットパターン１０１の構成要素としてのドット本体を「ドット１０３」と呼ぶ。また、本発明の表示フォーマットを用いて表示装置２０１に実際に表示するドットを「ドットマトリクス１０２」と呼ぶ。
　画像３０１においてドットマトリクス１０２が占める領域以外の領域を本発明では周辺画素領域１０６と呼ぶ。
　＜第１の実施形態＞
第１の実施形態におけるドットマトリクス１０２の表示フォーマットを説明する。
　図１は、第１の実施形態において表示装置２０１に表示されるドットパターン１０１を構成するドットマトリクス１０２を示す図である。
　ドットマトリクス１０２はドット１０３のみから構成される。
　＜ドット＞
　ドット１０３について詳細に説明する。なお、この説明は後述する他の実施形態にも共通する。
　ドット１０３の色は、周辺画素領域１０６との対比により決定する。すなわち、周辺画素領域１０６の画素色に対して識別可能な画素色を使用する。最も好ましくは、周辺画素領域１０６において使われていない色を使用する。
　本発明の表示フォーマットにおいてはドット１０３のＲＧＢ値によりドットマトリクス１０２の配置が認識される。
　ドット１０３の大きさは、ドットパターン１０１を含む画像または映像の圧縮規格が、非可逆性圧縮である場合も含めて、表示装置の不良による１ピクセルを排除し、且つ周辺画素領域１０６からの影響を考慮して概ね２～４ピクセル×２～４ピクセル程度、基準ドット間隔が１０～４０ピクセル程度であることにより、どのような大きさの表示装置においても、通常使用されるカメラで適正にドットパターン１０１の撮影および認識が可能となる。なお、ドットが大きい場合、または基準ドット間隔に対してドットの大きさが比較的大きい場合は、表示装置で映像が表示されている３０フレーム／秒では１０～３０フレームに付き１～２フレーム程度、６０フレーム／秒では２０～６０フレームに付き１～４フレーム程度だけドットパターンを表示することにより、視聴者にはドットパターンを視認できなくすることができる。さらに、視認できにくくしたい場合は、ドットやコントラスト領域の画素色が周辺画素色に対して認識できることを前提に、視認しにくい画素色を使用すればよい。
　＜第２の実施形態＞
第２の実施形態におけるドットマトリクス１０２の表示フォーマットを説明する。
　図２は、第２の実施形態において表示装置２０１に表示されるドットパターン１０１を構成するドットマトリクス１０２を示す図である。
　ドットマトリクス１０２はドット１０３、コントラスト制御領域１０４、から構成される。
　図２に示すように、ドット１０３はドットマトリクス１０２の最も内側に配置され、コントラスト制御領域１０４はドット１０３に隙間なく外接するように配置される。
　＜コントラスト制御領域＞
コントラスト制御領域１０４について詳細に説明する。この説明は後述する他の実施形態にも共通する。
　コントラスト制御領域１０４の色は、ドット１０３の色と補色の関係になる色で表示する。コントラスト制御領域１０４を設けることにより、どこがドット１０３であるかを、画像解析時に正確に認識することが可能となる。
　具体的には、前記ドット１０３の画素色を有彩色とした場合、コントラスト制御領域１０４の画素色を無彩色とする。前記ドット１０３の画素色を無彩色とした場合、コントラスト制御領域１０４の画素色を有彩色とする。
　また、前記ドット１０３の画素色を黒色とした場合、コントラスト制御領域１０４の画素色を白色とする。前記ドット１０３の画素色を白色とした場合、コントラスト制御領域１０４の画素色を黒色とする。
　コントラスト制御領域１０４の画素色は周辺画素領域１０６の画素色に対して識別可能な画素色とし、ドット１０３の画素色はコントラスト制御領域１０４の画素色に対して識別可能な画素色とする。
　また、ドットパターン１０１を含む画像または映像の圧縮規格が、非可逆性圧縮のものである場合、コントラスト制御領域１０４の大きさは、周辺画素領域１０６からの影響を考慮して２～４ピクセル×２～４ピクセル前後とすることが好ましい。
　＜第３の実施形態＞
第３の実施形態におけるドットマトリクス１０２の表示フォーマットを説明する。
　図３は、第３の実施形態において表示装置２０１に表示されるドットパターン１０１を構成するドットマトリクス１０２を示す図である。
　ドットマトリクス１０２はドット１０３、アンチエリアシング領域１０５、から構成される。
　図３に示すように、ドット１０３はドットマトリクス１０２の最も内側に配置され、アンチエリアシング領域１０５はドット１０３に隙間なく外接するように配置される。
　＜アンチエリアシング領域＞
　アンチエリアシング領域１０５について詳細に説明する。この説明は後述する他の実施形態にも共通する。
　アンチエリアシングとは、一般には、コンピュータの画面に画像を表示する際に、斜め線や曲線などに発生する階段状のギザギザ(ジャギ)を目立たなくするために、境界線の周囲に中間色の点を配置する手法のことである。
　本発明においてアンチエリアシング領域とは、周辺画素領域１０６の画素色からドット１０３の画素色まで徐々に画素色が変化する領域を意味する。アンチエリアシング領域１０５を設けることにより、周辺画素領域１０６からドット１０３への色の変化がなだらかになり、ドットマトリクス１０２が視聴者から目立たず、画像３０１の美観を損ねることがない。
　また、ドットパターン１０１を含む画像または映像の圧縮規格が、非可逆性圧縮のものである場合、アンチエリアシング領域１０５の大きさは、周辺画素領域１０６からの影響を考慮して２～４ピクセル×２～４ピクセル前後とすることが好ましい。
　このような表示フォーマットとすることにより、美観を損ねて視聴者に不快感を与えることなく、ドットパターン１０１を表示装置２０１に表示することが可能となる。
　＜第４の実施形態＞
第４の実施形態におけるドットマトリクス１０２の表示フォーマットを説明する。
　図４は、第４の実施形態において表示装置２０１に表示されるドットパターン１０１を構成するドットマトリクス１０２を示す図である。
　ドットマトリクス１０２は、ドット１０３、コントラスト制御領域１０４、アンチエリアシング領域１０５から構成される。
　図４に示すように、ドット１０３はドットマトリクス１０２の最も内側に配置され、コントラスト制御領域１０４はドット１０３に隙間なく外接するように配置される。そして、アンチエリアシング領域１０５は、コントラスト制御領域１０４に隙間なく外接するように配置される。
　第４の実施形態では、アンチエリアシング領域１０５は周辺画素領域１０６の画素色からコントラスト制御領域１０４の画素色まで徐々に画素色が変化する領域を意味する。アンチエリアシング領域１０５を設けることにより、周辺画素領域１０６からコントラスト制御領域１０４への色の変化がなだらかになり、ドットマトリクス１０２が視聴者から目立たず、画像３０１の美観を損ねることがない。
　＜ドットの配置形状＞
なお、図１ないし図４の例ではドットマトリクス１０２の各構成を縦横の格子状に配置したが、図５に示すようにドットマトリクス１０２の各構成は斜め格子状に配置するものとしてもよい。
　＜ドットパターン＞
以下に、本発明においてドットパターン１０１がどのように情報を定義するかを説明する。
　ドットパターン１０１はドットマトリクス１０２の配置法則により情報を定義する。
　ドットマトリクス１０２の配置法則および情報の定義の仕方については、特許文献２および３に代表される周知の方法が利用できる。
　なお、特許文献２および３は表示装置において表示されるドットパターンではなく、主に媒体に印刷されるドットパターンについて説明しているが、ドットの配置法則および情報の定義の仕方については、表示装置に表示されるドットパターン１０１と媒体に印刷されるドットパターンとでは基本的に変わるところが無い。
　ドットパターン１０１の代表例として特許文献２に記載のドットパターンを図６に示す。図６の格子ドット６０１（基準ドット６０１）、情報ドット６０２、キードット６０３が本発明の表示フォーマットであるドットマトリクス１０２により表現される。
　また図６に示すように、ドットパターン１０１は通常、上下左右に連結または連接して複数設けられる。
　公知の技術であるため詳細な説明は省略するが、情報ドット６０２は４つの格子ドット６０１に囲まれた領域内に配置され、同領域中心の仮想点６０４を基準とする距離と方向（ベクトル）により情報を定義する（図７参照）。
　または、情報ドット６０２はその配置の有無により情報を定義する。もしくは、情報ドット６０２はベクトルと配置の有無との組み合わせにより情報を定義する。
　キードット６０３は等間隔に配置された格子ドット６０１の一部が本来の位置より所定方向に遷移した位置（図６によれば上方向）に配置されることによりキードット６０３であるものと認識され、ドットパターン１０１の方向と大きさ（境界）を定義する。
　なお、キードットに代えて情報ドットの一部をディレクションドットとすることによりドットパターンの方向と大きさを定義する方法、あるいは基準ドットの配置形状によりドットパターンの方向と大きさを定義する方法等の、ドットパターンの方向と大きさを定義する各種の方法が特許文献３により公知であり、本発明のドットパターン１０１においても同様に採用し得る。
　なお、特許文献２に記載の「格子ドット」と特許文献３に記載の「基準ドット」とは文言は異なるが機能は同じである。
　図６に示すようにドットパターン１０１はＱＲコード（登録商標）等の二次元コードとは異なり、ドットマトリクス１０２が離隔しているため視聴者からは視認されにくい。
　図８に示すようにドットパターン１０１はＸＹ座標情報とその他のコード情報（ドットコード）を、情報の１単位となる１つのブロックに含ませることができる。
　また、本発明においては、ドットパターン１０１は、ドット１０３の画素色、コントラスト制御領域１０４の画素色、もしくはこれら画素色の組み合わせによって、ドットコードおよび／またはＸＹ座標を定義することも可能である。
　好ましくは、基準ドット６０１（または情報ドット６０２）は画像３０１の予め定められた位置に配置するとよい。予め定められた位置に基準ドット６０１が表示されているか否かにより、画像３０１中にドットパターン１０１が存在するか否かが容易に判定される。
　＜その他のドットパターン＞
　ドットパターン１０１は、情報ドット６０２のみからなるものとしてもよい。この場合、情報ドット６０２は予め決められた所定位置への配置の有無、または所定位置からの距離と方向とにより情報を定義する。
　＜表示フォーマット特有の課題＞
表示装置２０１においてドットパターン１０１を表示する際の特有の課題を解決するため、発明者が新規に実験した結果を以下に説明する。
　＜ドットマトリクスの大きさ＞
ドットマトリクス１０２の大きさは、ドットマトリクス１０２は小さいほど視聴者には視認されにくく、画像３０１の美観を損ねないため、ハーフ＆フルハイビジョン解像度程度以上の表示装置を前提に、表示装置の不良による１ピクセルを排除し、且つ周辺画素領域１０６からの影響を考慮して、第１の実施形態においては概ね２～４ピクセル×２～４ピクセル程度であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示する。
　第２の実施形態においては概ね４～８ピクセル×４～８ピクセル程度であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示する。
　第３の実施形態においては概ね４～８ピクセル×４～８ピクセル程度であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示する。
　第４の実施形態においては概ね６～１２ピクセル×６～１２ピクセル程度であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示する。
　なお、ＱＲコード（登録商標）のように、１つまたは数個のドットパターンだけを埋め込む場合は、ドットマトリクス１０２を大きくする場合もあることは言うまでもない。その場合、視認できることが前提の場合は表示装置で任意の時間ドットパターンを継続表示する。一方、表示装置で映像が表示されている３０フレーム／秒では１０～３０フレームに付き１～２フレーム程度、６０フレーム／秒では２０～６０フレームに付き１～４フレーム前後だけドットパターンを表示することにより、視聴者にはドットパターンを視認できなくすることができる。さらに、視認できにくくしたい場合は、ドットやコントラスト領域の画素色が周辺画素色に対して認識できることを前提に、視認しにくい画素色を使用すればよい。
　＜ドットマトリクスの配置間隔＞
ドットマトリクス１０２の配置間隔は、ハーフ＆フルハイビジョン解像度程度以上の表示装置を前提に、概ね１０ピクセル～４０ピクセル程度であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示する。なお、ＱＲコード（登録商標）のように、１つまたは数個のドットパターンを埋め込む場合は、ドットマトリクス１０２の配置間隔を大きくする場合もあることは言うまでもない。
　＜仮想点と情報ドットの距離＞
仮想点６０４と情報ドット６０２との距離は、概ね基準ドット６０１の間隔の１０～３０％であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示し、情報ドット６０２を認識可能となる。
　＜キードットの遷移距離＞
格子ドット６０１が配置される位置からキードット６０３が遷移する距離は、概ね基準ドットの間隔の１０～３０％であることにより、一般に流通するいずれの表示装置においても適正にドットパターン１０１を表示し、キードット６０３を認識可能となる。
　＜本発明を用いたサービス＞
図９は、本発明に係るドットパターン１０１（機械可読ドットパターン）が表示されている表示装置２０１について説明する図である。
　図９に示すように、表示装置２０１には、画像３０１が表示される。画像３０１は、視聴者に本来視認させようとする視覚情報の他に、ドットパターン１０１を含む。図５によればドットマトリクス１０２は画像３０１全体に分布するが、画像３０１の一部領域にのみドットマトリクス１０２を分布する構成としてもよい。
　ドットマトリクス１０２がコントラスト制御領域、アンチエリアシング領域、またはその両方を備える場合のドットパターン１０１の表示例は、図１２～１４にそれぞれ示すとおりである。
　画像３０１がテレビ番組の映像５０１の１フレームである場合、ドットパターン１０１には、その番組のタイトル、番組の内容の紹介、番組の出演者やスタッフ、番組の公式ＷＥＢサイトのＵＲＬ、番組の関連商品を販売するＷＥＢサイトのＵＲＬ、等の情報が定義されている。
　視聴者が本発明を用いたサービスを利用する過程を、図１０を用いて例示する。
　（１）カメラ４０２は画像３０１を撮影する。
　（２）端末４０１内の図示しない記憶手段４０３はカメラ４０２が撮影した画像データ３０２を記憶する。
　（３）端末４０１内の図示しないＣＰＵ４０４は記憶手段４０３に格納されたドットパターン解析アプリケーションを起動する。
　（４）ＣＰＵ４０４はドットパターン解析アプリケーションにより画像データ３０２を解析する。
　（５）ＣＰＵ４０４は画像データ３０２中のドットパターン１０１を認識し、ドットパターン１０１に定義された情報を復号する。
　（６）ＣＰＵ４０４は復号された情報を端末４０１の図示しない出力手段４０５に出力し、視聴者は情報を閲覧する。
　なお、ドットパターン１０１が情報を直接定義するのか、ドットパターン１０１が定義する数値と情報とを対応付けるのかは、ドットパターン１０１が定義可能な情報の量に応じてサービス提供者が任意に設計し得る。
　また、上記過程において端末４０１が画像データ３０２を図示しないサーバー４０６に送信し、サーバー４０６上において画像データ３０２中のドットパターン１０１の解析、情報の復号を行い、複合した情報を端末４０１が再度受信するような構成とすることは例示するまでもなくサービス提供者が任意に設計し得る。
　＜画像の圧縮伸長＞
表示装置２０１が表示する映像５０１（画像３０１）が非可逆性圧縮の動画圧縮規格によるものである場合、映像５０１を圧縮伸長することにより、ドット１０３のＲＧＢ値は周辺画素領域１０６の影響を受けて変化する。
　したがって、ドットパターン１０１の設計に際しては、圧縮伸長によるＲＧＢ値の変化を見越した上での設計が求められる。
　本発明においてはドット１０３の周囲にコントラスト制御領域１０４とアンチエリアシング領域１０５が設けられるため、圧縮伸長による周辺画素領域１０６からドット１０３への影響は低減される。
　また、当然ながらドット１０３の大きさ自体を大きくすることによっても圧縮伸長による周辺画素領域１０６からドット１０３への影響は低減される。
　＜ドットパターンを表示するフレーム＞
ドットパターン１０１を視聴者に視認されにくくするために、映像５０１の全フレームにドットパターン１０１を表示させず、一部のフレームにおいてのみドットパターン１０１を表示させることが好ましい。
　＜インデックス＞
好ましくは、図１１に示すように、ドットパターン１０１とは別に、映像５０１（画像３０１）端部にカメラ４０２により撮影可能な周知のインデックス７０１（透かし情報）を埋め込む。
　インデックス７０１は撮影した映像５０１の１フレームにドットパターン１０１が埋め込まれているという、情報を示す。これにより、そのフレームだけをキャプチャーし、ドットコードの解析を行う。
　＜本発明の利用例＞
以上、説明した本発明は機械可読ドットパターンの表示装置を用いた表示フォーマットについてのものであるが、本発明は、機械可読ドットパターンの表示装置および表示方法、機械可読ドットパターンを含む画像の生成装置および生成方法、または画像生成プログラム、としての利用が可能である。また、その他の装置および方法、プログラムに用いてもよい。
　本発明は、テレビ放送を代表とする、表示装置への映像ないし画像の配信において情報を付加するための表示フォーマットとしての産業上の利用可能性を有する。
１０１　ドットパターン
１０２　ドットマトリクス
１０３　ドット
１０４　コントラスト制御領域
１０５　アンチエリアシング領域
１０６　周辺画素領域
２０１　テレビ
３０１　画像
３０２　画像データ
４０１　端末
４０２　カメラ
４０３　記憶手段
４０４　ＣＰＵ
４０５　出力手段
４０６　サーバー
５０１　映像
６０１　格子ドット（基準ドット）
６０２　情報ドット
６０３　キードット
６０４　仮想点
７０１　インデックス

Claims (13)

  1. 　少なくとも所定のフレーム中の全領域または１以上の所定領域に、複数のドットを所定規則に基づいて配置した機械可読ドットパターンを、表示装置を用いて表示させる表示フォーマットであって、
    　該複数のドットは、複数の情報ドットまたは、複数の情報ドットおよび基準ドットからなる、機械可読ドットパターンの表示装置を用いた表示フォーマット。
  2. 　前記ドットと識別可能なコントラスト制御領域が設けられている、請求項１記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  3. 　前記ドットと周辺画素領域との間、または前記コントラスト制御領域と周辺画素領域との間、には、該周辺画素領域の画素色から該ドットの画素色またはコントラスト制御領域の画素色まで徐々に画素色が変化するアンチエリアシング領域が設けられている、請求項１または２のいずれかに記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  4. 　前記コントラスト制御領域の画素色は、前記ドットの画素色の補色である、請求項２記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  5. 　（１）前記コントラスト制御領域の画素色は無彩色であり、前記ドットの画素色は有彩色である、
    　（２）前記コントラスト制御領域の画素色は有彩色であり、前記ドットの画素色は無彩色である、
    　のいずれかである請求項２記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  6. 　（１）前記コントラスト制御領域の画素色は白色であり、前記ドットの画素色は黒色である、
    　（２）前記コントラスト制御領域の画素色は黒色であり、前記ドットの画素色は白色である、
    　のいずれかである請求項２記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  7. 　前記ドットの画素色は周辺画素領域の画素色に対して識別可能な画素色である、請求項１記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  8. 　前記コントラスト制御領域の画素色は周辺画素領域の画素色に対して識別可能な画素色であり、前記ドットの画素色は前記コントラスト制御領域の画素色に対して識別可能な画素色である、請求項２記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  9. 　前記機械可読ドットパターンは、所定の規則に基づいて配置された基準ドットを基に、１つのドットコードおよび／またはXY座標を定義する領域と該ドットパターンの向きおよび前記情報ドットの配置を定めて該ドットコードが定義される、請求項１記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  10. 　前記ドットコードおよび／またはXY座標が定義される機械可読ドットパターンは、前記所定の領域に上下左右に連結または連接して複数設けられる、請求項９記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  11. 　前記機械可読ドットパターンは、前記ドットおよび／またはコントラスト制御領域の画素色によって、ドットコードおよび／またはXY座標が定義される、請求項２記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  12. 　前記複数の情報ドットまたは、前記複数の情報ドットおよび基準ドットは、所定のフレーム中の予め決められた所定位置に配置されることにより、前記機械可読ドットパターンの表示の有無を判定可能とする、請求項１記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
  13. 　前記機械可読ドットパターンが表示される場合には、
    　該機械可読ドットパターンを表示するフレームと同一のフレームに、前記表示装置に表示される画像を特定するためのインデックスを表示することを特徴とする、請求項１に記載の機械可読ドットパターンの表示装置を用いた表示フォーマット。
PCT/JP2011/078482 2010-12-09 2011-12-08 機械可読ドットパターンの表示装置を用いた表示フォーマット WO2012077766A2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201180058752.8A CN103250426B (zh) 2010-12-09 2011-12-08 机器可读式点阵图形的使用显示装置的显示格式
EP11846449.4A EP2650826A4 (en) 2010-12-09 2011-12-08 Display format using display device for machine-readable dot patterns
KR1020137017893A KR101988919B1 (ko) 2010-12-09 2011-12-08 기계 가독 도트 패턴의 표시 장치를 이용한 표시 포맷
US13/992,952 US9626934B2 (en) 2010-12-09 2011-12-08 Display format using display device for machine-readable dot patterns

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-274313 2010-12-09
JP2010274313A JP5315512B2 (ja) 2010-12-09 2010-12-09 機械可読ドットパターン

Publications (2)

Publication Number Publication Date
WO2012077766A2 true WO2012077766A2 (ja) 2012-06-14
WO2012077766A3 WO2012077766A3 (ja) 2012-08-23

Family

ID=46207560

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/078482 WO2012077766A2 (ja) 2010-12-09 2011-12-08 機械可読ドットパターンの表示装置を用いた表示フォーマット

Country Status (6)

Country Link
US (1) US9626934B2 (ja)
EP (1) EP2650826A4 (ja)
JP (1) JP5315512B2 (ja)
KR (1) KR101988919B1 (ja)
CN (1) CN103250426B (ja)
WO (1) WO2012077766A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014209373A1 (en) 2013-06-28 2014-12-31 Schneider Electric Usa Inc. Systems and methods of blending machine-readable and human-readable elements on a display
US9092687B2 (en) 2013-02-28 2015-07-28 International Business Machines Corporation Automatically converting a sign and method for automatically reading a sign

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685593B (zh) * 2012-04-25 2016-12-14 高亿实业有限公司 电视设备连网的控制方法以及电视设备连网的控制装置
CN103400102B (zh) * 2013-08-16 2016-12-28 徐宁 一种以图像为载体的信息传播系统、终端设备、服务器及其方法
KR101817153B1 (ko) * 2015-01-28 2018-01-11 한국전자통신연구원 기하학적 왜곡에 강인한 점 기반 정보를 사용하는 정보 삽입 방법, 정보 추출 방법 및 정보 추출 장치
US10490111B2 (en) * 2017-12-07 2019-11-26 Rockwell Collins, Inc. Passive and nonintrusive monitoring and reporting of frozen liquid crystal display (LCD)
CN111699464B (zh) * 2020-04-01 2023-08-11 深圳市鹰硕技术有限公司 一种显示点阵图形的方法、装置、电子设备及系统
US20220132216A1 (en) * 2020-10-24 2022-04-28 Edekee Inc. System and method of parallel data capture and tagging in videos

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005159569A (ja) 2003-11-21 2005-06-16 Ntt Advanced Technology Corp ２次元コードによる情報提供方法
JP3706385B2 (ja) 2003-03-17 2005-10-12 健治 吉田 ドットパターンを用いた情報入出力方法
JP3771252B1 (ja) 2005-07-01 2006-04-26 健治 吉田 ドットパターン
JP2007036833A (ja) 2005-07-28 2007-02-08 Sharp Corp 電子透かし埋め込み方法及び埋め込み装置、電子透かし検出方法及び検出装置
JP4478992B1 (ja) 2009-09-18 2010-06-09 健治 吉田 映像変換装置、映像出力装置、映像変換システム、映像、記録媒体、映像変換方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0816708A (ja) 1994-07-04 1996-01-19 Olympus Optical Co Ltd 情報再生装置及び情報表示装置
GB9806767D0 (en) * 1998-03-31 1998-05-27 Philips Electronics Nv Pixel colour valve encoding and decoding
US6621973B1 (en) * 2000-03-16 2003-09-16 3M Innovative Properties Company Light guide with protective outer sleeve
US6732927B2 (en) * 2001-06-26 2004-05-11 Anoto Ab Method and device for data decoding
JP2005038181A (ja) 2003-07-15 2005-02-10 Michiaki Nagai 多次元ドットコードを用いた情報授受システム
JP2006020144A (ja) 2004-07-02 2006-01-19 Ricoh Co Ltd 文書処理システム
JP4293111B2 (ja) 2004-10-27 2009-07-08 株式会社デンソー カメラ駆動装置、カメラ駆動プログラム、幾何学形状コード解読装置、および幾何学形状コード解読プログラム
JP2006259510A (ja) * 2005-03-18 2006-09-28 Brother Ind Ltd カラオケ装置及びプログラム
JP5288691B2 (ja) 2005-06-13 2013-09-11 豊 木内 ２次元コード読取プログラム
KR100746641B1 (ko) * 2005-11-11 2007-08-06 주식회사 칼라짚미디어 동영상 이미지 코드와 동영상 이미지 코드 생성/디코딩장치 및 그 방법
JP2007219347A (ja) * 2006-02-20 2007-08-30 Seiko Epson Corp 液晶装置、及び電子機器
JP2009175845A (ja) * 2008-01-22 2009-08-06 Fuji Xerox Co Ltd 画像処理装置、ペン・デバイスおよびプログラム
JP4907598B2 (ja) 2008-05-16 2012-03-28 京セラミタ株式会社 画像形成装置
JP4818394B2 (ja) 2009-05-13 2011-11-16 シャープ株式会社 画像処理装置、画像読取装置、画像形成装置、画像処理方法、コンピュータプログラム及び記録媒体

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3706385B2 (ja) 2003-03-17 2005-10-12 健治 吉田 ドットパターンを用いた情報入出力方法
JP2005159569A (ja) 2003-11-21 2005-06-16 Ntt Advanced Technology Corp ２次元コードによる情報提供方法
JP3771252B1 (ja) 2005-07-01 2006-04-26 健治 吉田 ドットパターン
JP2007036833A (ja) 2005-07-28 2007-02-08 Sharp Corp 電子透かし埋め込み方法及び埋め込み装置、電子透かし検出方法及び検出装置
JP4478992B1 (ja) 2009-09-18 2010-06-09 健治 吉田 映像変換装置、映像出力装置、映像変換システム、映像、記録媒体、映像変換方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2650826A4

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9092687B2 (en) 2013-02-28 2015-07-28 International Business Machines Corporation Automatically converting a sign and method for automatically reading a sign
WO2014209373A1 (en) 2013-06-28 2014-12-31 Schneider Electric Usa Inc. Systems and methods of blending machine-readable and human-readable elements on a display
EP3014822A4 (en) * 2013-06-28 2017-01-04 Schneider Electric USA, Inc. Systems and methods of blending machine-readable and human-readable elements on a display

Also Published As

Publication number Publication date
KR101988919B1 (ko) 2019-09-30
US9626934B2 (en) 2017-04-18
JP5315512B2 (ja) 2013-10-16
KR20130143101A (ko) 2013-12-30
EP2650826A2 (en) 2013-10-16
CN103250426B (zh) 2017-02-08
EP2650826A4 (en) 2018-02-14
US20130249933A1 (en) 2013-09-26
CN103250426A (zh) 2013-08-14
WO2012077766A3 (ja) 2012-08-23
JP2012123649A (ja) 2012-06-28

Similar Documents

Publication Publication Date Title
JP5315512B2 (ja) 機械可読ドットパターン
JP5576667B2 (ja) 情報送出表示システム
US20180131976A1 (en) Serializable visually unobtrusive scannable video codes
WO2014130213A1 (en) Systems and methods for appearance mapping for compositing overlay graphics
WO2011071081A1 (ja) 非可視化情報埋込装置、非可視化情報認識装置、非可視化情報埋込方法、非可視化情報認識方法、及び記録媒体
US20180220032A1 (en) Image processing method that obtains special data from an external apparatus based on information multiplexed in image data and apparatus therefor
Gao et al. The invisible QR code
Shi et al. Reading between lines: High-rate, non-intrusive visual codes within regular videos via implicitcode
CN101268700A (zh) 在视频上叠加字符的方法和设备
US10522115B2 (en) Display apparatus for displaying color identification code and control method thereof
CN113891167B (zh) 投屏方法和电子设备
US10290110B2 (en) Video overlay modification for enhanced readability
JP5787644B2 (ja) 画像処理装置および画像処理装置の制御方法
CN104881699A (zh) 基于时域心理视觉调制的二维码内嵌系统及显示方法
JP5067092B2 (ja) データ放送画面に二次元コードを表示させる方法、データ放送番組データ
KR20180000729A (ko) 디스플레이 장치 및 이의 제어 방법
JP5561649B2 (ja) 機械可読ドットパターン
JP6166767B2 (ja) 機械可読ドットパターン
JP2014179104A (ja) 機械可読ドットパターン
JP5798225B1 (ja) コード画像を用いた情報伝達システムおよび情報伝達方法
CN108712570B (zh) 增强智能移动设备检测隐藏图像的实况性与真实性的方法
JP2019158968A (ja) 表示制御装置、撮像装置、表示システム、表示制御方法及びプログラム
CN116887005B (zh) 投屏方法、电子设备和计算机可读存储介质
WO2018061232A1 (ja) 情報処理装置、表示方法、読取方法、およびコンピュータ読み取り可能な非一時的記憶媒体
JP6296319B1 (ja) 情報処理装置、表示方法、読取方法、およびコンピュータ読み取り可能な非一時的記憶媒体

Legal Events

Date Code Title Description
NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 13992952

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2011846449

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20137017893

Country of ref document: KR

Kind code of ref document: A