WO2004023397A1 - 視覚補助ネットワークサーバ、視覚補助ネットワークシステム、視覚補助方法、視覚補助システム、色覚機能通知システム、色覚機能通知用プログラム、色覚機能通知方法、色覚補助システム、色覚補助用プログラム、及び色覚補助方法 - Google Patents

視覚補助ネットワークサーバ、視覚補助ネットワークシステム、視覚補助方法、視覚補助システム、色覚機能通知システム、色覚機能通知用プログラム、色覚機能通知方法、色覚補助システム、色覚補助用プログラム、及び色覚補助方法 Download PDF

Info

Publication number
WO2004023397A1
WO2004023397A1 PCT/JP2003/002470 JP0302470W WO2004023397A1 WO 2004023397 A1 WO2004023397 A1 WO 2004023397A1 JP 0302470 W JP0302470 W JP 0302470W WO 2004023397 A1 WO2004023397 A1 WO 2004023397A1
Authority
WO
WIPO (PCT)
Prior art keywords
color
data
image
color vision
vision characteristic
Prior art date
Application number
PCT/JP2003/002470
Other languages
English (en)
French (fr)
Inventor
Kazuyoshi Ikado
Original Assignee
Kistem Co., Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kistem Co., Ltd filed Critical Kistem Co., Ltd
Priority to AU2003211555A priority Critical patent/AU2003211555A1/en
Priority to JP2004569801A priority patent/JPWO2004023397A1/ja
Priority to EP03794054A priority patent/EP1542164A1/en
Priority to US10/488,453 priority patent/US20050007449A1/en
Publication of WO2004023397A1 publication Critical patent/WO2004023397A1/ja

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00Teaching, or communicating with, the blind, deaf or mute
    • G09B21/001Teaching or communicating with blind persons
    • G09B21/008Teaching or communicating with blind persons using visual presentation of the information for the partially sighted
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32106Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
    • H04N1/32117Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate transmission or protocol signal prior to or subsequent to the image data transmission, e.g. in digital identification signal [DIS], in non standard setup [NSS] or in non standard field [NSF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034Details of the connection, e.g. connector, interface
    • H04N2201/0048Type of connection
    • H04N2201/0055By radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3243Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of type information, e.g. handwritten or text document
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/325Modified version of the image, e.g. part of the image, image reduced in size or resolution, thumbnail or screennail

Definitions

  • Visual assistance network server visual assistance network system, visual assistance method, visual assistance system, color vision function notification system, color vision function notification program, color vision function notification method, color vision assistance system, color vision assistance program, and color vision assistance Method Technique
  • the present invention relates to a visual assistance service system, a network server that provides the service, and a method of the service. More specifically, the present invention relates to a system for visually assisting inconveniences such as the elderly and color-blind persons in daily life using a network. In addition, the present invention relates to a color vision function notification system, a color vision function notification program, a color vision function notification method, a color vision function notification system, a color vision assistance system, a color vision assistance program, and a color vision assistance method for allowing a user to recognize a color weak spot in a screen.
  • a color vision function notification system a color vision function notification program, a color vision function notification method, a color vision function notification system, a color vision assistance system, a color vision assistance program, and a color vision assistance method for allowing a user to recognize a color weak spot in a screen.
  • color blindness Surprisingly many people have congenital color blindness, with women accounting for only 0.2%, while men account for as much as 5%. Of the color vision deficiencies, it is said that objects look black and white, so-called color blindness, is rare, and one or two wavelengths of red, green, and blue cannot be recognized.
  • mobile phones have exploded in recent years and have become the mainstream of e-mail sending and receiving devices along with conversations, but their support functions and usage for visual impairments such as color weakness and low vision are still scarce.
  • the functions of mobile phones have been increasingly diversified, and despite being compact and lightweight, they have also been used as image capturing devices, and it has become possible to transmit and receive captured images via a network.
  • the present invention intends to provide a visual assistance network system in order to attribute such high functionality, portability, spread, and the like of a portable terminal to the convenience of a color-blind person or the like.
  • colors can only be recognized by pointing with the mouse, so it was necessary to point at the entire screen with the mouse in order to recognize whether or not there were any difficult-to-identify parts in the screen.
  • colors are uniformly displayed in characters, processing corresponding to individual color vision characteristics could not be performed.
  • the pattern or character at that position can be recognized in relation to the surrounding colors. There were times when I could not understand.
  • the inventor of the present invention has conducted intensive studies in order to find out the cause of such a problem and to solve the problem, and as a result, has arrived at the present invention.
  • an object of the present invention is to provide a system, a program, and a method capable of recognizing whether or not there is a part in which a color is difficult to distinguish in a screen and capable of performing processing corresponding to the color vision characteristics of a person. It is another object of the present invention to provide a system, a program, and a method capable of recognizing not only a color but also a pattern or a character at the position. Disclosure of the invention
  • the visual assistance network server includes: an image data receiving unit that receives an image from a mobile terminal; a customer data storage unit that stores the image received by the image data receiving unit; An image color data analysis unit that acquires the image and generates color data of the image; a color data transmission unit that transmits the color data generated by the image color data analysis unit to the mobile terminal; including.
  • the color data transmitting means may transmit the color data to the portable terminal via a network.
  • the network may be an in-net network.
  • the visual auxiliary network server may include a web page distribution unit that displays the color data and the image on a web page and distributes the color data and the image to the network.
  • the color data transmitting means may transmit the color data to the portable terminal by e-mail.
  • the customer data storage unit registers a telephone number corresponding to the mobile terminal, and the color data transmission unit acquires the telephone number from the customer data storage unit and sends the color data to the mobile terminal corresponding to the telephone number.
  • the color data may be transmitted as audio.
  • the image color data analysis means may generate color data of a dot area near a center of the received image.
  • the image color data analysis unit generates color data of a dot area pointed by the portable terminal on the web page, and the color data transmission unit generates the color data generated by the image color data analysis unit. It may be transmitted to the portable terminal.
  • the visual assistance network server receives the image, and the visual assistance network server transmits the color data to the portable terminal.
  • a visual assistance method is a method in which a visual assistance network server and a portable terminal transmit and receive an image and a color image via a network, wherein the portable photographing means of the portable terminal captures an image.
  • the network can be the Internet.
  • the visual assistance network server includes a web page distribution unit, and the web page distribution unit displays the color data and the image on a web page. And distribute it to the network.
  • the color data transmitting means may transmit the color data to the portable terminal by e-mail.
  • the customer data storage unit registers a telephone number corresponding to the mobile terminal, and the color data transmitting unit acquires the telephone number from the customer data storage unit and sends the telephone number to the mobile terminal corresponding to the telephone number.
  • the color data of the image received from the mobile terminal may be transmitted as sound.
  • the image color data analysis means generates color data of a dot area near the center of the received image.
  • the image color data analysis unit generates color data of a dot area pointed by the portable terminal on the web page, and the color data transmission unit generates the color data generated by the image color data analysis unit.
  • the data may be transmitted to the mobile terminal.
  • the vision assisting system of the present invention is a vision assisting system provided in a portable terminal, and includes a photographing unit for photographing an image, a customer data storage unit for storing an image photographed by the photographing unit, and the customer data storage.
  • Image color data analysis means for generating color data of the image of the means; and color data display means for displaying the color data generated by the image color data analysis means.
  • the color vision function notification system includes: a storage unit that stores a color vision characteristic data of a user; an acquisition unit that captures original image data of one screen of a computer; and an original image data based on the color vision characteristic data.
  • Generating means for converting the original image data and the converted image data for each pixel to generate comparative image data; and Peripheral comparison means for comparing the converted image data of the pixel whose image data is equal to or more than a predetermined pixel comparison threshold value and the converted image data around the pixel;
  • a screen divider that contains pixels below the peripheral comparison threshold and above a certain value
  • a color-blind portion determining unit that determines that the color-blind portion is present; a mark display unit that displays a mark in a screen where the color-blind portion exists to recognize the presence of the color-blind portion;
  • a color-blind portion displaying means for displaying the color-blind portion on the color-blind portion so as to recognize the color-blind portion.
  • the converted image data is image data converted into a color that the user can actually see.
  • a pixel is one pixel or a group of pixels.
  • a color weak part is a part where it is difficult to recognize shapes, patterns, colors, characters, and the like due to difficulty in recognizing colors.
  • the screen division unit is one pixel or a plurality of pixel groups.
  • the color vision function notification system is characterized in that in the color vision function notification system, the color weak part display means performs color weak part display by inverting, modifying, or enhancing the color weak part.
  • the color vision function notification system in the color vision function notification system, a color vision characteristic display unit that displays color vision characteristic display data based on the color vision characteristic data on a screen, and changes the displayed color vision characteristic display data.
  • a color-vision characteristic changing unit that searches for a related portion associated with the color-vision characteristic display data in the screen, and an image conversion unit that converts and displays the image data of the searched related portion. It is characterized by the following.
  • the color-vision function notifying program includes: a computer, storage means for storing color-vision characteristic data of a user, acquisition means for capturing original image data of a computer screen, and color-vision characteristic data of the original image data.
  • a conversion means for converting the original image data and the converted image data on a pixel-by-pixel basis to generate comparison image data;
  • a peripheral comparison unit that compares the converted image data of pixels having a pixel value equal to or greater than a predetermined pixel comparison threshold value and converted image data around the pixel; a peripheral comparison threshold value in which the comparison result by the peripheral comparison means is constant; Contains the following pixels over a certain value
  • the storage means stores the color vision characteristic data of the user; the acquisition means captures the original image data of one screen of the computer; And converting the image data based on the color vision characteristic data to generate converted image data.
  • Pixel comparison means compares the original image data and the converted image data pixel by pixel to obtain comparison image data. Creating; and comparing the converted image data of a pixel whose comparison image data is equal to or greater than a certain pixel comparison threshold and converted image data of the periphery of the pixel;
  • the means includes a pixel whose comparison result by the peripheral comparison means is equal to or less than a certain peripheral comparison threshold value or more.
  • the screen division portion is a color-blind portion; mark displaying means for displaying a mark in a screen where the color-blind portion exists to recognize that the color-blind portion exists; and displaying the color-blind portion.
  • the color vision assisting system of the present invention includes: a storage unit that stores a user's color vision characteristic data; a color vision characteristic display unit that displays color vision characteristic display data based on the color vision characteristic data on a screen; and the displayed color vision characteristic display data.
  • a related part is searched, and an image of the searched related part is converted and displayed.
  • image conversion means means.
  • the color vision characteristics display data is stored separately from the color vision characteristics data to display the color vision characteristics data. Data.
  • the related portion to be associated is a portion having a color identical or similar to the color specified by the color vision characteristic display data, or a color having a certain relationship such as an opposite color in a color space.
  • the color space is an LMS color space, an RGB color space, an sRGB color space, a Lab color space, or the like.
  • the conversion by the image conversion means includes inversion, modification, emphasis, conversion to the opposite color, and the like.
  • a search is made for a related portion associated with the changed color vision characteristic display data. It is characterized by converting and displaying image data of related parts.
  • the color vision assisting system is the color vision assisting system, wherein the color vision characteristic display data is data that is specified by selecting a point, a line, or a range on a color space, and the color vision characteristic changing means is A means for adding or deleting a point, line, or range on the color space, or moving a point, line, or range on the color space to change the color vision characteristic data. I do.
  • the color vision assisting system wherein in the color vision assisting system, when the position of a point, line, or range in the color space is moved to change the color vision characteristic display data, the point, line, or range of the color space is changed. It is a means for changing the color vision characteristic display data by continuously moving the position. Continuous refers to movement that is not intermittent but analog.
  • the color vision assisting program includes: a computer, a storage unit that stores color vision characteristic data of a user, a color vision characteristic display unit that displays color vision characteristic display data based on the color vision characteristic data on a screen, Color conversion characteristics changing means for changing characteristic display data, image conversion means for retrieving a relevant portion in the screen associated with the color vision characteristic display data, converting and displaying the image data of the searched relevant portion, It is characterized by functioning as
  • the storage means stores the color vision characteristic data of the user, and the color vision characteristic display means displays the color vision display data based on the color vision data on a screen.
  • a step of changing the displayed color vision characteristic display data by the color vision characteristic changing means and a step of retrieving an image related to the color vision characteristic display data in the screen by the image conversion means. Converting and displaying the data.
  • the color vision function notification system is the color vision function notification system, wherein: the color vision characteristic display means for displaying a color vision characteristic display data based on the color vision characteristic data on a screen; and changing the displayed color vision characteristic display data.
  • Color vision characteristic changing means and image conversion means for retrieving a relevant part in the screen associated with the color vision characteristic display data, converting and displaying the image data of the retrieved relevant part.
  • Figure 1 is a schematic diagram of the visual assistance network server.
  • FIG. 2 is a schematic diagram of a case where a mobile phone is connected to the visual assistance network server N via the network to which the color vision assistance network server N belongs.
  • FIG. 3 is a schematic diagram of a case where a mobile phone is connected to the visual assistance network server N via the Internet.
  • FIG. 4 is a diagram showing a display of a mobile phone with an image capturing function on which a solid color T-shirt as a subject is displayed.
  • FIG. 5 is a diagram illustrating a display of a mobile phone with an image capturing function on which a T-shirt with a horizontal stripe as a subject is displayed.
  • FIG. 6 is a diagram showing a display of a mobile phone with an image capturing function in which simplified color data is displayed on a T-shirt with horizontal stripes as a subject.
  • Figure 7 (a) is a diagram showing the display of a mobile phone with an image capturing function in which color data is displayed in words.
  • FIG. 7 (b) is a diagram illustrating a display of a mobile phone with an image capturing function in which color data is displayed in a bar graph.
  • (c) is a diagram illustrating a display of a mobile phone with an image capturing function in which color data is displayed for each pointer.
  • FIG. 8 is a configuration diagram showing the color vision function notification system of the present invention.
  • FIG. 9 is a configuration diagram showing the color vision assistance system of the present invention.
  • FIG. 10 is a diagram showing color vision characteristic data used in the color vision function notification system and the color vision assistance system of the present invention.
  • FIG. 11 is a diagram showing a screen using the color vision function notification system of the present invention.
  • FIG. 12 is a diagram showing data created by the color vision function notification system of the present invention.
  • FIG. 13 is a diagram showing a screen using the color vision function notification system of the present invention.
  • FIG. 14 is a diagram showing a screen using the color vision function notification system of the present invention.
  • FIG. 15 is a diagram showing a part of the screen of FIG.
  • FIG. 16 is a diagram showing a screen using the color vision assistance system of the present invention.
  • FIG. 17 is a configuration diagram showing another embodiment of the visual assistance system of the present invention.
  • the visual assistance network system of the present invention will be described using a commercially available mobile phone K with an image capturing function.
  • a commercially available mobile phone K with an image capturing function.
  • the method of the visual assist method will be explained.
  • FIG. It comprises a data receiving means 12, an image color data analyzing means 14, a color data transmitting means 16, and a customer data storing means 18. Since the mobile phone K normally has a mail function, in the case of the present embodiment, the color data transmitting means 16 may be an electronic mail.
  • the transmitted mail is received by the image data receiving means 12 of the visual assistance network server N via the network.
  • the received image data is sent to the customer data storage means 18 and stored in a pre-registered user area.
  • dots are usually arranged in a matrix, and each dot has a value of RGB (Red, Green, Blue).
  • the image color data analyzing means 14 immediately reproduces the image 20 attached to the mail, and analyzes the color of the dot area 24 near the center of the image 20, for example. If you want to know the approximate color of the image, it is most appropriate to represent the center and examine the color around it. However, other regions may be analyzed.
  • Information on the colors obtained by the image color data analysis means 14 includes the hue indicating how many colors the subject T1 has, the brightness of the colors (brightness, brightness), the vividness (saturation, saturation), and the like. is there. Information such as whether the subject T1 has metallic luster or transparency may be included.
  • the obtained color data is analyzed by the image color data analyzing means 14.
  • the obtained color data is represented, for example, as shown in FIGS.
  • hue is (red, orange, yellow, green, blue-green, blue, blue-violet, purple, red-purple) or
  • the colors are selected from the more subdivided colors, and the saturation is represented as (red, bright red, light red, very light red, white).
  • Lightness is represented as (white, light gray, gray, dark gray, black).
  • the degree of the three elements of the color data may be expressed in a bar graph shape or a pie graph as shown in FIG. 7C. If the degree of change in hue and the like is represented together with characters expressing the hue such as red and blue, it will also be possible for a person with a disability such as color weakness to be trained in color identification.
  • S can know information about the color of the solid-colored subject T1. If you take an image of the subject T1 with the mobile phone K with image capturing function and send an e-mail with the image data attached to the visual aid network server N, the e-mail with the color data of the object T1 will be automatically sent. Very easy and convenient because it arrives.
  • the connection to the visual auxiliary network server N by the mobile phone may be made via an intra network to which the visual auxiliary network server N belongs. If the user does not belong to the intra network, the user may connect to the visual auxiliary network server N via the Internet as shown in FIG.
  • the subject T 1 is a solid green color, but as another embodiment of the present invention, as shown in FIG. 5, a green background 3 2 further includes, for example, a red horizontal stripe 33. The case will be described.
  • S photographs the subject T2 with the mobile phone K in the same manner as in the above example.
  • the image data 30 is attached to the mail, and the image data is transmitted to the visual assistance network server N.
  • the image color data analysis means 14 analyzes the color of the dot area 34 near the center of the image as in the above example, and stores the obtained color data, the above image data, etc. in the customer data storage means 18. accumulate. At the same time, the image color data analyzing means 14 sends the color data as an email through the color data transmitting means 16 or Send to S's mobile phone K by other means.
  • the customer data storage unit 18 stores the image so that S does not need to take another image of the subject ⁇ 2 and transmit another image data to the visual assistance network server ⁇ .
  • the color data and the image data are used.
  • S accesses the visual auxiliary network server ⁇ on the screen of the mobile phone ⁇ via the Internet, etc., and calls the web page of its own customer data storage means 18. Then, the image of the subject # 2 is called on the web page, and the point of the color to be known is designated by a pointer using a key or the like. For example, if S wants color data for a horizontal stripe portion 33, the pointer 36 points to a point 36 included in the horizontal stripe.
  • the image color data analysis means 14 analyzes the color of the point 36 designated by the pointer in the image of ⁇ 2 above. In this way, S can obtain information on the color of the horizontal stripe 33 including the point 36 by pointing the color portion to be known any number of times in the above web page.
  • the color of the center point 3 4 of the transmitted image was analyzed by e-mail or the like for the first time, and from the image stored in the visual assistance network server ⁇ , ⁇ Although the analysis is performed on the six colors, a plurality of desired points may be specified by pointer from the beginning.
  • the ground part may be specified by the pointer 1 and the horizontal stripe part may be specified by the pointer 2.
  • the visual assistance network server ⁇ may write simple information such as a pointer and a hue to the image received from the mobile phone ⁇ and transmit the image to the mobile phone ⁇ , as shown in FIG. It is preferable to use a graph because it appeals to the visual sense.
  • the color data transmitting means 16 transmitted the color data obtained by the analysis of the image color data analyzing means 14 to the mobile phone K of S by e-mail. May inform S of the color data. That is, when the mobile phone K accesses the mobile phone, the storage means 18 of the visual assistance network server searches for the telephone number of the customer registered in advance, and the color data overnight transmission means 16 is used for the mobile phone. Calls K and transmits the generated color data to S by voice.
  • the above-described visual auxiliary network system can be used by anyone if it is registered in the host computer of the network to which the visual auxiliary network server belongs. Alternatively, the information may be registered in the storage means 18 of the visual auxiliary network server. By registration, the URL of the visual assistance network server is notified.
  • the billing method is not particularly limited.
  • the visual assistance network system may be charged according to the number of uses. Also in this case, the billing and payment methods are not particularly limited.
  • a mobile phone is used as an image capturing portable terminal.
  • a visual assistant network system can be used using a personal computer terminal when in a house or the like. In this case, the captured image on the PC screen can be left as it is, and the color data can be heard on a fixed telephone.
  • the visual assistance network system can be used by combining various devices.
  • the present invention may be a visual assistance system 150 provided in the mobile terminal K as shown in FIG.
  • the visual assistance system 150 includes a photographing unit 152 for photographing an image, a customer data storage unit 154 for storing an image photographed by the photographing unit 152, and a customer data storage unit 1554.
  • the color of the image An image color data analysis unit 156 for generating the image data and a color data display unit 158 for displaying the color data generated by the image color data analysis unit 156 are provided.
  • the photographing means 152 is composed of an element such as CMOS or CCD.
  • the customer data storage means 154 and the image color data analysis means 156 are a memory or a CPU in the mobile terminal K.
  • the color data display means 158 is a display or the like of the mobile terminal K. In the case of this visual aid system 150, color data can be recognized without going through the Internet.
  • reference numeral 110 denotes a color vision function notification system of the present invention
  • reference numeral 111 denotes a color vision assistance system of the present invention.
  • the color vision function notification system 110 is composed of storage means 112 for storing the user's color vision characteristic data D, and acquisition means 1 for taking in the original image data A of one computer screen. 14 and a creation means 1 16 for converting the original image data A based on the color vision characteristic data D to create the converted image data B, and the original image data A and the converted image data B for each pixel.
  • Pixel comparison means 1 18 for comparing and creating comparison image data C; conversion image data B for pixels whose comparison image data is greater than or equal to a certain pixel comparison threshold; and conversion image data B around pixels.
  • the color comparison section 1 20 and the color comparison section 1 22 which determine that the screen division portion including pixels equal to or less than a certain value as the comparison result by the peripheral comparison means 1 20 or more is a color weak section 1 22.
  • Judge 1 2 4 and mark display means 1 2 8 for displaying an exclusion mark 1 2 6 in the screen where the color weakness 1 2 2 exists to recognize the presence of the color weakness 1 2 2
  • a color weak part display means 130 is provided for displaying a color weak part 122 on the color weak part 122 in the screen where the part 122 exists. Therefore, the program for notifying the color vision function of the present invention uses the computer 1 as storage means 112, acquisition means 114, creation means 116, pixel comparison means 118, peripheral comparison means 120, and color weakness. This is a program that functions as the part determining means 124, the mark displaying means 128, and the color weakness displaying means 130.
  • the color vision function notification program is operated by a personal computer, but may be operated by a mobile terminal or a server.
  • the color vision assisting system 1 1 1 displays a storage means 1 1 2 and a color vision characteristic display means 1 3 4 for displaying color vision characteristic display data E based on the color vision characteristic data D on a screen.
  • a means for changing the color vision characteristic display data E1 and a related part associated with the color vision characteristic display data E on the screen are searched, and the original image data A of the searched related part is converted.
  • the storage means 112 is shared by the color vision function notification system 110 and the color vision assistance system 111.
  • the color vision assisting program of the present invention is a program that causes a computer to function as the storage means 112, the color vision characteristic display means 134, the color vision characteristic changing means 132, and the image conversion means 136.
  • the color vision assisting program is operated by a personal computer, but may be operated by a mobile terminal or a server.
  • color vision function notification system 110 and the color vision assistance system 111 will be described below to describe the color vision function notification method and the color vision assistance method.
  • a user using the color vision function notification system 110 and the color vision assistance system 111 of the present invention starts up a personal computer and activates the color vision function notification system 110, a screen for examining color vision characteristics is displayed. Is done. The user inputs an answer to the question. For example, enter “red” in response to the question “What is the color that has been difficult to see conventionally?”.
  • the color vision function notification system 110 can display the color vision characteristic data D Is created and registered in the storage means 1 1 2. For example, as shown in FIG. 10, a range 138 is specified by a line on the HSB color space, or registered in the form of color vision characteristic data D specified by a point 140.
  • the color vision function notification system 110 functions.
  • the acquisition means 114, the creation means 116, and the pixel comparison means 118 work, and as shown in Figure 12, the original image data A and the converted image Data B and comparison image data C are created.
  • the comparison image data C is created, for example, in a data format in which the original image data A and the conversion image data B are subtracted for each pixel.
  • the peripheral comparing means 120 functions to determine for each pixel whether or not there is comparison image data C having a certain pixel comparison threshold or more, and if there is a pixel having a certain pixel comparison threshold or more.
  • the converted image data B of the pixel is compared with the converted image data B of the surrounding pixels.
  • the color weakness determination means 124 functions, and pixels whose comparison result is equal to or less than a certain peripheral comparison threshold value are portions in which it is difficult for the user to recognize the difference between the colors of the peripheral pixels and such pixels. It is determined that a screen division portion including a certain pixel or more in a certain value or more is a color weakness portion 122.
  • the converted image data B is image data that the user actually sees, and the converted image data B is compared with the surroundings to determine the color weakness 122 that the user is hard to recognize in reality.
  • the mark display means 128 functions to display an exclamation mark 126 on the screen as shown in FIG.
  • the user recognizes that there is a color weakness portion 122 in the screen by looking at the exchange mark 122.
  • color weakness display means 1 3 0 Functions, the original image data A of the color weakness part 122 is inverted, and the color weakness part display is performed as shown in FIGS. 14 and 15. The user can recognize the position of the color weakness 122 by this color weakness display.
  • the color weakness display may be a display that makes the color more white according to the degree of risk of color weakness, or a display that emphasizes the shading according to the degree of risk.
  • the user who has confirmed that the color-blind portion 1 2 2 exists in the screen and the position of the color-blind portion 1 2 2 activates the color vision assist system.
  • the color vision assistance system 111 of the present invention is activated.
  • the color vision characteristic display means 13 4 When the color vision assist system 1 1 1 is activated, the color vision characteristic display means 13 4 functions, and as shown in FIG. 16, the color vision characteristic display data E based on the color vision characteristic data D already registered on the screen is displayed. Is displayed.
  • the image conversion means 136 functions to search the screen for a related portion associated with the color vision characteristic display data E, and to convert the original image data A of the related portion. For example, in the color vision characteristic display data E in Fig. 16, the vicinity of red and the vicinity of yellow-green are specified as the range 138 related to color weakness, so the part similar to red or red, and the yellow-green or yellow-green A part similar to is searched as a related part, and the related part is inverted and displayed above the color vision characteristic display data E.
  • the color vision characteristic display data E can be changed by making the color vision characteristic changing means 13 2 function. That is, the user can click on the line 139 that specifies the area 138 and rotate it continuously in the HSB space to change the area 138.
  • the image conversion means 1 36 functions instantaneously to search the screen for a relevant portion associated with the color vision characteristic display data E, and The original image data A is converted and displayed above the color vision characteristic display data E. Therefore, it can be confirmed that the related portion changes in real time while changing the color vision characteristic display data E.
  • the user can confirm his / her own color vision characteristics by comparing the displayed color vision characteristics display data E with the screen. Also, analog The user can intuitively recognize his or her own color vision characteristics because it is possible to confirm that the position of the relevant portion changes in real time while changing the color vision characteristic display data E in real time.
  • a target using the color vision function notification system and the color vision assistance system of the present invention is not limited to a still image, but may be a moving image.
  • the color weakness display and related parts are displayed frame by frame following the moving image.
  • the technical scope of the present invention includes embodiments in which various improvements, modifications, and variations are made based on the knowledge of those skilled in the art without departing from the spirit of the invention. Further, within the range where the same operation or effect is produced, any of the invention specific matters may be replaced with another technology.
  • the subject is automatically photographed by photographing the subject with the image capturing portable terminal and sending an e-mail with the image data attached to the visual assistance network server. It is very easy and convenient because you receive an e-mail with the data.
  • the color vision function notification system the color vision function notification program, and the color vision function notification method of the present invention, it is possible to determine whether or not a color-blind portion exists in an open computer screen and to determine where the color-blind portion is located. You can check.
  • the peripheral weakness part is determined by the peripheral comparison means, it is possible to confirm whether there is a part where it is difficult to recognize colors, patterns, and characters in relation to the surroundings, not just a color that is difficult for the user to see. .
  • the user's color vision characteristic data is examined in advance and registered in the storage unit, and the color weakness part is determined based on the color vision characteristic data.
  • the user can make an accurate judgment because the judgment is made based on the converted image composed of colors that can be seen in reality.
  • the color vision assisting system the color vision assisting program, and the color vision assisting method of the present invention, it is possible to confirm the relevant portion while changing the color vision characteristic display data based on the color vision characteristic data once registered. Therefore, the user can check his / her own color vision characteristics.

Abstract

 本発明は、画像撮影携帯端末の高機能性、携帯性、普及度等を色弱者等の利便に帰すべく、視覚補助ネットワークシステムを提供しようとする。本発明の提供する視覚補助ネットワークサーバは、携帯端末から画像を受信する画像データ受信手段と、前記画像データ受信手段が受信した前記画像を記憶する顧客データ記憶手段と、前記顧客データ記憶手段から前記画像を取得して、該画像の色データを生成する画像色データ解析手段と、前記画像色データ解析手段が生成した色データを、前記携帯端末へ送信する色データ送信手段と、を含む。

Description

明細書
視覚補助ネットワークサーバ、 視覚補助ネッ卜ワークシステ ム、 視覚補助方法、 視覚補助システム、 色覚機能通知システム、 色覚機能 通知用プログラム、 色覚機能通知方法、 色覚補助システム、 色覚補助用プ ログラム、 及び色覚補助方法 技俯分野
本発明は、 視覚補助サ一ビスシステム、 当該サービスを提供するネット ワークサーバ、 及び当該サ一ビスの方法に関する。 更に詳しくは、 日常生 活において老人や色覚障害者等の被る不便を、 ネットワークを用いて視覚 補助するシステム等に関する。 また、 本発明は、 ユーザーに画面内の色弱 部を認識させる色覚機能通知システム、 色覚機能通知用プログラム、 色覚 機能通知方法、 色覚補助システム、 色覚補助用プログラム、 及び色覚補助 方法に関する。 背景技術
先天的に色覚異常を持つ人は意外に多く、 女性は 0 . 2 %に留まるもの の、 男性では 5 %にも上ると言われている。 色覚異常のうち、 物が白黒に 見える、 いわゆる色盲は稀で、 赤、 緑、 青のどれか一つ又は二つの波長が 認識できない、 いわゆる色弱が多いといわれている。
このような色弱者は、 日常生活において顕著に不便を感じるわけではな いが、 例えば服を買ったり、 家具をコ一ディネ一トしたりしたい時等、 他 人の目に晒される物を選ぶ時等は、 本当の色を知りたいと思うものである。 また、 色を混同するがために危険な事態に陥ることもある。 このような場 合、 手軽に目の前にある物の本当の色を知ることができる方法があれば非 常に便利である
従来、 音声を発して物の色を色覚異常者に伝える専用の機械はあったが、 周りの人に自分が色覚に障害をもつことがわかってしまうため、 色弱者等 には使いにくい面があった。 また、 色弱は日常生活にはさほど支障となら ず、 常時色について確認したいわけでもないのに、 わざわざいつもそのよ うな機械を持ち歩くのも億劫なものである。
一方、 従来よりパソコン上で文字情報を音声化して視覚障害者を補助す る機器は広く実用化されている。 また、 イン夕一ネットを通じて視覚障害 者等がパソコンの画面の力ラーや文字情報を認識できるようにするシステ ムも登場してきている (特願 2 0 0 2 - 9 8 4 1 9 ) 。
しかし、 近年爆発的に携帯電話が普及し、 会話と共に、 メールの送受信 機器の主流となってきたが、 色弱や弱視等の視覚障害に対する支援機能や 利用法は未だ乏しい。 更に最近では益々携帯電話の機能の多様化は進み、 コンパクトで軽量であるにも拘わらず、 画像撮影機器としても使用され、 撮った画像をネットワークを介して送受信することも可能となった。
そこで本発明は、 このような携帯端末の高機能性、 携帯性、 普及度等を 色弱者等の利便に帰すべく、 視覚補助ネットワークシステムを提供しょう とする。
従来から、 画面に表わされた色彩について、 色弱者に正しい色を認識さ せるソフトが案出されている (例えば、 非特許文献 「中原ひかる、 ' 色々 の色〃 、 「onl ine」 、 平成 9年 4月、 中原ひかる、 [平成 1 4年 1 2月 4 日検索] , インターネット、 <ht tp ://www. hikanrn. eom/w/>」 参照。 ) 。 このソフトによれば、 画面上のマウスで指した位置の色を文字で表示する ことができる。
しかし、 マウスで指すことによって初めて色を認識できるため、 画面内 に色を識別し難い部分があるか否かを認識するためには、 マウスで画面全 体を指していく必要があった。 また、 一律に色を文字で表示するため、 個 人の色覚特性に対応した処理ができなかった。 また、 マウスで指した位置 の色を認識できても、 周囲の色との関係で、 その位置の模様又は文字を認 識できない場合があった。
そこで、 本発明者は、 このような課題の原因を究明してこのような課題 を解決するべく、 鋭意研究を重ねた結果、 本発明に至ったのである。
すなわち、 本発明は、 画面内に色を識別し難い部分があるか否かを認識 できるとともに人の色覚特性に対応した処理のできるシステム、 プロダラ ム、 及び方法を提供することを目的とする。 また、 色だけでなく、 その位 置の模様又は文字を認識できるシステム、 プログラム、 及び方法を提供す ることを目的とする。 発明の開示
本発明の提供する視覚補助ネットワークサーバは、 携帯端末から画像を 受信する画像デ タ受信手段と、 前記画像データ受信手段が受信した前記 画像を記憶する顧客データ記憶手段と、 前記顧客データ記憶手段から前記 画像を取得して、 該画像の色データを生成する画像色データ解析手段と、 前記画像色データ解析手段が生成した色データを、 前記携帯端末へ送信す る色デ一タ送信手段と、 を含む。
前記色データ送信手段は、 ネットワークを介して前記色データを前記携 帯端末へ送信し得る。
前記ネットワークはイン夕一ネットであり得る。
前記視覚補助ネットヮ一クサ一バは、 前記色データ及び前記画像をゥェ ブページに表示して前記ネットワークに配信するウェブページ配信手段を 備え得る。
前記色デー夕送信手段は、 前記色デ一夕をメールにより前記携帯端末へ 送信してもよい。
前記顧客データ記憶手段は、 前記携帯端末に対応する電話番号を登録し、 前記色データ送信手段は、 前記顧客データ記憶手段から前記電話番号を取 得して該電話番号に対応する携帯端末へ、 該携帯端末から受信した画像の 前記色データを音声として送信し得る。
前記画像色データ解析手段は、 前記受信した画像の中心付近のドット領 域の色データを生成し得る。
前記画像色データ解析手段は、 前記携帯端末が前記ウェブページ上でポ インタ指定したドット領域の色データを生成し、 前記色データ送信手段は、 前記画像色データ解析手段が生成した色データを、 前記携帯端末へ送信し てもよい。
本発明に係る視覚補助ネットワークシステムは、 視覚補助ネットワーク サーバが画像を受信し、 該視覚補助ネットワークサーバは該携帯端末に前 記色デ一夕を送信する。
本発明に係る視覚補助方法は、 ネットワークを介して視覚補助ネットヮ ークサーバと携帯端末が画像及び色デ一夕を送受信する方法であって、 前 記携帯端末の携帯撮影手段が画像を撮影するステツプ、 前記携帯端末の携 帯送受信手段がネットワークを介して前記画像を前記視覚補助ネットヮー クサ一バに送信するステップ、 前記視覚補助ネットワークサーバの画像デ 一夕受信手段が、 前記画像を受信するステップ、 前記視覚補助ネットヮ一 クサーバの顧客デ一夕記憶手段が、 前記画像データ受信手段が受信した前 記画像を記憶するステップ、 前記視覚補助ネットワークサーバの画像色デ 一夕解析手段が、 前記顧客データ記憶手段から前記画像を取得して、 該画 像から色データを生成するステップ、 前記視覚補助ネットワークサーバの 色データ送信手段が、 前記画像色データ解析手段が生成した色データを、 前記ネットワークを介して前記携帯端末へ送信するステップ、 前記携帯端 末の携帯受信手段が、 前記色データ送信手段が送信した前記色データを、 前記ネットワークを介して受信するステップ、 から構成される。
前記ネットワークはインターネットであり得る。
前記視覚補助ネットワークサーバはウェブページ配信手段を備え、 前記 ウェブページ配信手段は、 前記色データ及び前記画像をウェブページに表 示して前記ネットワークに配信し得る。
前記色データ送信手段は、 前記色データをメールにより前記携帯端末へ 送信し得る。
前記顧客デー夕記憶手段は、 前記携帯端末に対応する電話番号を登録し、 前記色データ送信手段は、 前記顧客データ記憶手段から前記電話番号を取 得して該電話番号に対応する携帯端末へ、 該携帯端末から受信した画像の 前記色デ一夕を音声として送信してもよい。
前記画像色データ解析手段は、 前記受信した画像の中心付近のドット領 域の色データを生成する。
前記画像色データ解析手段は、 前記携帯端末が前記ウェブページ上でポ インタ指定したドット領域の色データを生成し、 前記色データ送信手段は、 前記画像色データ解析手段が生成した色データを、 前記携帯端未へ送信し 得る。
本発明の視覚補助システムは、 携帯端末内に備えられる視覚補助システ ムであり、 画像を撮影する撮影手段と、 前記撮影手段が撮影した画像を記 憶する顧客データ記憶手段と、 前記顧客データ記憶手段の画像の色データ を生成する画像色データ解析手段と、 前記画像色データ解析手段が生成し た色データを表示する色データ表示手段と、 を含む。
本発明の色覚機能通知システムは、 ユーザ一の色覚特性デ一夕を記憶す る記憶手段と、 コンピュータ一画面の原イメージデータを取り込む取得手 段と、 前記原イメージデータを前記色覚特性データに基づいて変換して変 換ィメ一ジデータを作成する作成手段と、 前記原ィメ一ジデー夕及び前記 変換イメージデータをピクセル毎に比較して比較イメージデータを作成す るピクセル比較手段と、 前記比較ィメ一ジデ一夕が一定のピクセル比較閾 値以上であるピクセルの変換イメージデ一夕及び該ピクセルの周辺の変換 イメージデータを比較する周辺比較手段と、 前記周辺比較手段による比較 結果が一定の周辺比較閾値以下のピクセルを一定値以上含む画面分割部を 色弱部であると判断する色弱部判断手段と、 前記色弱部が存在する画面内 にマークを表示して色弱部が存在することを認識させるマーク表示手段と、 前記色弱部が存在する画面内の該色弱部に色弱部表示を行って該色弱部を 認識させる色弱部表示手段と、 を含むことを特徴とする。
本明細書において、 変換イメージデータとは、 ユーザーが実際に見えて いる色に変換したイメージデータである。 ピクセルとは、 一つの画素又は 複数の画素群である。 色弱部とは、 色の認識が困難であることにより、 形 状、 模様、 色彩、 文字等の認識が困難な部分である。 画面分割部とは、 一 つのピクセル又は複数のピクセル群である。
本発明の色覚機能通知システムは、 前記色覚機能通知システムにおいて、 前記色弱部表示手段が前記色弱部を反転、 修飾又は強調して色弱部表示を 行うことを特徴とする。
本発明の色覚機能通知システムは、 前記色覚機能通知システムにおいて、 前記色覚特性デ一夕に基づく色覚特性表示デー夕を画面に表示する色覚特 性表示手段と、 前記表示した色覚特性表示データを変更する色覚特性変更 手段と、 前記画面内の前記色覚特性表示デー夕に関連付けられる関連部分 を検索し、 該検索した関連部分のイメージデータを変換して表示するィメ ージ変換手段と、 を含むことを特徴とする。
本発明の色覚機能通知用プログラムは、 コンピュータ一を、 ユーザ一の 色覚特性デー夕を記憶する記憶手段、 コンピュータ一画面の原イメージデ —夕を取り込む取得手段、 前記原イメージデータを前記色覚特性データに 基づいて変換して変換イメージデータを作成する作成手段、 前記原ィメ一 ジデータ及び前記変換イメージデータをピクセル毎に比較して比較ィメ一 ジデー夕を作成するピクセル比較手段、 前記比較ィメ一ジデ 夕が一定の ピクセル比較閾値以上であるピクセルの変換イメージデ一夕及び該ピクセ ルの周辺の変換イメージデータを比較する周辺比較手段、 前記周辺比較手 段による比較結果が一定の周辺比較閾値以下のピクセルを一定値以上含む 画面分割部を色弱部であると判断する色弱部判断手段、 前記色弱部.が存在 する画面内にマークを表示して色弱部が存在することを認識させるマーク 表示手段、 前記色弱部が存在する画面内の該色弱部に色弱部表示を行って 該色弱部を認識させる色弱部表示手段、 として機能させることを特徴とす る。
本発明の色覚機能通知方法は、 記憶手段が、 ユーザーの色覚特性データ を記憶するステップと、 取得手段が、 コンピュータ一画面の原イメージデ 一夕を取り込むステップと、 作成手段が、 前記原イメージデータを前記色 覚特性データに基づいて変換して変換イメージデータを作成するステップ と、 ピクセル比較手段が、 前記原イメージデ一夕及び前記変換イメージデ —夕をピクセル毎に比較して比較イメージデータを作成するステップと、 周辺比較手段が、 前記比較イメージデ一夕が一定のピクセル比較閾値以上 であるピクセルの変換イメージデータ及び該ピクセルの周辺の変換ィメ一 ジデータを比較するステップと、 色弱部判断手段が、 前記周辺比較手段に よる比較結果が一定の周辺比較閾値以下のピクセルを一定値以上含む画面 分割部を色弱部であると判断するステップと、 マーク表示手段が、 前記色 弱部が存在する画面内にマークを表示して色弱部が存在することを認識さ せるステップと、 色弱部表示手段が、 前記色弱部が存在する画面内の該色 弱部に色弱部表示を行って該色弱部を認識させるステップと、 を含むこと を特徴とする。
本発明の色覚補助システムは、 ユーザーの色覚特性デー夕を記憶する記 憶手段と、 前記色覚特性データに基づく色覚特性表示データを画面に表示 する色覚特性表示手段と、 前記表示した色覚特性表示デー夕を変更する色 覚特性変更手段と、 前記画面内の前記色覚特性表示デー夕に関連付けられ. る関連部分を検索し、 該検索した関連部分のィメ一ジデ一夕を変換して表 示するイメージ変換手段と、 を含むことを特徴とする。 色覚特性表示デ一 夕は、 色覚特性データを表示するために色覚特性デー夕とは別個に記憶さ れるデータである。
本明細書において、 関連付けられる関連部分とは、 色覚特性表示デ一夕 によって特定された色彩と同一若しくは類似する色彩の部分、 又は色空間 上の反対色等の一定関係を有する色彩等である。 色空間とは、 L M S色空 間、 R G B色空間、 s R G B色空間、 又は L a b色空間等である。 ィメー ジ変換手段による変換は、 反転、 修飾、 強調、 反対色への変換等である。 本発明の色覚補助システムは、 前記色覚補助システムにおいて、 前記ィ メージ変換手段が、 色覚特性表示データを変更した時に、 該変更後の色覚 特性表示データに関連付けられる関連部分を検索し、 該検索した関連部分 のイメージデータを変換して表示することを特徴とする。
本発明の色覚補助システムは、 前記色覚補助システムにおいて、 前記色 覚特性表示データが、 色空間上に点、 線又は範囲を選択して特定されるデ —夕であり、 前記色覚特性変更手段が、 該色空間上の点、 線又は範囲を追 加若しくは削除し、 又は該色空間上の点、 線又は範囲の位置を移動して色 覚特性デー夕を変更する手段であることを特徴とする。
本発明の色覚補助システムは、 前記色覚補助システムにおいて、 前記色 空間上の点、 線又は範囲の位置を移動して色覚特性表示データを変更する 場合、 該色空間上の点、 線又は範囲の位置を連続的に移動して色覚特性表 示データを変更する手段であることを特徴とする。 連続的とは、 断続的で なく、 アナログ的に移動することである。
本発明の色覚補助用プログラムは、 コンピュータ一を、 ユーザ一の色覚 特性データを記憶する記憶手段、 前記色覚特性データに基づく色覚特性表 示データを画面に表示する色覚特性表示手段、 前記表示した色覚特性表示 データを変更する色覚特性変更手段、 前記画面内の前記色覚特性表示デー 夕に関連付けられる関連部分を検索し、 該検索した関連部分のイメージデ 一夕を変換して表示するイメージ変換手段、 として機能させることを特徴 とする。 本発明の色覚補助方法は、 記憶手段が、 ユーザ一の色覚特性データを記 憶するステップと、 色覚特性表示手段が、 前記色覚特性デ 夕に基づく色 覚表示データを画面に表示するステップと、 色覚特性変更手段が、 前記表 示した色覚特性表示データを変更するステツプと、 ィメージ変換手段が、 前記画面内の前記色覚特性表示データに関連付けられる関連部分を検索し、 該検索した関連部分のィメージデータを変換して表示するステップと、 を 含むことを特徴とする。
本発明の色覚機能通知システムは、 前記色覚機能通知システムにおいて、 前記色覚特性データに基づく色覚特性表示デ一夕を画面に表示する色覚特 性表示手段と、 前記表示した色覚特性表示データを変更する色覚特性変更 手段と、 前記画面内の前記色覚特性表示データに関連付けられる関連部分 を検索し、 該検索した関連部分のイメージデータを変換して表示するィメ ージ変換手段と、 を含む。 図面の簡単な説明
図 1は、 視覚補助ネットワークサーバの概略図である。
図 2は、 携帯電話 から、 色覚補助ネットワークサーバ Nの属するネッ トワークを介して、 視覚補助ネットワークサーバ Nに接続する場合の概略 図である。
図 3は、 携帯電話 から、 インターネットを介して、 視覚補助ネットヮ —クサーバ Nに接続する場合の概略図である。
図 4は、 被写体である無模様一色の Tシャツが表示された画像撮影機能 付き携帯電話のディスプレイを表す図である。
図 5は、 被写体である横縞入りの Tシャツが表示された画像撮影機能付 き携帯電話のディスプレイを表す図である。
図 6は、 被写体である横縞入りの Tシャツに簡略化された色データが表 示された画像撮影機能付き携帯電話のディスプレイを表す図である。 図 7 ( a ) は、 色データが言葉で表示された画像撮影機能付き携帯電話 のディスプレイを表す図である。 図 7 ( b ) は、 色データが棒グラフで表 示された画像撮影機能付き携帯電話のディスプレイを表す図である。 図 7
( c ) は、 色データがポインタごとに表示された画像撮影機能付き携帯電 話のディスプレイを表す図である。
図 8は、 本発明の色覚機能通知システムを示す構成図である。
図 9は、 本発明の色覚補助システムを示す構成図である。
図 1 0は、 本発明の色覚機能通知システム及び色覚補助システムに使用 する色覚特性データを示す図である。
図 1 1は、 本発明の色覚機能通知システムを使用した画面を示す図であ る。
図 1 2は、 本発明の色覚機能通知システムにより作成するデータを示す 図である。
図 1 3は、 本発明の色覚機能通知システムを使用した画面を示す図であ る。
図 1 4は、 本発明の色覚機能通知システムを使用した画面を示す図であ る。
図 1 5は、 図 1 4の画面の一部を示す図である。
図 1 6は、 本発明の色覚補助システムを使用した画面を示す図である。 図 1 7は、 本発明の視覚補助システムの他の実施形態を示す構成図であ る。 発明を実施するための最良の形態
本実施の形態では、 市販の画像撮影機能付き携帯電話 Kを用いて、 本発 明の視覚補助ネットワークシステムを説明する。 また、 同時にその作用及 び効果を説明することにより、 視覚補助方法の方法についても説明する。 本発明の視覚補助ネットワークサーバ Nは、 図 1に示されるように画像 データ受信手段 12と、 画像色データ解析手段 14と、 色データ送信手段 16と、 顧客データ記憶手段 18を備えている。 携帯電話 Kには通常メー ル機能がついているので、 本実施例の場合、 色データ送信手段 16は電子 メールであってよい。
例えば色弱障害を持つ Sが、 視覚補助ネットワークサーバ Nを利用して 無模様一色の被写体 T1の色を確認したいとする (図 4) 。 Sは携帯電話 Kを用いて被写体 T 1を撮影し、 画像データをメールに添付する。 後は、 Sは視覚補助ネットワークサーバ Nのメールアドレスを指定し、 携帯電話 Kから上記メールを送信すればよい。
送信された上記メールは、 ネットワークを介して視覚補助ネットワーク サーバ Nの上記画像データ受信手段 12にて受信される。 受信された画像 データは、 顧客データ記憶手段 18に送られ、 予め登録されたユーザー領 域に記憶される。
画像 20には通常マトリクス状にドッ卜が並んでいて、 各ドットで RG B (Re d, Gr e e n, B l u e) の値を有している。 画像色デ一夕解 析手段 14は当該メールに添付された画像 20を直ちに再生し、 例えば画 像 20の中心付近のドット領域 24の色を解析する。 画像のおおよその色 合いを知りたい場合は、 中心部を代表させてその周りの色合いを調べるの が最も妥当だからである。 伹し、 他の領域を解析してもよい。
画像色データ解析手段 14が解析して得る色についての情報は、 被写体 T 1が何色か、 という色相はじめ、 色の明るさ (明度、 輝度) 、 鮮やかさ (彩度、 飽和度) 等である。 被写体 T1が金属光沢を持つかとか、 透明度 を持つか等の情報を含めてもよい。
画像色データ解析手段 14により解析され、 .得られた色デ一夕は例えば 図 7 aや 7 bのように表され、 色データ送信手段 16から Sの携帯電話 K にメールとして送られる。
ここで色相は (赤、 橙、 黄、 緑、 青緑、 青、 青紫、 紫、 赤紫) 、 又はさ らに細分化された色から選ばれ、 彩度は (さえた赤、 鮮やかな赤、 うすい 赤、 ごくうすい赤、 白) のように表現される。 また、 明度は (白、 明るい 灰色、 灰色、 暗い灰色、 黒) のように表される。
あるいは図 7 cのように棒グラフ状に、 又は円グラフ等で上記色データ の 3要素の度合を表現してもよい。 このように色相等の変化の度合いを、 赤や青等、 その色相等を表現する文字と一緒表しておけば、 色弱等の障害 者にとっても色の識別の訓練にもなる。
このようにして Sは、 無模様一色の被写体 T 1の色に関する情報を知る ことができる。 画像撮影機能付き携帯電話 Kで被写体 T 1を写し、 視覚補 助ネットワークサーバ Nに画像デ一夕を添付したメールを送れば、 自動的 に被写体 T 1の色デ一夕が記載されたメールが届くので、 非常に簡単かつ 便利である。
図 2に示すように、 携帯電話による視覚補助ネットワークサーバ Nへの 接続は、 視覚補助ネットワークサーバ Nが属するイントラネットワークを 介して行なわれてよい。 また上記イントラネットワークに属さないユーザ であれば、 図 3のようにインターネットを介して視覚補助ネットヮ一クサ ーバ Nに接続してもよい。
上述した例は被写体 T 1が無模様一色の緑色の場合であるが、 本発明の 他の実施例として、 図 5に示すように、 緑地 3 2に更に例えば赤の横縞 3 3が入っている場合について説明する。
まず Sは、 上記例と同様に被写体 T 2を携帯電話 Kで撮影する。 次に画 像データ 3 0をメールに添付し、 視覚補助ネットワークサーバ Nに当該画 像ァ一夕 达信 "る。
画像色データ解析手段 1 4は、 上記例のように画像の中心付近のドット 領域 3 4の色について解析し、 得られた色デ一夕、 上記画像データ等を顧 客データ記憶手段 1 8に蓄積する。 これと同時に画像色データ解析手段 1 4は、 色デ一夕送信手段 1 6を通じて色デ一夕をメールとして、 あるいは 他の方法で Sの携帯電話 Kに送信する。
しかし、 色弱の障害を持つ Sにはその色データは横縞の部分についての 情報か地の部分の色についての情報なのかは判断できない場合がある。 そ こでこのような場合に、 Sが再度被写体 Τ 2について撮影し、 視覚補助ネ ットワークサーバ Νに別の画像データを送信しなくてよいように、 上記顧 客データ記憶手段 1 8に記憶させた色データ、 上記画像デ一夕等を利用す る。
即ち Sは携帯電話 Κの画面において、 イン夕一ネット等で視覚補助ネッ トワークサーバ Νにアクセスし、 自己の顧客データ記憶手段 1 8のウェブ ページを呼び出す。 そしてそのウェブページにおいて被写体 Τ 2の画像を 呼び、 知りたい色の点をキー等を用いてポインタ指定する。 例えば Sが横 縞の部分 3 3についての色データが欲しい場合には、 当該横縞に含まれる 一点 3 6をポインタ指定する。
この場合画像色データ解析手段 1 4は、 上記 Τ 2の画像のポインタ指定 された点 3 6の色について解析する。 このようにして上記ウェブページ中 で、 知りたい色の部分を何度でもポインタ指定して、 Sは点 3 6を含む横 縞 3 3の色について情報を得ることができる。
上記例は、 一度目はメール等で送信画像の中心点 3 4についての色につ いて解析させ、 視覚補助ネットワークサーバ Νに記憶させた画像から、 ゥ エブページ上でボイン夕指定をして点 3 6の色について解析しているが、 最初から所望する複数の点をポインタ指定できるようにしてもよい。
例えば図 6のようにボインタ 1で地の部分を、 ボイン夕 2で横縞の部分 を指定してもよい。 この場合視覚補助ネットワークサーバ Νは、 図 6に示 されるように携帯電話 Κから受信した画像に、 ポインタ及び色相等の簡単 な情報を書き込んで携帯電話 Κに送信してもよい。 グラフで表現するのも 視覚に訴えるので好ましい。
又、 図 7 cのように色相のみをポインタ毎に表示してもよい。 上述の例は、 いずれも色データ送信手段 1 6は、 画像色データ解析手段 1 4の解析で得た色データをメールで Sの携帯電話 Kに送信したが、 電話 を携帯電話 Kにかけて、 音声によって Sに色データを知らせてもよい。 即 ち、 携帯電話 Kからアクセスがあった場合、 上記視覚補助ネットワークサ ーバの記憶手段 1 8が予め登録された当該顧客の電話番号を検索し、 色デ 一夕送信手段 1 6が携帯電話 Kに電話をして、 生成された色データを音声 で Sに伝達する。
電話によって色データを伝えるので、 この場合も Sは周囲の人に自分の 障害について知られることはない。
以上のような視覚補助ネットワークシステムは、 上記視覚補助ネットヮ 一クサ一バが属するネットワークのホストコンピュータに登録すれば誰で も利用することができる。 或いは視覚補助ネッ卜ヮ一クサ一バの上記記憶 手段 1 8に登録するようにしてもよい。 登録により視覚補助ネットワーク サーバの U R Lが通知される。 課金方法は特に限定はない。
あるいは登録制ではなく、 誰でも視覚補助ネットワークシステムを利用 できるようにし、 利用回数に応じて課金するようにしてもよい。 この場合 も課金、 支払い方法は特に限定されない。
また、 以上の説明では画像撮影携帯端末として携帯電話を用いたが、 屋 内に居る時等は、 パソコン端末を使用して視覚補助ネットワークシステム を利用することもできる。 この場合パソコン画面上の撮影画像をそのまま の状態にして、 固定電話にて色データを聴くこともできる。 上記登録内容 に応じて、 様々な機器を組合わせて視覚補助ネットワークシステムを利用 することができる。
次に.、 本発明は、 図 1 7に示すように、 携帯端末 K内に備えられる視覚 補助システム 1 5 0であっても良い。 この視覚補助システム 1 5 0は、 画 像を撮影する撮影手段 1 5 2と、 撮影手段 1 5 2が撮影した画像を記憶す る顧客データ記憶手段 1 5 4と、 顧客データ記憶手段 1 5 4の画像の色デ 一夕を生成する画像色データ解析手段 1 5 6と、 画像色データ解析手段 1 5 6が生成した色データを表示する色データ表示手段 1 5 8とを備える。 撮影手段 1 5 2は、 C MO S又は C C D等の素子から構成される。 顧客デ —夕記憶手段 1 5 4及び画像色データ解析手段 1 5 6は、 携帯端末 K内の メモリ又は C P U等である。 色データ表示手段 1 5 8は、 携帯端末 Kのデ イスプレイ等である。 この視覚補助システム 1 5 0の場合、 インターネッ トを介さずに色デー夕の認識ができる。
次に、 本発明に係る色覚機能通知システム、 色覚機能通知用プログラム、 色覚機能通知方法、 色覚補助システム、 色覚補助用プログラム、 及び色覚 補助方法の実施の形態について、 図面に基づいて詳しく説明する。
図 8において、 符号 1 1 0は、 本発明の色覚機能通知システムであり、 図 9において、 符号 1 1 1は、 本発明の色覚補助システムである。
色覚機能通知システム 1 1 0は、 図 8に示すように、 ユーザーの色覚特 性デ一夕 Dを記憶する記憶手段 1 1 2と、 コンピュータ一画面の原ィメ一 ジデータ Aを取り込む取得手段 1 1 4と、 原イメージデータ Aを色覚特性 データ Dに基づいて変換して変換イメージデータ Bを作成する作成手段 1 1 6と、 原イメージデ一夕 A及び変換イメージデ一夕 Bをピクセル毎に比 較して比較イメージデータ Cを作成するピクセル比較手段 1 1 8と、 比較 イメージデ一夕が一定のピクセル比較閾値以上であるピクセルの変換ィメ —ジデータ B及びピクセルの周辺の変換イメージデータ Bを比較する周辺 比較手段 1 2 0と、 周辺比較手段 1 2 0による比較結果が一定の周辺比較 閾値以下のピクセルを一定値以上含む画面分割部を色弱部 1 2 2であると 判断する色弱部判断手段 1 2 4と、 色弱部 1 2 2が存在する画面内にィク スクラネーシヨンマーク 1 2 6を表示して色弱部 1 2 2が存在することを 認識させるマーク表示手段 1 2 8と、 色弱部 1 2 2が存在する画面内の色 弱部 1 2 2に色弱部表示を行つて色弱部 1 2 2を認識させる色弱部表示手 段 1 3 0とを備えている。 よって、 本発明の色覚機能通知用プログラムは、 コンピュータ一を、 記 憶手段 1 1 2、 取得手段 1 1 4、 作成手段 1 1 6、 ピクセル比較手段 1 1 8、 周辺比較手段 1 2 0、 色弱部判断手段 1 2 4、 マーク表示手段 1 2 8、 色弱部表示手段 1 3 0として機能させるプログラムである。 この色覚機能 通知用プログラムは、 パーソナルコンピュータ一によって機能させられる が、 携帯端末又はサーバ一によつて機能させられても良い。
色覚補助システム 1 1 1は、 図 9に示すように、 記憶手段 1 1 2と、 色 覚特性データ Dに基づく色覚特性表示データ Eを画面に表示する色覚特性 表示手段 1 3 4と、 表示した色覚特性表示データ Eを変更する色覚特性変 更手段 1 3 2と、 画面内の色覚特性表示デ一夕 Eに関連付けられる関連部 分を検索し、 検索した関連部分の原イメージデータ Aを変換して表示する イメージ変換手段 1 3 6とを備えている。 記憶手段 1 1 2は、 色覚機能通 知システム 1 1 0及び色覚補助システム 1 1 1が共有する。
よって、 本発明の色覚補助用プログラムは、 コンピューターを、 記憶手 段 1 1 2、 色覚特性表示手段 1 3 4、 色覚特性変更手段 1 3 2、 イメージ 変換手段 1 3 6として機能させるプログラムである。 この色覚補助用プロ グラムは、 パーソナルコンピュータ一によって機能させられるが、 携帯端 末又はサーバ一によって機能させられても良い。
このような色覚機能通知システム 1 1 0及び色覚補助システム 1 1 1の 作用について以下に説明することにより、 色覚機能通知方法及び色覚補助 方法について説明する。
本発明の色覚機能通知システム 1 1 0及び色覚補助システム 1 1 1を使 用するユーザーが、 パーソナルコンピューターを立ち上げ、 色覚機能通知 システム 1 1 0を機能させると、 色覚特性を調査する画面が表示される。 ユーザーは、 質問に対する答の入力等を行う。 例えば、 「従来から見え難 い色は何色ですか」 という質問に対して 「赤」 を入力する。 このようにし て入力することにより、 色覚機能通知システム 1 1 0が色覚特性データ D を作成して記憶手段 1 1 2に登録する。 例えば、 図 1 0に示すように、 H S B色空間上に線によって範囲 1 3 8を特定し、 又はポイント 1 4 0によ つて特定する色覚特性データ Dの形式で登録する。
このようにして色覚特性データ Dを登録しておいた状態で、 ユーザーが パーソナルコンピューターを立ち上げて、 例えば図 1 1のようなホ一ムぺ ージ 1 4 2を開くと自動的に又は選択により、 色覚機能通知システム 1 1 0が機能する。 色覚機能通知システム 1 1 0が機能すると、 取得手段 1 1 4、 作成手段 1 1 6及びピクセル比較手段 1 1 8が機能し、 図 1 2に示す ように、 原イメージデ一夕 A、 変換イメージデータ B、 比較イメージデ一 夕 Cが作成される。 比較イメージデ一夕 Cは、 例えば、 原イメージデータ Aと変換ィメ一ジデ一夕 Bとをピクセル毎に減算したデータの形式で作成 される。
次に、 周辺比較手段 1 2 0が機能し、 一定のピクセル比較閾値以上の比 較イメージデータ Cが存在するか否かをピクセル毎に判断し、 一定のピク セル比較閾値以上のピクセルが存在すれば、 そのピクセルの変換イメージ データ Bとその周辺のピクセルの変換イメージデータ Bを比較する。 次に、 色弱部判断手段 1 2 4が機能し、 この比較結果が一定の周辺比較閾値以下 のピクセルは、 ユーザーが周辺のピクセルの色彩との違いを認識し難い部 分であるため、 そのようなピクセルを一定値以上含む画面分割部を色弱部 1 2 2であると判断する。 すなわち、 変換イメージデータ Bは、 ユーザ一 が現実に見えるイメージデータであるところ、 その変換イメージデータ B に関して周辺と比較することにより、 ユーザ一が現実に認識し難い色弱部 1 2 2を判断する。
この色弱部 1 2 2が存在する場合、 マーク表示手段 1 2 8が機能し、 図 1 3に示すように、 画面内にイクスクラネーションマ一ク 1 2 6を表示す る。 ユーザーは、 このイクスクラネ一シヨンマーク 1 2 6を見て、 画面内 に色弱部 1 2 2が存在することを認識する。 次に、 色弱部表示手段 1 3 0 が機能し、 色弱部 1 2 2の原イメージデータ Aを反転し、 図 1 4及び図 1 5に示すように色弱部表示が行われる。 この色弱部表示により、 ユーザー は色弱部 1 2 2の位置を認識できる。 なお、 色弱部表示は、 色弱の危険度 に応じてより白くする表示であっても、 危険度に応じて濃淡を強調する表 示であっても良い。
画面内に色弱部 1 2 2が存在すること及び色弱部 1 2 2の位置を確認し たユーザーは、 色覚補助システムを起動させる。 例えば、 本発明の色覚補 助システム 1 1 1を起動させる。
色覚補助システム 1 1 1を起動させると、 色覚特性表示手段 1 3 4が機 能し、 図 1 6に示すように、 画面に既に登録した色覚特性データ Dに基づ く色覚特性表示データ Eが表示される。 また、 イメージ変換手段 1 3 6が 機能し、 色覚特性表示データ Eに関連付けられる関連部分を画面から検索 し、 関連部分の原イメージデータ Aを変換する。.例えば、 図 1 6の色覚特 性表示データ Eにおいて、 赤色近辺及び黄緑近辺を色弱に係る範囲 1 3 8 として特定しているため、 赤色又は赤色に類似する部分、 及び黄緑又は黄 緑に類似する部分を関連部分として検索し、 この関連部分を反転変換して、 色覚特性表示データ Eの上部に表示する。
ここで、 この色覚特性表示デ一夕 Eは色覚特性変更手段 1 3 2を機能さ せることにより変更できる。 すなわち、 範囲 1 3 8を囲んで特定する線 1 3 9をクリックして H S B空間上で連続的に回転させて範囲 1 3 8を変更 できる。 範囲 1 3 8を変更することにより色覚特性表示データ Eが変わる が、 瞬時にイメージ変換手段 1 3 6が機能して、 色覚特性表示データ Eに 関連付けられる関連部分を画面から検索し、 関連部分の原イメージデータ Aを変換して、 色覚特性表示データ Eの上部に表示する。. このため、 色覚 特性表示データ Eを変更しながら関連部分がリアルタィムに変化していく のが確認できる。 ュ一ザ一は、 表示された色覚特性表示データ Eと画面と を見比べることにより、 自己の色覚特性を確認できる。 また、 アナログ的 に色覚特性表示データ Eを変更しながら、 関連部分の位置がリアルタイム に変化していくのを確認できるため、 ユーザーは自己の色覚特性を感覚的 に認識できる。
以上、 本発明の色覚機能通知システム及び色覚補助システムの一実施形 態について説明したが、 本発明は、 その他の形態でも実施し得るものであ る。
例えば、 本発明の色覚機能通知システム及び色覚補助システムを使用す る対象は、 静止画像に限定されず、 動画であっても良い。 動画を対象とす る場合、 色弱部表示及び関連部分は、 動画に追従してコマ送りで表示され ていく。 その他、 本発明の技術的範囲には、 その趣旨を逸脱しない範囲で当業者 の知識に基づき種々なる改良, 修正, 変形を加えた態様も含まれる。 また、 同一の作用又は効果が生じる範囲内で、 いずれかの発明特定事項を他の技 術に置換した形態で実施しても良い。
産業上の利用可能性
以上のように、 本発明に係る視覚補助ネットワークシステムを用いれば、 画像撮影携帯端末で被写体を撮影し、 視覚補助ネットワークサーバに画像 デ一夕を添付したメールを送れば、 自動的に被写体の色データが記載され たメールが届くので、 非常に簡単かつ便利である。
メール、 電話又はインタ一ネットのホームページ等により知りたい物の 色についての情報を得ることができるので、 音声で色を教える機器とは異 なり、 周囲の人に自分が色弱等の障害を持つことを知られることがない。 また、 画像撮影携帯電話であれば広く普及し、 誰もが持ち歩くため、 人 の目を気にする必要がない。 更に、 コンパクトかつ軽量な携帯電話を使用 して知りたい物の色を知ることが出来、 色を識別する専用の機械を持ち歩 く必要もない。
本発明の色覚機能通知システム、 色覚機能通知用プログラム及び色覚機 能通知方法によれば、 開いたコンピューター画面内に色弱部が存在するか 否か、 及び、 その色弱部の位置がどこであるかを確認できる。 また、 周辺 比較手段によって色弱部を判断するため、 単にユーザ一が見え難い色が存 在するかではなく、 周辺との関係で色彩、 模様、 文字を認識し難い部分が 存在するかを確認できる。 また、 予め、 ユーザ一の色覚特性データを調査 して記憶手段に登録しておき、 その色覚特性データに基づいて色弱部を判 断するため、 個人の色覚特性に対応して判断できる。 さらに、 ユーザーが 現実に見える色から成る変換イメージデ一夕によって判断するため、 正確 な判断ができる。
また、 本発明の色覚補助システム、 色覚補助用プログラム及び色覚補助 方法によれば、 一旦登録した色覚特性データに基づく色覚特性表示データ . を変更しながら、 関連部分を確認することができる。 このため、 ユーザ一 が自己の色覚特性を確認することができる。

Claims

請 求 の 範 囲
1 . 携帯端末から画像を受信する画像データ受信手段と、 前記画像データ 受信手段が受信した前記画像を記憶する顧客データ記憶手段と、 前記顧客 デ一夕記憶手段から前記画像を取得して、 該画像の色デ一夕を生成する画 像色デ一夕解析手段と、 前記画像色デー夕解析手段が生成した色データを、 前記携帯端末へ送信する色データ送信手段と、 を含む視覚補助ネットヮー クサーバ。
2 . 前記色データ送信手段は、 ネットワークを介して前記色データを前記 携帯端末へ送信する、 請求項 1に記載の視覚補助ネットワークサーバ。
3 . 前記ネットワークはインタ一ネットである請求項 2に記載の視覚補助 ネットワークサーバ。
4 . 前記色データ及び前記画像をウェブページに表示して前記ネットヮ一 クに配信するウェブページ配信手段を備えた、 請求項 1乃至請求項 3に記 載の視覚補助ネットヮ一クサーバ。
5 . 前記色データ送信手段は、 前記色データをメールにより前記携帯端末 へ送信する、 請求項 1乃至請求項 3に記載の視覚補助ネットワークサーバ。
6 . 前記顧客データ記憶手段は、 前記携帯端末に対応する電話番号を登録 し、 前記色データ送信手段は、 前記顧客データ記憶手段から前記電話番号 を取得して該電話番号に対応する携帯端末へ、 該携帯端末から受信した画 像の前記色データを音声として送信する、 請求項 1乃至請求項 3に記載の 視覚補助ネットワークサーバ。
7 . 前記画像色データ解析手段は、 前記受信した画像の中心付近のドット 領域の色デ一夕を生成する、 請求項 1乃至請求項 3の何れかに記載の視覚 補助ネットワークサーバ。
8 . 前記画像色データ解析手段は、 前記携帯端末が前記ウェブページ上で ポインタ指定したドッ卜領域の色デ一夕を生成し、 前記色データ送信手段 は、 前記画像色データ解析手段が生成した色データを、 前記携帯端末へ送 信する、 請求項 1乃至請求項 3の何れかに記載の視覚補助ネットヮ一クサ 一ハ、。
9 . 前記携帯端末から請求項 1乃至請求項 3の何れかに記載の視覚補助ネ ットヮ一クサ一バが画像を受信し、 該視覚補助ネットヮ一クサ一バは該携 帯端末に前記色データを送信する視覚補助ネットワークシステム。
1 0 . ネットヮ一クを介して視覚補助ネットワークサーバと携帯端末が画 像及び色デー夕を送受信する視覚補助方法であって、
前記携帯端末の携帯撮影手段が画像を撮影するステツプ、
前記携帯端末の携帯送受信手段がネットワークを介して前記画像を前記視 覚補助ネットワークサーバに送信するステップ、
前記視覚補助ネットワークサーバの画像データ受信手段が、 前記画像を受 信するステップ、
前記視覚補助ネットワークサーバの顧客データ記憶手段が、 前記画像デ一 夕受信手段が受信した前記画像を記憶するステツプ、
前記視覚補助ネットワークサーバの画像色データ解析手段が、 前記顧客デ 一夕記憶手段から前記画像を取得して、 該画像から色デー夕を生成するス テツフ、
前記視覚補助ネットワークサーバの色データ送信手段が、 前記画像色デ一 夕解析手段が生成した色データを、 前記ネットワークを介して前記携帯端 末へ送信するステップ、
前記携帯端末の携帯送受信手段が、 前記色データ送信手段が送信した前記 色データを、 前記ネットワークを介して受信するステップ、
からなる視覚補助方法。
1 1 . 前記ネットワークはインタ一ネットである請求項 1 0に記載する視 覚補助方法。
1 2 . 前記視覚補助ネットワークサーバはウェブページ配信手段を備え、 前記ウェブページ配信手段は、 前記色データ及び前記画像をウェブページ に表示して前記ネットワークに配信する、 請求項 1 0又は請求項 1 1に記 載の視覚補助方法。
1 3 . 前記色データ送信手段は、 前記色データをメールにより前記携帯端 末へ送信する、 請求項 1 0又は請求項 1 1に記載の視覚補助方法。
1 4 . 前記顧客データ記憶手段は、 前記携帯端末に対応する電話番号を登 録し、 前記色データ送信手段は、 前記顧客データ記憶手段から前記電話番 号を取得して該電話番号に対応する携帯端末へ、 該携帯端末から受信した 画像の前記色データを音声として送信する、 請求項 1 0又は請求項 1 1に 記載の視覚補助方法。
1 5 . 前記画像色データ解析手段は、 前記受信した画像の中心付近のドッ ト領域の色データを生成する、 請求項 1 0又は請求項 1 1に記載の視覚補 助方法。
1 6 . 前記画像色データ解析手段は、 前記携帯端末が前記ウェブページ上 でポインタ指定したドット領域の色データを生成し、 前記色データ送信手 段は、 前記画像色データ解析手段が生成した色データを、 前記携帯端末へ 送信する、 請求項 1 0又は請求項 1 1に記載の視覚補助方法。
1 7 . 携帯端末内に備えられる視覚補助システムであり、
画像を撮影する撮影手段と、 前記撮影手段が撮影した画像を記憶する顧 客データ記憶手段と、 前記顧客デ一夕記憶手段の画像の色デ一夕を生成す る画像色データ解析手段と、 前記画像色データ解析手段が生成した色デー 夕を表示する色データ表示手段と、 を含む視覚補助システム。
1 8 . ユーザーの色覚特性データを記憶する記憶手段と、
画面の原イメージデ一夕を取り込む取得手段と、
前記原イメージデータを前記色覚特性データに基づいて変換して変換ィ メ一ジデ一夕を作成する作成手段と、
前記原イメージデ一タ及び前記変換イメージデータをピクセル毎に比較 して比較ィメ一ジデー夕を作成するピクセル比較手段と、
前記比較ィメ一ジデ一夕が一定のピクセル比較閾値以上であるピクセル の変換イメージデータ及ぴ該ピクセルの周辺の変換イメージデータを比較 する周辺比較手段と、
前記周辺比較手段による比較結果が一定の周辺比較閾値以下のピクセル を一定値以上含む画面分割部を色弱部であると判断する色弱部判断手段と、 前記色弱部が存在する画面内にマークを表示して色弱部が存在すること を認識させるマーク表示手段と、
前記色弱部が存在する画面内の該色弱部に色弱部表示を行って該色弱部 を認識させる色弱部表示手段と、
を含む色覚機能通知システム。
1 9 . 前記色弱部表示手段が前記色弱部の原イメージデータを反転、 修飾 又は強調して色弱部表示を行う請求項 1 8に記載する色覚機能通知システ ム。
2 0 . コンピューターを、
ュ一ザ一の色覚特性データを記憶する記憶手段、
画面の原ィメ一ジデータを取り込む取得手段、
前記原ィメージデ一夕を前記色覚特性データに基づいて変換して変換ィ メージデータを作成する作成手段、
前記原イメージデータ及び前記変換イメージデ一夕をピクセル毎に比較 して比較イメージデータを作成するピクセル比較手段、
前記比較ィメ一ジデー夕が一定のピクセル比較閾値以上であるピクセル の変換ィメ―ジデー夕及び該ピクセルの周辺の変換ィメ一ジデ一夕を比較 する周辺比較手段、
前記周辺比較手段による比較結果が一定の周辺比較閾値以下のピクセル を一定値以上含む画面分割部を色弱部であると判断する色弱部判断手段、 前記色弱部が存在する画面内にマークを表示して色弱部が存在すること を認識させるマーク表示手段、
前記色弱部が存在する画面内の該色弱部に色弱部表示を行つて該色弱部 を認識させる色弱部表示手段、
として機能させる色覚機能通知用プログラム。
2 1 . 記憶手段が、 ユーザーの色覚特性データを記憶するステップと、 取得手段が、 画面の原ィメ一ジデー夕を取り込むステツプと、 作成手段が、 前記原イメージデ一夕を前記色覚特性データに基づいて変 換して変換イメージデ一夕を作成するステップと、
ピクセル比較手段が、 前記原イメージデータ及び前記変換イメージデ一 夕をピクセル毎に比較して比較ィメ一ジデータを作成するステツプと、 周辺比較手段が、 前記比較イメージデータが一定のピクセル比較閾値以 上であるピクセルの変換ィメージデータ及び該ピクセルの周辺の変換ィメ ージデータを比較するステツプと、
色弱部判断手段が、 前記周辺比較手段による比較結果が一定の周辺比較 閾値以下のピクセルを一定値以上含む画面分割部を色弱部であると判断す マーク表示手段が、 前記色弱部が存在する画面内にマークを表示して色 弱部が存在することを認識させるステップと、
色弱部表示手段が、 前記色弱部が存在する画面内の該色弱部に色弱部表 示を行って該色弱部を認識させるステップと、
を含む色覚機能通知方法。
2 2 . ユーザーの色覚特性データを記憶する記憶手段と、
前記色覚特性データに基づく色覚特性表示データを画面に表示する色覚 特性表示手段と、
前記表示した色覚特性データを変更する色覚特性変更手段と、 前記画面内の前記色覚特性デ一夕に関連付けられる関連部分を検索し、 該検索した関連部分の原イメージデータを変換して表示するイメージ変換 手段と、
を含む色覚補助システム。
2 3 . 前記イメージ変換手段が、 色覚特性表示データを変更した時に、 該 変更後の色覚特性表示データに関連付けられる関連部分を検索し、 該検索 した関連部分の原イメージデ一タを変換して表示する請求項 2 2に記載す る色覚補助システム。
2 4. 前記色覚特性表示データが、 色空間上に点、 線又は範囲を選択して 特定されるデータであり、 前記色覚特性変更手段が、 該色空間上の点、 線 又は範囲を追加若しくは削除し、 又は該色空間上の点、 線又は範囲の位置 を移動して色覚特性表示データを変更する手段である請求項 2 3に記載す る色覚補助システム。
2 5 . 前記色空間上の点、 線又は範囲の位置を移動して色覚特性表示デー 夕を変更する場合、 該色空間上の点、 線又は範囲の位置を連続的に移動し て色覚特性表示データを変更する手段である請求項 2 4に記載する色覚補 助システム。
2 6 . コンピューターを、
ユーザ一の色覚特性データを記憶する記憶手段、
前記色覚特性データに基づく色覚特性表示データを画面に表示する色覚 特性表示手段、
前記表示した色覚特性表示データを変更する色覚特性変更手段、 前記画面内の前記色覚特性表示データに関連付けられる関連部分を検索 し、 該検索した関連部分の原ィメージデータを変換して表示するイメージ 変換手段、
として機能させる色覚補助用プログラム。
2 7 . 記憶手段が、 ユーザーの色覚特性データを記憶するステップと、 色覚特性表示手段が、 前記色覚特性データに基づく色覚特性表示データ を画面に表示するステップと、 色覚特性変更手段が、 前記表示した色覚特性表示データを変更するステ ップと、
ィメ一ジ変換手段が、 前記画面内の前記色覚特性表示データに関連付け られる関連部分を検索し、 該検索した関連部分の原ィメ一ジデー夕を変換 して表示するステップと、
を含む色覚補助方法。
2 8 . 前記色覚特性データに基づく色覚特性表示データを画面に表示する 色覚特性表示手段と、
前記表示した色覚特性表示デー夕を変更する色覚特性変更手段と、 前記画面内の前記色覚特性表示データに関連付けられる関連部分を検索 し、 該検索した関連部分のイメージデータを変換して表示するイメージ変 換手段と、
を含む請求項 1 8又は請求項 1 9に記載する色覚機能通知システム。
PCT/JP2003/002470 2002-08-29 2003-03-03 視覚補助ネットワークサーバ、視覚補助ネットワークシステム、視覚補助方法、視覚補助システム、色覚機能通知システム、色覚機能通知用プログラム、色覚機能通知方法、色覚補助システム、色覚補助用プログラム、及び色覚補助方法 WO2004023397A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
AU2003211555A AU2003211555A1 (en) 2002-08-29 2003-03-03 Vision aid network server, vision aid network system, vision aid method, vision aid system, color sense function reporting system, program for reporting color sense function, method for reporting color sense function, color sense aid system, color sense aid program, and color sense aid method
JP2004569801A JPWO2004023397A1 (ja) 2002-08-29 2003-03-03 視覚補助ネットワークサーバ、視覚補助ネットワークシステム、視覚補助方法、視覚補助システム、色覚機能通知システム、色覚機能通知用プログラム、色覚機能通知方法、色覚補助システム、色覚補助用プログラム、及び色覚補助方法
EP03794054A EP1542164A1 (en) 2002-08-29 2003-03-03 Vision aid network server, vision aid network system, vision aid method, vision aid system, color sense function reporting system, program for reporting color sense function, method for reporting color sense function, color sense aid system, color sense aid program, and color sense aid method
US10/488,453 US20050007449A1 (en) 2002-08-29 2003-03-03 Vision aid network server, vision aid network system, vision aid method, vision aid system, color sense function reporting, program for reporting color sense function, method for reporting color sense function, color sense aid system, color sense aid program, and color sense aid method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2002250762 2002-08-29
JP2002-250762 2002-08-29
JP2002-356497 2002-12-09
JP2002356497 2002-12-09

Publications (1)

Publication Number Publication Date
WO2004023397A1 true WO2004023397A1 (ja) 2004-03-18

Family

ID=31980516

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2003/002470 WO2004023397A1 (ja) 2002-08-29 2003-03-03 視覚補助ネットワークサーバ、視覚補助ネットワークシステム、視覚補助方法、視覚補助システム、色覚機能通知システム、色覚機能通知用プログラム、色覚機能通知方法、色覚補助システム、色覚補助用プログラム、及び色覚補助方法

Country Status (6)

Country Link
US (1) US20050007449A1 (ja)
EP (1) EP1542164A1 (ja)
JP (1) JPWO2004023397A1 (ja)
CN (1) CN1533553A (ja)
AU (1) AU2003211555A1 (ja)
WO (1) WO2004023397A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006318000A (ja) * 2005-05-10 2006-11-24 Pentax Corp 色変換装置および撮影装置
WO2013114638A1 (ja) * 2012-01-30 2013-08-08 楽天株式会社 画像処理システム、画像処理装置、画像処理方法、プログラム、及び情報記憶媒体
US9704416B2 (en) 2012-11-29 2017-07-11 Samsung Electronics Co., Ltd. Television system and image display method thereof

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI236901B (en) * 2004-06-11 2005-08-01 Oriental Inst Technology An apparatus and method for identifying surrounding environment by means of image processing and for outputting the resutls
US9163991B2 (en) 2013-01-30 2015-10-20 Hewlett-Packard Development Company, L.P. Color space color value determination from digital image
SG10201710928PA (en) * 2013-03-14 2018-02-27 Panoptica Inc Ocular formulations for drug-delivery to the posterior segment of the eye
US11030778B2 (en) * 2014-03-31 2021-06-08 Healthy.Io Ltd. Methods and apparatus for enhancing color vision and quantifying color interpretation
CN104821000B (zh) * 2015-05-22 2017-12-22 京东方科技集团股份有限公司 颜色辨识系统、颜色辨识方法和显示装置
WO2017192716A1 (en) * 2016-05-03 2017-11-09 Leoni Engineering Products & Services, Inc. Vision system with color segmentation for operator enhanced viewing

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0680201A2 (en) * 1994-04-27 1995-11-02 Canon Kabushiki Kaisha Image processing apparatus and method
JPH11272574A (ja) * 1998-03-19 1999-10-08 Seiko Epson Corp 情報配信方法および情報配信システム並びに情報配信処理プログラムを記録した記録媒体
JP2000013628A (ja) * 1998-06-26 2000-01-14 Ricoh System Kaihatsu Kk 色修正方法およびそれを格納した記録媒体
JP2000059666A (ja) * 1998-08-07 2000-02-25 Victor Co Of Japan Ltd 撮像装置
US20020101568A1 (en) * 2001-01-30 2002-08-01 Eberl Heinrich A. Interactive data view and command system

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5475835A (en) * 1993-03-02 1995-12-12 Research Design & Marketing Inc. Audio-visual inventory and play-back control system
US6702417B2 (en) * 1997-07-12 2004-03-09 Silverbrook Research Pty Ltd Printing cartridge with capacitive sensor identification
US6507671B1 (en) * 1998-12-11 2003-01-14 International Business Machines Corporation Method and system for dropping template from a filled in image
JP4225703B2 (ja) * 2001-04-27 2009-02-18 インターナショナル・ビジネス・マシーンズ・コーポレーション 情報アクセス方法、情報アクセスシステムおよびプログラム
CN1537055A (zh) * 2001-07-30 2004-10-13 阿克利・马丁内斯公司Dba Mgi工作 色彩管理处理系统和方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0680201A2 (en) * 1994-04-27 1995-11-02 Canon Kabushiki Kaisha Image processing apparatus and method
JPH11272574A (ja) * 1998-03-19 1999-10-08 Seiko Epson Corp 情報配信方法および情報配信システム並びに情報配信処理プログラムを記録した記録媒体
JP2000013628A (ja) * 1998-06-26 2000-01-14 Ricoh System Kaihatsu Kk 色修正方法およびそれを格納した記録媒体
JP2000059666A (ja) * 1998-08-07 2000-02-25 Victor Co Of Japan Ltd 撮像装置
US20020101568A1 (en) * 2001-01-30 2002-08-01 Eberl Heinrich A. Interactive data view and command system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006318000A (ja) * 2005-05-10 2006-11-24 Pentax Corp 色変換装置および撮影装置
WO2013114638A1 (ja) * 2012-01-30 2013-08-08 楽天株式会社 画像処理システム、画像処理装置、画像処理方法、プログラム、及び情報記憶媒体
US9367764B2 (en) 2012-01-30 2016-06-14 Rakuten, Inc. Image processing system, image processing device, image processing method, program, and information storage medium for providing an aid that makes it easy to grasp color of an image
US9704416B2 (en) 2012-11-29 2017-07-11 Samsung Electronics Co., Ltd. Television system and image display method thereof

Also Published As

Publication number Publication date
JPWO2004023397A1 (ja) 2006-01-05
CN1533553A (zh) 2004-09-29
EP1542164A1 (en) 2005-06-15
US20050007449A1 (en) 2005-01-13
AU2003211555A1 (en) 2004-03-29

Similar Documents

Publication Publication Date Title
WO2020093837A1 (zh) 人体骨骼关键点的检测方法、装置、电子设备及存储介质
CN102323926B (zh) 一种用于获取与请求对象相关的对象信息的设备和方法
JP2005267146A (ja) 画像認識機能を利用した電子メール作成方法および装置
EP4072131A1 (en) Image processing method and apparatus, terminal and storage medium
CN101478399A (zh) 个人广告简档秘密照片验证过程
TWI628584B (zh) 使用者介面調整方法與使用此方法的裝置
US20120027305A1 (en) Apparatus to provide guide for augmented reality object recognition and method thereof
JP2004201191A (ja) 画像処理送信システム、携帯電話、画像処理送信方法、および、画像処理送信プログラム
KR20070084278A (ko) 영상 처리 장치 및 방법
JP2012079167A (ja) 情報処理装置、情報処理システムおよび情報処理方法
WO2004023397A1 (ja) 視覚補助ネットワークサーバ、視覚補助ネットワークシステム、視覚補助方法、視覚補助システム、色覚機能通知システム、色覚機能通知用プログラム、色覚機能通知方法、色覚補助システム、色覚補助用プログラム、及び色覚補助方法
CN110208946A (zh) 一种穿戴设备及基于穿戴设备的交互方法
CN114120307A (zh) 显示内容的识别方法、装置、设备和存储介质
US20220327749A1 (en) Method and electronic device for processing images
CN110795007A (zh) 一种获取截图信息的方法及装置
CN109639981B (zh) 一种图像拍摄方法及移动终端
JP2011192008A (ja) 画像処理システムおよび画像処理方法
WO2020083178A1 (zh) 数字图像展示方法、装置、电子设备及存储介质
CN111161133B (zh) 一种图片处理方法及电子设备
WO2023273050A1 (zh) 活体检测方法及装置、电子设备和存储介质
JP5412774B2 (ja) 色差識別装置、及び色差識別プログラム
CN109840128A (zh) 一种双屏壁纸处理方法、服务器及移动终端
EP3913616B1 (en) Display method and device, computer program, and storage medium
US20060257003A1 (en) Method for the automatic identification of entities in a digital image
JP2005004495A (ja) カメラ付きの携帯式コンピュータ機器を利用した色名情報取得システム、方法及びプログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 038000903

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2004569801

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 10488453

Country of ref document: US

AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NO NZ OM PH PL PT RO RU SC SD SE SG SK SL TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2003794054

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 2003794054

Country of ref document: EP

WWW Wipo information: withdrawn in national office

Ref document number: 2003794054

Country of ref document: EP