KR102419240B1 - Method for providing nutritional information of product - Google Patents

Method for providing nutritional information of product Download PDF

Info

Publication number
KR102419240B1
KR102419240B1 KR1020210168225A KR20210168225A KR102419240B1 KR 102419240 B1 KR102419240 B1 KR 102419240B1 KR 1020210168225 A KR1020210168225 A KR 1020210168225A KR 20210168225 A KR20210168225 A KR 20210168225A KR 102419240 B1 KR102419240 B1 KR 102419240B1
Authority
KR
South Korea
Prior art keywords
product
user
information
nutritional
image
Prior art date
Application number
KR1020210168225A
Other languages
Korean (ko)
Inventor
차이경
유지훈
성이루
Original Assignee
(주) 이글립스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 이글립스 filed Critical (주) 이글립스
Priority to KR1020210168225A priority Critical patent/KR102419240B1/en
Application granted granted Critical
Publication of KR102419240B1 publication Critical patent/KR102419240B1/en

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/60ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to nutrition control, e.g. diets
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06018Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding
    • G06K19/06028Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding using bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T5/007
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00ICT specially adapted for the handling or processing of medical references

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Multimedia (AREA)
  • Nutrition Science (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

A method for providing information on the nutritional content of a product of the present invention comprises the steps of: obtaining information on the user's allergy; obtaining information on the type of visual impairment of the user; obtaining an image related to a product; identifying the product based on the image; obtaining nutritional component information corresponding to the product; and generating user-customized nutritional component data considering the nutritional component information and the user's allergy information based on information on the type of visual impairment of the user.

Description

제품의 영양 성분에 대한 정보를 제공하는 방법{METHOD FOR PROVIDING NUTRITIONAL INFORMATION OF PRODUCT}METHOD FOR PROVIDING NUTRITIONAL INFORMATION OF PRODUCT

본 발명은 제품의 영양 성분에 대한 정보를 제공하는 방법에 관한 것으로, 보다 상세하게는, 사용자의 알레르기 및 시각 장애 유형을 고려하여 제품의 영양 성분을 사용자 맞춤형으로 제공하는 방법에 관한 것이다.The present invention relates to a method for providing information on nutritional components of a product, and more particularly, to a method for providing a nutritional component of a product customized to the user in consideration of the type of allergy and visual impairment of the user.

시각 장애가 있는 알러지 환자는 제품의 영양 성분을 확인하기 어렵기 때문에, 알레르기 사고에 무방비하게 노출되어 있다. 그러나, 대부분의 시각 장애인은 완전한 맹인이 아니라 특정 조건에서 눈으로 성분 표시를 확인할 수 있는 가능성이 존재한다. 따라서, 시각 장애를 가진 사용자가 성분 표시를 구분할 수 있도록 이미지를 가공하여 사용자 맞춤형 성분 제공 서비스를 제공할 필요가 있다.
배경기술의 예는 다음의 특허 문헌에서 개시된다 : KR 10-2017-0076498
Allergy patients with visual impairment are vulnerable to allergic accidents because it is difficult to check the nutritional components of the product. However, most visually impaired people are not completely blind, but there is a possibility that the ingredient label can be checked with their eyes under certain conditions. Therefore, it is necessary to provide a user-customized component providing service by processing an image so that a user with a visual impairment can distinguish the component display.
Examples of background art are disclosed in the following patent documents: KR 10-2017-0076498

본 발명의 일 과제는 시각 장애 유형에 따라 사용자 맞춤형으로 제품의 영양 성분에 대한 정보를 제공하는 방법에 관한 것이다.One object of the present invention relates to a method of providing information on nutritional components of a product customized to a user according to a type of visual impairment.

일 실시예에 따른 제품의 영양 성분에 대한 정보를 제공하는 방법은 사용자의 알레르기에 대한 정보를 획득하는 단계; 상기 사용자의 시각 장애 유형 정보를 획득하는 단계; 제품과 관련된 이미지를 획득하는 단계; 상기 이미지에 기초하여 상기 제품을 파악하는 단계; 상기 제품에 대응되는 영양 성분 정보를 획득하는 단계; 및 상기 사용자의 시각 장애 유형 정보에 기초하여 상기 영양 성분 정보와 상기 사용자의 알레르기에 대한 정보를 고려한 사용자 맞춤 영양 성분 데이터를 생성하는 단계를 포함할 수 있다.According to an embodiment, a method for providing information on nutritional components of a product includes: acquiring information about a user's allergy; obtaining information on the type of visual impairment of the user; acquiring an image related to the product; identifying the product based on the image; obtaining nutritional information corresponding to the product; and generating user-customized nutritional component data in consideration of the nutritional component information and the user's allergy information based on the user's visual impairment type information.

여기서, 상기 제품과 관련된 이미지는 상기 제품의 성분표, 상기 제품의 바코드 또는 상기 제품의 외관 사진을 포함할 수 있다.Here, the image related to the product may include an ingredient table of the product, a barcode of the product, or a photograph of the exterior of the product.

여기서, 상기 제품을 파악하는 단계는, 광학 문자 인식(OCR) 기술을 이용하여 상기 제품과 관련된 이미지로부터 텍스트를 추출하는 단계를 포함하거나, 상기 제품과 관련된 이미지를 인공지능 모델에 입력하여, 상기 인공지능 모델로부터 상기 제품에 대한 정보를 추출하는 단계를 포함할 수 있다.Here, the step of recognizing the product includes extracting text from an image related to the product using optical character recognition (OCR) technology, or inputting an image related to the product into an artificial intelligence model, It may include extracting information about the product from the intelligence model.

여기서, 상기 사용자 맞춤 영양 성분 데이터를 생성하는 단계는, 상기 영양 성분 정보를 포함하는 초기 이미지를 생성하는 단계; 및 상기 시각 장애 유형에 따라 상기 초기 이미지를 가공하는 단계를 포함할 수 있다.Here, the generating of the user-customized nutritional component data may include: generating an initial image including the nutritional component information; and processing the initial image according to the type of visual impairment.

여기서, 상기 초기 이미지를 가공하는 단계는, 상기 초기 이미지를 확대하거나, 상기 초기 이미지의 선을 두껍게 하거나, 상기 초기 이미지의 색상 또는 밝기를 조절하거나, 상기 초기 이미지에 색상 필터를 씌우거나, 상기 초기 이미지를 흐리게 하는 단계일 수 있다.Here, the processing of the initial image may include enlarging the initial image, thickening the line of the initial image, adjusting a color or brightness of the initial image, applying a color filter to the initial image, or It can be a step to blur the image.

여기서, 상기 초기 이미지를 가공하는 단계는, 상기 사용자의 알레르기에 대한 정보에 기초하여, 상기 영양 성분 정보 중 상기 사용자의 알레르기를 일으킬 수 있는 영양 성분을 다른 영양 성분과 구별되게 나타내는 단계를 포함할 수 있다.Here, the step of processing the initial image may include, based on the user's allergy information, displaying a nutritional component that can cause the user's allergy among the nutritional component information to be distinguished from other nutritional components. have.

여기서, 상기 사용자의 단말기에 상기 사용자 맞춤 영양 성분 데이터를 전송하는 단계; 및 상기 사용자의 단말기에 상기 사용자의 알레르기를 일으킬 수 있는 영양 성분에 대하여 청각적인 정보를 제공하는 음성 경고 데이터를 전송하는 단계를 더 포함할 수 있다.Here, transmitting the user-customized nutritional component data to the user's terminal; and transmitting, to the user's terminal, voice warning data for providing audible information on nutritional components that may cause the user's allergy.

일 실시예에 따른 제품의 영양 성분에 대한 정보를 제공하는 서버는 사용자 단말기로부터 사용자의 알레르기에 대한 정보, 상기 사용자의 시각 장애 유형 정보 및 제품과 관련된 이미지를 수신하는 통신부; 및 상기 통신부를 통해 수신한 상기 이미지에 기초하여 상기 제품을 파악하고, 상기 제품에 대응되는 영양 성분 정보를 획득하고, 상기 사용자의 시각 장애 유형 정보에 기초하여 상기 영양 성분 정보와 상기 사용자의 알레르기에 대한 정보를 고려한 사용자 맞춤 영양 성분 데이터를 생성하는 제어부를 포함할 수 있다.A server for providing information on nutritional components of a product according to an embodiment includes: a communication unit configured to receive, from a user terminal, information on a user's allergy, information on the type of visual impairment of the user, and an image related to the product; and identifying the product based on the image received through the communication unit, obtaining nutritional component information corresponding to the product, and based on the user's visual impairment type information, the nutritional component information and the user's allergy It may include a control unit for generating user-customized nutritional component data in consideration of the information.

본 발명의 일 실시예에 따르면 시각 장애 유형에 따라 사용자 맞춤형으로 제품의 영양 성분에 대한 정보를 제공하는 방법이 제공될 수 있다.According to an embodiment of the present invention, there may be provided a method of providing information on nutritional components of a product customized to a user according to a type of visual impairment.

도 1은 일 실시예에 따른 제품의 영양 성분 제공 서비스의 환경도이다.
도 2는 일 실시예에 따른 제품의 영양 성분에 대한 정보를 제공하는 방법의 순서도이다.
도 3은 일 실시예에 따른 사용자 맞춤 영양 성분 데이터를 생성하는 방법의 순서도이다.
도 4 내지 도 6은 사용자 단말기 상에서 제품의 영양 성분을 제공하는 서비스의 예시 화면을 설명하기 위한 도면이다.
1 is an environment diagram of a service for providing nutritional components of a product according to an embodiment.
2 is a flowchart of a method for providing information on nutritional components of a product according to an exemplary embodiment.
3 is a flowchart of a method for generating user-customized nutritional component data according to an embodiment.
4 to 6 are diagrams for explaining an example screen of a service that provides nutritional components of a product on a user terminal.

본 명세서에 기재된 실시예는 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 본 발명의 사상을 명확히 설명하기 위한 것이므로, 본 발명이 본 명세서에 기재된 실시예에 한정되는 것은 아니며, 본 발명의 범위는 본 발명의 사상을 벗어나지 아니하는 수정예 또는 변형예를 포함하는 것으로 해석되어야 한다.The embodiments described in this specification are for clearly explaining the spirit of the present invention to those of ordinary skill in the art to which the present invention pertains, so the present invention is not limited to the embodiments described herein, and the The scope should be construed to include modifications or variations without departing from the spirit of the present invention.

본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하여 가능한 현재 널리 사용되고 있는 일반적인 용어를 선택하였으나 이는 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자의 의도, 판례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 다만, 이와 달리 특정한 용어를 임의의 의미로 정의하여 사용하는 경우에는 그 용어의 의미에 관하여 별도로 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가진 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 한다.The terms used in this specification have been selected as widely used general terms as possible in consideration of the functions in the present invention, but they may vary depending on the intention, precedent, or emergence of new technology of those of ordinary skill in the art to which the present invention belongs. can However, if a specific term is defined and used in an arbitrary sense, the meaning of the term will be separately described. Therefore, the terms used in this specification should be interpreted based on the actual meaning of the terms and the contents of the entire specification, rather than the names of simple terms.

본 명세서에 첨부된 도면은 본 발명을 용이하게 설명하기 위한 것으로 도면에 도시된 형상은 본 발명의 이해를 돕기 위하여 필요에 따라 과장되어 표시된 것일 수 있으므로 본 발명이 도면에 의해 한정되는 것은 아니다.The drawings attached to this specification are for easily explaining the present invention, and the shapes shown in the drawings may be exaggerated as necessary to help understand the present invention, so the present invention is not limited by the drawings.

본 명세서에서 본 발명에 관련된 공지의 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에 이에 관한 자세한 설명은 필요에 따라 생략하기로 한다.In the present specification, when it is determined that a detailed description of a known configuration or function related to the present invention may obscure the gist of the present invention, a detailed description thereof will be omitted if necessary.

도 1은 일 실시예에 따른 제품의 영양 성분 제공 서비스의 환경도이다.1 is an environment diagram of a nutritional component providing service of a product according to an embodiment.

도 1을 참조하면, 제품의 영양 성분 제공 서비스는 서버(1000) 및 사용자 단말기(2000)를 통해 구현될 수 있다.Referring to FIG. 1 , a service for providing nutritional components of a product may be implemented through a server 1000 and a user terminal 2000 .

서버(1000)는 제품의 영양 성분 제공 서비스의 중심적인 구성으로, 서비스의 전체적인 제어부 역할을 수행할 수 있다.The server 1000 is a central component of a nutritional component providing service of a product, and may serve as an overall control unit of the service.

서버(1000)는 사용자 단말기(2000)와 연결될 수 있다. 또한, 서버(1000) 및 사용자 단말기(2000)는 서로 연결되어 통신 신호를 주고받을 수 있다.The server 1000 may be connected to the user terminal 2000 . In addition, the server 1000 and the user terminal 2000 may be connected to each other to send and receive communication signals.

일 실시예에 따르면, 서버(1000)는 사용자 단말기(2000)로부터 사용자에 대한 정보를 획득할 수 있다. 이때, 사용자에 대한 정보는 사용자의 이름, 나이, 성별, 지역, 겪고 있는 알레르기 정보, 시각 장애 유무, 시각 장애 유형 등을 포함할 수 있다.According to an embodiment, the server 1000 may obtain information about the user from the user terminal 2000 . In this case, the information about the user may include the user's name, age, gender, region, allergy information that the user is experiencing, presence of visual impairment, type of visual impairment, and the like.

일 실시예에 따르면, 사용자 단말기(2000)는 서버(1000)로부터 제품에 대한 영양 성분 정보를 제공받을 수 있다. 구체적으로, 사용자 단말기(2000)는 서버(1000)로부터 제품에 포함된 알레르기 유발 물질에 대한 경고 알람을 제공받을 수 있다.According to an embodiment, the user terminal 2000 may receive nutritional information about the product from the server 1000 . Specifically, the user terminal 2000 may be provided with a warning alarm about the allergen included in the product from the server 1000 .

도 1에 도시된 것과 달리, 서버(1000)는 사용자 단말기(2000)에 설치된 프로그램의 형태로 구현될 수 있다. 또한, 도 1에는 서버(1000)의 개수가 하나인 것으로 도시되었으나, 이에 한정되지 않고, 각 역할에 따라 복수의 서버들이 존재할 수도 있다.Unlike the one shown in FIG. 1 , the server 1000 may be implemented in the form of a program installed in the user terminal 2000 . Also, although the number of the servers 1000 is illustrated in FIG. 1 as one, the present invention is not limited thereto, and a plurality of servers may exist according to each role.

이하에서는, 본원 발명의 일 실시예에 따른 제품의 영양 성분 제공 방법에 대해 구체적으로 설명한다.Hereinafter, a method for providing a nutritional component of a product according to an embodiment of the present invention will be described in detail.

도 2는 일 실시예에 따른 제품의 영양 성분에 대한 정보를 제공하는 방법의 순서도이다.2 is a flowchart of a method of providing information on nutritional components of a product according to an exemplary embodiment.

도 2를 참조하면, 일 실시예에 따른 제품의 영양 성분에 대한 정보를 제공하는 방법은 사용자 정보를 획득하는 단계(S110), 제품과 관련된 이미지를 획득하는 단계(S120), 제품을 파악하는 단계(S130), 제품의 영양 성분 정보를 획득하는 단계(S140) 및 사용자 맞춤 영양 성분 데이터를 생성하는 단계(S150)를 포함할 수 있다.Referring to FIG. 2 , the method of providing information on nutritional components of a product according to an embodiment includes the steps of obtaining user information (S110), obtaining an image related to the product (S120), and identifying the product. (S130), obtaining nutritional component information of the product (S140) and generating user-customized nutritional component data (S150).

도 4 내지 도 6은 사용자 단말기 상에서 제품의 영양 성분을 제공하는 서비스의 예시 화면을 설명하기 위한 도면이다.4 to 6 are diagrams for explaining an example screen of a service that provides nutritional components of a product on a user terminal.

도 4 내지 도 6을 참조하여, 도 2의 일 실시예에 따른 제품의 영양 성분에 대한 정보를 제공하는 방법을 이하에서 구체적으로 설명한다.With reference to FIGS. 4 to 6 , a method of providing information on nutritional components of a product according to an embodiment of FIG. 2 will be described in detail below.

사용자 정보를 획득하는 단계(S110)는 사용자의 알레르기, 사용자의 알레르기를 유발하는 물질, 사용자의 시각 장애 유무 및/또는 사용자의 시각 장애 유형에 대한 정보를 획득하는 단계일 수 있다.The step of acquiring user information ( S110 ) may be a step of acquiring information on the user's allergy, the substance causing the user's allergy, the presence or absence of the user's visual impairment, and/or the type of the user's visual impairment.

구체적으로, 도 4를 참조하면, 사용자는 사용자 단말기(2000)에 도 4(a)와 같이 자신의 알러지에 대한 정보를 입력할 수 있다. 예를 들어, 사용자는 우유 및 계란에 대해 알레르기가 있음을 사용자 단말기(2000)에 입력할 수 있다. 사용자 단말기(2000)는 입력받은 정보를 서버(1000)로 전송할 수 있다.Specifically, referring to FIG. 4 , the user may input information on his or her allergy to the user terminal 2000 as shown in FIG. 4( a ). For example, the user may input into the user terminal 2000 that he is allergic to milk and eggs. The user terminal 2000 may transmit the received information to the server 1000 .

또한, 사용자는 사용자 단말기(2000)에 도 4(b)와 같이 자신의 시각 장애 유형에 대한 정보를 입력할 수 있다. 예를 들어, 사용자는 시력 장애, 시야 장애, 광각 장애, 색각 장애, 굴절 장애 및/또는 조절 장애 중 적어도 하나를 선택하여 사용자 단말기(2000)에 자신의 시각 장애 유형에 대한 정보를 입력할 수 있다. 사용자 단말기(2000)는 입력받은 정보를 서버(1000)로 전송할 수 있다.In addition, the user may input information on his/her visual impairment type into the user terminal 2000 as shown in FIG. 4( b ). For example, the user may input information on the type of his/her visual impairment into the user terminal 2000 by selecting at least one of visual impairment, visual impairment, wide-angle impairment, color vision impairment, refractive impairment, and/or accommodation impairment. . The user terminal 2000 may transmit the received information to the server 1000 .

또한, 도 4(b)의 아래 화면에서, 사용자는 자신이 시각적으로 인식할 수 있는 이미지 출력 형태를 선택할 수 있다. 구체적으로, 시력 장애를 가진 사용자는 이미지를 확대하거나 윤곽선을 강조하면, 시각적으로 이미지를 잘 인식할 수 있다.In addition, in the lower screen of FIG. 4B , the user may select an image output form that the user can visually recognize. Specifically, a user with a visual impairment may visually recognize an image better by enlarging the image or emphasizing the outline.

예를 들어, 사용자 단말기(2000)가 여러 이미지를 출력하고, 사용자는 출력된 이미지 중 시각적으로 잘 파악되는 이미지를 선택할 수 있다. 사용자 단말기(2000)는 사용자가 선택한 이미지를 서버(1000)로 전송할 수 있다. 서버(1000)는 수신한 이미지에 기초하여 사용자가 시각적으로 잘 인식할 수 있는 이미지의 속성을 파악할 수 있다.For example, the user terminal 2000 outputs several images, and the user may select an image that is visually recognized from among the output images. The user terminal 2000 may transmit the image selected by the user to the server 1000 . Based on the received image, the server 1000 may determine an image attribute that can be visually recognized by the user.

제품과 관련된 이미지를 획득하는 단계(S120)는 사용자가 사용자 단말기(2000)를 통해 촬영한 이미지를 서버(1000)가 획득하는 단계일 수 있다. 이때, 제품과 관련된 이미지는 제품의 겉면에 표시된 영양 성분표, 바코드 또는 제품의 표지나 제품 외관 사진을 포함할 수 있다. 서버(1000)는 사용자 단말기(2000)로부터 하나 이상의 이미지를 획득할 수 있다.The step of obtaining the product-related image ( S120 ) may be a step of obtaining, by the server 1000 , an image captured by the user through the user terminal 2000 . In this case, the image related to the product may include a nutritional information table, barcode, or product label or product exterior photo displayed on the surface of the product. The server 1000 may acquire one or more images from the user terminal 2000 .

구체적으로, 도 5를 참조하면, 도 5(a)와 같이 사용자는 사용자 단말기(2000)를 통해 사진을 촬영할 수 있다. 사용자는 도 5(b)와 같이 성분표, 바코드 및/또는 표지나 제품 외관 사진을 선택하여, 사진을 촬영하거나 촬영한 사진을 어플 상에 업로드할 수 있다. 사용자 단말기(2000)는 사용자가 업로드한 사진을 서버(1000)로 전송할 수 있다.Specifically, referring to FIG. 5 , as shown in FIG. 5A , the user may take a picture through the user terminal 2000 . The user may select an ingredient list, barcode, and/or a cover or product exterior photo as shown in FIG. The user terminal 2000 may transmit a picture uploaded by the user to the server 1000 .

제품을 파악하는 단계(S130)는 서버(1000)가 단계 S120에서 획득한 이미지를 기초로 이미지의 제품이 어떤 제품인지를 파악하는 단계일 수 있다.The step of recognizing the product ( S130 ) may be a step of the server 1000 figuring out which product is the product of the image based on the image obtained in step S120 .

일 실시예에 따르면, 단계 S130에서 서버(1000)는 광학 문자 인식(OCR) 기술을 이용하여, 상기 이미지로부터 제품과 관련된 텍스트를 추출할 수 있다. 예를 들어, 획득한 이미지가 제품의 성분표인 경우, 서버(1000)는 광학 문자 인식 기술을 이용하여 성분표에 적힌 성분들의 텍스트를 추출할 수 있다.According to an embodiment, in step S130 , the server 1000 may extract text related to a product from the image by using an optical character recognition (OCR) technology. For example, when the acquired image is an ingredient list of a product, the server 1000 may extract texts of ingredients written on the ingredient table using optical character recognition technology.

또한 예를 들어, 획득한 이미지가 제품의 바코드인 경우, 서버(1000)는 광학 문자 인식 기술을 이용하여 바코드의 숫자를 텍스트로 추출할 수 있다. 이때, 서버(1000)는 외부 서버를 통해 상기 바코드 숫자 텍스트에 대응되는 제품 정보를 획득할 수 있다. 이때, 외부 서버는 식약청 서버 등 제품과 바코드 정보를 공개하는 서버일 수 있다.Also, for example, when the acquired image is a barcode of a product, the server 1000 may extract the number of the barcode as text using an optical character recognition technology. In this case, the server 1000 may acquire product information corresponding to the barcode number text through an external server. In this case, the external server may be a server that discloses product and barcode information, such as a KFDA server.

또한 예를 들어, 획득한 이미지가 제품의 외관 사진인 경우, 서버(1000)는 광학 문자 인식 기술을 이용하여 외관 이미지에 적힌 제품의 상표 등을 텍스트로 추출할 수 있다.Also, for example, when the acquired image is a photograph of the exterior of a product, the server 1000 may extract a trademark of the product written on the exterior image as text using an optical character recognition technology.

다른 일 실시예에 따르면, 단계 S130에서 서버(1000)는 인공지능 모델을 이용하여, 상기 이미지로부터 제품과 관련된 정보를 추출할 수 있다. 구체적으로, 서버(1000)는 획득한 이미지를 인공지능 모델에 입력하고, 인공지능 모델은 제품을 인식하여 제품에 대한 정보를 추출할 수 있다.According to another embodiment, in step S130 , the server 1000 may extract product-related information from the image using an artificial intelligence model. Specifically, the server 1000 may input the acquired image into the artificial intelligence model, and the artificial intelligence model may recognize the product and extract information about the product.

이때, 인공지능 모델은 일반적인 컨볼루션 신경망(CNN:Convolutional Neural Networks)일 수 있다. 인공지능 모델은 복수의 제품 이미지를 통해 미리 학습되어 있을 수 있다.In this case, the artificial intelligence model may be a general convolutional neural network (CNN). The artificial intelligence model may be pre-trained through a plurality of product images.

예를 들어, 획득한 이미지가 제품의 성분표인 경우, 서버(1000)는 인공지능 모델을 통해 상기 성분표에 대응되는 제품을 추출할 수 있다. 또한 예를 들어, 획득한 이미지가 제품의 바코드인 경우, 서버(1000)는 인공지능 모델을 통해 상기 바코드에 대응되는 제품을 추출할 수 있다. 또한 예를 들어, 획득한 이미지가 제품의 외관 사진인 경우, 서버(1000)는 인공지능 모델을 통해 상기 외관을 가진 제품을 추출할 수 있다.For example, when the acquired image is a product ingredient list, the server 1000 may extract a product corresponding to the ingredient table through an artificial intelligence model. Also, for example, when the acquired image is a barcode of a product, the server 1000 may extract a product corresponding to the barcode through an artificial intelligence model. Also, for example, when the acquired image is a photograph of the exterior of the product, the server 1000 may extract the product having the exterior through the artificial intelligence model.

제품의 영양 성분 정보를 획득하는 단계(S140)는 서버(1000)가 단계 S130에서 파악한 제품에 대응되는 영양 성분 정보를 획득 및/또는 저장하는 단계일 수 있다.The step of obtaining the nutritional information of the product ( S140 ) may be a step of the server 1000 acquiring and/or storing the nutritional information corresponding to the product identified in the step S130 .

구체적으로, 획득한 이미지가 제품의 성분표인 경우, 서버(1000)는 상기 성분표를 기준으로 제품의 영양 성분 정보를 추출, 획득 및/또는 저장할 수 있다. 또한, 획득한 이미지가 제품의 바코드 또는 외관 사진인 경우, 서버(1000)는 단계 S130에서 파악한 제품에 대한 영양 성분 정보를 외부 서버(예, 식약청 서버)로부터 획득할 수 있다.Specifically, when the acquired image is the ingredient list of the product, the server 1000 may extract, acquire, and/or store nutritional ingredient information of the product based on the ingredient table. In addition, when the acquired image is a barcode or an exterior photograph of a product, the server 1000 may acquire nutritional information about the product identified in step S130 from an external server (eg, the Food and Drug Administration server).

도 6(a)를 참조하면, 사용자 단말기(2000)는 어플 상에 서버(1000)가 단계 S130에서 파악한 제품명 및 영양 성분을 출력할 수 있다. 영양 성분에 대해서는 다른 웹사이트로 연결되는 링크로 구현될 수도 있고, 텍스트 위주의 글로 구현될 수도 있고, 텍스트가 포함된 이미지로 구현될 수도 있다.Referring to FIG. 6( a ), the user terminal 2000 may output the product name and the nutritional component identified by the server 1000 in step S130 on the application. For nutritional ingredients, it may be implemented as a link to another website, may be implemented as text-oriented text, or may be implemented as an image containing text.

사용자 맞춤 영양 성분 데이터를 생성하는 단계(S150)는 서버(1000)가 사용자의 시각 장애 유형에 따라 사용자가 시각적으로 잘 인식할 수 있는 이미지를 생성하는 단계일 수 있다. 이에 대해서는 도 3을 참조하여 자세히 설명한다.The step of generating the user-customized nutritional component data ( S150 ) may be a step in which the server 1000 generates an image that the user can visually recognize according to the type of the user's visual impairment. This will be described in detail with reference to FIG. 3 .

도 3은 일 실시예에 따른 사용자 맞춤 영양 성분 데이터를 생성하는 방법의 순서도이다.3 is a flowchart of a method for generating user-customized nutritional component data according to an embodiment.

도 3을 참조하면, 일 실시예에 따른 사용자 맞춤 영양 성분 데이터를 생성하는 방법은 초기 이미지를 생성하는 단계(S151), 초기 이미지를 가공하는 단계(S152) 및 사용자 맞춤 영양 성분 데이터를 생성하는 단계(S150)를 포함할 수 있다.Referring to FIG. 3 , the method for generating user-customized nutritional component data according to an embodiment includes generating an initial image (S151), processing the initial image (S152), and generating user-customized nutritional component data (S150) may be included.

초기 이미지를 생성하는 단계(S151)는 서버(1000)가 단계 S140에서 획득한 제품의 영양 성분에 대한 정보를 기초로 초기 이미지를 생성하는 단계일 수 있다. 이때, 초기 이미지는 시각 장애가 없는 비장애인에 일반적으로 제공되는 기본 이미지일 수 있다. 즉, 초기 이미지는 이미지의 왜곡 없이 제품의 영양 성분에 대한 정보를 포함하는 이미지일 수 있다.The step of generating the initial image ( S151 ) may be a step in which the server 1000 generates the initial image based on the information on the nutritional component of the product obtained in the step S140 . In this case, the initial image may be a basic image that is generally provided to non-disabled people who do not have a visual impairment. That is, the initial image may be an image including information on nutritional components of the product without distortion of the image.

초기 이미지를 가공하는 단계(S152)는 서버(1000)가 단계 S151에서 생성한 초기 이미지를 사용자의 시각 장애 유형에 따라 가공하는 단계일 수 있다. 구체적으로, 서버(1000)는 사용자의 시각 장애 유형에 따라 사용자가 시각적으로 이미지를 잘 파악할 수 있도록 이미지를 왜곡시킬 수 있다.The step of processing the initial image ( S152 ) may be a step of the server 1000 processing the initial image generated in step S151 according to the type of visual impairment of the user. Specifically, the server 1000 may distort the image so that the user can visually recognize the image well according to the type of the user's visual impairment.

예를 들어, 시력 장애를 가진 사용자를 위해, 서버(1000)는 초기 이미지를 확대하고, 초기 이미지에 포함된 선들을 두껍게 하여 강조할 수 있다. 또한 예를 들어, 시야 장애를 가진 사용자를 위해, 서버(1000)는 초기 이미지에서 필요한 정보만 추출하여, 시야를 고려해 이미지의 크기를 결정할 수 있다.For example, for a user with a visual impairment, the server 1000 may enlarge the initial image and thicken lines included in the initial image to emphasize it. Also, for example, for a user with a visual field impairment, the server 1000 may extract only necessary information from the initial image and determine the size of the image in consideration of the field of view.

또한 예를 들어, 광각 장애를 가진 사용자를 위해, 서버(1000)는 초기 이미지의 색상 대비나 밝기를 조절할 수 있다. 또한 예를 들어, 색각 장애를 가진 사용자를 위해, 서버(1000)는 초기 이미지의 색상을 반전하거나 색상 필터를 씌울 수 있다.Also, for example, for a user with a wide angle impairment, the server 1000 may adjust color contrast or brightness of the initial image. Also, for example, for a user with color vision impairment, the server 1000 may invert the color of the initial image or apply a color filter.

또한 예를 들어, 굴절 장애를 가진 사용자를 위해, 서버(1000)는 초기 이미지를 일부러 흐리게 하거나 윤곽선을 두껍게 하여 강조할 수 있다. 또한 예를 들어, 조절 장애를 가진 사용자를 위해, 서버(1000)는 초기 이미지의 색을 반전시키거나 이미지를 확대할 수 있다.Also, for example, for a user with refractive impairment, the server 1000 may intentionally blur the initial image or thicken the outline to emphasize it. Also, for example, for a user with an adjustment disorder, the server 1000 may invert the color of the initial image or enlarge the image.

이처럼, 서버(1000)는 시각 장애를 가진 사용자가 시각적으로 제품의 영양 성분을 잘 파악할 수 있도록 이미지의 속성을 왜곡시킬 수 있다. 이때, 도 4(b)의 아래 화면에서처럼, 사용자가 시각적으로 잘 인식할 수 있는 이미지 출력 형태를 선택하고, 서버(1000)는 선택한 이미지에 기초하여 사용자가 인식할 수 있는 이미지의 속성을 파악할 수 있다. 서버(1000)는 이때 파악한 이미지의 속성을 이용하여 단계 S152에서 이미지를 왜곡시킬 수 있다.As such, the server 1000 may distort the properties of the image so that a user with a visual impairment can visually understand the nutritional components of the product. At this time, as shown in the screen below in Fig. 4(b), the user selects an image output form that can be visually recognized well, and the server 1000 can determine the properties of the image that the user can recognize based on the selected image. have. The server 1000 may distort the image in step S152 by using the properties of the image identified at this time.

사용자 맞춤 영양 성분 데이터를 생성하는 단계(S150)는 단계 S152에서 가공한 이미지를 기초로, 사용자 알레르기 유발 성분을 중심으로 사용자 맞춤 영양 성분 데이터를 생성할 수 있다.In the step (S150) of generating the user-customized nutritional component data, based on the image processed in the step S152, the user-customized nutritional component data may be generated focusing on the user's allergy-inducing component.

구체적으로, 사용자가 우유 성분에 대해 알레르기가 있는 경우, 서버(1000)는 단계 S152의 이미지에 포함된 우유 성분에 대해 다른 성분과 구별될 수 있도록 글자체, 글자색, 글자 크기 등을 수정할 수 있다. 예를 들어, 서버(1000)는 우유 성분에 대해 빨간색 글자로 글자 크기를 2단계 더 키울 수 있다. 서버(1000)는 생성한 사용자 맞춤 영양 성분 데이터를 사용자 단말기(2000)로 전송할 수 있다.Specifically, when the user is allergic to milk components, the server 1000 may modify the font, font color, font size, etc. for the milk component included in the image of step S152 to be distinguished from other components. For example, the server 1000 may increase the text size by two steps in red text for the milk component. The server 1000 may transmit the generated user-customized nutritional component data to the user terminal 2000 .

도 6(b)와 같이, 사용자 단말기(2000)는 수신한 사용자 맞춤 영양 성분 데이터를 기초로, 사용자가 시각적으로 잘 인식할 수 있도록 사용자 맞춤 영양 성분 데이터에 포함된 이미지를 출력할 수 있다. 이때, 이미지는 하나 이상일 수 있다. 또한 이때, 상기 이미지는 시각 장애 유형에 따라 사용자가 시각적으로 잘 인식할 수 있도록 왜곡된 이미지일 수 있다.As shown in FIG. 6B , the user terminal 2000 may output an image included in the user-customized nutritional component data so that the user can visually recognize it well, based on the received user-customized nutritional component data. In this case, there may be one or more images. Also, in this case, the image may be a distorted image so that the user can visually recognize it well according to the type of visual impairment.

또한, 사용자 단말기(2000)는 상기 이미지를 증강 현실(AR)의 형태로 출력할 수 있다. 구체적으로, 사용자 단말기(2000)는 카메라를 통해 제품을 촬영하고, 카메라 화면의 제품 이미지 상에 서버(1000)로부터 수신한 사용자 맞춤 영양 성분 데이터에 포함된 이미지를 출력할 수 있다. 즉, 사용자가 제품을 카메라로 촬영하면, 상기 제품에 대한 영양 성분 즉시 출력될 수 있다. 이때, 출력되는 영양 성분에 대한 이미지는 시각 장애 유형에 따라 왜곡된 이미지일 수 있다.Also, the user terminal 2000 may output the image in the form of augmented reality (AR). Specifically, the user terminal 2000 may photograph a product through a camera, and output an image included in the user-customized nutritional component data received from the server 1000 on the product image on the camera screen. That is, when the user takes a picture of the product with the camera, the nutritional component for the product may be output immediately. In this case, the output image of the nutritional component may be a distorted image according to the type of visual impairment.

또한, 서버(1000)는 제품의 영양 성분에 사용자의 알레르기를 일으킬 수 있는 성분이 포함되어 있는 경우, 사용자 단말기(2000)에 음성 경고 데이터를 전송할 수 있다. 이때, 음성 경고 데이터는 사용자의 알레르기를 일으킬 수 있는 영양 성분에 대한 청각적인 정보를 포함할 수 있다. 예를 들어, 음성 경고 데이터는 '해당 제품에 우유가 포함되어 있으므로, 섭취하지 마세요'와 같은 음성 메시지를 포함할 수 있다.Also, when the nutritional component of the product contains a component that may cause a user's allergy, the server 1000 may transmit voice warning data to the user terminal 2000 . In this case, the voice warning data may include audible information on nutritional components that may cause a user's allergy. For example, the voice alert data may include a voice message such as 'Do not consume the product because it contains milk'.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited embodiments and drawings, various modifications and variations are possible from the above description by those skilled in the art. For example, the described techniques are performed in an order different from the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (8)

적어도 하나 이상의 프로세서에 의해 수행되는 제품의 영양 성분에 대한 정보를 제공하는 방법에 있어서,
사용자의 알레르기에 대한 정보를 획득하는 단계;
상기 사용자의 시각 장애 유형 정보- 상기 시각 장애 유형 정보는 시력 장애, 시야 장애, 광각 장애, 색각 장애, 굴절 장애 및 조절 장애 중 적어도 하나를 포함함 -를 획득하는 단계;
제품과 관련된 이미지를 획득하는 단계;
상기 이미지에 기초하여 상기 제품을 파악하는 단계;
상기 제품에 대응되는 영양 성분 정보를 획득하는 단계; 및
상기 사용자의 시각 장애 유형 정보에 기초하여 상기 영양 성분 정보와 상기 사용자의 알레르기에 대한 정보를 고려한 사용자 맞춤 영양 성분 데이터를 생성하는 단계를 포함하고,
상기 사용자 맞춤 영양 성분 데이터를 생성하는 단계는,
상기 영양 성분 정보를 포함하는 초기 이미지를 생성하는 단계; 및
상기 시각 장애 유형에 따라 상기 초기 이미지를 가공하는 단계를 포함하는
제품의 영양 성분에 대한 정보를 제공하는 방법.
A method of providing information on nutritional content of a product performed by at least one processor, the method comprising:
obtaining information about the user's allergy;
obtaining the user's visual impairment type information, wherein the visual impairment type information includes at least one of visual impairment, visual impairment, wide-angle impairment, color vision impairment, refractive impairment, and accommodation impairment;
acquiring an image related to the product;
identifying the product based on the image;
obtaining nutritional information corresponding to the product; and
and generating user-customized nutritional component data in consideration of the nutritional component information and the user's allergy information based on the user's visual impairment type information,
The step of generating the user-customized nutritional component data comprises:
generating an initial image including the nutritional component information; and
processing the initial image according to the type of visual impairment
How to provide information about the nutritional composition of a product.
제1항에 있어서,
상기 제품과 관련된 이미지는 상기 제품의 성분표, 상기 제품의 바코드 또는 상기 제품의 외관 사진을 포함하는
제품의 영양 성분에 대한 정보를 제공하는 방법.
According to claim 1,
The image related to the product includes an ingredient list of the product, a barcode of the product, or a photograph of the exterior of the product
How to provide information about the nutritional composition of a product.
제1항에 있어서,
상기 제품을 파악하는 단계는,
광학 문자 인식(OCR) 기술을 이용하여 상기 제품과 관련된 이미지로부터 텍스트를 추출하는 단계를 포함하거나,
상기 제품과 관련된 이미지를 인공지능 모델에 입력하여, 상기 인공지능 모델로부터 상기 제품에 대한 정보를 추출하는 단계를 포함하는
제품의 영양 성분에 대한 정보를 제공하는 방법.
According to claim 1,
The step of identifying the product is,
extracting text from an image associated with the product using optical character recognition (OCR) technology; or
inputting an image related to the product into an artificial intelligence model, and extracting information about the product from the artificial intelligence model
How to provide information about the nutritional composition of a product.
삭제delete 제1항에 있어서,
상기 초기 이미지를 가공하는 단계는,
상기 초기 이미지를 확대하거나, 상기 초기 이미지의 선을 두껍게 하거나, 상기 초기 이미지의 색상 또는 밝기를 조절하거나, 상기 초기 이미지에 색상 필터를 씌우거나, 상기 초기 이미지를 흐리게 하는 단계인
제품의 영양 성분에 대한 정보를 제공하는 방법.
According to claim 1,
The step of processing the initial image is,
Enlarging the initial image, thickening the line of the initial image, adjusting the color or brightness of the initial image, applying a color filter to the initial image, or blurring the initial image
How to provide information about the nutritional composition of a product.
제1항에 있어서,
상기 초기 이미지를 가공하는 단계는,
상기 사용자의 알레르기에 대한 정보에 기초하여, 상기 영양 성분 정보 중 상기 사용자의 알레르기를 일으킬 수 있는 영양 성분을 다른 영양 성분과 구별되게 나타내는 단계를 포함하는
제품의 영양 성분에 대한 정보를 제공하는 방법.
According to claim 1,
The step of processing the initial image is,
Based on the information on the user's allergy, comprising the step of displaying a nutritional component that can cause the user's allergy among the nutritional component information to be distinguished from other nutritional components
How to provide information about the nutritional composition of a product.
제6항에 있어서,
상기 사용자의 단말기에 상기 사용자 맞춤 영양 성분 데이터를 전송하는 단계; 및
상기 사용자의 단말기에 상기 사용자의 알레르기를 일으킬 수 있는 영양 성분에 대하여 청각적인 정보를 제공하는 음성 경고 데이터를 전송하는 단계를 더 포함하는
제품의 영양 성분에 대한 정보를 제공하는 방법.
7. The method of claim 6,
transmitting the user-customized nutritional component data to the user's terminal; and
The method further comprising the step of transmitting voice warning data for providing audible information to the user's terminal with respect to a nutritional component that can cause the user's allergy
How to provide information about the nutritional composition of a product.
사용자 단말기로부터 사용자의 알레르기에 대한 정보, 상기 사용자의 시각 장애 유형 정보- 상기 시각 장애 유형 정보는 시력 장애, 시야 장애, 광각 장애, 색각 장애, 굴절 장애 및 조절 장애 중 적어도 하나를 포함함 - 및 제품과 관련된 이미지를 수신하는 통신부; 및
상기 통신부를 통해 수신한 상기 이미지에 기초하여 상기 제품을 파악하고, 상기 제품에 대응되는 영양 성분 정보를 획득하고, 상기 사용자의 시각 장애 유형 정보에 기초하여 상기 영양 성분 정보와 상기 사용자의 알레르기에 대한 정보를 고려한 사용자 맞춤 영양 성분 데이터를 생성하는 제어부를 포함하고,
상기 사용자 맞춤 영양 성분 데이터는 상기 시각 장애 유형에 따라 상기 영양 성분 정보를 포함하는 초기 이미지를 가공한 데이터를 포함하는
제품의 영양 성분에 대한 정보를 제공하는 서버.
Information about the user's allergy, information on the type of visual impairment of the user from the user terminal - The visual impairment type information includes at least one of visual impairment, visual field impairment, wide angle impairment, color vision impairment, refractive impairment, and accommodation impairment; and a product a communication unit for receiving an image related to; and
Identify the product based on the image received through the communication unit, obtain nutritional component information corresponding to the product, and determine the nutritional component information and the user's allergy based on the user's visual impairment type information Including a control unit for generating user-customized nutritional component data in consideration of the information,
The user-customized nutritional component data includes data obtained by processing an initial image including the nutritional component information according to the type of visual impairment.
A server that provides information about the nutritional content of a product.
KR1020210168225A 2021-11-30 2021-11-30 Method for providing nutritional information of product KR102419240B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210168225A KR102419240B1 (en) 2021-11-30 2021-11-30 Method for providing nutritional information of product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210168225A KR102419240B1 (en) 2021-11-30 2021-11-30 Method for providing nutritional information of product

Publications (1)

Publication Number Publication Date
KR102419240B1 true KR102419240B1 (en) 2022-07-11

Family

ID=82396371

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210168225A KR102419240B1 (en) 2021-11-30 2021-11-30 Method for providing nutritional information of product

Country Status (1)

Country Link
KR (1) KR102419240B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102632138B1 (en) * 2023-03-06 2024-02-01 주식회사 코리얼에셋 Apparatus for Providing Customized Nutrition Information and Driving Method Thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190039448A (en) * 2017-09-13 2019-04-12 유나희 Method and apparatus for providing personalized information based on food data
KR102148331B1 (en) * 2019-02-11 2020-08-26 이찬희 System and method for providing contents for the blind and recording medium storing program to implement the method
KR20210092552A (en) * 2020-01-16 2021-07-26 서울시립대학교 산학협력단 Method and device for detecting nutrition data of product
KR20210105049A (en) * 2020-02-18 2021-08-26 이정문 Shop Information Service Supply System

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190039448A (en) * 2017-09-13 2019-04-12 유나희 Method and apparatus for providing personalized information based on food data
KR102148331B1 (en) * 2019-02-11 2020-08-26 이찬희 System and method for providing contents for the blind and recording medium storing program to implement the method
KR20210092552A (en) * 2020-01-16 2021-07-26 서울시립대학교 산학협력단 Method and device for detecting nutrition data of product
KR20210105049A (en) * 2020-02-18 2021-08-26 이정문 Shop Information Service Supply System

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102632138B1 (en) * 2023-03-06 2024-02-01 주식회사 코리얼에셋 Apparatus for Providing Customized Nutrition Information and Driving Method Thereof

Similar Documents

Publication Publication Date Title
US9824271B2 (en) Adaptable eye artifact identification and correction system
Kramer et al. Natural variability is essential to learning new faces
Deemer et al. Low vision enhancement with head-mounted video display systems: are we there yet?
Muir et al. Perception of sign language and its application to visual communications for deaf people
US20190043236A1 (en) Language element vision augmentation methods and devices
Moshtael et al. High tech aids low vision: a review of image processing for the visually impaired
US20140376785A1 (en) Systems and methods for enhancement of facial expressions
CN106254952A (en) video quality dynamic control method and device
US11381715B2 (en) Computer method and apparatus making screens safe for those with photosensitivity
CN110889824A (en) Sample generation method and device, electronic equipment and computer readable storage medium
KR102419240B1 (en) Method for providing nutritional information of product
US20160277707A1 (en) Message transmission system, message transmission method, and program for wearable terminal
CN111008542A (en) Object concentration analysis method and device, electronic terminal and storage medium
Girges et al. Categorizing identity from facial motion
Sutton et al. Seeing colours: addressing colour vision deficiency with vision augmentations using computational glasses
Pundlik et al. A mobile application for keyword search in real-world scenes
WO2021250797A1 (en) Information processing device, information presentation system, information processing method, and information processing program
Denić et al. Object recognition with machine learning for people with visual impairment
Huynh et al. Assistive Reading Device for Blind Individuals
CN108769568A (en) The person recognition system of video network meeting
KR101998037B1 (en) Method and Smart device for matching character type with user based augmented reality
Lee et al. Influence of audio-visual attention on perceived quality of standard definition multimedia content
CN118296645A (en) Information sharing method, electronic device and readable storage medium
CN112070954A (en) Living body identification method, living body identification device, living body identification equipment and storage medium
Wessel Exploration of webcam-based eye tracking by comparing gaze behaviour of Dutch Sign Language users during interpretation of sign language

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant