KR20220118270A - Food freshness notification system for cyclic type food carrier store, and operating method thereof - Google Patents

Food freshness notification system for cyclic type food carrier store, and operating method thereof Download PDF

Info

Publication number
KR20220118270A
KR20220118270A KR1020210044498A KR20210044498A KR20220118270A KR 20220118270 A KR20220118270 A KR 20220118270A KR 1020210044498 A KR1020210044498 A KR 1020210044498A KR 20210044498 A KR20210044498 A KR 20210044498A KR 20220118270 A KR20220118270 A KR 20220118270A
Authority
KR
South Korea
Prior art keywords
food
unit
analysis
image
conveyor
Prior art date
Application number
KR1020210044498A
Other languages
Korean (ko)
Other versions
KR102617610B1 (en
Inventor
엄천섭
Original Assignee
(주)코스턴
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)코스턴 filed Critical (주)코스턴
Publication of KR20220118270A publication Critical patent/KR20220118270A/en
Application granted granted Critical
Publication of KR102617610B1 publication Critical patent/KR102617610B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Emergency Management (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Table Equipment (AREA)

Abstract

The present invention relates to a food freshness notification system for a cyclic type food carrier store, and an operating method thereof, and more specifically, to a technology of keeping food always fresh on a conveyor by photographing food circulating on the conveyor with a camera, analyzing a photographed image, and providing a time elapsed to a kitchen through a notification means, after the food was supplied to the conveyor.

Description

순환형 음식 제공 매장의 음식 신선도 알림 시스템 및 그 운용 방법{Food freshness notification system for cyclic type food carrier store, and operating method thereof}Food freshness notification system for cyclic type food carrier store, and operating method thereof

본 발명은 순환형 음식 제공 매장의 음식 신선도 알림 시스템 및 그 운용 방법에 관한 것으로, 더욱 구체적으로는 컨베이어 상에서 순환하는 음식을 카메라로 촬영하고, 촬영된 영상을 분석하여 음식물이 컨베이어에 공급된 후 경과된 시간을 알림수단을 통해 주방에 제공함으로써 컨베이어 상에 항상 신선한 식품이 유지될 수 있도록 하는 기술에 대한 것이다.The present invention relates to a food freshness notification system and an operating method of a circulation type food providing store, and more specifically, to a food circulating on a conveyor is photographed with a camera, and the elapsed time after the food is supplied to the conveyor by analyzing the captured image. It is about a technology that ensures that fresh food is always kept on the conveyor by providing the kitchen with the specified time through a notification means.

통상적으로 회전초밥 시스템과 같이 식품을 접시위에 올려놓고, 상기 접시를 회전 이송하는 컨베이어에 올려놓은 후 소비자가 식품을 선택하여 취식하도록 하는 시스템은, 레스토랑 내의 주위를 컨베이어가 회전하고 상기 컨베이어 위에 식품을 배치하여 소비자가 자신의 기호에 맞게 식품을 선택하도록 하는 기술로서 1950년대 후반에 일본에서 처음으로 발명되었으며, 현재 미국, 일본, 한국 등 여러 나라의 많은 레스토랑에서 사용되고 있다.In general, a system that places food on a plate, such as a rotary sushi system, puts the plate on a conveyor that rotates, and then allows the consumer to select and eat food, the conveyor rotates around the restaurant and puts the food on the conveyor. It was first invented in Japan in the late 1950s as a technology that allows consumers to choose food according to their preferences by placing them in the kitchen.

일반적으로 초밥이나 회 등의 음식은 실온에서 2 시간 이상 경과하지 않아야 될 뿐만 아니라, 4도 이하에서 보관을 해야 한다는 규정이 있다. 이는 초밥이나 회 등은 신선도가 중요하기 때문으로, 컨베이어 등 실온에서 오랜 시간 노출된 초밥이나 회는 신선도를 유지하기 위해 일정 시간이 경과한 뒤에는 교체되어야 한다.In general, there is a regulation that foods such as sushi and sashimi should not be stored at room temperature for more than 2 hours, but also should be stored at 4 degrees or less. This is because the freshness of sushi or sashimi is important, and sushi or sashimi exposed for a long time at room temperature, such as on a conveyor, must be replaced after a certain period of time has elapsed in order to maintain freshness.

보통의 일반적인 시스템은 회전하는 컨베이어 위에 수십 개, 많게는 수백 개의 접시가 놓여 끊임없이 회전하고 있기 때문에, 소비자가 어떠한 것이 실온에서 2 시간 이상 경과한 식품인지를 알아내는 것은 쉽지 않다.In a typical system, dozens or even hundreds of plates are constantly rotating on a rotating conveyor, so it is not easy for the consumer to determine which food has been at room temperature for more than two hours.

상기와 같은 문제점을 해결하기 위해 종래에는 접시마다 센서 또는 태그를 달아두고, 주방 인근에 접시의 센서 또는 태그를 인식하는 스캐너를 구비하여 각각의 접시가 올려 진 후 얼마만큼의 시간이 흘렀는지 확인하였다.In order to solve the above problems, conventionally, a sensor or tag is attached to each dish, and a scanner that recognizes the sensor or tag of the dish is provided near the kitchen to check how much time has elapsed after each dish is placed .

그러나 상기와 같은 종래의 시스템은 수많은 접시에 각각 센서 또는 태그를 설치하여야 하기 때문에 설치비용이 현저하게 증가하는 문제점이 있다.However, the conventional system as described above has a problem in that the installation cost is significantly increased because each sensor or tag must be installed on a number of plates.

한편, 음식점에서의 음식 배송과 관련된 종래기술로는 대한민국공개특허 제10-2010-0081274호 등이 있다.On the other hand, as a prior art related to food delivery at a restaurant, there is Korean Patent Application Laid-Open No. 10-2010-0081274 and the like.

본 발명은 상술한 바와 같은 종래 기술의 문제점을 해결하기 위해 안출된 것으로, 컨베이어 상에서 순환하는 음식을 카메라로 촬영하고, 촬영된 영상을 분석하여 음식물이 컨베이어에 공급된 후 경과된 시간을 알림수단을 통해 주방에 제공함으로써 컨베이어 상에 항상 신선한 식품이 유지될 수 있도록 하는 기술을 제공하는 데 그 목적이 있다.The present invention has been devised to solve the problems of the prior art as described above, by photographing food circulating on a conveyor with a camera, analyzing the captured image, and providing a means for notifying the elapsed time after the food is supplied to the conveyor. The purpose is to provide a technology that ensures that fresh food is always kept on the conveyor by providing it to the kitchen through

본 발명이 해결하려는 과제는 전술한 과제로 제한되지 아니하며, 언급되지 아니한 또 다른 기술적 과제들은 후술할 내용으로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The problem to be solved by the present invention is not limited to the above problem, and other technical problems not mentioned will be clearly understood by those of ordinary skill in the art to which the present invention belongs from the following description.

상기 목적을 달성하기 위한 본 발명에 따른 음식 신선도 알림 시스템은 음식이 놓여진 그릇을 순환시키는 순환배송부; 상기 순환배송부에서 순환하는 음식을 촬영하는 카메라; 상기 카메라에서 촬영된 영상을 분석하여 음식이 제공된 후 경과된 시간을 파악하는 분석수단; 및 상기 분석수단을 통해 파악된 정보를 출력하는 알림수단;을 포함하는 것을 특징으로 한다.A food freshness notification system according to the present invention for achieving the above object includes: a circulation delivery unit circulating a bowl on which food is placed; a camera for photographing food circulating in the circulation delivery unit; Analysis means for analyzing the image taken by the camera to determine the elapsed time after the food is provided; and a notification means for outputting the information identified through the analysis means.

이때, 상기 분석수단은, 상기 카메라에서 촬영된 영상 정보를 수신하는 영상수신부; 상기 영상수신부로 수신된 촬영 영상을 분석하여 음식이 상기 순환배송부에 제공된 후 경과된 시간을 파악하는 영상분석부; 및 상기 영상분석부의 분석 결과가 상기 알림수단을 통해 출력되도록 하는 제어부;를 포함하는 것을 특징으로 한다.At this time, the analysis means, the image receiving unit for receiving the image information captured by the camera; an image analysis unit that analyzes the captured image received by the image receiver to determine the elapsed time after the food is provided to the circulation delivery unit; and a control unit for outputting the analysis result of the image analysis unit through the notification means.

또한, 상기 순환배송부의 일측에는 퇴출수단;이 구비되며, 상기 분석수단의 제어부가 상기 영상분석부의 분석 결과를 토대로 상기 퇴출수단을 제어하여 음식을 자동으로 회수하는 것을 특징으로 한다.In addition, an exit means is provided on one side of the circulation delivery unit, and the control unit of the analysis means controls the exit means based on the analysis result of the image analysis unit to automatically collect food.

또한, 상기 분석수단의 영상분석부가 음식의 종류를 판별하는 것을 특징으로 한다.In addition, it is characterized in that the image analysis unit of the analysis means to determine the type of food.

한편, 상기 목적을 달성하기 위한 본 발명에 따른 음식 신선도 알림 시스템의 운용 방법은 카메라에서 순환배송부 상에서 순환하는 음식을 실시간으로 촬영하는 (a)단계; 상기 카메라에서 촬영된 영상을 분석수단으로 전송하는 (b)단계; 상기 분석수단의 영상분석부에서 촬영된 영상을 분석하는 (c)단계; 및 상기 분석수단의 제어부가 상기 영상분석부의 분석 정보를 토대로 알림수단을 제어하는 (d)단계;를 포함하는 것을 특징으로 한다.On the other hand, the operating method of the food freshness notification system according to the present invention for achieving the above object comprises the steps of: (a) photographing in real time food circulating on the circulation delivery unit in a camera; (b) transmitting the image captured by the camera to the analysis means; (c) analyzing the image taken by the image analysis unit of the analysis means; and (d), by the control unit of the analysis unit, controlling the notification unit based on the analysis information of the image analysis unit.

이때, 상기 분석수단의 제어부가 상기 영상분석부의 분석 정보를 토대로 퇴출수단을 제어하는 (e)단계;를 더 포함하는 것을 특징으로 한다.In this case, the control unit of the analysis unit controls the exit unit based on the analysis information of the image analysis unit (e); characterized in that it further comprises a.

본 발명에 따른 음식 신선도 알림 시스템 및 그 운용 방법에 의하면, 컨베이어 상에서 순환하는 음식을 카메라로 촬영하고 분석수단에서 촬영된 영상을 분석하여 음식물이 컨베이어에 공급된 후 경과된 시간을 알림수단을 통해 주방에 제공함으로써 컨베이어 상에 항상 신선한 식품이 유지되도록 할 수 있다.According to the food freshness notification system and its operating method according to the present invention, the food circulating on the conveyor is photographed with a camera and the image captured by the analysis means is analyzed to notify the elapsed time after the food is supplied to the conveyor through the notifying means. You can ensure that fresh food is always on the conveyor.

또한, 분석수단이 촬영 영상을 분석하여 컨베이어에 공급된 후 경과된 시간이 일정 시간을 초과한 경우 퇴출수단을 제어하여 오래된 음식물을 자동으로 퇴출시킬 수 있다.In addition, when the elapsed time after the analysis means analyzes the captured image and is supplied to the conveyor exceeds a predetermined time, the old food can be automatically removed by controlling the ejection means.

또한, 분석수단이 촬영 영상 분석을 통해 컨베이어 상에 공급된 음식의 종류별 매출 통계를 내고 이를 통해 음식 종류별 예상 매출을 예측할 수 있으며, 이에 따라 음식 재료를 구매할 경우 분석 수단의 예상 매출을 고려하여 효과적으로 재료의 구매 수량을 설정할 수 있다.In addition, the analysis means generates sales statistics for each type of food supplied on the conveyor through the analysis of the captured image, and through this, the expected sales for each type of food can be predicted. You can set the purchase quantity of

이에 더하여, 각각의 매장에서 설치된 카메라에서 컨베이어 상의 음식물을 촬영하여 원격지에 있는 중앙서버로 전송하고, 원격지의 중앙서버에서 수신된 영상을 분석한 후 분석 결과에 따른 제어신호를 실시간으로 각 매장의 알림수단으로 보내주는 방식을 사용함으로써 매장의 시스템 구축 비용을 절감할 수 있다.In addition, the camera installed in each store captures food on the conveyor and transmits it to a central server located at a remote location. After analyzing the image received from the central server at a remote location, a control signal according to the analysis result is notified to each store in real time. By using the method of sending by means of a method, it is possible to reduce the cost of building the store's system.

본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the above-mentioned effects, and other effects not mentioned will be clearly understood by those skilled in the art from the description of the claims.

도 1은 본 발명의 실시예에 따른 음식 신선도 알림 시스템을 설명하기 위한 도면이다.
도 2는 본 발명의 실시예에 따른 음식 신선도 알림 시스템의 구성을 설명하기 위한 블록도이다.
도 3은 본 발명의 실시예에 따른 음식 신선도 알림 시스템이 식별수단 없이 음식물의 경과시간을 분석하는 과정을 설명하기 위한 도면이다.
도 4는 본 발명의 실시예에 따른 음식 신선도 알림 시스템에서 분석수단이 원격지의 중앙서버에 구비된 상태를 도시한 도면이다.
도 5는 도 1에 도시된 음식 신선도 알림 시스템에 배송차가 적용된 상태를 도시한 도면이다.
도 6은 본 발명의 실시예에 따른 음식 신선도 알림 시스템의 운용 방법을 설명하기 위한 도면이다.
도 7 내지 도 9는 음식 신선도 알림 시스템에서 알림수단의 화면에 출력되는 정보의 예시를 설명하기 위한 도면이다.1 is a view for explaining a food freshness notification system according to an embodiment of the present invention.
2 is a block diagram for explaining the configuration of a food freshness notification system according to an embodiment of the present invention.
3 is a view for explaining a process of analyzing the elapsed time of food without an identification means by the food freshness notification system according to an embodiment of the present invention.
4 is a diagram illustrating a state in which an analysis means is provided in a remote central server in the food freshness notification system according to an embodiment of the present invention.
5 is a view illustrating a state in which a delivery vehicle is applied to the food freshness notification system shown in FIG. 1 .
6 is a view for explaining a method of operating a food freshness notification system according to an embodiment of the present invention.
7 to 9 are diagrams for explaining examples of information output on the screen of the notification means in the food freshness notification system.

이하에서는 본 발명의 바람직한 실시예를 첨부된 도면을 참조하여 설명한다. 다만 발명의 요지와 무관한 일부 구성은 생략 또는 압축할 것이나, 생략된 구성이라고 하여 반드시 본 발명에서 필요가 없는 구성은 아니며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 결합되어 사용될 수 있다.Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings. However, some components irrelevant to the gist of the present invention will be omitted or compressed, but the omitted configuration is not necessarily a configuration that is not necessary in the present invention, and it will be used in combination by those of ordinary skill in the art to which the present invention belongs. can

더불어 이하에서 설명하게 되는 각 구성부와 서버 및 시스템은 반드시 각각의 기능을 수행하는 독립적인 구성부나 서버로 이루어져야 하는 것은 아니며, 하나 이상의 프로그램 또는 하나 이상의 서버 또는 하나 이상의 시스템의 집합으로 구현되거나 일부가 공유될 수도 있음을 밝히는 바이다.In addition, each component, server, and system to be described below do not necessarily consist of an independent component or server that performs each function, and is implemented as a set of one or more programs, one or more servers, or one or more systems, or a part Note that it may be shared.

도 1은 본 발명의 실시예에 따른 음식 신선도 알림 시스템을 설명하기 위한 도면이고, 도 2는 본 발명의 실시예에 따른 음식 신선도 알림 시스템의 구성을 설명하기 위한 블록도이고, 도 3은 본 발명의 실시예에 따른 음식 신선도 알림 시스템이 식별수단 없이 음식물의 경과시간을 분석하는 과정을 설명하기 위한 도면이고, 도 4는 본 발명의 실시예에 따른 음식 신선도 알림 시스템에서 분석수단이 원격지의 중앙서버에 구비된 상태를 도시한 도면이고, 도 5는 도 1에 도시된 음식 신선도 알림 시스템에 배송차가 적용된 상태를 도시한 도면이고, 도 6은 본 발명의 실시예에 따른 음식 신선도 알림 시스템의 운용 방법을 설명하기 위한 도면이고, 도 7 내지 도 9는 음식 신선도 알림 시스템에서 알림수단의 화면에 출력되는 정보의 예시를 설명하기 위한 도면이다.1 is a diagram for explaining a food freshness notification system according to an embodiment of the present invention, FIG. 2 is a block diagram for explaining the configuration of a food freshness notification system according to an embodiment of the present invention, and FIG. 3 is the present invention It is a diagram for explaining a process of analyzing the elapsed time of food without an identification means by the food freshness notification system according to an embodiment of the present invention It is a view showing a state provided in, FIG. 5 is a view showing a state in which a delivery vehicle is applied to the food freshness notification system shown in FIG. 1, and FIG. 6 is an operating method of the food freshness notification system according to an embodiment of the present invention 7 to 9 are diagrams for explaining an example of information output on the screen of the notification means in the food freshness notification system.

도 1 내지 도 9에 도시된 바와 같이 본 발명의 실시예에 따른 음식 신선도 알림 시스템은 순환배송부(100), 분석수단(10), 카메라(20) 및 알림수단(30)을 포함한다.1 to 9 , the food freshness notification system according to an embodiment of the present invention includes a circulation delivery unit 100 , an analysis unit 10 , a camera 20 , and a notification unit 30 .

순환배송부(100)는 곡선형으로 형성되어 순환배송부(100)의 둘레를 따라 배치되는 고객 테이블들(미도시)에 음식을 제공하기 위해 마련되며, 순환배송부(100)에는 복수의 스터드가 연결되어 컨베이어구동부(미도시)를 통해 작동함으로써 무한 순환하는 컨베이어(110)가 형성되어, 컨베이어(110) 위에서 음식(2)이 놓여진 그릇이 복수의 고객 테이블들을 이동함으로써 테이블에 착석한 고객이 인근에 도착한 음식을 마음껏 골라 섭취할 수 있다. 이러한 순환배송부(100)의 일측에는 상온에서 장시간 이동만 하고 섭취가 되지 않은 음식(2)을 바로 회수할 수 있도록 퇴출수단(120)이 마련되어 있다. 즉 컨베이어(110)의 전체 경로 중 주방(50)에 인접한 위치에 퇴출구(130)가 형성되며, 퇴출구(130)는 경사면을 가지거나 아랫방향으로 순차적으로 연결된 롤러들로 이루어질 수 있다. 이러한 퇴출구(130)와 인접하여 펼침 및 접힘이 가능한 퇴출수단(120)이 설치되어 있다. 이에 따라, 후술할 분석수단(10)의 영상분석부(14)의 영상분석에 의해 음식(2)이 제공된 후 특정 시간, 예컨대 15분을 초과한 것이 감지되면 분석수단(10)의 제어부(12)가 퇴출수단(120)을 작동시켜 펼쳐지도록 하여 해당 음식(2)이 놓여진 그릇이 퇴출구(130)를 통해 바로 퇴출될 수 있도록 한다. 이에 대한 구체적인 설명은 후술하도록 한다.The circulation delivery unit 100 is formed in a curved shape and is provided to provide food to customer tables (not shown) arranged along the circumference of the circulation delivery unit 100 , and the circulation delivery unit 100 has a plurality of studs. is connected and operates through a conveyor driving unit (not shown) to form a conveyor 110 that circulates infinitely, and a bowl on which the food 2 is placed on the conveyor 110 moves a plurality of customer tables. You can choose and eat as much food as you like from nearby areas. A withdrawal means 120 is provided on one side of the circulation delivery unit 100 so that the food 2 that has not been ingested after only moving at room temperature for a long time can be immediately recovered. That is, the exit 130 is formed at a position adjacent to the kitchen 50 among the entire path of the conveyor 110 , and the exit 130 may have an inclined surface or may be formed of rollers sequentially connected in the downward direction. Adjacent to the exit port 130 is the exit means 120 that can be unfolded and folded is installed. Accordingly, when it is detected that a specific time, for example, 15 minutes, has passed since the food 2 is provided by the image analysis of the image analysis unit 14 of the analysis unit 10 to be described later, the control unit 12 of the analysis unit 10 ) operates the ejection means 120 to unfold so that the dish on which the food 2 is placed can be immediately ejected through the ejection port 130 . A detailed description thereof will be provided later.

이때, 도 1에 도시된 음식점의 구조는 하나의 예시에 불과하며, 순환배송부(100)의 형태와 그에 따른 고객 테이블의 배치 등은 음식점의 크기나 구조에 따라 다양하게 변경될 수 있다. 또한, 도 5에 도시된 바와 같이 순환배송부(100)에 곡선형 레일(140)이 형성되고, 레일(140) 위에 다수의 배송차(141)가 주행 가능하게 안착되어 음식(2)이 놓여진 그릇을 순환시키는 구조로 형성되는 것도 가능하다.At this time, the structure of the restaurant shown in FIG. 1 is only one example, and the shape of the circulation delivery unit 100 and the arrangement of the customer table accordingly may be variously changed according to the size or structure of the restaurant. In addition, as shown in FIG. 5 , a curved rail 140 is formed on the circulation delivery unit 100 , and a plurality of delivery vehicles 141 are drivably seated on the rail 140 so that the food 2 is placed. It is also possible to be formed in a structure that circulates the vessel.

한편, 카메라(20)는 순환배송부(100)의 일측에 설치되어 컨베이어(110) 상에서 순환하는 음식(2) 및 식별수단(1)을 실시간으로 촬영하여, 촬영된 영상을 분석수단(10)으로 전송한다. 이러한 카메라(20)는 케이블을 통해 유선 연결되어 영상 데이터를 분석수단(10)으로 전송하거나 또는 무선전송장치를 이용하여 영상 데이터를 분석수단(10)으로 무선으로 전송하는 것이 가능하며, 카메라(20)의 유선 또는 무선전송장치는 이미 공지된 기술이기 때문에 자세한 설명은 생략하도록 한다.On the other hand, the camera 20 is installed on one side of the circulation delivery unit 100 to photograph the food 2 and the identification means 1 circulating on the conveyor 110 in real time, and the captured image is analyzed by the analysis means (10). send to Such a camera 20 is wired through a cable to transmit image data to the analysis means 10 or it is possible to wirelessly transmit image data to the analysis means 10 using a wireless transmission device, and the camera 20 ), since the wired or wireless transmission device is a known technology, a detailed description thereof will be omitted.

분석수단(10)은 카메라(20)에서 촬영된 영상을 분석하여 컨베이어(110) 상에서 순환하는 음식(2)이 제공된 후 경과된 시간을 파악하고 이를 바탕으로 알림수단(30)과 퇴출수단(120)을 제어하기 위해 마련된다. 이러한 분석수단(10)은 통신부(11), 제어부(12), 영상수신부(13) 및 영상분석부(14)를 포함한다.The analysis means 10 analyzes the image taken by the camera 20 to determine the elapsed time after the food 2 circulating on the conveyor 110 is provided, and based on this, the notification means 30 and the exit means 120 ) is provided to control The analysis means 10 includes a communication unit 11 , a control unit 12 , an image receiving unit 13 , and an image analysis unit 14 .

통신부(11)는 유무선 통신망을 통해 카메라(20) 및 알림수단(30)과 통신채널을 연결하고 정보를 송수신하기 위해 마련된다.The communication unit 11 is provided to connect a communication channel with the camera 20 and the notification means 30 through a wired/wireless communication network, and to transmit and receive information.

영상수신부(13)는 통신부(11)와 연계하여 카메라(20)에서 촬영된 영상 정보를 수신한다.The image receiving unit 13 receives image information captured by the camera 20 in connection with the communication unit 11 .

제어부(12)는 영상분석부(14)에서 촬영된 영상을 분석한 정보를 토대로 알림수단(30)과 퇴출수단(120)을 제어한다. 즉, 영상분석부(14)에서 촬영된 영상을 분석하여 음식(2)이 제공된 후 경과된 시간이 파악되면 이에 대한 정보를 알림수단(30)을 통해 출력되도록 하고, 특정 음식(2)이 제공된 후 경과된 시간이 특정 시간(예를 들어 15분)을 초과한 것이 감지되면 퇴출수단(120)을 작동시켜 해당 음식(2)이 놓여진 그릇이 퇴출구(130)를 통해 퇴출되도록 한다. 이에 대한 구체적인 설명은 후술하도록 한다.The control unit 12 controls the notification unit 30 and the exit unit 120 based on the information analyzed by the image analysis unit 14 to analyze the captured image. That is, when the time elapsed after the food 2 is provided by analyzing the image taken by the image analysis unit 14 is identified, information about this is output through the notification means 30, and the specific food 2 is provided. When it is sensed that the elapsed time exceeds a specific time (for example, 15 minutes), the ejection means 120 is operated so that the dish on which the corresponding food 2 is placed is ejected through the ejection port 130 . A detailed description thereof will be provided later.

데이터베이스(15)는 영상분석부(14)에서 촬영된 영상 및 영상 분석 정보를 저장한다.The database 15 stores images captured by the image analysis unit 14 and image analysis information.

영상분석부(14)는 영상수신부(13)로 수신된 촬영 영상을 분석하여 음식(2)이 컨베이어(110) 상에 제공된 후 경과된 시간을 파악하며, 본 발명에서는 영상분석부(14)가 딥러닝 기반의 인공지능으로 구성되어 데이터베이스(15)에 누적된 촬영 영상 정보 및 영상 분석 정보를 바탕으로 한 반복 학습을 통해 컨베이어(110) 상에서 순환하는 음식(2)의 종류(예를 들어, 계란초밥, 연어초밥, 새우초밥, 장어초밥 등)를 파악하여 더욱 정확하게 음식(2)이 제공된 후 경과된 시간을 파악할 수 있다. 영상분석부(14)의 촬영 영상 분석에 대한 구체적인 설명은 후술하도록 한다.The image analysis unit 14 analyzes the captured image received by the image receiving unit 13 to determine the elapsed time after the food 2 is provided on the conveyor 110, and in the present invention, the image analysis unit 14 The type of food (2) circulating on the conveyor 110 through repeated learning based on the captured image information and image analysis information that is composed of deep learning-based artificial intelligence and accumulated in the database 15 (eg, eggs) Sushi, salmon sushi, shrimp sushi, eel sushi, etc.) can be grasped to more accurately determine the elapsed time since the food (2) is served. A detailed description of the analysis of the captured image by the image analysis unit 14 will be described later.

알림수단(30)은 주방(50) 인근에 구비되어 분석수단(10)을 통해 파악된 음식(2)이 제공된 후 경과된 시간에 대한 정보를 출력하는 역할을 하며, 이러한 알림수단(30)은 디스플레이(주방 모니터), 발광 수단, 스피커 등으로 형성될 있다.The notification means 30 is provided near the kitchen 50 and serves to output information about the elapsed time after the food 2 identified through the analysis means 10 is provided. It may be formed of a display (kitchen monitor), a light emitting means, a speaker, and the like.

알림수단(30)이 디스플레이(주방 모니터)로 형성된 경우, 분석수단(10)의 제어부(12)는 영상분석부(14)의 영상 분석 결과를 토대로 디스플레이를 통해 도 7과 같이 제공된 후 경과된 시간이 10분 이내인 음식(2)은 초록색 박스 표시와 함께 실제 경과된 시간을 텍스트(5분 경과)로 출력하도록 할 수 있고, 도 8과 같이 제공된 후 경과된 시간이 10분 내지 15분인 음식(2)은 파란색 박스 표시와 함께 실제 경과된 시간을 텍스트(10분 경과)로 출력하도록 할 수 있고, 도 9와 같이 제공된 후 경과된 시간이 15분을 초과한 음식(2)은 붉은색 박스 표시와 함께 실제 경과된 시간을 텍스트(16분 경과)로 출력되도록 할 수 있다.When the notification means 30 is formed as a display (kitchen monitor), the control unit 12 of the analysis means 10 is provided as shown in FIG. 7 through the display based on the image analysis result of the image analysis unit 14, elapsed time The food (2) within 10 minutes can output the actual elapsed time as text (5 minutes elapsed) with a green box mark, and food whose elapsed time is 10 to 15 minutes after being provided as shown in FIG. 2) can output the actual elapsed time as text (10 minutes elapsed) with a blue box mark, and food (2) whose elapsed time exceeds 15 minutes after being provided as shown in FIG. 9 is marked with a red box together with the actual elapsed time can be output as text (16 minutes elapsed).

알림수단(30)이 특정 색상의 빛을 발광시키는 발광수단으로 형성된 경우 분석수단(10)의 제어부(12)는 영상분석부(14)의 영상 분석 결과를 토대로 발광수단을 제어하여 제공된 후 경과된 시간이 10분 이내인 음식(2)이 지나갈 때엔 초록색 빛이 발광되도록 하고, 제공된 후 경과된 시간이 10분 내지 15분인 음식(2)이 지나갈 땐 파란색 빛이 발광되도록 하고, 제공된 후 경과된 시간이 15분을 초과한 음식(2)이 지나갈 땐 붉은색 빛이 발광되도록 할 수 있다.When the notification means 30 is formed as a light emitting means for emitting light of a specific color, the control unit 12 of the analysis means 10 controls the light emitting means based on the image analysis result of the image analysis unit 14 and provides the elapsed time When food (2) whose time is less than 10 minutes passes, a green light is emitted, and when food (2) whose time elapsed after being served is 10 to 15 minutes, a blue light is emitted, and the elapsed time after being served A red light can be emitted when food (2) whose time exceeds 15 minutes passes.

알림수단(30)이 스피커로 형성된 경우 분석수단(10)의 제어부(12)는 영상분석부(14)의 영상 분석 결과를 토대로 스피커를 통해 제공된 후 경과된 시간이 10분 이내인 음식(2)이 지날갈 땐 아무런 소리를 내지 않고, 제공된 후 경과된 시간이 10분 내지 15분인 음식(2)이 지나갈 땐 짧은 경고음이 나도록 하고, 제공된 후 경과된 시간이 15분을 초과한 음식(2)이 지나갈 땐 긴 경고음이 나도록 제어할 수 있다.When the notification means 30 is formed of a speaker, the control unit 12 of the analysis means 10 is provided through the speaker based on the image analysis result of the image analysis unit 14, and the elapsed time is within 10 minutes of the food (2) Make no sound when passing, and make a short beep sound when food (2) with a time elapsed between 10 and 15 minutes after being served (2) passes, and food (2) with a time elapsed more than 15 minutes after serving It can be controlled to sound a long beep when passing.

상기와 같은 알림수단(30)을 통해 주방(50)에 있는 요리사는 컨베이어(110) 상에서 순환하는 음식(2)들이 공급된 후 경과된 시간을 실시간으로 파악할 수 있으며 특정시간, 예컨대 제공된 후 15분이 초과된 음식(2)을 회수하여 컨베이어(110) 상에 신선한 음식(2)만 순환하도록 할 수 있다.Through the notification means 30 as described above, the cook in the kitchen 50 can grasp the elapsed time in real time after the food 2 circulating on the conveyor 110 is supplied, and a specific time, for example, 15 minutes after being provided Excess food (2) can be recovered so that only fresh food (2) is circulated on the conveyor (110).

상기에서는 알림수단(30)으로 디스플레이, 발광수단, 스피커가 각각 독립적으로 사용되는 것으로 설명하였으나, 필요에 따라 디스플레이, 발광수단, 스피커를 복합적으로 사용할 수도 있다. 또한, 상기에서 예를 들어 설명한 시간 기준은 필요에 따라(예를 들어 음식의 종류가 다른 경우 등) 변경하는 것이 가능하다.In the above description, the display, the light emitting means, and the speaker are each independently used as the notification means 30 , but if necessary, the display, the light emitting means, and the speaker may be used in combination. In addition, the time reference described above for example can be changed as needed (eg, when the type of food is different, etc.).

한편, 상기에서는 각각의 매장에 분석수단(10)이 설치된 것으로 설명하였으나, 매장에는 분석수단(10)이 설치되지 않고 원격지의 중앙서버(40)에서 통합적으로 영상을 분석하도록 구성하는 것도 가능하다.On the other hand, although it has been described in the above that the analysis means 10 is installed in each store, the analysis means 10 is not installed in the store and it is also possible to configure the central server 40 in a remote place to analyze the image integrally.

구체적으로, 도 4에 도시된 바와 같이 각각의 매장에 설치된 카메라(20)에서 컨베이어(110) 상의 음식을 촬영하여 원격지에 있는 중앙서버(40)로 전송하고, 원격지의 중앙서버(40)에서 수신된 영상을 분석한 후 분석 결과에 따른 정보 및 제어신호를 실시간으로 각 매장의 알림수단(30) 및 퇴출수단(120)으로 보내주는 방식을 사용함으로써 매장 내에 분석수단(10)을 별도로 설치 않아도 되어 매장의 시스템 구축 비용을 절감할 수 있다. 이때, 중앙서버(40)는 상기에서 설명한 분석수단(10)의 구성들(통신부(11), 제어부(12), 영상수신부(13) 및 영상분석부(14))을 모두 포함한다. 또한, 카메라(20)는 원격지에 위치한 중앙서버(40)에 인터넷을 통해 영상 데이터를 송수신할 수 있는 IP 카메라(Internet Protocol camera)로 구성된다.Specifically, as shown in FIG. 4 , the camera 20 installed in each store captures food on the conveyor 110 and transmits it to the central server 40 at a remote location, and receives it from the central server 40 at the remote location. After analyzing the image, information and control signals according to the analysis result are sent to the notification means 30 and exit means 120 of each store in real time, so that there is no need to separately install the analysis means 10 in the store. It is possible to reduce the cost of building the system in the store. At this time, the central server 40 includes all of the components of the analysis means 10 described above (communication unit 11, control unit 12, image receiving unit 13, and image analysis unit 14). In addition, the camera 20 is configured as an IP camera (Internet Protocol camera) capable of transmitting and receiving image data through the Internet to the central server 40 located at a remote location.

이상에서 설명한 본 발명의 실시예에 따른 음식 신선도 알림 시스템에 대해서는 이하 도 1 내지 도 9를 통해 설명하게 되는 음식 신선도 알림 시스템의 운용 방법에 대한 설명을 통해 더욱 명확해질 것이다.The food freshness notification system according to the embodiment of the present invention described above will be clearer through the description of the operating method of the food freshness notification system, which will be described with reference to FIGS. 1 to 9 below.

먼저, 주방(50)에서 음식(2, 초밥)을 조리한 후 접시에 올려놓고, 접시를 컨베이어(110)에 올려놓으면 음식(2)이 담긴 접시가 컨베이어(110) 상에서 순환한다.First, the food (2, sushi) is cooked in the kitchen 50 and placed on a plate, and when the plate is placed on the conveyor 110 , the plate containing the food 2 circulates on the conveyor 110 .

음식(2)이 담긴 접시들 사이사이에는 도 1과 같이 식별수단(1)이 놓여진다. 식별수단(1)은 음식(2)이 아닌 그림이나 물건, 예컨대 고양이 그림, 강아지 그림, 말 그림, 또는 뽀로로 인형, 피카츄 인형 등을 말한다.An identification means (1) is placed between the plates containing the food (2) as shown in FIG. The identification means (1) refers to a picture or an object other than the food (2), for example, a picture of a cat, a picture of a dog, a picture of a horse, or a Pororo doll, a Pikachu doll, and the like.

이때, 주방(50) 인근에 설치된 카메라(20)에서 컨베이어(110) 상에서 순환하는 음식(2)과 식별수단(1)을 실시간으로 촬영<S310>하며, 촬영된 영상은 분석수단(10)의 영상수신부(13)로 송신<S320>된다.At this time, the camera 20 installed near the kitchen 50 captures the food 2 and the identification means 1 circulating on the conveyor 110 in real time <S310>, and the captured image is captured by the analysis means 10 It is transmitted to the image receiving unit 13 <S320>.

이후, 분석수단(10)의 영상수신부(13)에서 수신한 촬영 영상을 영상분석부(14)에서 분석하여 각각의 음식들이 컨베이어(110)에 올려 진 후 경과된 시간을 파악<S330>한다. 구체적으로, 본 발명에서는 분석수단(10)의 영상분석부(14)가 딥러닝 기반의 인공지능으로 구성되어 영상 분석을 통해 식별수단(1)과 음식(2)을 구분하여 인식할 수 있고 서로 다른 형태의 식별수단(1)도 구분하여 인식할 수 있다. 예를 들어, 영상분석부(14)에서 촬영 영상을 분석하면 '강아지 그림'이라는 식별수단(1), '고양이 그림'이라는 식별수단(1), '음식(2)'을 각각 구분하여 인식하는 것이다. 따라서, 각각의 식별수단(1)을 종류에 따라 구분하여 인식하고, 음식(2)이 각각의 식별수단(1) 뒤에 몇 번째에 위치하였는가를 기준으로 음식(2)이 제공된 후 경과된 시간을 파악하게 된다. 예를 들어 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 음식(2)이 놓여진 것이 감지되면 해당 음식(2)에 대한 시간 카운트를 시작하고, 이후 두 번째 접시에 음식(2)이 놓여 진 것이 감지되면 해당 음식(2)에 대한 시간 카운트를 시작한다.Thereafter, the image analysis unit 14 analyzes the captured image received by the image receiving unit 13 of the analysis unit 10 to determine the elapsed time after each food is placed on the conveyor 110 <S330>. Specifically, in the present invention, the image analysis unit 14 of the analysis means 10 is composed of deep learning-based artificial intelligence, so that the identification means 1 and the food 2 can be distinguished and recognized through image analysis, and each other Different types of identification means (1) can also be recognized separately. For example, when the image analysis unit 14 analyzes the captured image, the identification means (1) called 'dog picture', identification means (1) called 'cat picture', and 'food (2)' are recognized separately. will be. Therefore, each identification means (1) is recognized separately according to the type, and the time elapsed after the food (2) is provided based on how many times the food (2) is located behind each identification means (1) will figure out For example, when it is detected that food (2) is placed on the first plate after the 'dog picture' identification means (1), time counting for the food (2) is started, and then the food (2) is placed on the second plate When a loss is detected, the time counting starts for the corresponding food (2).

다음으로, 해당 음식(2)들에 대한 시간 카운트가 지속적으로 이루어지는 상태에서 '강아지 그림' 식별수단(1) 이후 두 번째 접시에 놓여진 음식(2)이 사라지고 첫 번째 접시에 놓여진 음식(2)은 그대로 있는 것이 감지되면 '강아지 그림' 식별수단(1) 이후 두 번째 접시의 음식(2)에 대한 시간 카운트를 리셋하고 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 놓여진 음식(2)에 대한 시간 카운트는 지속적으로 이루어진다.Next, in a state where the time count for the corresponding food (2) is continuously made, the food (2) placed on the second plate disappears after the 'dog picture' identification means (1), and the food (2) placed on the first plate is When it is detected that it is, the time count for the food (2) on the second plate after the 'picture of dog' identification means (1) is reset, and the food (2) placed on the first plate after the 'picture of a dog' identification means (1) Time counting is done continuously.

이후, '강아지 그림' 식별수단(1) 이후 두 번째 그릇에 음식(2)이 놓여지고, 첫 번째 그릇에 있던 음식(2)이 사라진 것이 감지되면 '강아지 그림' 식별수단(1) 이후 첫 번째 접시의 음식(2)에 대한 시간 카운트를 리셋하고 '강아지 그림' 식별수단(1) 이후 두 번째 접시에 놓여진 음식(2)에 대한 시간 카운트를 시작한다.Afterwards, after the 'picture of dog' identification means (1), food (2) is placed in the second bowl, and when it is detected that the food (2) in the first bowl has disappeared, the first after the identification means (1) of the 'picture of dog' Reset the time count for the food (2) on the plate and start counting the time for the food (2) placed on the second plate after the 'dog picture' identification means (1).

상기와 같은 방식으로 특정 식별수단(1) 뒤에 몇 번째 접시에 음식(2)이 위치하였는가를 기준으로 해당 음식(2)에 대한 시간 카운트를 하고, 이에 대한 정보를 알림수단(30)을 통해 출력되도록 할 수 있다.In the same manner as described above, the time count for the food 2 is counted based on which plate the food 2 is located behind the specific identification means 1, and the information is output through the notification means 30. can make it happen

한편, 본 발명에서는 영상분석부(14)가 딥러닝 기반의 인공지능으로 구성되어 데이터베이스(15)에 누적된 촬영 영상 정보 및 영상 분석 정보를 바탕으로 한 반복 학습을 통해 컨베이어(110) 상에서 순환하는 음식(2)의 종류(예를 들어, 계란초밥, 연어초밥, 새우초밥, 장어초밥 등)를 파악하여 더욱 정확하게 음식(2)이 제공된 후 경과된 시간을 파악할 수 있다.On the other hand, in the present invention, the image analysis unit 14 is composed of artificial intelligence based on deep learning and circulates on the conveyor 110 through repeated learning based on the captured image information and image analysis information accumulated in the database 15 . By identifying the type of food 2 (eg, egg sushi, salmon sushi, shrimp sushi, eel sushi, etc.), it is possible to more accurately determine the elapsed time after the food 2 is provided.

구체적으로, 도 1과 같이 컨베이어(110) 상에서 식별수단(1)과 음식(2)이 같이 순환하고 있는 경우 상기에서 설명한 방식처럼 특정 식별수단(1) 뒤에 몇 번째 접시에 음식(2)이 위치하였는가를 기준으로 영상을 판독하되 음식(2)의 종류까지도 판독이 가능해지기 때문에, 예를 들어 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 음식(2)이 놓여진 것이 감지되어 시간 카운트를 시작한 이후 해당 음식(2)이 컨베이어(110) 상에서 순환하여 다시 카메라(20)에 의해 촬영되기 이전에, 즉 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 놓여진 음식(2)이 컨베이어(110)를 1바퀴 돌기 이전에 해당 음식(2)이 손님에 의해 소비되고 다시 새로운 종류의 음식(2)이 바로 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 놓여진 경우에도 음식(2)의 종류가 바뀐 것을 감지하여 새로 시간 카운트를 시작할 수 있다.Specifically, when the identification means (1) and the food (2) are circulating together on the conveyor 110 as shown in FIG. 1, the food (2) is located on a few plates after the specific identification means (1) as described above. Since it is possible to read the image based on whether or not the food has been After starting, the food (2) is circulated on the conveyor 110 and before being photographed by the camera 20 again, that is, the food (2) placed on the first plate after the 'dog picture' identification means (1) is transferred to the conveyor ( Even if the food (2) is consumed by the customer before turning 110) and a new type of food (2) is placed on the first plate immediately after the 'dog picture' identification means (1), the food (2) It is possible to start a new time count by detecting the change in the type of .

즉, 상기와 같이 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 있던 음식(2)이 컨베이어(110)를 1바퀴 순환하여 다시 카메라(20)에 의해 촬영되기 이전에 다른 종류의 음식(2)으로 교체되는 경우 분석수단(10)의 영상분석부(14)가 음식(2)의 종류를 판독하지 못하면 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 음식(2)이 계속 있던 것으로 파악하게 되어 시간 카운트를 새로 시작하지 못하게 되고 이로 인해 정확하게 경과시간을 파악하기가 어렵지만, 본 발명에서는 영상분석부(14)가 딥러닝 기반의 인공지능으로 구성되어 데이터베이스(15)에 누적된 촬영 영상 정보 및 영상 분석 정보를 바탕으로 한 반복 학습을 통해 컨베이어(110) 상에서 순환하는 음식(2)의 종류(예를 들어, 계란초밥, 연어초밥, 새우초밥, 장어초밥 등)까지도 파악이 가능하기 때문에 '강아지 그림' 식별수단(1) 이후 첫 번째 접시에 있던 음식(2)의 종류가 바뀌게 되면 이를 바로 감지하여 시간 카운트를 새로 시작하는 것이 가능한 것이다. 또한, 음식(2)의 종류가 동일해도 음식(2)의 배치상태나 모양이 바뀌는 경우에도 새로운 음식(2)이 전시된 것으로 판별해서 새로이 시간 카운트를 시작할 수 있다.That is, as described above, after the 'dog picture' identification means (1), the food (2) on the first plate circulates the conveyor 110 once and before being photographed by the camera 20 again, a different type of food ( 2), if the image analysis unit 14 of the analysis means 10 fails to read the type of food 2, the food (2) is still on the first plate after the 'dog picture' identification means (1). In the present invention, the image analysis unit 14 is composed of artificial intelligence based on deep learning and accumulated in the database 15, although it is difficult to accurately determine the elapsed time. Through repeated learning based on image information and image analysis information, it is possible to identify even the types of food (2) circulating on the conveyor 110 (eg, egg sushi, salmon sushi, shrimp sushi, eel sushi, etc.) Therefore, if the type of food (2) on the first plate is changed after the 'dog picture' identification means (1), it is possible to immediately detect this and start a new time count. In addition, even if the type of food 2 is the same, even when the arrangement state or shape of the food 2 is changed, it is determined that the new food 2 is displayed and a new time count can be started.

한편, 상기와 같이 분석수단(10)의 영상분석부(14)가 음식(2)의 종류를 판별하는 것이 가능해지면 도 3에 도시된 바와 같이 별도의 식별수단(1)이 없이도 음식(2)이 제공된 후 경과된 시간을 판별할 수 있다. 즉, 도 3과 같이 컨베이어(110) 상에 서로 종류가 다른 음식들만 순환하고 있는 경우(계란초밥(3), 연어초밥(4), 새우초밥(5) 순으로 순환)에는 분석수단(10)의 영상분석부(14)가 각각의 음식들(3, 4, 5)을 종류별로 판독하여 바로 구분이 가능하기 때문에 별도의 식별수단(1)이 없이도 음식들(3, 4, 5)의 시간 카운트가 가능하다.On the other hand, if the image analysis unit 14 of the analysis means 10 as described above can determine the type of the food 2, as shown in FIG. 3, even without a separate identification means 1, the food (2) It is possible to determine the elapsed time since this is provided. That is, when only different types of food are circulated on the conveyor 110 as shown in FIG. 3 (circulated in the order of egg sushi (3), salmon sushi (4), and shrimp sushi (5)), the analysis means (10) Because the image analysis unit 14 of the food (3, 4, 5) can be immediately distinguished by reading each type of food (3, 4, 5) without a separate identification means (1) without the time of the food (3, 4, 5) It is possible to count

한편, 상기와 같이 분석수단(10)의 영상분석부(14)가 음식의 종류 판별이 가능한 경우 분석수단(10)의 영상분석부(14)가 촬영 영상 분석을 통해 컨베이어(110) 상에 공급된 음식의 종류별 매출 통계를 내고 이를 통해 음식 종류별 예상 매출을 예측할 수 있으며, 이에 따라 음식 재료를 구매할 경우 분석 수단의 예상 매출을 고려하여 효과적으로 재료의 구매 수량을 설정할 수 있다. 구체적으로, 컨베이어(110) 상에서 순환하는 특정 음식이 카메라(20)에 의해 감지되어 시간 카운트가 시작된 이후 회수되기 전에 사라진 것이 감지되면 손님에게 소비된 것이 때문에 이에 대한 정보를 데이터베이스(15)에 누적 저장하게 되면 해당 음식의 매출 통계를 내는 것이 가능하며, 매출 통계 데이터를 이용하여 해당 음식의 예상 매출을 예측하는 것이 가능한 것이다.On the other hand, when the image analysis unit 14 of the analysis means 10 can determine the type of food as described above, the image analysis unit 14 of the analysis means 10 is supplied on the conveyor 110 through analysis of the captured image. Sales statistics for each type of food can be generated and the expected sales for each type of food can be predicted through this, and accordingly, when purchasing food ingredients, it is possible to effectively set the purchase quantity of ingredients in consideration of the expected sales of the analysis means. Specifically, if a specific food circulating on the conveyor 110 is detected by the camera 20 and disappeared before being retrieved after the time counting starts, the information is accumulated in the database 15 because it has been consumed by the customer. If this is done, it is possible to give out sales statistics of the corresponding food, and it is possible to predict the expected sales of the corresponding food using the sales statistics data.

상기와 같은 방식으로 음식(2)에 대한 시간 카운트를 하고, 이에 대한 정보를 알림수단(30)을 통해 출력<S340>되도록 할 수 있다.In the same way as described above, the time count for the food 2 may be performed, and information about this may be output through the notification means 30 <S340>.

구체적으로 알림수단(30)이 디스플레이(주방 모니터)로 형성된 경우, 분석수단(10)의 제어부(12)는 영상분석부(14)의 영상 분석 결과를 토대로 디스플레이를 통해 도 7과 같이 제공된 후 경과된 시간이 10분 이내인 음식(2)은 초록색 박스 표시와 함께 실제 경과된 시간을 텍스트(5분 경과)로 출력하도록 할 수 있고, 도 8과 같이 제공된 후 경과된 시간이 10분 내지 15분인 음식(2)은 파란색 박스 표시와 함께 실제 경과된 시간을 텍스트(10분 경과)로 출력하도록 할 수 있고, 도 9와 같이 제공된 후 경과된 시간이 15분을 초과한 음식(2)은 붉은색 박스 표시와 함께 실제 경과된 시간을 텍스트(16분 경과)로 출력되도록 할 수 있다.Specifically, when the notification means 30 is formed as a display (kitchen monitor), the control unit 12 of the analysis means 10 is provided through the display based on the image analysis result of the image analysis unit 14 as shown in FIG. Food (2) whose time is within 10 minutes can output the actual elapsed time as text (5 minutes elapsed) with a green box mark, and the elapsed time is 10 to 15 minutes after being provided as shown in FIG. Food (2) can output the actual elapsed time as text (10 minutes elapsed) with a blue box mark, and food (2) whose elapsed time exceeds 15 minutes after being provided as shown in FIG. 9 is red It is possible to output the actual elapsed time as text (16 minutes elapsed) along with a box mark.

알림수단(30)이 특정 색상의 빛을 발광시키는 발광수단으로 형성된 경우 분석수단(10)의 제어부(12)는 영상분석부(14)의 영상 분석 결과를 토대로 발광수단을 제어하여 제공된 후 경과된 시간이 10분 이내인 음식(2)이 지나갈 때엔 초록색 빛이 발광되도록 하고, 제공된 후 경과된 시간이 10분 내지 15분인 음식(2)이 지나갈 땐 파란색 빛이 발광되도록 하고, 제공된 후 경과된 시간이 15분을 초과한 음식(2)이 지나갈 땐 붉은색 빛이 발광되도록 할 수 있다.When the notification means 30 is formed as a light emitting means for emitting light of a specific color, the control unit 12 of the analysis means 10 controls the light emitting means based on the image analysis result of the image analysis unit 14 and provides the elapsed time When food (2) whose time is less than 10 minutes passes, a green light is emitted, and when food (2) whose time elapsed after being served is 10 to 15 minutes, a blue light is emitted, and the elapsed time after being served A red light can be emitted when food (2) whose time exceeds 15 minutes passes.

알림수단(30)이 스피커로 형성된 경우 분석수단(10)의 제어부(12)는 영상분석부(14)의 영상 분석 결과를 토대로 스피커를 통해 제공된 후 경과된 시간이 10분 이내인 음식(2)이 지날갈 땐 아무런 소리를 내지 않고, 제공된 후 경과된 시간이 10분 내지 15분인 음식(2)이 지나갈 땐 짧은 경고음이 나도록 하고, 제공된 후 경과된 시간이 15분을 초과한 음식(2)이 지나갈 땐 긴 경고음이 나도록 제어할 수 있다.When the notification means 30 is formed of a speaker, the control unit 12 of the analysis means 10 is provided through the speaker based on the image analysis result of the image analysis unit 14, and the elapsed time is within 10 minutes of the food (2) Make no sound when passing, and make a short beep sound when food (2) with a time elapsed between 10 and 15 minutes after being served (2) passes, and food (2) with a time elapsed more than 15 minutes after serving It can be controlled to sound a long beep when passing.

상기와 같은 알림수단(30)을 통해 주방(50)에 있는 요리사는 컨베이어(110) 상에서 순환하는 음식(2)들이 공급된 후 경과된 시간을 실시간으로 파악할 수 있으며 특정시간, 예컨대 제공된 후 15분이 초과된 음식(2)을 회수하여 컨베이어(110) 상에 신선한 음식(2)만 순환하도록 할 수 있다. 이때, 음식(2)의 회수는 주방(50)에서 수동으로 이루어지거나, 분석수단(10)의 제어부(12)가 퇴출수단(120)을 제어<S345>하여 자동으로 이루어지도록 할 수 있다. 즉 컨베이어(110)의 전체 경로 중 주방(50)에 인접한 위치에 형성된 퇴출구(130)와 인접하여 펼침 및 접힘이 가능한 퇴출수단(120)이 설치되며, 퇴출수단(120)이 카메라(20) 인근에 설치된다. 이에 따라, 분석수단(10)의 영상분석부(14)의 영상분석에 의해 음식(2)이 제공된 후 특정 시간, 예컨대 15분이 초과된 것이 감지되면 분석수단(10)의 제어부(12)가 퇴출수단(120)을 작동시켜 펼쳐지도록 하여 해당 음식(2)이 놓여진 그릇이 퇴출구(130)를 통해 바로 퇴출되도록 할 수 있다. 이때, 도 1에 도시된 바와 같이 카메라(20)와 퇴출수단(120)이 인접한 위치에 형성되어 있기 때문에 카메라(20)에서 현재 촬영된 영상에 포함된 음식(2)을 실시간으로 분석하여 해당 음식(2)이 제공된 후 경과된 시간이 15분을 초과한 것이 감지되는 경우 바로 퇴출수단(120)이 펼쳐지도록 제어하면 카메라(20)를 지나쳐 컨베이어(110) 상에서 순환하던 해당 음식(2)이 바로 퇴출구(130)를 통해 회수될 수 있는 것이다.Through the notification means 30 as described above, the cook in the kitchen 50 can grasp the elapsed time in real time after the food 2 circulating on the conveyor 110 is supplied, and a specific time, for example, 15 minutes after being provided Excess food (2) can be recovered so that only fresh food (2) is circulated on the conveyor (110). In this case, the recovery of the food 2 may be performed manually in the kitchen 50 or automatically by the control unit 12 of the analysis unit 10 controlling the discharging unit 120 <S345>. That is, the exit means 120 that can be unfolded and folded is installed adjacent to the exit port 130 formed at a position adjacent to the kitchen 50 among the entire path of the conveyor 110, and the exit means 120 is the camera 20. installed nearby. Accordingly, when it is detected that a specific time, for example, 15 minutes, has passed since the food 2 is provided by the image analysis of the image analysis unit 14 of the analysis means 10, the control unit 12 of the analysis means 10 is withdrawn By operating the means 120 to spread it, the dish on which the food 2 is placed can be discharged directly through the exit port 130 . At this time, as shown in FIG. 1 , since the camera 20 and the ejecting means 120 are formed in adjacent positions, the camera 20 analyzes the food 2 included in the currently photographed image in real time to analyze the corresponding food. If it is detected that the elapsed time after (2) has been provided exceeds 15 minutes, if the ejection means 120 is controlled to be unfolded immediately, the food 2 that has passed through the camera 20 and circulated on the conveyor 110 is immediately It can be recovered through the exit 130 .

이상에서 자세히 설명한 바와 같이, 본 발명에 따른 음식 신선도 알림 시스템 및 그 운용 방법에 의하면, 컨베이어 상에서 순환하는 음식을 카메라로 촬영하고 분석수단에서 촬영된 영상을 분석하여 음식물이 컨베이어에 공급된 후 경과된 시간을 알림수단을 통해 주방에 제공함으로써 컨베이어 상에 항상 신선한 식품이 유지되도록 할 수 있다.As described in detail above, according to the food freshness notification system and its operating method according to the present invention, the food circulating on the conveyor is photographed with a camera and the image captured by the analysis means is analyzed to determine the elapsed time after the food is supplied to the conveyor. By providing the time to the kitchen through a reminder, it is possible to ensure that fresh food is always kept on the conveyor.

또한, 분석수단이 촬영 영상을 분석하여 컨베이어에 공급된 후 경과된 시간이 일정 시간을 초과한 경우 퇴출수단을 제어하여 오래된 음식물을 자동으로 퇴출시킬 수 있다.In addition, when the elapsed time after the analysis means analyzes the captured image and is supplied to the conveyor exceeds a predetermined time, the old food can be automatically removed by controlling the ejection means.

또한, 분석수단이 촬영 영상 분석을 통해 컨베이어 상에 공급된 음식의 종류별 매출 통계를 내고 이를 통해 음식 종류별 예상 매출을 예측할 수 있으며, 이에 따라 음식 재료를 구매할 경우 분석 수단의 예상 매출을 고려하여 효과적으로 재료의 구매 수량을 설정할 수 있다.In addition, the analysis means generates sales statistics for each type of food supplied on the conveyor through the analysis of the captured image, and through this, the expected sales for each type of food can be predicted. You can set the purchase quantity of

이에 더하여, 각각의 매장에서 설치된 카메라에서 컨베이어 상의 음식물을 촬영하여 원격지에 있는 중앙서버로 전송하고, 원격지의 중앙서버에서 수신된 영상을 분석한 후 분석 결과에 따른 제어신호를 실시간으로 각 매장의 알림수단으로 보내주는 방식을 사용함으로써 매장의 시스템 구축 비용을 절감할 수 있다.In addition, the camera installed in each store captures food on the conveyor and transmits it to a central server located at a remote location. After analyzing the image received from the central server at a remote location, a control signal according to the analysis result is notified to each store in real time. By using the method of sending by means of a method, it is possible to reduce the cost of building the store's system.

상기한 본 발명의 바람직한 실시예는 예시의 목적을 위해 개시된 것이고, 본 발명에 대해 통상의 지식을 가진 당업자라면, 본 발명의 사상과 범위 안에서 다양한 수정, 변경 및 부가가 가능할 것이며, 이러한 수정, 변경 및 부가는 본 발명의 특허청구 범위에 속하는 것으로 보아야 할 것이다.The above-described preferred embodiments of the present invention have been disclosed for the purpose of illustration, and those skilled in the art with common knowledge about the present invention will be able to make various modifications, changes and additions within the spirit and scope of the present invention, such modifications, changes and additions are to be considered as falling within the scope of the claims of the present invention.

10 : 분석수단
11 : 통신부
12 : 제어부
13 : 영상수신부
14 : 영상분석부
15 : 데이터베이스
20 : 카메라
30 : 알림수단
40 : 중앙서버
50 : 주방
100 : 순환배송부
110 : 컨베이어
120 : 퇴출수단
130 : 퇴출구
140 : 레일
141 : 배송차10: analysis means
11: communication department
12: control unit
13: video receiver
14: image analysis unit
15: Database
20 : camera
30: notification means
40: central server
50 : kitchen
100: circulation delivery unit
110: conveyor
120: means of exit
130: exit
140: rail
141: delivery car

Claims (6)

음식이 놓여진 그릇을 순환시키는 순환배송부;
상기 순환배송부에서 순환하는 음식을 촬영하는 카메라;
상기 카메라에서 촬영된 영상을 분석하여 음식이 제공된 후 경과된 시간을 파악하는 분석수단; 및
상기 분석수단을 통해 파악된 정보를 출력하는 알림수단;을 포함하는 것을 특징으로 하는 음식 신선도 알림 시스템.
Circulation delivery unit that circulates the dishes on which the food is placed;
a camera for photographing food circulating in the circulation delivery unit;
Analysis means for analyzing the image taken by the camera to determine the elapsed time after the food is provided; and
Notification means for outputting the information identified through the analysis means; Food freshness notification system comprising a.
 제1항에 있어서,
상기 분석수단은,
상기 카메라에서 촬영된 영상 정보를 수신하는 영상수신부;
상기 영상수신부로 수신된 촬영 영상을 분석하여 음식이 상기 순환배송부에 제공된 후 경과된 시간을 파악하는 영상분석부; 및
상기 영상분석부의 분석 결과가 상기 알림수단을 통해 출력되도록 하는 제어부;를 포함하는 것을 특징으로 하는 음식 신선도 알림 시스템.
According to claim 1,
The analysis means,
an image receiving unit for receiving image information captured by the camera;
an image analysis unit that analyzes the captured image received by the image receiver to determine the elapsed time after the food is provided to the circulation delivery unit; and
Food freshness notification system comprising a; a control unit for outputting the analysis result of the image analysis unit through the notification means.
 제2항에 있어서,
상기 순환배송부의 일측에는 퇴출수단;이 구비되며,
상기 분석수단의 제어부가 상기 영상분석부의 분석 결과를 토대로 상기 퇴출수단을 제어하여 음식을 자동으로 회수하는 것을 특징으로 하는 음식 신선도 알림 시스템.
3. The method of claim 2,
An exit means is provided on one side of the circulation delivery unit,
The food freshness notification system, characterized in that the control unit of the analysis unit controls the withdrawal unit based on the analysis result of the image analysis unit to automatically retrieve the food.
 제2항에 있어서,
상기 분석수단의 영상분석부가 음식의 종류를 판별하는 것을 특징으로 하는 음식 신선도 알림 시스템.
3. The method of claim 2,
Food freshness notification system, characterized in that the image analysis unit of the analysis means to determine the type of food.
 카메라에서 순환배송부 상에서 순환하는 음식을 실시간으로 촬영하는 (a)단계;
상기 카메라에서 촬영된 영상을 분석수단으로 전송하는 (b)단계;
상기 분석수단의 영상분석부에서 촬영된 영상을 분석하는 (c)단계; 및
상기 분석수단의 제어부가 상기 영상분석부의 분석 정보를 토대로 알림수단을 제어하는 (d)단계;를 포함하는 것을 특징으로 하는 음식 신선도 알림 시스템의 운용 방법.
(a) photographing the food circulating on the circulation delivery unit in real time by the camera;
(b) transmitting the image captured by the camera to the analysis means;
(c) analyzing the image taken by the image analysis unit of the analysis means; and
(d) step of the control unit of the analysis unit controlling the notification unit based on the analysis information of the image analysis unit;
 제5항에 있어서,
상기 분석수단의 제어부가 상기 영상분석부의 분석 정보를 토대로 퇴출수단을 제어하는 (e)단계;를 더 포함하는 것을 특징으로 하는 음식 신선도 알림 시스템의 운용 방법.6. The method of claim 5,
(e) step of the control unit of the analysis unit controlling the exit unit based on the analysis information of the image analysis unit;
KR1020210044498A 2021-02-18 2021-04-06 Food freshness notification system for cyclic type food carrier store, and operating method thereof KR102617610B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20210021572 2021-02-18
KR1020210021572 2021-02-18

Publications (2)

Publication Number Publication Date
KR20220118270A true KR20220118270A (en) 2022-08-25
KR102617610B1 KR102617610B1 (en) 2023-12-27

Family

ID=83111275

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210044498A KR102617610B1 (en) 2021-02-18 2021-04-06 Food freshness notification system for cyclic type food carrier store, and operating method thereof

Country Status (1)

Country Link
KR (1) KR102617610B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116893127A (en) * 2023-09-11 2023-10-17 中储粮成都储藏研究院有限公司 Grain appearance quality index detector

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000135155A (en) * 1998-11-02 2000-05-16 Yoshio Shimizu Food and drink identifying device
JP2000245609A (en) * 1999-03-04 2000-09-12 Denso Corp Food and drink management method and food and drink management device for rotary eating and drinking stand

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000135155A (en) * 1998-11-02 2000-05-16 Yoshio Shimizu Food and drink identifying device
JP2000245609A (en) * 1999-03-04 2000-09-12 Denso Corp Food and drink management method and food and drink management device for rotary eating and drinking stand

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116893127A (en) * 2023-09-11 2023-10-17 中储粮成都储藏研究院有限公司 Grain appearance quality index detector
CN116893127B (en) * 2023-09-11 2023-12-08 中储粮成都储藏研究院有限公司 Grain appearance quality index detector

Also Published As

Publication number Publication date
KR102617610B1 (en) 2023-12-27

Similar Documents

Publication Publication Date Title
US10304032B2 (en) Product monitoring device, product monitoring system, and product monitoring method
US20080077510A1 (en) Method And System For Providing Security Surveillance And Shelf Monitoring Functions
WO2016038774A1 (en) Goods monitoring device, goods monitoring system, and goods monitoring method
KR20220118270A (en) Food freshness notification system for cyclic type food carrier store, and operating method thereof
US10818006B2 (en) Commodity monitoring device, commodity monitoring system, and commodity monitoring method
CA2208948A1 (en) Holding cabinet and method and apparatus for controlling a holding cabinet
EP0692090A1 (en) System, apparatus and method for on-line determination of quality characteristics of pieces of meat, and arrangement for illumination of pieces of meat
CN111712869A (en) Display device fault detection method, device, system and computer readable medium
US20200279238A1 (en) Automated Store Checkout
JP5902852B1 (en) Information processing apparatus, control method, and program
JP2021149142A (en) Meat discrimination device
CA2990428A1 (en) Systems and methods for monitoring and restocking merchandise
US20190268527A1 (en) Sensor system, information processing device, and sensor management method
TW200834424A (en) Active marketing devices and systems for radio frequency identification
KR101860722B1 (en) System for managing farming for raising high quality insect based in iot
US11362488B2 (en) Panelboard device
CN112019743A (en) Object information prompting method and device, storage medium and electronic device
KR102238322B1 (en) Apparatus and method for monitering pet
US20210282331A1 (en) Autonomous Monitoring System
US20130339090A1 (en) System for real time verification and detection of stock shortages of goods displayed for sale
US20190195562A1 (en) Method and apparatus for optimizing a baking process
JP4687850B2 (en) Surveillance camera system
CN106303376A (en) Monitoring methods, devices and systems for transformer station
JP3401590B2 (en) Food and beverage identification device
JPH08123374A (en) Waiting time guiding device

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant