KR100807419B1 - Method of electronically establishing virtual judgment circle for judging bull's fighting game, method and apparatus for electronically judging bull's fighting game using the same - Google Patents
Method of electronically establishing virtual judgment circle for judging bull's fighting game, method and apparatus for electronically judging bull's fighting game using the same Download PDFInfo
- Publication number
- KR100807419B1 KR100807419B1 KR1020060099292A KR20060099292A KR100807419B1 KR 100807419 B1 KR100807419 B1 KR 100807419B1 KR 1020060099292 A KR1020060099292 A KR 1020060099292A KR 20060099292 A KR20060099292 A KR 20060099292A KR 100807419 B1 KR100807419 B1 KR 100807419B1
- Authority
- KR
- South Korea
- Prior art keywords
- fighting
- game
- center point
- line
- virtual
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 244000309464 bull Species 0.000 title claims abstract description 20
- 239000003086 colorant Substances 0.000 claims abstract description 35
- 241000283690 Bos taurus Species 0.000 claims description 37
- 238000005259 measurement Methods 0.000 claims description 12
- 230000004913 activation Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 16
- 238000010191 image analysis Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 11
- 238000013500 data storage Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 4
- 238000002372 labelling Methods 0.000 description 2
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
Landscapes
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
도 1a는 본 발명에 따라 소싸움 경기를 촬영하는 모습을 보여주는 개략도,Figure 1a is a schematic diagram showing a state of shooting a bull fight according to the present invention,
도 1b는 본 발명에 따른 소싸움경기 판정에 이용되는 가상 판정선을 설명하기 위한 모니터 화면,FIG. 1B is a monitor screen for explaining a virtual decision line used for small fight game determination according to the present invention;
도 2a는 영상 화면에 좌표를 설정하기 위하여 소싸움 경기장을 촬영하는 과정을 설명하기 위한 설명도,2A is an explanatory diagram for explaining a process of photographing a small fighting arena in order to set coordinates on a video screen;
도 2b는 촬영된 경기장 영상 화면에 대한 좌표계 설정방법을 설명하기 위한 설명도,2B is an explanatory diagram for explaining a method of setting a coordinate system for a captured stadium image screen;
도 3은 좌표계 화면의 임의의 지점에 대한 가상 판정선의 설정 및 데이터베이스화 과정을 설명하기 위한 설명도,3 is an explanatory diagram for explaining a process of setting a virtual decision line and a database for an arbitrary point of a coordinate system screen;
도 4는 싸움소의 고요한 색채 정보와 색채식별표찰을 이용하여 소싸움 경기의 승우와 경기시간을 자동으로 판정하는 방법을 설명하기 위한 개념 설명도,4 is a conceptual explanatory diagram for explaining a method of automatically determining the winning and playing time of a small fight using the calm color information and the color identification label of a fighting place;
도 5는 대결중인 싸움소의 영상을 화면좌표계에 나타낸 것으로 대결의 중심을 설정하는 방법을 설명하기 위한 설명도,FIG. 5 is an explanatory diagram for explaining a method of setting the center of a confrontation by showing an image of a fighting house in confrontation on the screen coordinate system;
도 6은 도 5에서 색채식별 표찰을 이용하여 대결의 중심 좌표를 구하는 방법을 설명하기 위한 설명도,FIG. 6 is an explanatory diagram for explaining a method of obtaining a center coordinate of a confrontation using a color identification label in FIG. 5; FIG.
도 7a는 본 발명에 따른 가상 판정선을 이용한 소싸움경기 판정장치를 나타낸 개략 블록도,7A is a schematic block diagram showing an apparatus for judging a small fight using a virtual judgment line according to the present invention;
도 7b는 도 7a의 제어부와 데이터 저장부에 대한 내부 구성을 보여주는 구성도,FIG. 7B is a diagram illustrating an internal configuration of the controller and the data storage of FIG. 7A;
도 8은 본 발명에 따른 소싸움경기 판정방법을 설명하기 위한 흐름도이다.8 is a flowchart illustrating a method for determining a fight game according to the present invention.
* 도면의 주요부분에 대한 부호설명 ** Explanation of Signs of Major Parts of Drawings *
1; 소싸움 경기장 1a,100a; 중심점One; Bullfight
2a,2b; 싸움소 15; 영상분석모듈2a, 2b;
4; 거리측정기구 10; 제어부4;
11; 타이머모듈 12; 재생제어모듈11;
13; 좌표계 화면전환모듈 14; 가상판정선 표시모듈13; Coordinate system
20; 사용자 인터페이스 30; 비디오 카메라20;
40; 메모리장치 41; RAM40;
42: 시스템메모리 43; 데이터저장부42:
50,51; 녹화장치 60; 전광판50,51;
70; 모니터 100; 영상화면70;
103; 가상 판정선 431; 좌표값 테이블103;
432; 가상 판정선 테이블 433 ; 경기결과 기록 데이터 파일432; Virtual decision line table 433; Result record data file
A,B; 색채식별표찰 M; 대결의 중심점A, B; Color identification label M; Confrontation
본 발명은 소싸움경기 판정을 위한 전자식 가상 판정선 설정방법, 이를 이용한 전자식 소싸움경기 판정방법 및 판정장치에 관한 것으로, 두 마리의 싸움소의 고유한 색채정보를 각각 미리 취득하고 두 마리의 싸움소에 색채식별표찰을 각각 미리 부착하고 촬영된 소싸움경기 영상으로부터 각 싸움소의 고유한 색채 정보와 색채식별표찰에 대한 색채 정보를 검출/추적하는 기술을 이용하여 자동으로 대결의 중심과 대결의 중심에서 일정 범위의 가상 판정선을 설정하고, 가상 판정선으로부터 하나의 싸움소가 이탈하는 것을 색채정보의 영상추적 기술을 이용하여 검출함에 의해 승우의 판정과 경기소요시간을 전자식으로 정확하게 측정할 수 있는 전자식 소싸움경기 판정방법 및 판정장치에 관한 것이다.The present invention relates to a method for setting an electronic virtual judgment line for judging a fighting game, an electronic fighting game judging method and a judging device using the same. The identification tag is attached in advance, and the unique color information of each fighting station and the color information of the color identification label are automatically detected and tracked from the shots of the fighting games. By setting up a virtual decision line and detecting the departure of one battle station from the virtual decision line using an image tracking technique of color information, an electronic fight game judgment capable of precisely measuring the determination of winning and playing time electronically. It relates to a method and a determination device.
소싸움경기는 우리 민족의 전통 민속놀이로 두 마리 싸움소가 머리나 몸체를 서로 맞대고 힘과 기술을 겨루는 경기이다. 경마, 경견 등이 인위적인 기준(출발선, 결승선)에 의해서 경기결과를 판정하는 것과는 달리, 소싸움경기는 싸움소의 돌발적인 행동을 주의 깊게 관찰하여 경기결과를 판단하는 판정의 특성을 가지고 있다.The bullfighting game is a traditional folk game of Korean people, in which two fighting cows face each other head and body to compete for strength and skill. Unlike horse races and dogs that judge competition results based on artificial criteria (starting line, finish line), small-fighting games have the characteristic of judging the outcome of a game by carefully observing the unexpected behavior of the fighting place.
민속놀이로서의 소싸움경기 판정방법은 두 마리 싸움소가 서로 머리나 몸체를 맞대고 싸우다가 한 마리의 싸움소가 경기를 포기하고 달아나면, 그 상대 싸움 소가 승리한 것으로 심판이 판정한다.The method of judging a bullfight as a folk game is that if two fighting cows fight with each other head or body, and one fighting cow gives up the game and runs away, the judge determines that the opponent fighting cow has won.
실제 민속놀이의 소싸움경기 경기 규칙 중 승부 판정에 관한 내용을 발췌하여 정리하면, 소싸움 경기 도중 한 마리 싸움소가 경기를 포기하고 머리를 돌려 달아난 때, 혹은 머리를 돌려 경기장의 1/4 바퀴이상 달아난 때 달아난 소를 패한 것으로 간주하고 상대 소를 승리한 것으로 정하고 있다.If you summarize the contents of the judging rules in the rules of the fight for actual folk games, one of the fight bulls gave up the game and turned around during the fight, or turned the head over a quarter of the pitch. When a runaway cow is considered lost, the other cow is determined to have won.
민속놀이로서의 소싸움경기 규칙은 경기시간에 제한이 없고, 두 마리 싸움소중 한 마리가 달아날 때 까지 경기를 계속 진행하여 한 마리가 달아난 경우 경기의 승부만을 판정하도록 되어 있어서 경기 소요시간의 측정에 관한 사항은 규정되어 있지 않다. The rules of small-fighting competition as folk games are not limited to the time of the game, and the game is continued until one of the two fighting cows flees, and if one flees, only the game will be judged. Is not specified.
한편, 전통소싸움경기에 관한 법률(이하 "우권법"이라 함)에서는 소싸움 경기시간을 30분으로 제한하고 있으며, 승리한 싸움소를 적중시키는 게임 방법과 함께 승부가 결정되는 순간을 매 5분 단위의 라운드(1~6 라운드로 구성)를 적중시키는 시간 적중식 게임방법도 정하고 있다. 따라서, 우권법에 따른 소싸움경기를 진행하고 판정함에 있어서는 승부의 판정과 함께 승부결정의 시간 즉, 경기소요 시간도 정밀하게 측정할 수 있어야 할 것이다.Meanwhile, the Law on Traditional Cattle Fights (hereinafter referred to as the "Right Rights Act") restricts the time of small fights to 30 minutes, and every 5 minutes the game is decided along with the game method of hitting the winning fight. He also decides how to play a time-hit game that hits a round (made up of 1 to 6 rounds). Therefore, in conducting and judging a small-fighting game according to the right-of-rights law, it is necessary to accurately measure the time of the game decision, that is, the time required for the game.
그러나, 종래에는 심판의 수동적인 판단에 의해 소싸움 경기에서 이긴소(즉, 승우)를 결정하기 때문에 계속하여 움직이는 싸움소의 승우 판단은 객관적인 판단이 이루어지지 못하고 주관적인 판단이 이루어지거나 승우의 판정시점이 부정확하게 될 수 있다.However, conventionally, since a judge decides the winning cow (ie, winning) in a small fight by passive judgment of the referee, the winning judgment of a continuously moving fight station is not an objective judgment, a subjective judgment is made, or the timing of the winning decision is inaccurate. Can be done.
즉, 경기시작 시간과, 승우를 결정하고 이때를 경기종료 시간으로 정하여 경 기소요시간을 결정하였기 때문에 심판의 개인적인 판단에 따라 경기종료 시간에 차이가 발생할 수 있고, 이는 경기소요 시간에도 영향을 미치게 되어 승부가 결정되는 순간을 매 5분 단위의 라운드를 적중시키는 시간 적중식 게임방법에 있어서는 일부 고객에게 불리한 판정이 이루어지는 결과가 얻어지므로 보다 정확한 경기소요 시간의 측정이 요구되고 있다.In other words, since the game start time and the winning time were decided and the game time was decided by setting the game end time as the game end time, a difference may occur in the game end time according to the individual judgment of the referee, which affects the time required for the game. In the time-matching game method of hitting every five-minute round at the moment when a game is decided, a result of making a disadvantageous decision for some customers is obtained. Therefore, more accurate measurement of the time required for playing is required.
상기와 같이 우권법에 따른 소싸움경기를 진행하고 판정함에 있어서는 승부의 판정과 함께 경기소요 시간도 정밀하게 측정하기 위하여 전자식 자동판정을 구현할 수 있는 방법 및 장치가 요구되고 있다. As described above, in proceeding and determining a small-fighting game according to the right-handed law, there is a demand for a method and apparatus capable of implementing an electronic automatic judgment for precisely measuring the time required for the game as well as the determination of a game.
따라서, 소싸움 경기의 기본 특성에 근거한 새로운 판정기준으로 대결의 중심에서 일정거리 이상 이탈한 순간을 측정하는 기술이 필요하다.Therefore, as a new criterion based on the basic characteristics of the small fight game, a technique for measuring the moment when a certain distance from the center of the confrontation is needed.
본 발명에서는 소싸움 경기 소요시간의 정밀한 측정을 위해 일반적으로 소싸움 경기는 두 마리 싸움소가 머리나 몸체를 서로 맞대고 싸우는 특성을 가진다는 점에 착안하여, 두 마리 싸움소가 서로 맞붙어서 싸우거나 제1 및 제2 색채식별표찰의 거리가 경기규칙에서 정하는 범위내에서 근접해 있을 경우에는 대결이 진행 중인 것으로 판단하며, 두 마리 싸움소가 서로 떨어 져서 그 중 한 마리가 달아날 때에는 경기 중 측정된 최후의 "대결의 중심"에서 일정거리(즉, 판정선) 이상 이탈한 순간을 대결이 종료한 것으로 판정하여 먼저 이탈한 소를 패한 것으로 간주하고 상대 소를 승리한 것으로 판정하며, 이때의 경기시작 시간과 종료 시간 사이의 시간을 경기소요 시간으로 정하는 소싸움 경기규칙의 적용을 전제로 고안된 발명이 다.In the present invention, in order to precisely measure the time required for a small fighting game, in general, a small fighting game is focused on the fact that two fighting cows fight each other head to body, so that the two fighting cows fight with each other or the first And when the distance of the second color identification label is within the range prescribed by the competition rules, the competition is considered to be in progress. When the two fighting houses fall from each other and one of them flees, the last " It is determined that the match has ended at a certain distance (that is, the decision line) from the center of the match, the first match is considered to be lost, and the other match is won. It is an invention designed on the premise of the application of the competition rules for the fight between the time between the time as the time required.
따라서 본 발명은 이러한 종래기술의 문제점을 감안하여 안출된 것으로, 그 목적은 두 마리의 싸움소의 고유한 색채정보를 각각 미리 취득하고 대결의 중심 설정을 위한 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰을 싸움소에 각각 미리 부착하고 두 마리 싸움소의 경기를 카메라로 촬영하여, 촬영된 소싸움경기 영상으로부터 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하는 기술을 이용하여 자동으로 대결의 중심을 설정하고 대결의 중심에서 일정 범위의 가상 판정선을 설정하는 소싸움경기 판정을 위한 전자식 가상 판정선 설정방법을 제공하는 데 있다.Accordingly, the present invention is conceived in view of the problems of the prior art, the object of which is to obtain in advance the unique color information of the two fighting stations, respectively, and the first and second colors having different colors for setting the center of the confrontation The identification tag is attached to the fighting station in advance and the game of the two fighting camps is photographed with the camera, and the unique color information of the two fighting camps and the color information of the first and second color identification labeling are detected from the shot of the fighting game. The present invention provides an electronic virtual decision line setting method for judging a fight, which automatically sets the center of the confrontation using a tracking / tracking technique and sets a virtual judgment line of a range at the center of the confrontation.
본 발명의 다른 목적은, 상기한 가상 판정선으로부터 하나의 싸움소가 이탈하는 것을 색채정보의 영상추적 기술을 이용하여 판단함에 의해 승우의 판정과 경기소요시간을 정확하게 자동으로 측정할 수 있는 전자식 소싸움경기 판정방법 및 판정장치를 제공하는 데 있다.Another object of the present invention is an electronic battle that can accurately and automatically determine the judgment of the match and the time required for playing by judging by using the image tracking technology of the color information that one battle station is deviated from the virtual decision line. The present invention provides a game determination method and a determination device.
상기한 목적을 달성하기 위하여, 본 발명은 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우 제1 및 제2 색채식별표찰을 연결한 직선의 정중앙을 대결의 중심점으로 정하고 대결의 중심점으로부터 미리 설정된 범위를 갖는 판정선을 어느 하나의 싸움소가 이탈할 때 소싸움경기의 승우를 판정하는 전자식 소싸움경기 판정방법에 있어서, 두 마리의 싸움소에 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰을 각각 부착하고 비디오 카메라를 통하여 얻어진 영상화면에서 두 마리 싸움소의 고유한 색채정보를 각각 검출하여 등록하는 단계와, 제1 및 제2 색채 식별표찰의 색채정보를 검출하여 등록하는 단계와, 상기 제1 및 제2 색채식별표찰이 부착된 두 마리 싸움소의 경기를 카메라로 촬영하여 촬영된 소싸움경기 동영상을 좌표계 화면을 통하여 표시하는 단계와, 상기 촬영된 소싸움경기 동영상으로부터 두 마리 싸움소의 고유한 색채 및 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하여 두 마리 싸움소의 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우, 제1 및 제2 색채식별표찰의 제1 및 제2 좌표를 구하고, 상기 제1 및 제2 좌표에 기초하여 대결의 중심점을 설정하는 단계와, 상기 설정된 대결의 중심점을 중심으로 상기 판정선에 대응하는 가상 판정선을 좌표계 영상화면에 표시하는 단계를 포함하는 것을 특징으로 하는 소싸움경기 판정을 위한 전자식 가상 판정선 설정방법을 제공한다.In order to achieve the above object, the present invention is to provide a straight line connecting the first and second color identification label when the unique colors of the two fighting cattle are separated from each other or the first and second color identification label are separated by a certain distance or more. In the electronic fighting game judging method, which determines the winning of a small fighting game when one fighting station leaves the judgment line having a predetermined range from the center of the fighting and the center line of the confrontation, Attaching the first and second color identification labels each having a different color, and detecting and registering the unique color information of the two fighting spots on the image screen obtained through the video camera, respectively; Detecting and registering color information, and photographing a game of two fighting stations with the first and second color identification labels attached to the camera. And displaying and shooting the small fighting game video through the coordinate system screen, and detecting / tracking the unique colors of the two fighting cows and the color information of the first and second color identification labels from the shooting small fighting game video. When the colors of the fighting place are separated from each other or the first and second color identification labels are separated by a predetermined distance or more, the first and second coordinates of the first and second color identification labels are obtained and based on the first and second coordinates. And setting a center point of the confrontation, and displaying a virtual determination line corresponding to the determination line on the coordinate system image screen centering on the set center point of the confrontation. Provides a pre-set method.
상기 대결의 중심선 설정과 가상 판정선의 표시는 제어부의 신호처리 프로그램에 의해 전자식으로 자동으로 이루어진다.The center line setting of the confrontation and the display of the virtual determination line are automatically made electronically by the signal processing program of the controller.
본 발명의 다른 특징에 따르면, 본 발명은 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우 제1 및 제2 색채식별표찰을 연결한 직선의 정중앙을 대결의 중심점으로 정하고 대결의 중심점으로부터 미리 설정된 범위를 갖는 판정선을 어느 하나의 싸움소가 이탈할 때 소싸움경기의 승우를 판정하는 전자식 소싸움경기 판정방법에 있어서, 두 마리의 싸움소에 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰을 각각 부착하고 비디오 카메라를 통하여 얻어진 영상화면에서 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰의 색채정보를 검출하여 등록하는 단계와, 상기 제1 및 제2 색채식별표찰이 부착된 두 마리 싸움소의 경기를 카메라로 촬영하여 촬영된 소싸움경기 동영상을 좌표계 화면을 통하여 표시하는 단계와, 상기 촬영된 소싸움경기 영상으로부터 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하여 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우, 제1 및 제2 색채식별표찰의 제1 및 제2 좌표를 구하고, 상기 제1 및 제2 좌표에 기초하여 대결의 중심점을 설정하는 단계와, 상기 설정된 대결의 중심점을 중심으로 상기 판정선에 대응하는 가상 판정선을 영상화면에 표시하는 단계와, 상기 동영상 화면에서 두 마리 싸움소 중 어느 하나가 상기 가상 판정선을 이탈하는 경우 이탈하지 않은 싸움소를 승우로 판단하는 단계를 포함하는 것을 특징으로 하는 전자식 소싸움경기 판정방법을 제공한다.According to another feature of the invention, the present invention is a straight line connecting the first and second color identification label when the unique colors of the two fighting cattle separated from each other or the first and second color identification label is separated by a certain distance or more In the electronic fighting game judging method, which determines the winning of a small fighting game when one fighting station leaves the judgment line having a predetermined range from the center of the fighting and the center line of the confrontation, Attaching the first and second color identification labels each having a different color, and detecting and registering the unique color information of the two fighting stations and the color information of the first and second color identification labels on the image screen obtained through the video camera. And, the video of the small fighting fight video taken by the camera of the two fighting cattle attached to the first and second color identification label left Displaying through the display screen and detecting / tracking the unique color information of the two fighting cows and the color information of the first and second color identification labeling from the photographed cattle fighting game image. When separated from each other or the first and second color identification labels are separated by a predetermined distance or more, the first and second coordinates of the first and second color identification labels are obtained, and the center point of the confrontation is based on the first and second coordinates. Setting an image, displaying a virtual determination line corresponding to the determination line around the center point of the set-up confrontation on a video screen, and one of two battlefields leaves the virtual determination line on the video screen. If so, it provides an electronic small fight game determination method comprising the step of judging that the fight has not escaped.
본 발명의 또 다른 특징에 따르면, 본 발명은 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우 제1 및 제2 색채식별표찰을 연결한 직선의 정중앙을 대결의 중심점으로 정하고 대결의 중심점으로부터 미리 설정된 범위를 갖는 판정선을 어느 하나의 싸움소가 이탈할 때 소싸움경기의 승우를 판정하는 전자식 소싸움경기 판정방법에 있어서, 두 마리의 싸움소에 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰을 각각 부착하고 비디오 카메라를 통하여 얻어진 영상화면에서 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰의 색채정보를 검출하여 등록하는 단계와, 소싸움 경기장의 중심 상공에 위치한 비디오 카메라로 소싸움경기의 촬영을 개시하여 소싸움경기의 승우가 결정될 때까지 경기를 촬영하고, 촬영된 경기 영상을 제1 녹화장치에 저장하는 단계와, 상기 경기가 종료된 후 상기 제1녹화장치에 저장된 경기 동영상을 좌표계 화면으로 재생하는 단계와, 상기 촬영된 소싸움경기 영상으로부터 두 마리 싸움소 각각의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하여 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우 제1 및 제2 색채식별표찰의 제1 및 제2 좌표를 구하고, 상기 제1 및 제2 좌표에 기초하여 대결의 중심점을 설정하는 단계와, 상기 설정된 대결의 중심점을 중심으로 상기 판정선에 대응하는 가상 판정선을 영상화면에 표시하는 단계와, 상기 동영상 화면에서 두 마리 싸움소 중 어느 하나가 상기 가상 판정선을 이탈하는 경우 이탈하지 않은 싸움소를 승우로 판단하는 단계를 포함하는 것을 특징으로 하는 전자식 소싸움경기 판정방법을 제공한다.According to another feature of the invention, the present invention is a straight line connecting the first and second color identification label when the unique colors of the two fighting cattle separated from each other or the first and second color identification label away from a certain distance In the electronic fighting game judging method, which determines the winning of a small fighting game when one fighting station leaves the judgment line having a predetermined range from the center of the fighting as the center of the battle, Attaching the first and second color identification labels each having a different color, and detecting and registering the unique color information of the two fighting stations and the color information of the first and second color identification labels on the image screen obtained through the video camera. The stage and the video camera located in the center of the bullfighting arena are used to start shooting the bullfight match, and the winner of the bullfight match is decided. Shooting the game until the game, and storing the photographed game image in the first recording device; and playing the game video stored in the first recording device on the coordinate system screen after the game is finished; The unique color information of each of the two fighting stations and the color information of the first and second color identification labels are detected / tracked from the game image so that the unique colors of the two fighting stations are separated from each other or the first and second color identification labels are separated from each other. Obtaining a first coordinate and a second coordinate of the first and second color identification labels, and setting a center point of the confrontation based on the first and second coordinates, Displaying a virtual judgment line corresponding to the judgment line on a video screen, and one of the two battlefields has left the virtual judgment line on the video screen. If it provides electronic game Bullfighting determination method comprising the step of determining the non-battle leaving small to Seung.
본 발명의 전자식 소싸움경기 판정장치는 두 마리의 싸움소에 서로 다른 칼라를 갖고 각각 부착되는 제1 및 제2 색채식별표찰과, 사용자의 의사를 전달하기 위한 사용자 인터페이스와, 원형으로 이루어진 소싸움 경기장의 중심 상공에 설치되어 소싸움경기를 촬영하기 위한 비디오 카메라와, 상기 비디오 카메라를 통하여 촬영된 제1 및 제2 색채식별표찰이 부착된 두 마리 싸움소의 소싸움경기 동영상을 포함하여 처리된 결과를 보여주기 위한 표시장치와, 상기 표시장치의 표시화면의 모든 픽셀마다 대결의 중심점을 중심으로 대결의 중심점으로부터 미리 설정된 범위 를 갖는 판정선에 대응하는 가상 판정선을 정의하는 데 필요한 제1데이터를 저장하고 있는 제1메모리장치와, 상기 비디오 카메라를 통하여 촬영된 소싸움경기 동영상으로부터 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하여 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우 제1 및 제2 색채식별표찰의 제1 및 제2 좌표를 구하고, 상기 제1 및 제2 좌표에 기초하여 대결의 중심점을 설정하며, 상기 설정된 대결의 중심점을 중심으로 상기 판정선에 대응하는 가상 판정선을 상기 제1데이터에 기초하여 표시장치의 영상화면에 표시하고, 상기 동영상 화면에서 두 마리 싸움소 중 어느 하나가 상기 가상 판정선을 이탈하는 경우 이탈하지 않은 싸움소를 승우로 판단하며 대결이 종료된 것으로 처리하는 제어부를 포함하는 것을 특징으로 한다 .Electronic fighting game determination device of the present invention is the first and the second color identification label attached to each of the two fighting place with different colors, the user interface for communicating the user's intention, and the circular of the small fight stadium The video camera is installed in the center of the fight for shooting the fight, and the first and the second color identification marks photographed through the video camera to show the results of the process including the fight video of the two fights A first device for storing a display device and first data necessary for defining a virtual decision line corresponding to a decision line having a preset range from a center point of the battle with respect to the center point of the battle for every pixel of the display screen of the display device; Two from one memory device and a video of a bullfighting match recorded through the video camera. Detect / track the unique color information of the fighting station and the color information of the first and second color identification labels so that the unique colors of the two fighting stations are separated from each other or the first and second color identification labels are separated by a certain distance or more. Obtain first and second coordinates of the first and second color identification labels, set the center point of the confrontation based on the first and second coordinates, and virtually correspond to the determination line centered on the set center point of the confrontation. The decision line is displayed on the video screen of the display device based on the first data, and if one of the two fight spots deviates from the virtual decision line on the video screen, the fight spot that has not escaped is judged as a winner. It is characterized in that it comprises a control unit for processing as finished.
상기한 바와 같이 본 발명에서는 두 마리의 싸움소에 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰을 싸움소에 각각 미리 부착하고 두 마리 싸움소의 경기를 카메라로 촬영하여, 촬영된 소싸움경기 영상으로부터 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하는 기술을 이용하여 자동으로 대결의 중심을 설정하고 대결의 중심에서 일정 범위의 가상 판정선을 설정하며, 가상 판정선으로부터 하나의 싸움소가 이탈하는 것을 색채정보의 영상추적 기술을 이용하여 판단함에 의해 승우의 판정과 경기소요시간을 정확하게 측정할 수 있다. 그 결과 우권법에 따른 시간 적중식 게임에 필요한 경기소요시간의 정확한 측정이 전자식으로 자동으로 이루어질 수 있다.As described above, in the present invention, the first and second color identification labels having different colors on the two fighting spots are pre-attached to the fighting spots, respectively, and the shootings of the two fighting spots are photographed by a camera. Automatically establishes the center of the battle using a technology that detects and tracks the unique color information of the two fighting stations and the color information of the first and second color identification labels, and establishes a range of virtual judgment lines at the center of the battle. By judging by using the image tracking technology of the color information that one battle station is deviated from the virtual judgment line, it is possible to accurately measure the judgment of the winner and the playing time. As a result, accurate measurement of the time required for time-matched games under the Rights Act can be done automatically and electronically.
(실시예)(Example)
이하에 상기한 본 발명을 바람직한 실시예가 도시된 첨부도면을 참고하여 더욱 상세하게 설명한다.Hereinafter, the present invention will be described in more detail with reference to the accompanying drawings.
첨부된 도 7a는 본 발명에 따른 가상 판정선을 이용한 소싸움경기 판정장치를 나타낸 개략 블록도, 도 7b는 도 7a의 제어부와 데이터 저장부에 대한 내부 구성을 보여주는 구성도이다.7A is a schematic block diagram illustrating an apparatus for determining a fight game using a virtual determination line according to the present invention, and FIG. 7B is a block diagram showing an internal configuration of the control unit and the data storage unit of FIG. 7A.
도 7a 및 도 7b를 참고하면, 본 발명의 바람직한 실시예에 따른 가상 판정선을 이용한 소싸움경기 판정장치는 제어부(10), 사용자 인터페이스부(20), 비디오 카메라(30), 메모리장치(40), 제1 및 제2 녹화장치(50,51), 전광판(60) 및 모니터(70)를 포함하고 있다. Referring to FIGS. 7A and 7B, the apparatus for determining a small fight using a virtual determination line according to an exemplary embodiment of the present invention may include a
상기 제어부(10)는 예를들어, 마이크로프로세서(CPU)로 구성되며, 시스템메모리(42)에 기억되어 있는 각종 입출력장치의 기능 제어에 필요한 일반적인 시스템 제어 프로그램과 가상 판정선을 이용한 소싸움경기의 판정 기능과 관련하여 도 8에 도시된 흐름도에 따른 제어를 실행하기 위하여 판정 운영 프로그램에 따라 전체적인 시스템 제어를 위한 신호처리 이외에 메모리장치(40)로의 데이터 저장 및 인출기능과, 사용자 인터페이스부(20)로의 입출력 기능, 전체적 데이터 흐름을 제어하는 기능 및 소싸움경기 판정 기능과 관련된 제어를 실행한다. The
사용자 인터페이스부(20)는 소싸움경기 판정장치에서 지원하는 기능을 설정 또는 수행하기 위한 명령을 제어부(10)로 출력한다. 이를 위해, 사용자 인터페이스부(20)는 다수의 숫자키, 방향키 및 명령키 등을 포함하는 키보드(21)와, 휠 또는 볼 마우스(22) 및 조이스틱(23) 등을 포함한다.The
사용자 인터페이스부(20)와 제어부(10) 사이에는 사용자 인터페이스부(20)의 출력을 제어부(10)가 인식할 수 있는 데이터로 변환하여 출력하는 인터페이스 역할을 담당하는 인터페이스회로(도시되지 않음)를 포함하고 있다.An interface circuit (not shown) serving as an interface between the
메모리장치(40)는 제어부(10)가 처리중인 데이터를 일시적으로 저장하기 위한 RAM(41)과, PC(personal computer)에 필요한 일반적인 시스템 제어 프로그램과 도 8에 도시된 흐름도에 따른 소싸움경기 운영/판정 제어 프로그램을 포함하고 있는 시스템 메모리(42)와, 좌표값 테이블, 가상 판정선 테이블 및 경기결과 기록 데이터파일과 같은 다수의 데이터베이스(DB)로 이루어진 데이터 저장부(43)로 구성되어 있다.The
상기 시스템 메모리(42)는 본 발명의 소싸움경기 판정장치가 데스크 탑 또는 노트북 형태의 PC(personal computer)로 구현되는 경우는 상기 제어 프로그램은 하드 디스크 드라이버(HDD)의 하드 디스크에 저장된다. The
상기 데이터 저장부(43)는 도 7b에 도시된 바와 같이 적어도 소싸움 경기장에 대응하는 모니터(70)의 원형 화면에 픽셀 단위로 (x,y) 좌표를 표시하기 위한 좌표값을 저장한 좌표값 테이블(431), 소싸움경기의 판정을 위하여 소싸움경기를 촬영한 동영상 화면에 심판이 임의의 지점을 대결의 중심점으로 지정할 때 지정된 화면의 각 좌표점에 대한 원형 가상 판정선을 정의하는데 필요한 원의 중심점 좌표값과 중심점으로부터 일정거리의 반지름(R)을 이루는 원에 대한 좌표값을 저장한 가상 판정선 테이블(432) 및 경기결과 기록 데이터파일(433) 등으로 이루어진 다수 의 DB를 포함하고 있다. As shown in FIG. 7B, the
한편, 상기 제1녹화장치(50)에는 비디오 카메라(30)를 통하여 소싸움경기 장면을 촬영한 미가공 동영상이 저장되고, 상기 제2녹화장치(51)에는 경기 종료후에 우권법에 따른 시간적중식 게임방법에서 경기소요시간을 측정하기 위하여 가상 판정선을 이용한 소싸움경기의 판정 순간을 기록한 동영상이 저장되어 있다.On the other hand, the
상기한 실시예에서는 제1 및 제2 녹화장치(50,51)로서 동영상의 기록 및 재생이 가능한 비디오 테이프 레코더(VTR)를 사용하고 있으나, 동영상을 저장할 수 있는 다른 주지된 기록 또는 저장장치, 바람직하게는 촬영된 동영상을 디지털 신호로 변환하여 하드 디스크 드라이버(HDD)에 압축 저장하는 디지털 영상 저장장치(DVR)를 사용하는 것도 물론 가능하다.Although the above-described embodiment uses a video tape recorder (VTR) capable of recording and playing back moving images as the first and
상기 제어부(10)에는 시스템이 기동되어 사용자, 즉 심판이 제1녹화장치(50)에 저장된 소싸움경기 동영상 파일을 재생시키는 경우 시스템 메모리(42)에 저장되어 있는 소싸움경기 운영/판정에 필요한 각종 제어 프로그램이 로딩되면서 소싸움경기 판정 기능을 실행하기 위한 다수의 제어모듈(11~15)이 설치된다.The
도 7b에 도시된 바와 같이, 상기 제어부(10)의 제어모듈(11~14)은 소싸움 경기의 대결이 시작된 순간부터 시간측정을 개시하고 심판이 대결의 중심점을 지정하여 가상 판정선을 설정한 후 어느 하나의 싸움소가 가상 판정선을 이탈하는 순간까지 소싸움경기의 경기소요시간을 편집되는 동영상 파일에 함께 기록되도록 함에 의해 경기소요시간을 측정하기 위한 타이머 모듈(11)과, 상기 비디오 카메라(30)를 통하여 소싸움경기를 촬영하여 얻어진 동영상을 제1녹화장치(50)에 녹화하고, 녹화 된 동영상 화면을 재생하여 모니터(70)에 표시하며 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우 대결의 중심을 설정하고, 지정된 중심점 좌표를 기준으로 가상 판정선을 설정함에 의해 소싸움 경기의 승우를 결정하고 승우가 결정된 편집화면을 제2 녹화장치(51)에 저장하도록 제어하는 재생제어모듈(12)과, 상기 좌표값 테이블(431)에 저장된 각 픽셀의 좌표값에 기초하여 소싸움 경기장에 대응하는 모니터(70)의 원형 화면에 픽셀 단위로 (x,y) 좌표를 표시하기 위한 좌표계 화면전환 모듈(13)과, 상기 가상 판정선 테이블(432)에 저장된 데이터에 기초하여 소싸움경기를 촬영한 동영상 화면에서 컬러정보 영상추적방법에 의해 분리된 제1 및 제2 색채정보표찰의 중간 지점을 대결의 중심으로 자동으로 설정하고 지정된 화면의 각 좌표점에 가상 판정선을 구현하는 가상 판정선 표시모듈(14)과, 컬러정보 영상추적방법에 의해 분리된 제1 및 제2 색채식별표찰의 중간 지점을 대결의 중심으로 자동으로 설정하기 위하여 동영상으로부터 두 마리 싸움소(2a,2b)의 고유한 색채정보와 각 싸움소에 부착된 제1 및 제2 색채식별표찰(A,B)의 색채를 검출하여 추적하기 위한 영상분석모듈(15)로 구성된다. As shown in FIG. 7B, the
상기 재생제어모듈(12)은 대결의 중심점을 중심으로 가상 판정선이 설정된 후 어느 하나의 싸움소가 가상 판정선을 이탈하는 순간을 정확하게 판정할 수 있도록 주지된 비디오 테이프 레코더(VTR)에 채용되고 있는 각종의 기능, 예를들어, 고속 감기/되감기 기능, 일시정지 기능, 슬로우 모션 기능 등을 실행하도록 구현될 수 있다.The
이하에 상기와 같이 구성된 본 발명의 소싸움경기 판정장치에 대한 동작을 설명하기 전에 먼저 도 1a 내지 도 6을 참고하여 영상화면의 좌표 설정 및 가상 판정선 설정 방법에 대하여 설명한다.Before explaining the operation of the small fight game determination apparatus of the present invention configured as described above with reference to Figures 1a to 6 will be described the method of setting the coordinates and the virtual determination line of the image screen.
도 1a는 본 발명에 따라 소싸움 경기를 촬영하는 모습을 보여주는 개략도이고, 도 1b는 본 발명에 따른 소싸움경기 판정에 이용되는 가상 판정선을 설명하기 위한 모니터 화면이다.Figure 1a is a schematic diagram showing the appearance of shooting a small fight according to the present invention, Figure 1b is a monitor screen for explaining a virtual determination line used for small fight determination according to the present invention.
본 발명의 소싸움경기 판정장치는 도 1a와 같이 경기장 중심의 수직 상공에 설치된 한 대의 비디오 카메라(30)로 지름 30미터(또는 경기규칙에서 정한 규격)의 원형 소싸움 경기장(1)의 자유로운 지점에서 대결하는 두 마리 싸움소(2a,2b)의 경기를 촬영하고, 도 1b와 같이 모니터(70)에 도시된 촬영된 소싸움경기 영상화면(100)에 컴퓨터 그래픽을 이용하여 지정된 대결의 중심에서 일정 범위의 영역으로 이루어진 가상 판정선(103)을 설정하여, 가상 판정선(103)을 어느 하나의 싸움소(2a,2b)가 먼저 이탈하는 것을 판단함에 의해 승우의 판정과 경기소요시간을 측정하는 장치를 구현하고자 하는 것이다.The apparatus for judging a small fighting game of the present invention is a
이를 위하여 본 발명에서는 경기장 중심의 수직 상공에 설치된 비디오 카메라(30)를 소싸움경기를 촬영한 후, 소싸움 경기장의 영상정보를 영상화면의 각 픽셀의 위치에 대한 실제 경기장 중심점에서의 실제거리를 구해 실제거리 단위의 좌표계를 설정하고, 싸움소(2a,2b)에 대한 각각의 고유한 색채정보와 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰(A,B)을 각각 부착하여 검출된 색채 정보를 통하여 싸움소의 위치를 추적하고 "대결의 중심점(M)(도 5)"을 산출하며, 싸움 소(2a,2b)의 고유한 색채정보와 제1 및 제2 색채식별표찰(A,B)에 대한 색채 정보를 검출하여 싸움소가 서로 맞붙어 있는 순간과 떨어지는 순간을 파악하여 대결의 중심점(M)을 설정하고 대결의 중심점으로부터 일정범위의 가상 판정선(103)을 그리는 기술을 구현하고, 또한, 경기시작 시간과 경기종료 시간 측정을 위해 계시장치(즉, 타이머)를 설치하여 경기 영상에 경기소요시간이 같이 저장되도록 하고자 한다.To this end, in the present invention, after shooting a small-fight match with the
도 2a는 영상화면에 좌표계를 설정하기 위하여 소싸움 경기장을 촬영하는 과정을 설명하기 위한 설명도, 도 2b는 촬영된 경기장 영상화면에 대한 좌표계 설정방법을 설명하기 위한 설명도이다. 2A is an explanatory diagram for explaining a process of photographing a small-fight arena in order to set a coordinate system on an image screen, and FIG. 2B is an explanatory diagram for explaining a method for setting a coordinate system for a captured stadium image screen.
영상화면(100)의 좌표계 설정을 위하여 먼저, 도 2a와 같이 소싸움 경기장 중심점(1a)의 수직 상공에 고정 설치된 비디오 카메라(30)로 실제의 소싸움 경기장 전체를 실제 설치한 거리측정도구(4)와 함께 촬영(Full Shot)한다.In order to set the coordinate system of the
경기장 영상화면(100)의 좌표계 설정을 위하여 촬영된 영상화면(100)에서 경기장 중심점(100a)을 수직으로 교차하는 X축과 Y축의 좌표계를 설정하고 경기장 중심점(100a)에서 X축 위의 임의의 지점까지의 실제거리 L을 X축의 x 좌표값으로 X축 좌표계와 경기장 중심점(100a)에서 Y축 위의 임의의 지점까지의 실제거리 L을 Y축의 y 좌표값으로 Y축 좌표계를 설정한다.In order to set the coordinate system of the
이때, 경기장 중심점(1a)의 수직 상공에 설치된 카메라(30)로 촬영된 경기장 영상화면(100)은 카메라(30)의 직하방인 영상화면의 중심점(100a)에서 멀어질수록 단위 픽셀당 거리가 더 크게 나타나게 된다. At this time, the
픽셀당 정확한 거리를 계산하기 위해서 미리 설치한 거리측정도구(4)를 이용 하여 도 2b와 같이 거리(AO)에 대한 픽셀수(A)와 거리(AF)에 대한 픽셀수(B)를 측정하여, 중심점(100a)에서 X축 위의 지점들까지 거리(L)를 직선보간식을 이용한 하기 수학식 1에 의해 구하여 X축 좌표계를 설정한다.In order to calculate the exact distance per pixel, the number of pixels A for the distance A0 and the number of pixels B for the distance AF are measured by using the
여기서, here,
는 경기장 중심점에서 최외곽(O)까지의 실제거리, Is the actual distance from the center of the stadium to the outermost (O),
는 경기장 중심점에서 임의의 지점(F)까지의 실제거리, Is the actual distance from the stadium center point to any point (F),
A는 경기장 중심점에서 X축을 따라 운동장에 설치된 다수의 단위픽셀로 이루어진 거리측정도구를 비디오 카메라로 촬영한 경우 영상화면에 표시된 경기장 중심점에서 최외곽(O)까지의 픽셀수,A is the number of pixels from the stadium center point to the outermost (O) displayed on the video screen when the distance measuring tool composed of a plurality of unit pixels installed on the playground along the X axis from the stadium center point is captured by the video camera.
B는 경기장 중심점에서 X축을 따라 운동장에 설치된 다수의 단위픽셀로 이루어진 거리측정도구를 비디오 카메라로 촬영한 경우 영상화면에 표시된 경기장 중심점에서 임의의 지점(F)까지의 픽셀수,B is the number of pixels from the stadium center point displayed on the video screen to an arbitrary point (F) when the distance measuring tool composed of a plurality of unit pixels installed on the playground along the X axis from the stadium center point is captured by the video camera.
K = 픽셀수임.K = number of pixels.
같은 방법으로 Y축 위의 지점들까지 거리 L을 구하여 Y축 좌표계를 설정한다. 즉, 영상화면(100)의 최소단위인 각 픽셀의 좌표값은 상기와 같이 미리 구한 후, 데이터 저장부(43)의 좌표값 테이블(431)에 데이터베이스로 저장한다.In the same way, set the Y-axis coordinate system by finding the distance L to the points on the Y-axis. That is, the coordinate value of each pixel, which is the minimum unit of the
이하에 가상 판정선의 설정방법에 대하여 도 3을 참고하여 설명한다.A method of setting the virtual decision line will be described below with reference to FIG. 3.
상기한 바와 같이 소싸움경기규칙에 규정된 "대결의 중심"에서 정한 소정의 거리(R)를 이탈하는 순간 대결이 종료 되는 것으로 정하였을 때, 판정의 기준선은 "대결의 중심점(M)"을 중심점으로 하고 일정 거리(R)를 반지름으로 하는 원으로 정의할 수 있다.As described above, when the match is determined to be terminated at the time of departure from the predetermined distance R defined in the "center of the match" defined in the small-fighting competition rule, the baseline of the judgment is the center point of the "match" (M). It can be defined as a circle with a certain distance (R) as a radius.
또한, 좌표계 화면 내에서 좌표값이 (p,q)인 임의의 지점을 대결의 중심점(M)으로 지정하였을 때, 이때 판정의 기준선은 임의의 지점을 중심점(M)으로 하고 R을 반지름으로 하는 원으로 정의할 수 있으며 하기 수학식 2로 구할 수 있다.In addition, when an arbitrary point whose coordinate value is (p, q) is designated as the center point M of the confrontation in the coordinate system screen, the reference line of the judgment is that the arbitrary point is the center point M and R is the radius. It can be defined as a circle and can be obtained by Equation 2 below.
도 2b에서 설정된 좌표계 화면의 중심점(100a)에서 X축과 Y축의 임의의 지점까지의 거리 단위로 (x,y) 좌표가 설정되어 있으며, 좌표 눈금의 최소 단위는 영상 화면(100)의 최소 표시 단위인 픽셀의 범위로 표시할 수 있다. (X, y) coordinates are set in units of distances from the
상기 수학식 2에서 계산된 값을 영상화면 픽셀의 근사값을 선택하여 도 3과 같이 가상 판정선(103)을 화면에 그릴 수 있다. 이 경우, 경기장 중심에서 멀어질수록 단위 픽셀당 거리가 더 크게 나타나므로, 이때의 가상 판정선(103) 도형은 중심점(100a)을 향해 볼록한 형태의 모양으로 그려지게 된다.The
본 발명에서는 임의의 지점에 대한 가상 판정선(103)을 정의하는 필요한 요소들로서 좌표계 화면의 임의의 각 지점들을 대결의 중심점(M)으로 하여 수학식 2에 의해서 그려진 가상 판정선(103)을 미리 계산하여 산출하고, 중심점(M)의 좌표 값(p,q)과 상기한 가상 판정선(103)의 산출된 계산값을 데이터 저장부(43)의 가상 판정선 테이블(432)에 데이터베이스로 저장한다.In the present invention, as the necessary elements for defining the
상기와 같이 임의의 지점을 대결의 중심점(M)으로 가정하여 미리 이에 대한 가상 판정선(103)을 정의하는 필요한 요소들을 구하여 데이터베이스화하여 가상 판정선 테이블(432)에 저장하면 실제 판정장치를 운영할 때 처리속도를 향상시킬 수 있게 된다.As described above, assuming that a certain point is the center point of the confrontation, the necessary elements for defining the
이하에 도 4 내지 도 6을 참고하여 본 발명에 따른 영상정보를 이용한 전자식 대결의 중심점 설정방법에 대하여 설명한다.Hereinafter, a method for setting a center point of an electronic confrontation using image information according to the present invention will be described with reference to FIGS. 4 to 6.
도 4는 싸움소에 색채식별표찰을 부착하여 소싸움 경기의 승우와 경기시간을 자동으로 판정하는 방법을 설명하기 위한 개념 설명도, 도 5는 대결중인 싸움소의 영상을 화면좌표계에 나타낸 것으로 대결의 중심을 설정하는 방법을 설명하기 위한 설명도, 도 6은 도 5에서 대결의 중심점 좌표를 구하는 방법을 설명하기 위한 설명도이다.FIG. 4 is a conceptual explanatory diagram for explaining a method of automatically determining winning and fighting time of a small fighting game by attaching a color identification label to a fighting place, and FIG. 5 shows an image of a fighting place in a fight in the screen coordinate system. FIG. 6 is an explanatory diagram for explaining a method of obtaining the coordinates of the center point of the confrontation in FIG. 5.
먼저, 본 발명에서는 두 마리의 싸움소(2a,2b)에 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰(A,B)을 싸움소(2a,2b)의 특정부위(예를 들어, 소의 체고(體高)측정지점)에 도 4와 같이 각각 부착하고 카메라(30)를 통하여 얻어진 영상화면(100)에서 색채 정보를 검출하여 영상분석모듈(15)에 등록한다. 즉, 경기에 출전한 싸움소(2a,2b)의 영상화면(100)에서 각 싸움소(2a,2b)의 고유한 색채정보와 제1 및 제2 색채식별표찰(A,B)에 대한 색채 정보를 검출하여 영상분석모듈(15)에 등록한다. First, in the present invention, the first and second color identification marks A and B having different colors in the two
상기한 영상화면(100)에서 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰(A,B)에 대한 색채 정보를 검출하고, 이를 추적하는 기술은 예를 들어, 한국공개특허 제2002-32765호(컬러정보를 사용한 목표물 영상 추적방법)에 개시된 기술을 이용하여 구현될 수 있다. 상기 목표물 영상 추적방법은 목표물의 삼차원 컬러 모델링 단계, 최초 목표물을 감지하기 위한 목표물 감지 단계, 및 영상 추적을 반복하는 영상추적 단계로 구성되어, 실시간 영상 추적이 가능하고 빠른 목표물의 이동에 적응할 수 있다.Techniques for detecting and tracking the unique color information of the fighting station and the color information for the first and second color identification labels A and B on the
도 5는 대결중인 싸움소의 영상을 화면좌표계에 표출한 모습이다.5 is a state in which the image of the battle station in the confrontation expressed on the screen coordinate system.
이때, 싸움소(2a,2b)에 미리 부착한 제1 및 제2 색채식별표찰(A,B)의 정 가운데 지점을 좌표로 표시하고, 두 지점을 연결한 직선거리의 정중앙을 대결의 중심점(M)으로 설정한다.At this time, the center of the first and second color identification labels (A, B) attached to the fighting station (2a, 2b) in advance is indicated by the coordinates, the center of the straight line connecting the two points to the center of the confrontation ( Set to M).
제1색채식별표찰(A)의 화면 내 좌표를 (a,b), 제2색채식별표찰(B)의 좌표가 (c,d)일 때 대결의 중심점(M)의 좌표(p,q)는 도 6과 같이 각 지점에서 중심점까지의 거리(α,β)의 값이 같은 지점이다.When the coordinates of the screen of the first color identification label (A) are (a, b) and the coordinates of the second color identification label (B) are (c, d), the coordinates (p, q) of the center point M of the confrontation 6 is a point where the values of the distances α and β from each point to the center point are the same.
따라서, 피타고라스 정리와 제1 및 제2 색채식별표찰(A,B) 두점의 좌표((a,b),(c,d))를 지나는 직선의 방정식을 이용하면 하기 수학식 3과 수학식 4가 얻어진다. 따라서, 얻어진 수학식 3과 수학식 4로부터 대결의 중심점(M)의 좌표(p,q)를 구할 수 있다.Therefore, using the equation of a straight line passing through the Pythagorean theorem and the coordinates ((a, b), (c, d)) of two points of the first and second color identification labels (A, B),
이때, 수학식 4는 두점((a,b),(c,d))을 지나는 방정식이다.In this case,
한편, 대결의 중심에 대한 추적 및 설정방법은 상기한 바와 같이 제어부(10)의 영상분석모듈(15)에 의해 미리 검출된 싸움소의 고유한 색채정보를 분석하고, 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하여 두 마리 싸움소의 고유한 색채가 서로 분리되거나 제1 및 제2 색채식별표찰이 일정 거리 이상으로 멀어지는 경우, 도 6과 같이 제1 및 제2 색채식별표찰(A,B)의 좌표를 구하고, 상기 수학식 3와 수학식 4에 의해 대결의 중심점(M)을 설정한다(방법1). 다시 싸움소가 서로 맞붙어 대결을 계속할 때 에는 계속 대결이 진행중인 것으로 판단하고, 상기한 조치를 반복한다. On the other hand, the tracking and setting method for the center of the confrontation analyzes the unique color information of the fighting place detected in advance by the
또 다른 대결의 중심 설정방법은 도 6의 대결의 중심점(M)에서 싸움소에 부착된 제1 및 제2 색채식별표찰(A,B)까지의 거리(α,β)가 경기규칙에서 정한 일정 거리 이상이 될 때, 대결의 중심을 설정한다(방법2). 상기한 2거리(α,β)가 일정거리 이내로 다시 좁혀지면 계속 대결이 진행인 것으로 판단하고, 상기한 조치를 반복한다.Another method of setting the center of the confrontation is a schedule defined in the competition rules by the distance (α, β) from the center point M of the confrontation of FIG. 6 to the first and second color identification marks A and B attached to the battlefield. When the distance is over, set the center of the confrontation (Method 2). When the two distances α and β are narrowed again within a predetermined distance, it is determined that the confrontation is in progress and the above measures are repeated.
안정적인 대결의 중심 추적을 위하여 상기한 방법1과 방법2를 병행하여 실시 하는 것이 바람직하고, 두 가지 방법 중 우선적으로 선택되어지는 방법은 방법1이다. In order to track the center of a stable confrontation, it is preferable to perform the above-described method 1 and method 2 in parallel, and the method to be selected first among the two methods is method 1.
본 발명에서는 컬러정보를 이용한 영상추적방법을 이용하여 싸움소(2a,2b)의 위치를 추적하고 대결의 중심점(M)을 산출하며, 싸움소(2a,2b)의 고유한 색채정보와 제1 및 제2 색채식별표찰(A,B)에 대한 색채 정보를 검출하여 싸움소가 서로 맞붙어 대결이 진행중인 순간과 떨어지는 순간을 파악하여 대결의 중심을 설정하고 대결의 중심점(M)으로부터 일정범위의 가상 판정선(103)을 그린 후, 어느 하나의 싸움소가 가상 판정선(103)을 이탈하는 지를 추적하여 판단함에 의해 소싸움경기의 승부를 판정한다.In the present invention, the image tracking method using the color information is used to track the positions of the
이하에 도 7a, 도 7b 및 도 8을 참고하여 본 발명에 따른 가상 판정선을 이용한 소싸움경기 판정장치의 동작에 대하여 설명한다.7A, 7B, and 8, the operation of the fighting game determination apparatus using the virtual determination line according to the present invention will be described.
먼저, 본 발명에서는 상기와 같이 영상화면의 각 픽셀마다 가상 판정선에 대한 데이터베이스를 미리 구축한 상태에서, 소싸움경기가 진행될 때 도 2a와 같이 소싸움 경기장(1)의 중심 상공에 설치된 비디오 카메라(30)로 소싸움경기 촬영을 개시하여 소싸움경기의 승우가 결정될 때까지 경기를 촬영하고, 촬영된 경기 영상을 제1 녹화장치(50)에 녹화한다(S11). 이러한 판정장치에 대한 조작은 사용자, 즉 심판이 사용자 인터페이스(20)에 포함된 키보드(21), 마우스(22) 및/또는 조이스틱(23)을 사용하여 제어부(10)에 사용자의 명령을 인가함에 의해 제어부(10)가 이를 수신하여 실행된다.First, in the present invention, in the state in which the database for the virtual determination line is previously constructed for each pixel of the video screen as described above, the
본 발명의 판정장치에서는 시스템이 기동되어 심판이 제1녹화장치(50)에 저 장된 소싸움경기 동영상 파일을 재생시키는 경우, 시스템 메모리(42)에 저장되어 있는 소싸움경기 운영/판정에 필요한 각종 제어 프로그램이 제어부(10)로 로딩되면서 소싸움경기 판정 기능을 실행하기 위한 타이머 모듈(11), 재생제어모듈(12), 좌표계 화면전환 모듈(13), 가상 판정선 표시모듈(14) 및 영상분석모듈(15)이 설치된다.In the judging apparatus of the present invention, when the system is started and the judge plays the small-fighting game video file stored in the
경기가 시작되기 전 미리 각 싸움소(2a,2b)의 고유한 색채정보와 제1 및 제2 색채식별표찰(A,B)의 색채를 검출하여 영상분석모듈(15)에 등록한다.Before the game starts, the unique color information of each fighting
그후, 심판이 사용자인터페이스(20), 예를 들어 마우스를 이용하여 재생제어모듈(12)에 의해 제공되는 제1녹화장치(50)에 대한 재생, 즉 플레이(play) 메뉴를 선택함에 의해 제1 녹화장치(50)에 녹화된 경기 동영상의 재생을 시작하면(S12), 모니터(70)에는 상기 좌표계 화면전환모듈(13)에 의해 상기 좌표값 테이블(431)에 저장된 각 픽셀의 좌표값에 기초하여 영상화면(100)을 도 2b와 같이 좌표계 화면으로 표출한다(S13). Then, the referee selects the first play by selecting the play, that is, play menu, for the
동영상의 재생 개시후 두 마리 싸움소(2a,2b)가 대결을 시작하는 순간 심판의 판단, 즉 마우스(22)로 타이머 모듈(11)에 의해 모니터 화면에 제공되는 타이머의 개시버튼(도시되지 않음)을 선택시키면 경기시간의 측정을 시작한다(S14,S15).At the moment when the two
그후, 소싸움 경기의 동영상이 재생되는 동안 영상분석모듈(15)은 동영상으로부터 두 마리 싸움소(2a,2b)의 고유한 색채정보와 각각에 부착된 제1 및 제2 색채식별표찰(A,B)의 색채를 검출하여 추적을 시작한다. 상기 추적의 결과 두 마리 싸움소(2a,2b)의 고유한 색채가 서로 맞 붙어있거나 제1 및 제2 색채식별표찰(A,B) 이 일정 거리 이내로 근접 해 있을 때는 대결이 진행중인 것으로 판단하고, 두 마리 싸움소(2a,2b)의 고유한 색채가 분리될 때 또는 제1 및 제2 색채식별표찰(A,B)이 일정 거리 이상으로 멀어진 경우(S16), 제1 및 제2 색채식별표찰(A,B)의 좌표를 구하고, 상기 수학식 3과 수학식 4에 의해 대결의 중심점(M)을 설정한다(S17).Then, while the video of the small fighting game is playing, the
상기와 같이 영상분석모듈(15)이 두 마리 싸움소(2a,2b)와 제1 및 제2 색채식별표찰(A,B)의 색채 정보를 추적함에 따라 대결의 중심점(M)이 자동으로 설정되면, 가상 판정선 표시모듈(14)은 이에 응답하여 상기 가상 판정선 테이블(432)로부터 대결의 중심점(M)의 좌표에 대응하는 가상 판정선 데이터를 불러와서 영상화면(100)에 가상 판정선(103)을 표시한다(S18).As described above, as the
그러나 소싸움 경기의 특성상 한 지점에서 승패가 결정나지 않는 경우가 많다. 상기한 대결의 중심점(M)은 가상 판정선(103)을 이탈하지 않고 싸움소(2a,2b)의 이동에 따라 영상화면(100) 내에서 이동이 이루어지게 된다. 이 경우 영상분석모듈(15)은 싸움소 두 마리가 함께 동일한 방향으로 이동함에 따라 대결의 중심점(M)이 이동할 때 이를 추종하여 이동하며, 가상 판정선 표시모듈(14)은 이동된 지점에 대한 가상 판정선(103)을 새롭게 표시한다. However, due to the nature of small fights, there are many cases in which a win or loss cannot be decided at one point. The center point M of the confrontation is moved within the
상기 영상분석모듈(15)은 상기와 같이 대결의 중심이 설정되어 가상 판정선(103)이 설정된 상태에서 어느 하나의 싸움소가 가상 판정선(103)을 이탈하는지 여부를 판단하며(S19), 판단결과 두 마리 싸움소(2a,2b)가 서로 분리되어 그 중 한 마리가 가상 판정선(103)을 완전히 이탈하는 순간을 대결이 종료한 것으로 판단하고 이탈 순서에 따라 승부를 판정한다(S20).The
또한, 상기 영상분석모듈(15)은 가상 판정선(103)을 이탈하는 순간을 대결이 종료한 것으로 판단함과 동시에 타이머 모듈(11)에 의해 제공되는 타이머의 종료버튼을 작동시킴에 의해 타이머의 작동을 정지시켜 경기시간의 측정을 종료시킨다(S21). 이 경우 제어부(10)는 승우, 경기소요시간 등의 경기결과를 경기결과 기록 데이터 파일(433)에 기록한다(S22).In addition, the
더욱이, 상기 제어부(10)는 두 마리 싸움소(2a,2b) 중 하나가 가상 판정선(103)을 이탈하는 순간에 정지된 영상을 스틸 사진으로 출력하여 전광판 등에 표시함에 의해 시간 적중식 게임을 선택한 고객에게 게임의 결과를 알려줄 수 있다.Furthermore, the
상기와 같이, "대결의 중심"에서 어느 하나의 싸움소가 가상 판정선(103)을 이탈한 순간을 판단하는 것은 시간 적중식 게임을 선택한 고객에게는 매우 중요한 사항이므로 본 발명에서는 객관적이고 정확한 판단을 위해 영상분석모듈(15)에 의해 전자식으로 자동적으로 판정함에 의해 판단의 정확성을 기할 수 있다.As described above, judging the moment at which one battle station deviated from the
상기한 재생제어모듈(12)은 제1녹화장치(50)로부터 재생된 동영상에 대하여 영상분석모듈(15)에 의해 전자식으로 대결의 중심점(M)을 지정하여 지정된 중심점 좌표를 기준으로 가상 판정선(103)을 설정함에 의해 소싸움 경기의 승우를 결정하고 승우가 결정된 편집화면을 제2 녹화장치(51)에 저장하도록 제어한다.The
또한, 이와 동시에 타이머 모듈(11)에 의해 제공되는 타이머의 작동에 따라 소싸움 경기의 대결이 시작된 순간부터 시간측정을 개시하고 어느 하나의 싸움소가 가상 판정선을 이탈하여 경기가 종료되는 순간까지 시간 기록을 동영상 파일에 함께 기록되도록 함에 의해 전체 경기소요시간과 매 5분 단위의 6라운드를 진행할 때 몇 번째 라운드에서 승부가 결정되었는지를 재검증시에도 정확하게 확인할 수 있도록 한다.In addition, at the same time, the time measurement starts from the moment when the battle of the small-fighting race starts in accordance with the operation of the timer provided by the
한편, 상기한 실시예 설명에서는 경기소요시간의 측정이 녹화된 화면을 다시 재생하면서 이루어지는 것을 예시하였으나, 본 발명에서는 대결의 중심점(M) 설정, 대결의 중심점(M)의 좌표에 대응하는 가상 판정선(103)의 표시, 두 마리 싸움소(2a,2b) 중 하나가 가상 판정선(103) 이탈에 따른 승우의 판정 및 경기소요시간의 측정이 전자적으로 자동으로 실행될 수 있어, 실시간으로 자동 판정이 가능하게 된다.Meanwhile, in the above-described embodiment, the measurement of the playing time is performed while replaying the recorded screen. However, in the present invention, the virtual determination corresponding to the setting of the center point M of the confrontation and the coordinates of the center point M of the confrontation is performed. The display of the
따라서, 본 발명에서는 소싸움경기가 진행될 때 실시간으로 승우의 자동 판정이 이루어지는 과정을 전광판 등에 표시함에 의해 시간 적중식 게임을 선택한 고객에게 게임의 결과를 신속하고 박진감 있게 알려줄 수 있어 서비스의 질을 높일 수 있게 된다.Therefore, in the present invention, by displaying the process of automatic determination of winning in real time when a small fight is in progress, etc., the result of the game can be promptly and visibly informed to the customer who selected the time-based game, and the quality of service can be improved. Will be.
상기한 바와 같이 본 발명에서는 두 마리의 싸움소에 서로 다른 칼라를 갖는 제1 및 제2 색채식별표찰을 각각 미리 부착하고 두 마리 싸움소의 경기를 카메라로 촬영하여, 촬영된 소싸움경기 영상으로부터 두 마리 싸움소의 고유한 색채정보와 제1 및 제2 색채식별표찰에 대한 색채 정보를 검출/추적하는 기술을 이용하여 자동으로 대결의 중심을 설정하고 대결의 중심에서 일정 범위의 가상 판정선을 설정하며, 가상 판정선으로부터 하나의 싸움소가 이탈하는 것을 판단함에 의해 승우의 판정과 경기소요시간을 정확하게 측정할 수 있다. 그 결과 우권법에 따른 시간 적중 식 게임에 필요한 경기소요시간의 정확한 측정이 전자식으로 자동으로 이루어질 수 있다.As described above, in the present invention, the first and second color identification labels having different colors are pre-attached to the two fighting places, respectively, and the shootings of the two fighting places are photographed by a camera. Using the technology of detecting and tracking the unique color information of the fighting station and the color information of the first and second color identification labels, the center of the battle is automatically set up, and a range of virtual judgment lines are set at the center of the battle. By judging the departure of one battle station from the virtual decision line, it is possible to accurately measure the winning decision and the playing time. As a result, accurate measurement of the time required for time-matched games under the Rights Act can be done automatically and electronically.
이상에서는 본 발명을 특정의 바람직한 실시예를 예를들어 도시하고 설명하였으나, 본 발명은 상기한 실시예에 한정되지 아니하며 본 발명의 정신을 벗어나지 않는 범위내에서 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변경과 수정이 가능할 것이다.In the above, the present invention has been illustrated and described with reference to specific preferred embodiments, but the present invention is not limited to the above-described embodiments and is not limited to the spirit of the present invention. Various changes and modifications can be made by those who have
Claims (20)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060099292A KR100807419B1 (en) | 2006-10-12 | 2006-10-12 | Method of electronically establishing virtual judgment circle for judging bull's fighting game, method and apparatus for electronically judging bull's fighting game using the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060099292A KR100807419B1 (en) | 2006-10-12 | 2006-10-12 | Method of electronically establishing virtual judgment circle for judging bull's fighting game, method and apparatus for electronically judging bull's fighting game using the same |
Publications (1)
Publication Number | Publication Date |
---|---|
KR100807419B1 true KR100807419B1 (en) | 2008-02-26 |
Family
ID=39383365
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060099292A KR100807419B1 (en) | 2006-10-12 | 2006-10-12 | Method of electronically establishing virtual judgment circle for judging bull's fighting game, method and apparatus for electronically judging bull's fighting game using the same |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100807419B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018038296A1 (en) * | 2016-08-25 | 2018-03-01 | 김택석 | Automatic bullfighting judgement and scoring system |
-
2006
- 2006-10-12 KR KR1020060099292A patent/KR100807419B1/en active IP Right Grant
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018038296A1 (en) * | 2016-08-25 | 2018-03-01 | 김택석 | Automatic bullfighting judgement and scoring system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11717737B2 (en) | Athletic training system and method | |
US6398670B1 (en) | Golf training and game system | |
US10025987B2 (en) | Classification of activity derived from multiple locations | |
CA2839362C (en) | Apparatus and method for virtual golf driving range simulation | |
CN105678802B (en) | Method for generating three-dimensional information by identifying two-dimensional image | |
RU2645553C2 (en) | Device and method for automatic evaluation of the training exercise | |
CN103458978B (en) | Virtual golf ball training field analogue means and method | |
WO2002071334A2 (en) | Sport analysis system and method | |
CN103990279B (en) | Based on the golf ball-batting analogy method of internet | |
CN104001330B (en) | Based on the golf ball-batting simulation system of internet | |
KR101633246B1 (en) | System and method for supporting offline billiard game based on beam-projector | |
EP3009173B1 (en) | Assisted-training system and method for billiards | |
Grontman et al. | Analysis of sword fencing training evaluation possibilities using Motion Capture techniques | |
KR100972828B1 (en) | Virtual golf simulation apparatus and method using a user history information | |
KR100807419B1 (en) | Method of electronically establishing virtual judgment circle for judging bull's fighting game, method and apparatus for electronically judging bull's fighting game using the same | |
KR102297582B1 (en) | Game device and electronic device for game service | |
KR20150116318A (en) | System and Method for analyzing golf swing motion using Depth Information | |
KR100837455B1 (en) | Method of establishing virtual judgment circle for judging bull's fighting game, Method and Apparatus for judging bull's fighting game using the same | |
KR102351189B1 (en) | Bowing pitchvideo replay system | |
CN115414648B (en) | Football evaluation method and football evaluation system based on motion capture technology | |
TWI850714B (en) | Method for analyzing image for sensing moving ball and sensing device using the same | |
JP7246649B2 (en) | tactical analyzer | |
US12097422B2 (en) | Athletic training system and method | |
JP6965975B2 (en) | Video processing equipment, multi-camera system, video processing method, and video processing program | |
KR100614279B1 (en) | Apparatus and Method for Generating Analysis Model and Analysis System Using the Same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130110 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20140213 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20150130 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20160204 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20170210 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20180206 Year of fee payment: 11 |
|
FPAY | Annual fee payment |
Payment date: 20190131 Year of fee payment: 12 |