KR102050373B1 - 이미지매칭에 의한 그린정보 제공시스템 및 그 방법 - Google Patents

Abstract

본 발명은 이미지매칭에 의한 그린정보 제공시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 그린정보 제공서버로부터 3차원 원그린정보의 이미지를 다운받아 라운딩중 골퍼가 촬영한 실제 그린사진의 이미지와 매칭하여 골프공에서 홀컵까지의 그린정보를 표시하는 이미지매칭에 의한 그린정보 제공시스템 및 그 방법에 관한 것이다.
각 골프장의 원그린 촬영 사진을 3차원으로 이미지화하여 생성한 3차원 원그린 정보를 골프장별로 저장하고, 결제에 의해 3차원 원그린 정보를 제공하는 그린정보 제공서버와, 상기 결제를 통해 무선으로 다운받은 3차원 원그린 정보의 이미지와 실제 그린 사진의 이미지를 서로 일치시켜 상기 골프공과 홀컵의 위치를 3차원 원그린 정보의 이미지에 매칭시키며, 상기 골프공에서 홀컵까지의 3차원 원그린 정보를 골프공에서 홀컵까지의 거리, 기울기 및 좌우 경사도와 함께 표시하는 전용단말을 포함하여 구성된다.

Description

이미지매칭에 의한 그린정보 제공시스템 및 그 방법 {GREEN INFORMATION PROVIDING SYSTEM BY IMAGE MATCHING AND METHOD THEREOF}

본 발명은 이미지매칭에 의한 그린정보 제공시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 그린정보 제공서버로부터 3차원 원그린정보의 이미지를 다운받아 라운딩중 골퍼가 촬영한 실제 그린사진의 이미지와 매칭하여 골프공에서 홀컵까지의 그린정보를 표시하는 이미지매칭에 의한 그린정보 제공시스템 및 그 방법에 관한 것이다.

현재 골프시장은 크게 미국과 유럽으로 나누어지고, 아시아에서도 중국의 경제 규모가 커가고 국민소득이 늘어남에 따라 골프인구가 증가하고 있지만, 골프가 어렵다는 이유로 전체 시장 규모 면에서 점점 골프를 하려는 신규 참여 인구가 감소하여 침체기에 들어섰다고 골프 전문가들은 말한다.

한편, 퍼팅그린(Putting Green)은 홀컵이 형성된 매트상의 잔디밭으로 골프공을 굴려서 평균 2타로 홀컵에 골프공이 들어가도록 된 지역으로서, 골프에서 타수의 반 이상을 결정한다.

골프에서 퍼팅의 경우, 그린 상의 라이(Lie) 또는 그린의 경사도를 정확히 파악하여 적절한 세기와 방향으로 골프공을 타격하여 골프공을 홀컵에 집어넣어야 한다.

따라서 퍼팅은 스코어에 미치는 영향이 매우 크기 때문에 골프 경기에서 가장 중요한 요소로 취급되어 왔고, 골퍼들은 그린에서 퍼팅을 하기 전에 골프공과 홀컵 사이의 라이(경사도)를 파악하기 위해, 공 뒤편으로 몇 발자국 물러나 앉아서 또는 거의 지면과 눈높이를 일치시켜서 그린의 경사도를 관찰한다.

이때, 골프공과 홀컵 간의 중간 경사도를 파악하기 위해, 좌측 또는 우측에서 관찰하기도 하고, 홀컵 뒤편 또는 후면에서도 관찰하기도 하며, 홀컵 주위에서의 미세한 라이를 파악하는 것도 정확한 퍼팅을 위해서는 필수적인 동작이다.

또한, 프로골퍼의 경우 경기가 열리는 코스를 사전에 캐디와 함께 라운딩을 하고, 캐디는 수시로 매 홀의 특징을 파악하여 야드북을 만들어 실전 경기시 이를 활용하여 골퍼에게 도움 정보를 제공하나, 아마추어 골퍼의 경우에는 이 도움 정보를 받기 어렵고, 또 그린 경사도를 읽는 능력이 부족하여 퍼팅그린에서 홀컵에 골프공을 넣는 과정을 매우 어렵게 생각한다.

선행 특허 공개번호 10-2011-0072480(2011년06월29일)에는 퍼팅라인을 표시하는 연습용 그린 시스템이 개시된다.

이 선행 특허는 홀컵이 구비되고 다수개의 픽셀단위로 이루어진 그린과; 퍼팅할 골프공의 위치를 알려주는 위치확인기와; 위치확인기에서 수신한 위치정보를 기 저장되어 있는 그린의 픽셀단위별 경사와 높이값 등의 정보와 비교하여 퍼팅라인을 계산하는 컨트롤러와; 계산된 퍼팅라인 정보에 의해 그린에 광을 발생하여 퍼팅라인을 표시하는 광원발생기를; 포함하여 구성된다.

이 선행 특허에 의해 그린의 경사와 높낮이 및 굴곡진 형태에 따라 정확한 퍼팅라인이 표시되어 아마추어 골퍼들이 연습용 그린 시스템에서 퍼팅을 연습함으로써 타수를 줄일 수 있도록 한다.

그런데 상기 선행 특허는 실내골프연습장 등에 설치되는 하나의 연습용일 뿐이지 실제 골프장의 그린에 적용할 수 없는 문제점이 있었다.

공개번호 10-2011-0072480(2011년06월29일)

본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 그린정보 제공서버로부터 3차원 원그린정보의 이미지를 다운받아 라운딩중 골퍼가 촬영한 실제 그린사진의 이미지와 매칭하여 골프공에서 홀컵까지의 그린정보를 거리 및 경사도 등과 함께 출력하여 보여줌으로써, 그린에서 홀컵의 공략시 아마추어 골퍼에게 실질적인 도움을 주고 골프의 대중화와 골프 시장의 활성화에 도움을 줄 수 있는 이미지매칭에 의한 그린정보 제공시스템 및 그 방법을 제공하는데 그 목적이 있다.

상술한 목적을 달성하기 위한 본 발명에 따른 이미지매칭에 의한 그린정보 제공시스템은, 각 골프장의 원그린 촬영 사진을 3차원으로 이미지화하여 생성한 3차원 원그린 정보를 골프장별로 저장하고, 결제에 의해 3차원 원그린 정보를 제공하는 그린정보 제공서버;

자체 구비된 카메라를 이용해 골프공과 홀컵이 나타나도록 실제 그린을 촬영하여, 실제 그린 사진으로부터 골프공과 홀컵을 확인해서 골프공과 홀컵의 위치 정보를 생성하고, 상기 결제를 통해 무선으로 다운받은 3차원 원그린 정보의 이미지와 실제 그린 사진의 이미지를 서로 일치시켜 상기 골프공과 홀컵의 위치를 3차원 원그린 정보의 이미지에 매칭시키며, 상기 골프공에서 홀컵까지의 3차원 원그린 정보를 골프공에서 홀컵까지의 거리, 기울기 및 좌우 경사도와 함께 표시하는 전용단말;

을 포함하여 구성된다.

또한, 본 발명에 따른 이미지매칭에 의한 그린정보 제공방법은, 카메라를 이용하여 각 골프장의 원그린을 촬영하는 제1단계;

그린정보 제공서버에서 상기 원그린 촬영 사진을 영상기반 모델링에 의해 3차원으로 이미지화하여 3차원 원그린 정보를 생성하고 골프장별로 DB화하는 제2단계;

전용단말에서 상기 그린정보 제공서버에 접속하여 결제에 의해 해당 골프장의 3차원 원그린 정보를 다운받아 저장하는 제3단계;

상기 전용단말에 구비된 카메라를 이용해 골프공과 홀컵이 나타나도록 실제 그린을 촬영하는 제4단계;

상기 전용단말에서 실제 그린 사진으로부터 골프공과 홀컵을 확인해서 골프공과 홀컵의 위치 정보를 생성하는 제5단계;

상기 전용단말에서 3차원 원그린 정보의 이미지와 실제 그린 사진의 이미지를 서로 비교해서 매칭하는 제6단계; 및

상기 전용단말에서 골프공에서 홀컵까지의 3차원 원그린 정보를 전용단말의 화면에 표시하는 제7단계;

를 포함하여 구성된다.

상술한 과제의 해결 수단에 의하면, 그린정보 제공서버로부터 3차원 원그린정보의 이미지를 다운받아 라운딩중 골퍼가 촬영한 실제 그린사진의 이미지와 매칭하여 골프공에서 홀컵까지의 그린정보를 거리 및 경사도 등과 함께 출력하여 보여줌으로써, 그린에서 홀컵의 공략시 아마추어 골퍼에게 실질적인 도움을 주고 골프의 대중화와 골프 시장의 활성화에 도움을 줄 수 있다.

또한, 그린에서 홀컵에 골프공을 넣는 과정을 누구나 알기 쉽게 함으로써 골프의 재미를 더하고 실제로 퍼터에서 실수를 줄이게 해 골퍼들이 더 많이 골프장을 찾게 할 수 있다.

도 1은 본 발명의 실시예에 따른 그린정보 제공시스템의 블록도이다.
도 2는 도 1에 나타낸 그린정보 제공시스템을 설명하기 위한 그린의 예시도이다.
도 3은 도 1에 나타낸 전용달말의 구성도이다.
도 4는 본 발명의 실시예에 따른 그린정보 제공방법의 순서도이다.

이하 본 발명의 실시예에 대하여 첨부된 도면을 참고로 그 구성 및 작용을 설명하기로 한다.

도면들 중 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 참조번호 및 부호들로 나타내고 있음에 유의해야 한다. 하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.

또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.

도 1은 본 발명의 실시예에 따른 그린정보 제공시스템의 블록도이고, 도 2는 도 1에 나타낸 그린정보 제공시스템을 설명하기 위한 그린의 예시도이다.

도 2에 도시된 바와 같이, 그린정보 제공시스템은 그린정보 제공서버(10), 다수의 스마트폰(30a,30b,…,30n)과 이를 연결하는 무선 네트워크(20)를 포함하여 구성된다.

그린정보 제공서버(10)는 카메라로 원그린(1)을 촬영하여 그린정보 DB(12)에 저장하고, 저장된 원그린 사진에서 골프도구, 기타 사람 형상 등의 부가 이미지를 제거한 후 영상기반 모델링에 의해 3차원 원그린 정보를 획득하며, 상기 3차원 원그린 정보의 이미지에서 그린에지(6)와 그린주변 벙커(5)와 같은 특징점을 추출하여 3차원 원그린 정보를 DB화해서 골프장별로 그린정보 DB(12)에 저장한다.

또한, 상기 그린정보 제공서버(10)는 전용단말(30a,30b,…,30n)을 이용해 접속한 후 상기 그린정보 DB(12)에 저장된 그린정보 중 특정 골프장의 그린정보를 다운로드 받기를 원하는 경우, 결제정보를 요청하여 미도시된 PG서버를 통해 결제를 수행하고, 결제를 수행한 후에 해당 골프장의 3차원 원그린 정보를 내려받을 수 있도록 한다.

즉, 상기 그린정보 제공서버(10)는 골프장별로 결제를 수행한 후 그린정보를 내려받을 수 있도록 한다.

전용단말(30a,30b,…,30n)은 골프장에서 소유하고 있다가 라운딩 전에 골퍼의 주문에 의해 소정의 비용을 받고 임대하여 라운딩시에 소지하게 된다.

상기 전용단말(30a,30b,…,30n)은 이미지 편집 및 맵핑 프로그램이 탑재되고 카메라 등이 구비되며 결제를 통해 특정 골프장의 3차 원그린 정보를 다운로드 받는다.

또한, 상기 전용단말(30a,30b,…,30n)은 카메라에서 촬영한 홀컵(3)과 골프공(2) 사이의 실제 그린사진에서 골프도구, 기타 사람 형상 등의 부가 이미지를 제거한 후 그린에지(6), 그린주변 벙커(5)와 같은 특징점을 추출하여 골프공(2)과 홀컵(3)을 확인해서 골프공(2)과 홀컵(3)의 위치 정보를 생성한다.

또한, 상기 전용단말(30a,30b,…,30n)은 그린정보 제공서버(10)로부터 다운받은 3차원 그린정보의 이미지와 골퍼가 촬영한 실제 그린사진의 이미지를 서로 비교하여 일치시키되, 특징점을 일치시키는 방식으로 매칭을 수행하여, 상기 골프공(2)과 홀컵(3)의 위치를 상대적 값으로 추출한 후 절대적 위치로 변환하여 3차원 그린정보의 이미지에 나타낸다.

또한, 상기 전용단말(30a,30b,…,30n)은 골프공(2)과 홀컵(3) 사이의 거리 및 기울기와 좌우 경사를 계산하며 또한, 당일의 그린 스피드와 골프공과 홀컵 사이의 거리 및 기울기를 참조하여 보정퍼팅거리를 계산한다.

그리고 상기 전용단말(30a,30b,…,30n)은 상기 3차원 원그린 정보의 전체 이미지를 표시한 다음, 골프공(2)에서 홀컵(3)까지의 3차원 그린정보를 전용단말(30a,30b,…,30n)의 화면에 표시한다.

이때 화면의 일측에 골프공(2)과 홀컵(3) 사이의 거리 및 기울기와 좌우 경사를 나타낼 수도 있고, 골프공(2)에서 홀컵(3)까지의 3차원 그린정보를 표시한 후 상기 거리, 기울기 및 좌우 경사를 차례로 표시할 수도 있다.

여기서 화면에 표시된 기울기가 - 37㎝이면 골프공(2)에서 홀컵(3)까지는 내리막이고 높이가 37㎝이며, 좌우 경사가 R 12㎝이면 골프공(2)의 위치에서 보아 오른쪽이 높고 왼쪽이 낮으며 경사 정도는 홀 오른쪽 12㎝를 가상의 홀로 설정하여 퍼팅해야 한다.

특히 본 발명에서는 보정퍼팅거리를 신개념으로 도입하여 표시한다.

상기 보정퍼팅거리는 일반적인 그린스피드(예를 들어 2.4m/sec)를 기준으로 현재 그린스피드를 감안하여 보정된 거리이다.

예를 들어 현재 그린스피드가 1.5m/sec에서 골프공과 홀컵 사이의 거리가 3m인 경우, 2.4m/sec에서 1m 거리를 보내는 퍼팅거리를 1

(누토)라 정의할 때, (2.4/1.5) X 3 = 4.8 누토가 보정퍼팅거리가 된다.

따라서 4.8

(누토)의 보정퍼팅거리를 보내는 스윙의 크기로 스윙하여야 한다.

마찬가지로 상기 골프공과 홀컵 사이의 기울기(내리막, 오르막)를 감안하여 보정퍼팅거리를 누토 단위로 표시한다.

기울기가 - 37㎝인 경우 보정퍼팅거리는 4.8-0.37 = 4.43 누토가 된다.

도 3은 본 발명의 실시예에 따른 그린정보 제공단말의 블록도이다.

상기 전용단말(30)은 도 3에 도시된 바와 같이 제어부(31), 전원부(32), 입력부(33), 카메라(34), 송수신부(35), 포트부(36), 저장수단(37), 디스플레이부(38)를 포함하여 구성된다.

전원부(32)는 전술한 각 구성부에 전류를 인가하는 수단으로서, 사용자가 ON/OFF 버튼(미도시)을 조작하여 전원 온/오프신호를 출력하면 신호를 수신하여 다른 구성요소들에 전원을 인가 혹은 차단한다.

디스플레이부(38)는 제어부(31)에서 계산하고 매칭하는 등의 처리 결과를 전달받아 텍스트 또는 그래픽으로 디스플레이한다.

상기 디스플레이부(38)는 비용 및 효율적인 측면에서 액정표시 장치(LCD: Liquid Crystal Display)를 이용하는 것이 바람직하고, 이 경우 디스플레이부(38)는 버퍼, 메모리, 레지스터 등을 구비하는 LCD 컨트롤러, LCD 구동 드라이버 및 LCD 스크린을 포함하여 구성된다.

상기 입력부(33)는 사용자(골퍼)가 각종 정보를 입력할 수 있도록 구비되되, 특히 촬영모드, 매칭모드, 표시모드, 계산모드 등을 사용자(골퍼)가 선택하여 입력할 수 있도록 각 모드별로 푸시버튼스위치가 구비될 수도 있고, 하나의 모드선택버튼을 구비하여 이 모드선택버튼을 누름에 따라 각 모드가 순차적으로 선택되게 할 수도 있다.

제어부(31)는 상기 입력부(33)에서 입력되는 명령이나 선택하는 모드에 따라 각기 다른 처리과정을 수행하는 바, 촬영모드를 선택하는 경우에 카메라(34)의 작동을 제어하여 카메라(14)로 실제 그린(1)을 촬영하여 저장수단(37)에 저장할 수 있도록 한다.

상기 카메라(34)는 다수개의 렌즈를 구비하며, 각각의 렌즈를 이동시켜 그 상대거리를 변화시킴으로써 광학적인 초점거리를 조절하도록 구성된다.

상기 전용단말(30)에 의해 정지화상 및 동영상의 촬영이 가능하고, 카메라(34)에 자동초점 조절장치, 접사장치 및 광학 줌 장치 등이 구비된다.

상기 매칭모드를 선택하는 경우에 제어부(31)는 저장수단(37)에 저장된 실제 그린 사진에서 골프도구, 기타 사람 형상 등의 부가 이미지를 제거한 후 그린에지(6)와 그린주변 벙커(5)와 같은 특징점을 추출하여 골프공(2)과 홀컵(3)을 확인해서 골프공(2)과 홀컵(3)의 위치 정보를 생성한다.

또한, 송수신부(35)를 통해 그린정보 제공서버(10)로부터 다운받아 저장수단(37)에 저장한 3차원 원그린 정보의 이미지와 골퍼가 촬영한 실제 그린 사진의 이미지를 서로 비교하여 일치시키되, 각 이미지의 특징점을 일치시키는 방식으로 매칭을 수행하여, 상기 골프공(2)과 홀컵(3)의 위치를 3차원 원그린 정보의 이미지에서 상대적 값으로 추출한 후 절대적 위치로 변환한다.

상기 계산모드를 선택하는 경우에 제어부(31)는 그린 스피드와 골프공(2)과 홀컵(3) 사이의 거리 및 기울기를 참조하여 상기 보정퍼팅거리를 계산한다.

상기 표시모드를 선택하는 경우에 제어부(31)는 3차원 원그린 정보의 전체 이미지를 표시한 다음, 골프공(2)에서 홀컵(3)까지의 3차원 원그린 정보를 디스플레이부(38)에 표시한다.

이때 디스플레이부(38)의 일측에 골프공(2)과 홀컵(3) 사이의 거리 및 기울기와 좌우 경사를 표시하거나, 골프공(2)에서 홀컵(3)까지의 3차원 그린정보를 표시한 후 거리, 기울기 및 좌우 경사를 차례로 표시한다.

상기 저장수단(37)에는 3차원 원그린 정보, 실제 그린 사진, 매칭된 3차원 원그린 정보(홀컵과 골프공의 위치, 거리, 경사도 및 기울기, 보정퍼팅거리 포함) 등이 저장될 뿐만 아니라, 제어부(31)에서 각종 데이터를 처리하기 위한 소프트웨어 등이 탑재된다.

상기 포트부(36)는 USB 저장장치나 컴퓨터 등에 연결되어 3차원 그린정보를 업그레이드할 수 있고, 특히 당일의 그린 스피드를 다운받아 디스플레이부(38)에 출력할 수 있도록 한다.

상기 송수신부(35)는 무선으로 그린정보 제공서버(10)에 접속하여 3차원 원그린 정보를 다운받아 상기 저장수단(37)에 저장할 수 있도록 한다.

도 4는 본 발명의 실시예에 따른 그린정보 제공방법의 순서도이다.

본 발명에 따른 그린정보 제공방법은 크게 그린정보 제공서버의 원 DB 획득 과정(S402-S410), 전용단말의 그린 정보 획득 과정(S412-S418), 매칭 과정(S420) 및 표시 과정(S422)으로 이루어진다.

먼저, 원 DB 획득 과정은 카메라를 이용하여 그린에지(6), 그린주변 벙커(5) 등이 들어가도록 원 그린(1)을 촬영한다(S402).

이때 3차원 이미지를 획득하기 위한 정보인 실사객체(그린)의 깊이(image depth)를 감지하기 위해 평행시각 스테레오방식의 촬영과 교차시각 스테레오방식의 촬영을 수행하거나, 하나의 카메라를 이용하여 원 그린(1)을 촬영한다.

또는 지상라이다(Terrestrial LiDAR : Terrestrial Light Detection And Ranging) 측량장비를 이용하여 레이저 빔을 측량대상(그린)에 방출하고 되돌아 오는 시간, 위상차 등을 계산하여 대상물(그린)의 위치정보와 영상정보를 결합한 3차원 공간정보를 취득한다.

상기 원 그린 촬영시에 원 그린(1)의 주변에 퍼팅그린 전체를 촬영할 수 있으면서 퍼팅그린의 형상과 특징점을 잘 보여줄 수 있는 위치를 정해서 포토존(Photo Zone)(4)을 지정하고, 그 포토존에서 원 그린을 촬영할 수도 있다.

상기 원그린 사진을 컴퓨터 등에 저장하고 이미지 프로그램을 실행하여 홀위치, 골프도구(예를 들어 홀컵의 깃대), 기타 사람 형상 등의 부가 이미지를 제거하여 순수 원그린 이미지를 생성한다(S404).

다음 순수 원그린 이미지를 단순화하고, 단순화된 순수 원그린 이미지를 회전하고, 높낮이를 보정하는 등의 후처리 후 영상기반 모델링에 의해 3차원 원그린 정보를 획득한다(S406).

즉, 2차원 그린 촬영 사진으로부터 실사객체의 깊이를 감지하는 방식으로 3차원을 재구성하는 영상기반 모델링에 의해 3차원으로 이미지화하여 그린정보를 생성한다.

이때 평행시각 스테레오 방식, 또는 교차시각 스테레오 방식에 입각된 최소한의 2개의 이미지에서 입체물의 깊이와 그 깊이에 따른 3차원 이미지를 산출할 수도 있고, 하나의 카메라로부터 획득된 이미지를 별도의 프로세싱 과정을 통해 3차원 이미지화할 수도 있다.

예를 들어 상기 평행시각 스테레오방식은 두 개의 렌즈 투영중심선을 평행하게 두었을 때, 동일 물체점의 영상은 이 물체점에 의해 발생하는 epipolar line(두 렌즈 중심과 영상평면에 의해 형성되는 라인)에 근거하고, 이때, 렌즈 중심상의 거리와 초점거리 및 두 렌즈를 통한 영상평면에서 투영객체 간의 거리에 의해 실사객체의 깊이를 감지할 수 있다.

다음 3차원 원그린 정보에서 그린의 특징을 나타낼 수 있는 그린에지, 그린주변 벙커와 같은 특징점을 추출하여(S408) 3차원 그린정보와 함께 저장한다(S410).

이 특징점 추출은 얼굴인식이나 지문인식 기술을 활용하여, 블록방향 추출, 이진화, 세선화를 수행하고, 최종적으로 특징점 데이터를 추출한다.

이와 같은 단계를 거쳐 특징점을 포함하는 3차원 원그린 정보가 그린정보 제공서버(10)에 구축된 그린정보 DB(12)에 저장된다.

다음 사용자의 그린 정보 획득 과정으로 골퍼가 전용단말(30a,30b,…,30n)을 이용해 무선 네트워크(20)를 통해 그린정보 제공서버(10)에 접속하여 그린정보 DB(12)에 저장된 3차원 원그린 정보 중, 해당 골프장의 3차원 원그린 정보를 다운로드 신청하는 경우 그린정보 제공서버(10)는 결제정보를 요청하여 PG 서버를 통해 결제를 수행한다(S412).

그린정보 제공서버(10)는 결제가 완료된 후 해당 골프장의 3차원 원그린 정보 다운로드를 승인하고, 전용단말(30a,30b,…,30n)은 해당 골프장의 3차원 원그린 정보를 다운로드하여 전용단말(30a,30b,…,30n)에 저장한다(S414).

골퍼가 라운딩시에 골프공(2)이 그린(1)에 위치하면 상기 골퍼는 전용단말(30a,30b,…,30n)에 구비된 카메라(34)를 이용해 그린에지(6), 골프공(2)과 홀컵(3), 그린주변 벙커(5) 등이 나타내도록 실제 그린(1)을 촬영한다(S416).

또한, 실제 그린 사진에서 골프도구, 기타 사람 형상 등의 부가 이미지를 제거한 후 그린에지(6), 그린주변 벙커(5)와 같은 특징점을 추출하여 골프공(2)과 홀컵(3)을 확인해서 골프공(2)과 홀컵(3)의 위치 정보를 생성한다(S418).

다음 매칭 과정으로 3차원 원그린 정보의 이미지와 골퍼가 촬영한 실제 그린 사진의 이미지를 서로 비교하여 일치시키되, 상기 S408단계의 특징점과 S418 단계의 특징점을 일치시키는 방식으로 매칭을 수행하여, 상기 골프공(2)과 홀컵(3)의 위치를 상대적 값으로 추출한 후 절대적 위치로 변환하여 3차원 그린정보의 이미지에 나타낸다(S420).

그리고 표시 과정으로 상기 3차원 원그린 정보의 전체 이미지를 표시한 다음, 골프공(2)에서 홀컵(3)까지의 3차원 원그린 정보를 디스플레이부(38)에 표시한다(S422).

이때 디스플레이부(38)의 일측에 골프공(2)과 홀컵(3) 사이의 거리 및 기울기와 좌우 경사를 나타낼 수도 있고, 골프공(2)에서 홀컵(3)까지의 3차원 그린정보를 표시한 후 상기 거리, 기울기 및 좌우 경사를 차례로 표시할 수도 있다.

또한, 상기 보정퍼팅거리를 신개념으로 도입하여 디스플레이부(38)에 표시할 수도 있다.

10: 그린정보 제공서버 12: 그린정보 DB
20: 무선 네트워크 30: 전용단말
31: 제어부 32: 전원부
33: 입력부 34: 카메라
35: 송수신부 36: 포트부
37: 저장수단 38: 디스플레이부

Claims (12)

1. 평행시각 스테레오방식 또는 교차시각 스테레오 방식으로 촬영하여 그린의 깊이를 감지한 각 골프장의 원그린 촬영 사진을 3차원으로 이미지화하여 생성한 3차원 원그린 정보를 골프장별로 저장하고, 결제에 의해 3차원 원그린 정보를 제공하는 그린정보 제공서버;
   자체 구비된 카메라를 이용해 골프공과 홀컵이 나타나도록 실제 그린을 촬영하여, 실제 그린 사진으로부터 골프공과 홀컵을 확인해서 골프공과 홀컵의 위치 정보를 생성하고, 상기 결제를 통해 무선으로 다운받은 3차원 원그린 정보의 이미지와 실제 그린 사진의 이미지를 서로 일치시켜 상기 골프공과 홀컵의 위치를 3차원 원그린 정보의 이미지에 매칭시키며, 상기 골프공에서 홀컵까지의 3차원 원그린 정보를 골프공에서 홀컵까지의 거리, 기울기 및 좌우 경사도와 함께 표시하는 전용단말;
   을 포함하는 이미지매칭에 의한 그린정보 제공시스템.
2. 제1항에 있어서,
   상기 그린정보 제공서버는 원그린 사진에서 골프도구, 사람 형상의 부가 이미지를 제거한 후 영상기반 모델링에 의해 3차원 원그린 정보를 획득하며, 상기 3차원 원그린 정보의 이미지에서 그린에지, 그린주변 벙커와 같은 특징점을 추출하여 3차원 원그린 정보를 DB화해서 골프장별로 저장하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공시스템.
3. 제2항에 있어서,
   상기 전용단말은 실제 그린 사진에서 골프도구, 사람 형상의 부가 이미지를 제거한 후 그린에지, 그린주변 벙커와 같은 특징점을 추출하여 이미지 매칭시에 특징점을 일치시키는 방식으로 매칭을 수행하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공시스템.
4. 제1항에 있어서,
   일반적인 그린스피드를 기준으로 현재 그린스피드를 감안하여 보정한 거리인 보정퍼팅거리를 전용단말의 화면에 더 표시하되, 상기 골프공에서 홀컵까지의 기울기를 감안하여 상기 보정퍼팅거리를 더욱 보정해서 소정의 가상 단위의 크기로 표시하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공시스템.
5. 삭제
6. 카메라를 이용하여 그린의 깊이를 감지하기 위해 평행시각 스테레오방식의 촬영 또는 교차시각 스테레오방식의 촬영 방식으로 그린에지, 그린주변 벙커 및 그린이 들어가도록 원그린을 촬영하는 제1단계;
   그린정보 제공서버에서 상기 원그린 촬영 사진을 영상기반 모델링에 의해 3차원으로 이미지화하여 3차원 원그린 정보를 생성하고 골프장별로 DB화하는 제2단계;
   전용단말에서 상기 그린정보 제공서버에 접속하여 결제에 의해 해당 골프장의 3차원 원그린 정보를 다운받아 저장하는 제3단계;
   상기 전용단말에 구비된 카메라를 이용해 골프공과 홀컵이 나타나도록 실제 그린을 촬영하는 제4단계;
   상기 전용단말에서 실제 그린 사진으로부터 골프공과 홀컵을 확인해서 골프공과 홀컵의 위치 정보를 생성하는 제5단계;
   상기 전용단말에서 3차원 원그린 정보의 이미지와 실제 그린 사진의 이미지를 서로 비교해서 매칭하는 제6단계; 및
   상기 전용단말에서 골프공에서 홀컵까지의 3차원 원그린 정보를 전용단말의 화면에 표시하는 제7단계;
   를 포함하는 이미지매칭에 의한 그린정보 제공방법.
7. 삭제
8. 제6항에 있어서,
   상기 그린의 주변에 그린 전체를 촬영할 수 있고 그린의 특징점을 잘 보여줄 수 있는 위치를 정해서 1개 이상의 포토존(Photo Zone)을 지정하고, 상기 제1단계와 제4단계에서 상기 포토존에서 원그린이나 실제 그린을 촬영하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공방법.
9. 제6항에 있어서,
   상기 제2단계에서 그린에지, 그린주변 벙커와 같은 특징점을 추출하고, 상기 제5단계에서 그린에지, 그린주변 벙커와 같은 특징점을 추출하여,
   상기 제6단계에서 제2단계의 특징점과 제5단계의 특징점을 일치시키는 방식으로 매칭하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공방법.
10. 제6항에 있어서,
    상기 제7단계에서 골프공에서 홀컵까지의 거리 및 기울기와 좌우 경사도를 전용단말의 화면에 더 표시하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공방법.
11. 제6항 또는 제10항에 있어서,
    상기 제7단계에서 일반적인 그린스피드를 기준으로 현재 그린스피드를 감안하여 보정한 거리인 보정퍼팅거리를 소정의 가상 단위의 크기로 더 표시하는 것을 특징으로 하는 이미지매칭에 의한 그린정보 제공방법.
12. 제11항에 있어서,
    상기 골프공에서 홀컵까지의 기울기를 감안하여 상기 보정퍼팅거리를 보정하여 소정의 가상 단위의 크기로 더 표시하는 것을 특징으로 하는 사진을 이용한 그린정보 제공방법.

Images