KR20130140389A - 영상 제공 장치 및 방법 - Google Patents

영상 제공 장치 및 방법 Download PDF

Info

Publication number
KR20130140389A
KR20130140389A KR1020120063740A KR20120063740A KR20130140389A KR 20130140389 A KR20130140389 A KR 20130140389A KR 1020120063740 A KR1020120063740 A KR 1020120063740A KR 20120063740 A KR20120063740 A KR 20120063740A KR 20130140389 A KR20130140389 A KR 20130140389A
Authority
KR
South Korea
Prior art keywords
real
image data
data
image
time
Prior art date
Application number
KR1020120063740A
Other languages
English (en)
Other versions
KR101613762B1 (ko
Inventor
최성현
Original Assignee
엘에스산전 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘에스산전 주식회사 filed Critical 엘에스산전 주식회사
Priority to KR1020120063740A priority Critical patent/KR101613762B1/ko
Priority to US13/858,759 priority patent/US9137440B2/en
Priority to JP2013090103A priority patent/JP5681231B2/ja
Priority to ES13165933.6T priority patent/ES2633813T3/es
Priority to EP13165933.6A priority patent/EP2675150B1/en
Priority to CN201310236985.3A priority patent/CN103517037A/zh
Publication of KR20130140389A publication Critical patent/KR20130140389A/ko
Application granted granted Critical
Publication of KR101613762B1 publication Critical patent/KR101613762B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Picture Signal Circuits (AREA)
  • Facsimiles In General (AREA)

Abstract

본 발명은 HMI 시스템 상에서 실시간으로 품질이 향상된 영상을 제공하기 위한 영상 제공 장치 및 방법에 관한 것이다.
본 발명의 일 실시 예에 따른 영상 제공 장치는 영상 촬영 장치에서 촬영된 실시간 영상 데이터를 제공하는 영상 제공 장치에 있어서, 상기 실시간 영상 데이터를 수신하는 실시간 영상 데이터 수신부, 상기 실시간 영상 데이터를 영상 처리하는 실시간 영상 데이터 필터부, 상기 영상 처리된 실시간 영상 데이터 중 특정 구간의 실시간 영상 데이터를 저장하는 실시간 영상 데이터 저장부 및 상기 실시간 영상 데이터를 디스플레이하는 화면 표시부를 포함한다.
본 발명에 따르면, HMI 시스템을 통하여 원하는 시점의 영상 데이터를 출력할 수 있다.

Description

영상 제공 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING IMAGE}
본 발명은 HMI 시스템 상에서 실시간으로 품질이 향상된 영상을 제공하기 위한 영상 제공 장치 및 방법에 관한 것이다.
산업 현장의 자동화 설비는 릴레이 등을 사용한 기계적인 장비로 구성된다. 기계적인 장비로 구성된 자동화 설비를 변경하기 위해서는 설비의 내부 회로 배선을 변경하여야 하는 어려움이 있다. 이와 같은 어려움을 극복하기 위하여 PLC(Programmable Logic Controller)를 이용한다.
PLC는 일반적으로 컴퓨터와 같은 역할을 하는데, 설비에서 나오는 신호를 받아서 PLC 내부의 프로그래밍된 내용대로 처리한 후, 처리된 신호를 설비로 출력한다. 즉, PLC의 동작이 원활하다는 것은 공장 내부의 자동화 설비들이 효율적으로 동작하고 있다는 것을 의미한다. 따라서, PLC의 동작에 대한 지속적인 모니터링이 필요하다.
일반적으로 PLC에 연결된 HMI(Human Machine Interface) 시스템이 PLC 모니터링에 이용된다. 또한, HMI 시스템은 미디어 장치를 이용한 산업 현장 모니터링에도 이용될 수 있다. HMI 시스템은 모니터링한 결과를 시각적인 정보로 제공한다.
다만, HMI 시스템은 현재 시점의 모니터링 결과만을 제공하므로 현재 시점 이전의 PLC 동작 또는 산업 현장의 모니터링 결과가 필요한 경우 예컨대, 산업 현장에 예상치 못한 사고가 발생하여 사고 시점 이전의 모니터링 결과가 필요한 경우에는 모니터링 결과 활용에 한계가 있고, 산업 현장의 환경에 따라 화질이 나쁜 영상을 제공하는 문제점이 있다.
본 발명이 해결하고자 하는 과제는 HMI 시스템을 통하여 원하는 시점의 영상 데이터를 출력하는 영상 제공 장치 및 방법을 제공하는 것이다.
또한, 본 발명이 해결하고자 하는 과제는 HMI 시스템을 통하여 품질이 향상된 영상 데이터를 출력하는 영상 제공 장치 및 방법을 제공하는 것이다.
본 발명의 일 실시 예에 따른 영상 제공 장치는 영상 촬영 장치에서 촬영된 실시간 영상 데이터를 제공하는 영상 제공 장치에 있어서, 상기 실시간 영상 데이터를 수신하는 실시간 영상 데이터 수신부, 상기 실시간 영상 데이터를 영상 처리하는 실시간 영상 데이터 필터부, 상기 영상 처리된 실시간 영상 데이터 중 특정 구간의 실시간 영상 데이터를 저장하는 실시간 영상 데이터 저장부 및 상기 실시간 영상 데이터를 디스플레이하는 화면 표시부를 포함한다.
본 발명의 일 실시 예에 따른 영상 제공 방법은 영상 촬영 장치에서 촬영된 실시간 영상 데이터를 제공하는 영상 제공 방법에 있어서, 상기 실시간 영상 데이터를 수신하는 단계, 상기 실시간 영상 데이터의 대비를 향상시키는 단계, 상기 대비가 향상된 실시간 영상 데이터를 보간하는 단계, 상기 보간된 실시간 영상 데이터 중 특정 구간의 실시간 영상 데이터를 저장하는 단계, 상기 저장된 실시간 영상 데이터를 디스플레이하는 단계를 포함한다.
본 발명에 따르면, HMI 시스템을 통하여 원하는 시점의 영상 데이터를 출력할 수 있다.
또한, 본 발명에 따르면, HMI 시스템을 통하여 품질이 향상된 영상 데이터를 출력할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 영상 제공 장치의 블럭 다이어그램이다.
도 2는 본 발명의 일 실시 예에 따른 영상 처리 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 일 실시 예에 따른 영상 저장 방법을 설명하기 위한 흐름도이다.
도 4는 본 발명의 일 실시 예에 따른 영상 처리를 위한 감마 필터링 처리를 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시 예에 따른 영상 처리를 위한 보간 필터링 처리를 설명하기 위한 도면이다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
도 1은 본 발명의 일 실시 예에 따른 영상 제공 장치의 블럭 다이어그램이다.
도 1을 참조하면, 본 발명의 일 실시 예에 따른 영상 제공 장치(100)는 데이터 수신부(101), 데이터 처리부(107), 화면 표시부(113), 실시간 PLC 데이터 통신부(119), 영상 데이터 수신부(121), PLC 데이터 및 영상 데이터 편집부(123)를 포함한다. HMI 시스템은 영상 촬영 장치(110)에 의하여 촬영된 영상과 영상 저장 장치(140)로부터 전송된 영상을 영상 제공 장치(100)를 이용하여 사용자에게 제공할 수 있다. 또한, HMI 시스템은 PLC와의 통신을 통해 PLC에 연결된 부하의 동작을 감시할 수 있다.
데이터 수신부(101)는 실시간 영상 데이터 수신부(103), 사용자 입력 데이터 수신부(105)를 포함한다.
실시간 영상 데이터 수신부(103)는 영상 촬영 장치(110)가 실시간으로 촬영한 영상의 실시간 영상 데이터를 취득한다.
사용자 입력 데이터 수신부(105)는 사용자 입력 장치(120)에 입력된 사용자 입력 데이터를 취득한다. 사용자 입력 데이터는 영상 처리 요청 정보를 포함한다. 영상 처리 요청 정보는 예컨대, 영상의 밝기 조절 요청 정보, 영상의 확대 또는 축소 요청 정보, 특정 시점의 영상 표시 요청 정보, 녹화 요청 정보 등을 포함할 수 있으며, 이에 한정되는 것은 아니다. 영상 제공 장치(100)는 취득된 사용자 입력 데이터에 따라 데이터 처리부(107)를 통하여 화면 표시부(113)에 표시될 영상을 처리할 수 있다.
데이터 처리부(107)는 데이터 필터부(109), 데이터 저장부(111)를 포함한다.
데이터 필터부(109)는 가우시안 필터, 영상 반전부, 감마 필터, 양선형 보간 필터(미도시됨)를 포함할 수 있다. 데이터 필터부(109)는 가우시안 필터, 영상 반전부, 감마 필터를 이용하여 사용자 입력 데이터에 포함된 영상 밝기 조절 요청 정보에 따라 영상을 처리할 수 있다. 모니터링하는 현장의 밝기가 너무 밝거나 너무 어두우면, 모니터링의 대상이 되는 객체를 식별하기 어렵다. 이는 영상의 밝기 대비가 낮기 때문에 상대적으로 객체를 구분하기 어려운 것이다. 이때, 저대비 구간의 대비를 높이는 영상 처리 필터를 포함하는 데이터 필터부(109)가 실시간 영상 데이터를 처리하면, 실시간 영상의 전체 대비를 높일 수 있으므로 밝기 대비가 낮은 현장에서도 모니터링의 대상이 되는 객체를 식별할 수 있다.
또한, 데이터 필터부(109)는 양선형 보간 필터를 이용하여 사용자 입력 데이터에 포함된 영상 크기 요청 정보에 따라 영상을 처리할 수 있다. 영상 크기 요청 정보는 예컨대, 취득한 영상의 특정 부분 확대를 요청하는 정보 또는 보다 넓은 현장을 모니터링하기 위해 전체 영상 축소를 요청하는 정보를 포함할 수 있다. 양선형 보간 필터는 이웃한 픽셀의 거리에 따라 선형 가중치를 적용하여 새로운 픽셀 값을 생성하는 필터이다. 양선형 보간 필터를 포함하는 데이터 필터부(109)가 실시간 영상 데이터를 처리하면 예컨대, 영상의 특정 부분 확대시 빈 픽셀에 새로운 픽셀 값이 생성되므로, 보다 매끄럽고 선명한 영상을 제공할 수 있다. 또한, 데이터 필터부(109)는 영상 데이터 수신부(221)가 수신한 영상 데이터를 전달받고, 사용자 입력 데이터에 포함된 영상 밝기 조절 요청 정보 또는 영상 크기 조절 요청 정보에 따라 영상을 처리할 수도 있다.
데이터 저장부(111)는 제1 버퍼, 제2 버퍼, 메모리(미도시됨)를 포함한다. 데이터 저장부(111)는 실시간 영상 데이터의 프레임을 순차적으로 제1 버퍼에 임시 저장한 후, 사용자 입력 데이터에 포함된 특정 시점의 영상 표시 요청 정보를 만족하는 프레임을 선택적으로 제2 버퍼에 저장할 수 있다. 또한, 데이터 저장부(111)는 사용자 입력 데이터에 포함된 녹화 요청 정보의 대상이 되는 프레임을 선택적으로 메모리에 저장할 수 있다. 메모리에 저장된 실시간 영상 데이터 프레임은 현재 시점을 기준으로 과거에 촬영된 영상 데이터 프레임을 포함한다. 따라서, 본 발명의 일 실시 예에 따른 영상 제공 장치(100)를 사용한 경우, 현장에서 예상치 못한 사고가 발생하더라도 데이터 저장부(111)에 저장된 영상 데이터가 제공되므로, 사고 발생 이전의 영상을 얻을 수 있다.
실시간 PLC 데이터 통신부(119)는 PLC(130)로부터 실시간 PCL 데이터를 수신한다. 실시간 PLC 데이터는 예컨대, PLC(130)에 연결된 부하의 동작에 관한 데이터를 포함할 수 있다.
영상 데이터 수신부(121)는 실시간 영상 데이터 수신부(103)가 수신하는 실시간 영상 데이터를 제외한 영상 데이터를 수신한다. 영상 데이터 수신부(121)는 영상 저장 장치(140)에 저장된 영상 데이터를 취득할 수 있다.
PLC 데이터 및 영상 데이터 편집부(123)는 실시간 PLC 데이터 통신부(119)가 수신한 실시간 PLC 데이터, 영상 데이터 수신부(121)가 수신한 영상 데이터를 사용자 입력 정보에 따라 편집한다.
화면 표시부(113)는 실시간 영상 표시부(115), 영상 표시부(117)를 포함할 수 있다. 실시간 영상 표시부(115)는 데이터 처리부(107)가 처리한 실시간 영상 데이터를 화면에 표시한다. 영상 표시부(117)는 실시간 PLC 데이터 통신부(119)가 수신한 실시간 PLC 데이터, 영상 데이터 수신부(121)가 수신한 영상 데이터를 화면에 표시한다. 이때, 영상 표시부(117)는 PLC 데이터 및 영상 데이터 편집부(123)가 편집한 데이터를 화면에 표시할 수 있다.
도 2는 본 발명의 일 실시 예에 따른 영상 처리 방법을 설명하기 위한 흐름도이다.
도 2를 참조하면, 데이터 필터부(109)는 실시간 영상 데이터 수신부(103)가 취득한 영상을 사용자 입력 장치(120)로부터 취득한 사용자 입력 데이터에 따라 필터링한다. 본 발명의 일 실시 예에 따르면, 데이터 필터부(109)는 실시간 영상 데이터의 품질을 향상시키기 위하여 실시간 영상 데이터를 가우시안 필터링 처리, 반전 처리, 감마 필터링 처리할 수 있다. 또한, 데이터 필터부(109)는 영상 크기 조절과 무관하게 일정한 화질을 유지하기 위하여 실시간 영상 데이터를 양선형 보간 필터링 처리할 수 있다.
실시간 영상 데이터 수신부(103)는 영상 촬영 장치(110)가 촬영한 실시간 영상을 취득한다(S201).
이어서, 데이터 필터부(109)는 취득된 실시간 영상 데이터를 가우시안 필터링(gaussian filtering) 처리한다(S203). 가우시안 필터링 처리를 통해 데이터 필터부(109)는 실시간 영상 데이터를 블러링(blurring)할 수 있다. 예를 들면, 데이터 필터부(109)는 마스크 사이즈를 9×9로 하여 실시간 영상 데이터를 가우시안 필터링 처리할 수 있다. 또한, 데이터 필터부(109)는 영상 데이터 수신부(221)가 수신한 영상 데이터를 가우시안 필터링 처리할 수 있다. 이하, 영상 데이터는 실시간 영상 데이터가 처리되는 과정과 동일하게 처리될 수 있으며, 영상 데이터에 대한 설명을 생략한다.
이어서, 데이터 필터부(109)는 가우시안 필터링 처리된 실시간 영상 데이터를 반전 처리한다(S205).
이어서, 데이터 필터부(109)는 반전 처리된 실시간 영상 데이터를 감마 필터링(gamma filtering) 처리한다(S207). 이때, 데이터 필터부(109)는 예컨대, 도면 부호 S201 단계에서 취득된 실시간 영상 데이터와 도면 부호 S205에서 반전 처리된 실시간 영상 데이터를 이용하여 감마 필터링을 수행할 수 있다. 수학식 1은 취득된 실시간 영상의 픽셀 값(Iin(x,y))과 반전 처리된 실시간 영상의 픽셀 값(mask)을 이용하여 감마 필터링 처리된 실시간 영상의 픽셀 값(Iout(x,y))을 구하기 위한 식이다.
Figure pat00001
감마 필터의 전도 함수(total derivatives)는 도 4를 참조한다. 감마 필터링 처리된 실시간 영상은 감마 필터링 처리 전의 실시간 영상보다 밝은 부분은 보다 어둡게, 어두운 부분은 보다 밝게 처리된다. 이와 같이, 실시간 영상 데이터에 감마 필터링 처리가 수행되면, 작업 환경이 전체적으로 밝거나 어두운 경우에도, 관찰 대상의 색을 주위 환경의 색과 구별할 수 있다.
사용자 입력 데이터 수신부(105)는 사용자 입력 장치(120)부터 사용자 입력 데이터를 취득한다.
이어서, 데이터 필터부(109)는 취득된 사용자 입력 데이터로부터 감마 필터링 처리된 실시간 영상에 대한 확대 요청 유무를 판단한다(S209).
사용자 입력 데이터에 실시간 영상에 대한 확대 요청이 있는 경우, 데이터 필터부(109)는 필터링 처리된 실시간 영상 데이터를 양선형 보간 필터링(bilinear interpolation filtering) 처리한다(S211). 수학식 2는 양선형 보간 연산을 수행하기 위한 식이다.
Figure pat00002
(x1,y1),(x2,y2),(x3,y3),(x4,y4)는 이미 알고 있는 픽셀 좌표, Iin'(Q11),Iin'(Q12),Iin'(Q21),Iin'(Q22)는 이미 알고 있는 픽셀 좌표의 픽셀 값, Iout(x,y)는 확대될 좌표의 픽셀 값을 의미하고, 수학식 2를 통하여 영상 확대시, 확대될 좌표의 픽셀 값을 유추할 수 있다. 양선형 보간법 좌표계는 도 5를 참조한다. 이와 같이, 실시간 영상 데이터에 양선형 보간 필터링 처리가 수행되면, 크기 조절 과정에서 발생하는 영상 왜곡 현상이 감소된다.
사용자 입력 데이터에 실시간 영상에 대한 확대 요청이 없는 경우, 데이터 필터부(109)는 필터링을 종료한다.
도 3은 본 발명의 일 실시 예에 따른 영상 저장 방법을 설명하기 위한 흐름도이다.
도 3을 참조하면, 데이터 저장부(111)는 데이터 필터부(109)가 필터링한 영상 중 특정 시점에 촬영된 영상을 저장한다. 본 발명의 일 실시 예에 따르면, 데이터 저장부(111)는 현재 시각을 기준으로 이전에 촬영된 과거 영상을 순차적으로 저장하고, 순차적으로 저장된 과거 영상 중 현재 시각을 기준으로 1분 이내에 촬영된 과거 영상만을 선택적으로 저장하며, 선택적으로 저장된 과거 영상 중 사용자 입력 데이터에 따른 영상 녹화 요청이 있는 과거 영상만을 선택적으로 저장할 수 있다.
데이터 저장부(111)는 데이터 필터부(109)에서 필터링된 실시간 영상 데이터를 취득한다(S301). 이때, 데이터 저장부(111)는 필터링된 실시간 영상 데이터를 프레임별로 수신할 수 있다.
이어서, 데이터 저장부(111)는 취득한 프레임을 제1 버퍼에 저장한다(S303). 제1 버퍼는 수신한 실시간 영상 데이터 프레임 중 현재 시점 이전에 촬영된 영상이 삭제되기 전에 임시로 저장되는 공간이다.
이어서, 데이터 저장부(111)는 제1 버퍼에 저장된 프레임이 촬영된 시점이 특정 기간 이내인지 여부를 판단한다(S305). 특정 기간은 HMI 시스템의 목적에 따라 사용자가 지정한 과거의 특정 시점뿐만 아니라, 과거의 특정 기간을 포함할 수 있다. 특정 기간에 대한 정보는 사용자 입력 데이터에 포함될 수 있다. 예컨대, 데이터 저장부(111)는 제1 버퍼에 저장된 프레임이 현재 시각을 기준으로 1분 이내에 촬영된 프레임인지 판단한다.
이때, 제1 버퍼에 저장된 프레임이 촬영된 시점이 특정 기간 이내가 아닌 경우, 데이터 저장부(111)는 해당 프레임을 삭제한다(S307). 해당 프레임이 삭제되면, 데이터 저장부(111)는 새로 수신한 프레임을 제1 버퍼에 저장한다(S303).
반면에, 제1 버퍼에 저장된 프레임이 촬영된 시점이 특정 기간 이내인 경우, 데이터 저장부(111)는 제2 버퍼에 해당 프레임을 저장한다. 다만, 제2 버퍼에 프레임 저장 영역이 부족한 경우, 데이터 저장부(111)는 제2 버퍼에서 예컨대, 가장 오래된 프레임을 삭제할 수 있으며(S309), 제2 버퍼에 프레임 저장 영역은 다른 방법에 의하여 확보될 수 있다. 이어서, 데이터 저장부(111)는 제2 버퍼에 해당 프레임을 저장한다(S311).
이어서, 데이터 저장부(111)는 사용자 입력 데이터에 실시간 영상 데이터 녹화 요청 정보가 포함되어 있는지 여부를 판단한다(S313).
사용자 입력 데이터에 실시간 영상 데이터 녹화 요청 정보가 포함되어 있는 경우, 데이터 저장부(111)는 메모리에 제2 버퍼에 저장된 프레임을 저장한다(S315).
반면, 사용자 입력 데이터에 실시간 영상 데이터 녹화 요청 정보가 포함되어 있지 않은 경우, 데이터 저장부(111)는 새로 수신한 프레임을 제1 버퍼에 저장한다(S303).
도 4는 본 발명의 일 실시 예에 따른 영상 처리를 위한 감마 필터링 처리를 설명하기 위한 도면이다.
도 4를 참조하면, 도면 부호 S207 단계에서 수행되는 감마 필터링 처리에 의한 감마 필터의 전도 함수 그래프로서, x축은 입력 데이터, y축은 출력 데이터를 의미한다. 그래프에서 직선(401)이 감마 필터링 처리 전의 원본 영상 데이터라면, 곡선(402)은 감마 필터링 처리된 영상 데이터이다. 감마 필터링 처리 결과, 영상 데이터(402)의 어두운 부분은 보다 밝게, 밝은 부분은 보다 어둡게 표현될 수 있다.
도 5는 본 발명의 일 실시 예에 따른 영상 처리를 위한 보간 필터링 처리를 설명하기 위한 도면이다.
도 5를 참조하면, 양선형 보간법 좌표계이다. Q11,Q12,Q21,Q22는 이미 알고 있는 좌표, P는 새로이 생성된 좌표를 의미한다. 양선형 보간법에 의해 생성되는 픽셀은 4개의 가장 가까운 픽셀들에 가중치를 곱한 값들의 합이며, 가중치는 선형적인 방법으로 결정되며, 각각의 픽셀과의 거리에 반비례한다.
이상에서 설명한 본 발명의 실시 예는 장치 및 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시 예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있으며, 이러한 구현은 앞서 설명한 실시 예의 기재로부터 본 발명이 속하는 기술분야의 전문가라면 쉽게 구현할 수 있는 것이다.
이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
100: 영상 제공 장치 110: 영상 촬영 장치
120: 사용자 입력 장치 101: 데이터 수신부
103: 실시간 영상 데이터 수신부 105: 사용자 입력 데이터 수신부
107: 데이터 처리부 109: 데이터 필터부
111: 데이터 저장부 113: 화면 표시부

Claims (7)

  1. 영상 촬영 장치에서 촬영된 실시간 영상 데이터를 제공하는 영상 제공 장치에 있어서,
    상기 실시간 영상 데이터를 수신하는 실시간 영상 데이터 수신부;
    상기 실시간 영상 데이터를 영상 처리하는 실시간 영상 데이터 필터부;
    상기 영상 처리된 실시간 영상 데이터 중 특정 구간의 실시간 영상 데이터를 저장하는 실시간 영상 데이터 저장부; 및
    상기 실시간 영상 데이터를 디스플레이하는 화면 표시부를 포함하는
    영상 제공 장치.
  2. 제1 항에 있어서,
    사용자 입력 데이터를 수신하는 사용자 입력 데이터 수신부를 더 포함하고,
    상기 사용자 입력 데이터는
    상기 실시간 영상 데이터의 영상 처리에 관한 정보, 상기 실시간 영상 데이터의 특정 구간에 관한 정보 중 적어도 하나를 포함하는
    영상 제공 장치.
  3. 제1 항에 있어서,
    PLC와 통신하여 PLC 데이터를 수신하는 실시간 PLC 데이터 통신부; 및
    영상 저장 장치로부터 전송된 영상 데이터를 수신하는 영상 데이터 수신부를 더 포함하는
    영상 제공 장치.
  4. 제3 항에 있어서,
    상기 PLC 데이터, 상기 영상 데이터 중 적어도 하나를 영상 처리하는 실시간 PLC 데이터 및 영상 데이터 편집부를 더 포함하는
    영상 제공 장치.
  5. 제3 항에 있어서,
    화면 표시부는
    상기 실시간 영상 데이터 저장부에 저장된 실시간 영상 데이터를 표시하는 실시간 영상 표시부; 및
    상기 PLC 데이터, 상기 영상 데이터, 상기 영상 처리된 PLC 데이터, 상기 영상 처리된 영상 데이터 중 적어도 하나를 표시하는 영상 표시부를 포함하는
    영상 제공 장치.
  6. 영상 촬영 장치에서 촬영된 실시간 영상 데이터를 제공하는 영상 제공 방법에 있어서,
    상기 실시간 영상 데이터를 수신하는 단계;
    상기 실시간 영상 데이터의 대비를 향상시키는 단계;
    상기 대비가 향상된 실시간 영상 데이터를 보간하는 단계;
    상기 보간된 실시간 영상 데이터 중 특정 구간의 실시간 영상 데이터를 저장하는 단계;
    상기 저장된 실시간 영상 데이터를 디스플레이하는 단계를 포함하는
    영상 제공 방법.
  7. 제6 항에 있어서,
    상기 특정 구간의 실시간 영상 데이터를 저장하는 단계는
    현재 시점을 기준으로 과거 구간의 실시간 영상 데이터를 저장하는 단계를 포함하는
    영상 제공 방법.
KR1020120063740A 2012-06-14 2012-06-14 영상 제공 장치 및 방법 KR101613762B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020120063740A KR101613762B1 (ko) 2012-06-14 2012-06-14 영상 제공 장치 및 방법
US13/858,759 US9137440B2 (en) 2012-06-14 2013-04-08 Apparatus for providing real-time image data
JP2013090103A JP5681231B2 (ja) 2012-06-14 2013-04-23 映像提供装置及び方法
ES13165933.6T ES2633813T3 (es) 2012-06-14 2013-04-30 Aparato y procedimiento para proporcionar imagen
EP13165933.6A EP2675150B1 (en) 2012-06-14 2013-04-30 Apparatus and method for providing image
CN201310236985.3A CN103517037A (zh) 2012-06-14 2013-06-14 用于提供图像的装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120063740A KR101613762B1 (ko) 2012-06-14 2012-06-14 영상 제공 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20130140389A true KR20130140389A (ko) 2013-12-24
KR101613762B1 KR101613762B1 (ko) 2016-04-19

Family

ID=48576712

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120063740A KR101613762B1 (ko) 2012-06-14 2012-06-14 영상 제공 장치 및 방법

Country Status (6)

Country Link
US (1) US9137440B2 (ko)
EP (1) EP2675150B1 (ko)
JP (1) JP5681231B2 (ko)
KR (1) KR101613762B1 (ko)
CN (1) CN103517037A (ko)
ES (1) ES2633813T3 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102054453B1 (ko) * 2019-04-03 2019-12-10 주식회사 포바이포 화질 개선된 인공지능 기반 영상 출력 방법

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104104872B (zh) * 2014-07-16 2016-07-06 努比亚技术有限公司 物体运动轨迹图像的合成方法及装置
KR101975046B1 (ko) * 2017-09-08 2019-08-23 동희오토주식회사 스마트 모니터링 및 도장 시스템
US10861148B2 (en) 2018-04-30 2020-12-08 General Electric Company Systems and methods for improved component inspection
CN112019762B (zh) * 2020-07-23 2022-06-21 深圳市芯睿视科技有限公司 视频处理方法及装置、存储介质及电子设备
CN117616740A (zh) 2022-06-21 2024-02-27 东芝三菱电机产业系统株式会社 Scada网页hmi系统

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11331766A (ja) 1998-05-15 1999-11-30 Omron Corp 設備ロギング装置
JP2000050238A (ja) 1998-07-27 2000-02-18 Matsushita Electric Ind Co Ltd 監視カメラ装置
JP3532781B2 (ja) 1999-02-12 2004-05-31 株式会社メガチップス 画像入力装置の画像処理回路
JP2000242327A (ja) 1999-02-18 2000-09-08 Omron Corp ロギング装置
JP2000250621A (ja) 1999-03-03 2000-09-14 Omron Corp ロギング装置
JP2001125612A (ja) 1999-10-25 2001-05-11 Omron Corp 設備ロギング装置
US7954055B2 (en) * 2001-03-23 2011-05-31 Arizan Corporation Systems and methods for content delivery over a wireless communication medium to a portable computing device
US9092841B2 (en) * 2004-06-09 2015-07-28 Cognex Technology And Investment Llc Method and apparatus for visual detection and inspection of objects
JP2004236020A (ja) 2003-01-30 2004-08-19 Eisuke Fujii 撮影装置、撮影システム、遠隔監視システムおよびプログラム
JP2005151294A (ja) * 2003-11-18 2005-06-09 Denso Wave Inc ビデオ画像記録装置
JP3748446B2 (ja) 2003-12-19 2006-02-22 株式会社メガチップス 画像入力装置の画像処理回路
US20050276445A1 (en) * 2004-06-09 2005-12-15 Silver William M Method and apparatus for automatic visual detection, recording, and retrieval of events
JP4979969B2 (ja) * 2006-04-03 2012-07-18 三星電子株式会社 撮像装置および撮像方法
JP4860488B2 (ja) 2007-01-04 2012-01-25 ルネサスエレクトロニクス株式会社 画像表示制御装置
JP5241410B2 (ja) * 2008-09-29 2013-07-17 株式会社キーエンス 画像処理装置、画像処理方法及びコンピュータプログラム
JP2010130097A (ja) 2008-11-25 2010-06-10 Canon Inc 撮像装置、その制御方法及びプログラム
JP2011155421A (ja) 2010-01-27 2011-08-11 Sohshin Corp 監視カメラ
JP5484166B2 (ja) 2010-04-14 2014-05-07 キヤノン株式会社 撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102054453B1 (ko) * 2019-04-03 2019-12-10 주식회사 포바이포 화질 개선된 인공지능 기반 영상 출력 방법

Also Published As

Publication number Publication date
ES2633813T3 (es) 2017-09-25
US9137440B2 (en) 2015-09-15
KR101613762B1 (ko) 2016-04-19
US20130335597A1 (en) 2013-12-19
JP5681231B2 (ja) 2015-03-04
CN103517037A (zh) 2014-01-15
EP2675150A3 (en) 2015-05-27
JP2014003590A (ja) 2014-01-09
EP2675150A2 (en) 2013-12-18
EP2675150B1 (en) 2017-04-26

Similar Documents

Publication Publication Date Title
KR101613762B1 (ko) 영상 제공 장치 및 방법
JP6525707B2 (ja) 画像処理装置、その制御方法及びプログラム、並びに撮像装置
US20180359449A1 (en) Monitoring device, monitoring system, and monitoring method
JP2014212462A (ja) 撮像装置
TW201709720A (zh) 用於產生經圖像穩定化之視訊的方法與攝像機
US9445073B2 (en) Image processing methods and systems in accordance with depth information
US9451165B2 (en) Image processing apparatus
JP5455728B2 (ja) 撮像装置、画像処理装置、及び画像処理方法
JP2016144049A (ja) 画像処理装置、画像処理方法、およびプログラム
CN112508820A (zh) 图像处理方法、装置及电子设备
JP6520920B2 (ja) 画像処理装置
JP2015002529A (ja) 画像処理装置および画像処理方法
KR102517104B1 (ko) 가상 현실 시스템에서 이미지 처리 방법 및 장치
JP2015177528A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2016032125A (ja) 画像処理装置、画像処理プログラム、電子機器及び画像処理方法
EP4055814B1 (en) A system for performing image motion compensation
JP2016111484A (ja) 画像処理装置、画像処理方法、およびプログラム
JP2018041201A (ja) 表示制御プログラム、表示制御方法および情報処理装置
JP2016192755A (ja) 画像信号処理装置、画像信号処理方法、及びプログラム
JP2016225960A (ja) 撮像装置および撮像方法
DE102022133422A1 (de) Informationsverarbeitungsvorrichtung, steuerungsverfahren einer informationsverarbeitungsvorrichtung und programm
CN114302129A (zh) 一种基于ar的视力辅助方法和系统
JP2022165815A (ja) 画像処理装置、画像処理方法
JP2021036647A (ja) 画像処理装置、画像処理方法およびプログラム
CN116055702A (zh) 头戴设备的控制方法、装置、头戴设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190401

Year of fee payment: 4