KR101005254B1 - 국가 연구개발 기획·평가·종료·성과관리를 위한 연구개발 관리 및 고객서비스 실현 시스템 - Google Patents

Abstract

산업원천기술개발사업과 같은 국가연구개발과제에 있어서, 표준화된 경영시스템 프로세스와 업무흐름도 매뉴얼에 따라 평가위원 선정에서부터, 평가 업무 계획, 평가 결과 통보 등 일련의 과정을 자동으로 수행하는 관리 시스템 및 방법이 제공된다.
연구과제 평가를 자동으로 관리하는 시스템에 있어서, 상기 관리 시스템은, 평가위원 풀 데이터베이스, 평가 관리 데이터베이스, 평가되어야 할 연구과제 보고서 파일이 피평가자 단말기로부터 수신되는 경우에 상기 연구과제의 특성 정보를 이용하여 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출부, 및 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 평가 계획 파일을 생성하여 상기 평가 관리 데이터베이스에 저장하고 상기 평가 계획 파일을 상기 평가위원의 단말기, 상기 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송하는 평가 계획 파일 생성부를 포함한다.
한편, 상기 관리시스템에 의해, 고객 만족도의 조사를 평가 결과 통보에 연동됨으로써 즉각적이고 실효적인 고객 만족도가 피드백 되어 데이터베이스화가 수행되며, 나아가 상기 피드백 중 정량적인 부분은 이를 평가업무 관리 조직의 개별 또는 팀 별 MBO에 자동으로 반영하며, 정성적인 부분은 즉시 시정, 제도 개선 등의 조치가 가능하도록 데이터베이스화 될 수 있다.

Description

국가 연구개발 기획·평가·종료·성과관리를 위한 연구개발 관리 및 고객서비스 실현 시스템{SYSTEM FOR IMPLEMENTING RESERCH AND DEVELOPMENT MANAGEMENT AND CLIENT SERVICE TO NATIONAL RESERCH AND DEVELOPMENT PLAN, EVALUATION, COMPLETION AND PERFORMANCE MANAGEMENT}

연구과제 제안들에 대한 선정 평가, 선정된 연구과제의 진행 정도에 따른 각 단계별 중간 평가 및 최종 평가 등에 있어서, 업무를 자동화하고 데이터베이스화 하는 관리 시스템 및 방법에 연관된다.
특히, 산업원천기술개발사업 등의 국가연구개발과제에 있어서, 표준화된 경영시스템 프로세스와 업무흐름도 매뉴얼에 따라 평가 업무를 자동으로 관리하는 관리 시스템 및 방법에 연관된다.

한국산업기술평가관리원(Korea Evaluation Institute of Industrial Technology, 이하 "KEIT"라고 한다)은 국가 연구개발 과제를 기획하고 평가하는 지식경제부 산하 기관으로서, 2009년 5월 4일, 공공기관선진화 정책에 따라 6 개 연구개발(Research and Development, 이하에서는 "R&D"라고도 한다) 평가기관들을 통합함으로써 새롭게 출범하였다.
KEIT 출범 이후 100일 동안 'KEIT 중장기 발전전략' 등이 수립되고 다양한 프로세스가 구축됨으로써, 서로 다른 조직의 업무 방식 차이가 극복되고 R&D 지원 업무의 효율성이 높아지는 한편, 전문성이 크게 강화되었다.
이는, KEIT가 막대한 국가 R&D 예산을 평가·관리하는 공공기관으로서, 외부적으로 세계 수준의 공정성과 전문성을 갖춘 평가관리 서비스를 제공하고, 내부적으로는 인적·물적 자원을 효율적으로 분배하는 효과적 운영이 절실히 요구되기 때문이다.
특히, 6개 기관의 통합으로써 새롭게 구성된 조직 내에서는 임직원간의 업무추진 방식이 서로 다를 수 있어, 평가과정과 평가결과의 일관성을 확보하고, 정부 R&D 평가관리의 책임과 권한을 명확히 하며, 중복되거나 누락되는 업무를 최소화시키는 한편, 인적자원의 효율화를 이룬다는 측면에서도 표준화된 업무프로세스의 확립과 이행이 절실하였다.
이에, KEIT는 투명하고 전문적인 산업기술 기획평가관리를 통한 국가기술 경쟁력 강화라는 과제(Mission) 하에서, 기술강국의 미래를 창조하는 산업기술 평가기관이라는 비전을 가지고, 구체적 핵심 가치인 I-TECH 즉, 혁신(Innovation)·신뢰(Trust)·전문(Expertise)·투명(Clearness)·열정(Heart)을 실천하기 위해, 국제표준(ISO)에 기반한 품질경영시스템을 적용하여, 경영시스템 프로세스와 업무흐름도 매뉴얼을 개발하기에 이르렀다.
종래에는 KEIT와 같이 국가 산업원천기술개발사업 등의 연구개발 과제 평가를 수행하는 기관들을 비롯하여 대다수의 기관들이, 국제 표준을 따르는 표준화된 경영시스템 프로세스와 업무흐름도 프로세스를 갖추고 있는 사례가 드물었으며, 특히 "고객 만족" 여부를 실질적으로 피드백(feedback)하는 시스템이 갖추어지지 못했다.
물론 형식적으로는 고객 만족을 위한 노력은 있어왔지만, 과연 얼마나 직접적이고 실질적으로 고객의 needs를 반영할 수 있는 시스템을 갖추어 왔던가, 얼마나 객관적이고 즉각적으로 고객의 만족도가 피드백 될 수 있는 시스템이 구현되어 왔는지에 대한 답은 회의적으로 남아 있었다.
따라서, 국가산업원천기술개발사업과 같은 연구개발 과제 평가 업무에 있어서 표준화된 업무 프로세스를 자동으로 수행하고, 특히 고객 만족도를 즉각적이고 객관적으로 피드백 받아 데이터로 누적하고, 이중 정량적인 데이터는 KEIT와 같은 서비스 제공 주체의 부서별/개인별 인사 관리 요소, 이를테면 목표관리(Management By Objectives, 이하에서는 "MBO"라고 한다) 에도 자동으로 반영할 수 있는 시스템의 필요성이 대두된다.
또한, 상기 피드백 받은 고객 만족도 데이터 중 정성적인 데이터는, 사안에 따라 담당 부서/담당자가 즉각 시정하거나, 추후 제도 개선(월별, 분기별, 연도별 등)에 활용하거나, 및/또는 사례 수집을 할 수 있으므로, 이러한 시스템의 필요성은 더욱 크다 하겠다.
그러나, 아직까지는 국가과제 평가 업무를 수행하는 주체들뿐만 아니라, 공공 서비스를 제공하는 대부분의 주체 중에, 이러한 시스템의 체계를 확립한 곳이 없었다.
KEIT는 이러한 시스템을 경영시스템 프로세스와 업무흐름도 매뉴얼 형태로 체계화하여, 2009년 12월 7일에는 국제 표준인 ISO9001 인증을 받았으며, 이를 자동화한 시스템을 기획하고 구체화하여, 평가 관리 업무의 자동 관리 시스템을 구축하려는 노력을 계속하고 있다.

산업원천기술개발사업과 같은 국가연구개발과제에 있어서, 표준화된 경영시스템 프로세스와 업무흐름도 매뉴얼에 따라 평가위원 선정에서부터, 평가 업무 계획, 평가 결과 통보 등 일련의 과정을 자동으로 수행하는 관리 시스템 및 방법이 제공된다.
또한, 고객 만족도의 조사를 평가 결과 통보에 연동시킴으로써, 즉각적이고 실효적인 고객 만족도의 피드백과 데이터베이스화를 수행하고, 나아가 이를 평가업무 관리 조직의 부서별/개인별 인사 관리 시스템, 이를테면 MBO에 자동으로 반영하는 관리 시스템 및 방법이 제공된다.

삭제

삭제

삭제

본 발명의 일측에 따르면, 평가위원 풀 데이터베이스, 평가 관리 데이터베이스, 평가되어야 할 연구과제 보고서 파일이 피평가자 단말기로부터 수신되는 경우, 상기 연구과제의 특성 정보를 이용하여 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출부, 및 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 평가 계획 파일을 생성하여 상기 평가 관리 데이터베이스에 저장하고, 상기 평가 계획 파일을 상기 평가위원의 단말기, 상기 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송하는 평가 계획 파일 생성부를 포함하는, 관리 시스템이 제공된다.

삭제

삭제

삭제

삭제

삭제

삭제

삭제

본 발명의 일 실시예에 따르면, 상기 관리 시스템은 고객 만족 데이터베이스, 상기 평가위원의 단말기로부터 상기 연구과제에 대한 평가 결과 데이터를 수신하고, 상기 피평가자 단말기에 고객 만족도 조사의 입력 요청 메시지를 전송하고 상기 피평가자 단말기로부터 고객 만족도 조사 응답 데이터를 수신하는 고객 만족도 조사 처리부, 및 상기 고객 만족도 조사 응답 데이터의 수신이 완료되는 경우 상기 고객 만족도 조사 응답 데이터를 상기 고객만족 데이터베이스에 저장하고, 상기 평가 결과 데이터를 상기 피평가자 단말기로 전송하는 평가 결과 전송부를 더 포함한다.

여기서, 상기 특성 정보는, 상기 연구과제에 대한 평가 단계, 평가 일시, 평가 장소, 피평가자 정보, 및 세부기술분야 중 적어도 하나를 포함할 수 있다.

그러면 상기 평가위원 추출부는, 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트 중, 상기 평가 단계 업무 가부, 상기 평가 일시 및 상기 평가 장소가 가능한지 여부, 및 상기 피평가자 정보를 참고하여 제척사유가 없는지의 여부를 판단하여 적어도 한 명의 평가위원을 추출한다.

한편, 상기 평가 계획 파일은, 상기 평가 단계에 따른 표준 업무 흐름도에 기초하여 결정되는 세부 평가 항목, 평가 일시, 평가 장소, 및 평가 점수 산출 방식 중 적어도 하나의 정보를 포함할 수 있다.

이 경우, 상기 평가 계획 파일 생성부는, 상기 결정된 세부 평가 항목을 이용하여 평가 양식 파일을 생성하여 상기 평가위원의 단말기로 전송하고, 상기 평가 장소를 상기 평가 일시에 이용할 수 있도록 장소 예약을 수행한다.

그리고, 상기 평가 계획 파일 생성부는, 이메일, 문자 메시지, 음성 메시지 및 FAX 발송 중 적어도 하나의 방법에 의해 상기 평가 계획 파일을 상기 평가위원의 단말기, 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송할 수 있다.

또한, 상기 고객 만족도 조사부는, 상기 고객 만족도 조사의 입력 요청 메시지를, 이메일, 문자 메시지, 음성 메시지 및 FAX 중 적어도 하나의 방법에 의해 상기 피평가자 단말기로 전송할 수 있다.

본 발명의 일 실시예에 따르면, 상기 고객 만족도 조사 처리부는, 상기 피평가자 단말기로부터 상기 고객 만족도 조사 응답 데이터의 수신이 완료될 때까지, 소정의 주기로 상기 고객 만족도 조사의 입력 요청 메시지를 반복적으로 전송한다.

그리고, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 관리자에 연관된 데이터는 상기 관리자에 대한 인사 평가 데이터에 추가된다.

또한, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가위원에 연관된 데이터는 상기 평가위원 풀 데이터베이스 내의 평가위원 정보 데이터에 추가될 수 있다.

한편, 상기 관리 시스템은, 상기 평가 결과 데이터에 대한 이의신청이 상기 피평가자 단말기로부터 수신되지 않는 경우 상기 평가 결과 데이터 확정을 위한 전자 결재 요청을 전송하는 평가 결과 관리부를 더 포함할 수 있다.

본 발명의 다른 일측에 따르면, 연구과제 평가를 자동으로 관리하는 방법에 있어서, 평가되어야 할 연구과제 보고서 파일이 피평가자 단말기로부터 수신되는 경우, 상기 연구과제의 특성 정보를 이용하여 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출 단계, 및 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 평가 계획 파일을 생성하여 평가 관리 데이터베이스에 저장하고, 상기 평가 계획 파일을 상기 평가위원의 단말기, 상기 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송 하는 평가 계획 파일 생성 단계를 포함하는, 관리 방법이 제공된다.

상기 관리 방법은, 상기 평가위원의 단말기로부터 상기 연구과제에 대한 평가 결과 데이터를 수신하고, 상기 피평가자 단말기에 고객 만족도 조사의 입력 요청 메시지를 전송하고 상기 피평가자 단말기로부터 고객 만족도 조사 응답 데이터를 수신하는 고객 만족도 조사 처리 단계, 및 상기 고객 만족도 조사 응답 데이터의 수신이 완료되는 경우 상기 고객 만족도 조사 응답 데이터를 고객만족 데이터베이스에 저장하고, 상기 평가 결과 데이터를 상기 피평가자 단말기로 전송하는 평가 결과 전송 단계를 더 포함할 수도 있다.

평가의 대상이 되는 과제의 특성 정보, 이를테면 세부기술분야, 바람직한 평가 일시와 장소, 현재 평가의 종류(과제 선정 평가인지, 단계별 중간 평가 또는 최종 평가인지) 등이 입력되는 경우, 데이터베이스 내의 평가위원 풀(pool)로부터 최적의 평가위원을 자동으로 선별하여 추천하므로, 평가위원 선정에 있어서 투명도와 신뢰도가 크게 향상될 수 있으며, 수작업에 의한 선정에 비해 추천 오류가 혁신적으로 감소될 수 있다.
평가위원이 자동으로 선정된 후, 과제의 특성 정보와 선정된 평가위원들의 정보에 맞추어, 평가 계획이 자동으로 수립되고, 이를 지원(support)하기 위한 개별 지원 업무(이를 테면, 평가위원이나 피평가자 및/또는 관리자에게 세부 일정 통보, 평가를 위한 회의실 예약 등)의 상당부분이 자동화되므로, 운영상 오류도 최소화될 수 있다.
또한, 서비스를 이용하는 고객의 만족도 향상과 조직의 발전을 위해 고객 만족도를 조사하는 과정, 이를 데이터베이스화 하는 과정 및 나아가 이러한 고객 만족도 조사 결과 중 정량적인 부분은 평가기관 조직 내의 개별 및/또는 부서별 MBO에 자동으로 반영되고, 정성적인 부분은 사안에 따라 유관 부서 및/또는 담당자가 즉시 시정하거나 추후 제도 개선 및/또는 사례 수집에 활용할 수 있도록 전달한다. 그리고, 이러한 즉시 시정 및/또는 제도 개선 결과는 다시 고객에게 통보되어 투명성을 높일 수 있다.
즉, 국가과제 평가 업무의 중요 단계가 자동화/전산화 되므로 업무 효율이 향상되고, 평가의 객관성 투명성을 담보할 수 있으며, 조직 내의 인사 관리 효율을 높일 수 있고, 또한 고객 만족을 위한 제도 개선으로 이어나갈 수 있다.

삭제

도 1은 본 발명의 일 실시예에 따른 연구과제 평가 자동화 관리 시스템을 도시한다.
도 2는 본 발명의 일 실시예에 따라 관리 시스템이 다른 단말기들 및 메인 시스템과 네트워크로 연결된 모습을 도시하는 구성도이다.
도 3는 본 발명의 일 실시예에 따라 관리 시스템이 메인 시스템을 통하여 다른 단말기들과 네트워크로 연결된 모습을 도시하는 구성도이다.
도 4는 본 발명의 일 실시예에 따른 연구과제 평가 자동화 관리 방법의 흐름도이다.
도 5는 도 4의 평가위원 추출 과정을 상술한 예시적 흐름도이다.
도 6은 도 4의 평가 계획 파일 생성 과정을 상술한 예시적 흐름도이다.
도 7은 도 4의 고객 만족도 처리 과정을 상술한 예시적 흐름도이다.

이하에서, 본 발명의 일부 실시예를, 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 본 발명이 일부 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.

본 발명의 일부 실시예는, 국가 연구개발 기획-평가-종료-성과관리를 위한 연구개발 관리 및 고객서비스 실현 시스템(System for implementing research and development management and client service to national research and development plan, evaluation, completion and performance management)에 관한 것이다.

본 발명의 일부 실시예는, 연구과제 제안들에 대한 선정 평가, 선정된 연구과제의 진행 정도에 따른 각 단계별 중간 평가 및 최종 평가 등에 있어서, 업무를 자동화하고 데이터베이스화 하는 관리 시스템 및 방법에 연관된다.

특히, 산업원천기술개발사업 등의 국가연구개발과제에 있어서, 표준화된 경영시스템 프로세스와 업무흐름도 매뉴얼에 따라 평가 업무를 자동으로 관리하는 관리 시스템 및 방법에 연관된다.

이러한 관리 시스템 및 방법의 제공 개발은 이하의 배경에서 수행되었다.

한국산업기술평가관리원(Korea Evaluation Institute of Industrial Technology, 이하 "KEIT"라고 한다)은 국가 연구개발 과제를 기획하고 평가하는 지식경제부 산하 기관으로서, 2009년 5월 4일, 공공기관선진화 정책에 따라 6 개 연구개발(Research and Development, 이하에서는 "R&D"라고도 한다) 평가기관들을 통합함으로써 새롭게 출범하였다.

KEIT 출범 이후 100일 동안 'KEIT 중장기 발전전략' 등이 수립되고 다양한 프로세스가 구축됨으로써, 서로 다른 조직의 업무 방식 차이가 극복되고 R&D 지원 업무의 효율성이 높아지는 한편, 전문성이 크게 강화되었다.

이는, KEIT가 막대한 국가 R&D 예산을 평가-관리하는 공공기관으로서, 외부적으로 세계 수준의 공정성과 전문성을 갖춘 평가관리 서비스를 제공하고, 내부적으로는 인적-물적 자원을 효율적으로 분배하는 효과적 운영이 절실히 요구되기 때문이다.

특히, 6개 기관의 통합으로써 새롭게 구성된 조직 내에서는 임직원간의 업무추진 방식이 서로 다를 수 있어, 평가과정과 평가결과의 일관성을 확보하고, 정부 R&D 평가관리의 책임과 권한을 명확히 하며, 중복되거나 누락되는 업무를 최소화시키는 한편, 인적자원의 효율화를 이룬다는 측면에서도 표준화된 업무프로세스의 확립과 이행이 절실하였다.

이에, KEIT는 투명하고 전문적인 산업기술 기획평가관리를 통한 국가기술 경쟁력 강화라는 과제(Mission) 하에서, 기술강국의 미래를 창조하는 산업기술 평가기관이라는 비전을 가지고, 구체적 핵심 가치인 I-TECH 즉, 혁신(Innovation) - 신뢰(Trust) - 전문(Expertise) - 투명(Clearness) - 열정(Heart)을 실천하기 위해, 국제표준(ISO)에 기반한 품질경영시스템을 적용하여, 경영시스템 프로세스와 업무흐름도 매뉴얼을 개발하기에 이르렀다.

종래에는 KEIT와 같이 국가 산업원천기술개발사업 등의 연구개발 과제 평가를 수행하는 기관들을 비롯하여 대다수의 기관들이, 국제 표준을 따르는 표준화된 경영시스템 프로세스와 업무흐름도 프로세스를 갖추고 있는 사례가 드물었으며, 특히 "고객 만족" 여부를 실질적으로 피드백(feedback)하는 시스템이 갖추어지지 못했다.

물론 형식적으로는 고객 만족을 위한 노력은 있어왔지만, 과연 얼마나 직접적이고 실질적으로 고객의 needs를 반영할 수 있는 시스템을 갖추어 왔던가, 얼마나 객관적이고 즉각적으로 고객의 만족도가 피드백 될 수 있는 시스템이 구현되어 왔는지에 대한 답은 회의적으로 남아 있었다.

따라서, 국가산업원천기술개발사업과 같은 연구개발 과제 평가 업무에 있어서 표준화된 업무 프로세스를 자동으로 수행하고, 특히 고객 만족도를 즉각적이고 객관적으로 피드백 받아 데이터로 누적하고, 이중 정량적인 데이터는 KEIT와 같은 서비스 제공 주체의 부서별/개인별 인사 관리 요소, 이를테면 목표관리(Management By Objectives, 이하에서는 "MBO"라고 한다) 에도 자동으로 반영할 수 있는 시스템의 필요성이 대두된다.

또한, 상기 피드백 받은 고객 만족도 데이터 중 정성적인 데이터는, 사안에 따라 담당 부서/담당자가 즉각 시정하거나, 추후 제도 개선(월별, 분기별, 연도별 등)에 활용하거나, 및/또는 사례 수집을 할 수 있으므로, 이러한 시스템의 필요성은 더욱 크다 하겠다.

그러나, 아직까지는 국가과제 평가 업무를 수행하는 주체들뿐만 아니라, 공공 서비스를 제공하는 대부분의 주체 중에, 이러한 시스템의 체계를 확립한 곳이 없었다.

KEIT는 이러한 시스템을 경영시스템 프로세스와 업무흐름도 매뉴얼 형태로 체계화하여, 2009년 12월 7일에는 국제 표준인 ISO9001 인증을 받았으며, 이를 자동화한 시스템을 기획하고 구체화하는 노력을 계속하고 있다.

이러한 배경에서 KEIT는 산업원천기술개발사업과 같은 국가연구개발과제에 있어서, 표준화된 경영시스템 프로세스와 업무흐름도 매뉴얼에 따라 평가위원 선정에서부터, 평가 업무 계획, 평가 결과 통보 등 일련의 과정을 자동으로 수행하는 관리 시스템 및 방법을 개발하여 제공한다.

또한, 고객 만족도의 조사를 평가 결과 통보에 연동시킴으로써, 즉각적이고 실효적인 고객 만족도의 피드백과 데이터베이스화를 수행하고, 나아가 이를 평가업무 관리 조직의 부서별/개인별 인사 관리 시스템, 이를테면 MBO에 자동으로 반영하는 관리 시스템 및 방법을 제공한다.

이러한 배경과 목적에서 도출된 본 발명의 일측에 따르면, 국가 연구과제 평가를 자동으로 관리하는 관리 시스템에 있어서, 평가위원 풀 데이터베이스, 평가 관리 데이터베이스, 고객 만족 데이터베이스, 평가되어야 할 연구과제 보고서 파일이 피평가자 단말기로부터 수신되는 경우, 상기 연구과제의 특성 정보를 이용하여 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출부, 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 평가 계획 파일을 생성하여 상기 평가 관리 데이터베이스에 저장하고, 상기 평가 계획 파일을 상기 평가위원의 단말기, 상기 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송하는 평가 계획 파일 생성부, 상기 평가위원의 단말기로부터 상기 연구과제에 대한 평가 결과 데이터를 수신하고, 상기 피평가자 단말기에 고객 만족도 조사의 입력 요청 메시지를 전송하고 상기 피평가자 단말기로부터 고객 만족도 조사 응답 데이터를 수신하는 고객 만족도 조사 처리부, 및 상기 고객 만족도 조사 응답 데이터의 수신이 완료되는 경우 상기 고객 만족도 조사 응답 데이터를 상기 고객만족 데이터베이스에 저장하고, 상기 평가 결과 데이터를 상기 피평가자 단말기로 전송하는 평가 결과 전송부를 포함하고, 여기서 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 관리자에 연관된 데이터는 상기 관리자에 대한 인사 평가 데이터에 추가하고, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가위원에 연관된 데이터는 상기 평가위원 풀 데이터베이스 내의 평가위원 정보 데이터에 추가하는, 관리 시스템이 제공된다.

이 경우, 상기 특성 정보는, 상기 연구과제에 대한 평가 단계, 평가 일시, 평가 장소, 피평가자 정보, 및 세부기술분야 중 적어도 하나를 포함할 수 있다.

그리고, 상기 평가위원 추출부는, 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트 중, 상기 평가 단계 업무 가부, 상기 평가 일시 및 상기 평가 장소가 가능한지 여부, 및 상기 피평가자 정보를 참고하여 제척사유가 없는지의 여부를 판단하여, 적어도 한 명의 평가위원을 추출할 수 있다.

한편, 상기 평가 계획 파일은, 상기 평가 단계에 따른 표준 업무 흐름도에 기초하여 결정되는 세부 평가 항목, 평가 일시, 평가 장소, 및 평가 점수 산출 방식 중 적어도 하나의 정보를 포함할 수 있다.

나아가, 상기 평가 계획 파일 생성부는, 상기 결정된 세부 평가 항목을 이용하여 평가 양식 파일을 생성하여 상기 평가위원의 단말기로 전송하고, 상기 평가 장소를 상기 평가 일시에 이용할 수 있도록 장소 예약을 수행할 수도 있다.

본 발명의 일실시예에 따르면, 상기 평가 계획 파일 생성부는, 이메일, 문자 메시지, 음성 메시지 및 FAX 발송 중 적어도 하나의 방법에 의해 상기 평가 계획 파일을 상기 평가위원의 단말기, 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송한다.

또한, 상기 고객 만족도 조사 처리부는, 상기 고객 만족도 조사의 입력 요청 메시지를, 이메일, 문자 메시지, 음성 메시지 및 FAX 중 적어도 하나의 방법에 의해 상기 피평가자 단말기로 전송할 수 있다.

이 경우, 상기 고객 만족도 조사 처리부는, 상기 피평가자 단말기로부터 상기 고객 만족도 조사 응답 데이터의 수신이 완료될 때까지, 소정의 주기로 상기 고객 만족도 조사의 입력 요청 메시지를 반복적으로 전송할 수도 있다.

본 발명의 일실시예에 따르면, 상기 관리 시스템은, 상기 평가 결과 데이터에 대한 이의신청이 상기 피평가자 단말기로부터 수신되지 않는 경우 상기 평가 결과 데이터 확정을 위한 전자 결재 요청을 전송하는 평가 결과 관리부를 더 포함한다.

한편, 본 발명의 다른 일측에 따르면, 관리 시스템이 연구과제 평가를 자동으로 관리하는 방법에 있어서, 평가되어야 할 연구과제 보고서 파일이 피평가자 단말기로부터 수신되는 경우, 상기 관리 시스템의 평가위원 추출부가, 상기 연구과제의 특성 정보를 이용하여 상기 관리 시스템의 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출 단계, 및 상기 관리 시스템의 평가 계획 파일 생성부가, 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 평가 계획 파일을 생성하여 상기 관리 시스템의 평가 관리 데이터베이스에 저장하고, 상기 평가 계획 파일을 상기 평가위원의 단말기, 상기 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송 하는 평가 계획 파일 생성 단계, 상기 관리 시스템의 고객 만족도 조사 처리부가, 상기 평가위원의 단말기로부터 상기 연구과제에 대한 평가 결과 데이터를 수신하고, 상기 피평가자 단말기에 고객 만족도 조사의 입력 요청 메시지를 전송하고 상기 피평가자 단말기로부터 고객 만족도 조사 응답 데이터를 수신하는 고객 만족도 조사 처리 단계, 및 상기 관리 시스템의 평가 결과 전송부가, 상기 고객 만족도 조사 응답 데이터의 수신이 완료되는 경우 상기 고객 만족도 조사 응답 데이터를 상기 고객만족 데이터베이스에 저장하고, 상기 평가 결과 데이터를 상기 피평가자 단말기로 전송하는 평가 결과 전송 단계를 포함하고, 여기서 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 관리자에 연관된 데이터는 상기 관리자에 대한 인사 평가 데이터에 추가되고, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가위원에 연관된 데이터는 상기 평가위원 풀 데이터베이스 내의 평가위원 정보 데이터에 추가되는, 관리 방법이 제공된다.

이러한 본 발명의 실시예들에 따르면, 평가의 대상이 되는 과제의 특성 정보, 이를테면 세부기술분야, 바람직한 평가 일시와 장소, 현재 평가의 종류(과제 선정 평가인지, 단계별 중간 평가 또는 최종 평가인지) 등이 입력되는 경우, 데이터베이스 내의 평가위원 풀(pool)로부터 최적의 평가위원을 자동으로 선별하여 추천하므로, 평가위원 선정에 있어서 투명도와 신뢰도가 크게 향상될 수 있으며, 수작업에 의한 선정에 비해 추천 오류가 혁신적으로 감소될 수 있다.

그리고, 평가위원이 자동으로 선정된 후, 과제의 특성 정보와 선정된 평가위원들의 정보에 맞추어, 평가 계획이 자동으로 수립되고, 이를 지원(support)하기 위한 개별 지원 업무(이를 테면, 평가위원이나 피평가자 및/또는 관리자에게 세부 일정 통보, 평가를 위한 회의실 예약 등)의 상당부분이 자동화되므로, 운영상 오류도 최소화될 수 있다.

또한, 서비스를 이용하는 고객의 만족도 향상과 조직의 발전을 위해 고객 만족도를 조사하는 과정, 이를 데이터베이스화 하는 과정 및 나아가 이러한 고객 만족도 조사 결과 중 정량적인 부분은 평가기관 조직 내의 개별 및/또는 부서별 MBO에 자동으로 반영되고, 정성적인 부분은 사안에 따라 유관 부서 및/또는 담당자가 즉시 시정하거나 추후 제도 개선 및/또는 사례 수집에 활용할 수 있도록 전달한다. 그리고, 이러한 즉시 시정 및/또는 제도 개선 결과는 다시 고객에게 통보되어 투명성을 높일 수 있다.

즉, 국가과제 평가 업무의 중요 단계가 자동화/전산화 되므로 업무 효율이 향상되고, 평가의 객관성 투명성을 담보할 수 있으며, 조직 내의 인사 관리 효율을 높일 수 있고, 또한 고객 만족을 위한 제도 개선으로 이어나갈 수 있다.

도 1은 본 발명의 일 실시예에 따른 연구과제 평가 자동화 관리 시스템(100)을 도시한다.

관리 시스템(100)은 평가위원 Pool DB(111), 평가관리 DB(121), 고객만족 DB(131), 평가위원 추출부(110), 평가 계획 파일 생성부(120), 고객 만족도 조사 처리부(130), 평가 결과 전송부(140) 및 평가 결과 관리부(150)를 포함할 수 있다.

상술한 바와 같이, 산업원천기술개발사업과 같은 국가연구개발과제 (이하에서는 단순히 "연구과제"라고 한다)의 평가 업무는, 연구과제의 기술 분야에 맞는 외부 평가위원을 선정하고, 선정된 외부 평가위원이 연구과제의 단계에 맞는 평가를 수행하고, 그 결과를 고객인 피평가자에게 통보하는 일련의 과정을 포함한다.

그런데, 종래의 연구과제 평가 업무에 있어서는, 평가위원 선정에서부터, 평가 업무 계획을 생성하고, 평가 수행 과정을 관리하며, 평가 결과를 통보하는 일련의 과정이 표준화되지 못하였다.

그래서, 평가위원 선정의 투명성가 낮고, 평가 기준의 획일성이 담보되지 못하는 등의 문제점이 있었다.

특히, KEIT와 같은 평가 기관에서는 피평가자(개인, 학교, 연구소 등, 형태를 불문하고 평가 기관에서 연구과제를 평가 받는 주체)가 고객인데, 고객들이 평가 과정에 내용적으로나 절차적으로 어느 정도 만족하고 있는지의 피드백(feedback)이 되지 못했다. 물론, 종래에도 고객 만족도의 설문 응답 과정은 수행되었으나, 설문 응답을 강제하지 못하였고, 설문 응답의 데이터화를 통한 통계적인 접근이 미비하였다.

따라서, 고객 만족도가 정확하고 즉각적으로 피드백 되지 못하므로, 평가 기관의 내부 경영 평가나 인사 평가에 있어서 고객 만족도를 팀이나 개인의 MBO에 반영하는 등의 절차는 없거나, 있더라도 거의 형식에 그치기 쉬웠다.

KEIT에서는 상술한 바와 같이, 평가위원 선정에서부터 평가 업무 계획의 생성, 평가 수행 과정의 관리 및 평가 결과의 통보 등을 국제적 표준에 맞추어 자동화(전산화) 함과 동시에, 고객인 피평가자의 만족도를 실질적으로 피드백 받을 수 있는 경영프로세스와 업무 흐름도 매뉴얼을 확립하였고, 이에 맞추어 연구과제 평가의 자동화 관리 시스템 및 방법을 구축하였다.

본 발명의 일 실시예에 따르면, 관리 시스템(100) 내의 평가위원 Pool DB(111)는 평가위원으로 등록되어 있는 평가위원 리스트를 저장하고 있다.

상기 평가위원 리스트에서, 각 평가위원의 데이터는 평가위원의 개인 신상에 관한 정보, 소속 기관, 이력, 전문 분야(세부기술분류), 과거 수행했던 평가 업무의 대상들, 과거 수행했던 평가에 대한 고객 만족 지수 등의 다양한 정보가 포함되어 있을 수 있다.

이러한 다양한 정보의 일부 또는 전부는, 평가위원 추출부(110)가 특정한 연구과제에 대한 평가위원을 추출하는 경우에 추출 기준으로 이용된다.

연구과제 보고서 파일이 평가위원 추출부(110)에 전송되는 경우, 평가위원 추출부(110)는 연구과제의 보고서 파일 내의 연구과제 특성 정보와 평가위원 리스트 상의 정보를 비교하여, 해당 연구과제의 평가에 적합한 평가위원을 자동으로 필터링 하여 추출한다.

이러한 추출 과정에서, 상기 연구과제 특성 정보는, 기술 분류, 피평가자 정보, 과거 평가 내역, 현재 평가 단계의 종류 등을 포함할 수 있으며, 이와 대비되는 평가위원 리스트 상의 정보는 상기한 평가위원의 개인 신상에 관한 정보, 소속 기관, 이력, 전문 분야(세부기술분류), 과거 수행했던 평가 업무의 대상들, 과거 수행했던 평가에 대한 고객 만족 지수 등을 포함할 수 있다.

평가위원 추출부의 동작에 관한 내용은 도 4 및 도 5를 참조하여 보다 상세히 후술한다.

이렇게 해당 연구과제에 대해 평가위원이 추출되면, 평가 계획 파일 생성부(120)는 해당 연구과제의 내용과 특성 정보, 그리고 추출된 평가위원의 정보를 참고하여 평가 계획 파일을 자동으로 생성한다.

이러한 평가 계획 파일에는 평가 일시와 장소, 해당 단계와 세부 기술분류에 맞는 평가 항목, 평가 지수 산출 방법 등의 세부 계획 등이 포함될 수 있다.

이렇게 생성된 평가 계획 파일은 평가 관리 DB(121)에 저장되는 한편, 피평가자 단말기, 평가위원의 단말기 및/또는 관리자 단말기에 전송될 수 있다.

평가 계획 파일 생성부의 동작은 도 4 및 도 6을 참조하여 보다 상세히 후술한다.

이러한 평가 계획 파일에 따라 평가가 완료되고, 평가위원의 단말기로부터 시스템(100)에 평가 결과가 전송되는 경우, 고객 만족도 조사 처리부(130)는 전송된 평가 결과 데이터를 수신하여 임시로 저장하고, 고객 만족도 조사 처리 과정을 수행한다.

먼저, 고객 만족도 조사 처리부(130)는, 평가 결과가 나왔다는 내용의 안내와 함께, 고객 만족도 조사 입력 요청에 응답하여 설문 내용에 답을 하여야 평가 결과를 열람하거나 수신할 수 있다는 내용을 포함하는 고객 만족도 조사 입력 요청 메시지를 피평가자 단말기에 전송한다.

이렇게 평가 결과 전송에 앞서서 고객 만족도 조사 처리가 수행되므로, 고객인 피평가자는 고객 만족도 조사 입력을 전송하여야 평가 결과를 열람하거나 수신(이를 테면 다운로드)할 수 있다. 즉, 고객 만족도 조사 과정의 누락이 방지될 수 있다.

고객 만족도 조사 처리부(130)가 고객 만족도 조사 과정을 수행하여, 수집된 데이터를 고객 만족 DB(131)에 저장하는 과정은 도 4 및 도 7을 참조하여 보다 상세히 후술한다.

고객 만족도 조사 처리 과정이 완료되면, 평가 결과 전송부(140)는 평가 결과를 피평가자 단말기에 전송하며, 평가 결과 관리부(140)는 이를 확정하여 관리자의 결재 라인에 있는 단말기들 및 상급 기관(이를 테면 지식경제부)에 결재 요청 메시지를 전송한다.

그리고, 고객 만족도 조사 처리부(130)에 의해 수집되어 고객 만족 DB(131)에 저장된 평가 업무에 대한 고객 만족도 응답 데이터는 KEIT와 같은 평가 업무 수행 기관의 담당자나 담당 부서의 MBO에 반영되고, 평가위원의 고객 만족 지수에 반영된다.

이러한 과정은, 도 4 이하를 참조하여 보다 상세히 후술한다.

도 2는 본 발명의 일 실시예에 따라 관리 시스템(100)이 다른 단말기들 및 메인 시스템과 네트워크로 연결된 모습을 도시하는 구성도(200)이다.

본 예시적 구성도에서 관리 시스템(100)은 인터넷, 인트라넷, 무선통신채널, 유선통신채널 등의 네트워크(201)를 통해, 평가 기관의 업무 전산화를 위한 메인 시스템(240), 피평가자 단말기(210), 평가위원의 단말기(220) 및 관리자 단말기(230)에 연결될 수 있다.

상기 단말기들(210 내지 230)은, 컴퓨터, 노트북, 개인용 정보 단말기(PDA), 휴대폰, 유선 전화기, 팩시밀리(FAX) 등의 다양한 형태일 수 있다.

본 실시예에서 관리 시스템(100)은 인터넷 등의 네트워크(201)을 통해 메인 시스템(240)과 연결되어 있으므로, 동작에 있어서 독립성을 보장 받을 수 있으며, 방화벽(Firewall) 시스템을 구비할 수 있다.

도 3는 본 발명의 다른 일 실시예에 따라 관리 시스템(100)이 메인 시스템(240)을 통하여 다른 단말기들(210 내지 230)과 네트워크로 연결된 모습을 도시하는 구성도(300)이다.

이러한 구성은 관리 시스템(100)의 보안 수준을 높일 필요가 있는 경우에 채용될 수 있으며, 이를테면 전력 계통이나 운전 계통의 SCADA(Supervisory Control And Data Acquisition) 시스템과 같이 한정적으로 동작될 수 있다.

이상에서 관리 시스템(100)이 단말기들(210 내지 230) 및 메인 시스템(240)과 연결되는 예시적 구성을 제시하였으나, 이는 본 발명의 일부 실시예에 불과하다.

따라서, 본 발명의 사상을 변경하지 않는 범위에서 다양한 네트워크 구성이나 데이터 전송 매체가 채용될 수 있으며, 이 또한 본 발명의 범위에 포함된다.

도 4는 본 발명의 일 실시예에 따른 연구과제 평가 자동화 관리 방법의 흐름도이다.

평가되어야 할 연구과제의 내용과 연구과제 특성 정보(기술 분류, 피평가자 정보, 과거 평가 내역, 현재 평가 단계의 종류 등)를 포함하는 연구과제 보고서가 제출되는 경우, 도 1의 평가위원 추출부(110)는 단계(S410)에서 해당 연구과제를 평가할 평가위원을 추출한다.

이러한 과정에서 평가위원 추출부(110)는 평가위원 Pool DB(111)에 액세스 하여 평가위원의 리스트를 읽어 들이고, 평가위원 리스트 상의 개별 정보들을 종합하여 소정의 인원의 평가위원을 추출한다.

평가위원 추출 과정(S410)의 보다 상세한 내용은 도 5를 참조하여 후술한다.

이렇게 평가위원이 추출되면, 도 1의 평가 계획 파일 생성부(120)는 해당 연구과제의 내용과 특성 정보, 그리고 추출된 평가위원의 개별 정보를 이용하여, 평가 계획 파일을 생성한다.

이러한 평가 계획 파일에는 평가 일시와 장소, 해당 단계와 세부 기술분류에 맞는 평가 항목, 평가 지수 산출 방법 등의 세부 계획 등이 포함될 수 있다.

그리고, 이렇게 생성된 평가 계획 파일은 도 1의 평가 관리 DB(121)에 저장되는 한편, 피평가자 단말기(210), 평가위원의 단말기(220) 및/또는 관리자 단말기(230)에 전송될 수 있다.

평가 계획 파일 생성 과정(S420)에 관련된 내용은 도 6을 참조하여 보다 상세히 후술한다.

그리고, 평가위원이 상기 평가 계획 파일의 내용에 맞추어 평가를 수행하고 그 결과를 평가위원의 단말기(220)를 통해 관리 시스템(100)으로 전송하는 경우, 관리 시스템(100)은 이를 수신하여 임시로 저장하고 고객 만족도 조사 처리 과정(S430)을 수행한다.

도 1의 고객 만족도 조사 처리부(130)는, 평가 결과가 나왔다는 내용의 안내와 함께, 고객 만족도 조사 입력 요청에 응답하여 설문 내용에 답을 하여야 평가 결과를 열람하거나 수신할 수 있다는 내용을 포함하는 고객 만족도 조사 입력 요청 메시지를 피평가자 단말기(210)에 전송한다.

이렇게 평가 결과 전송(S440)에 앞서서 고객 만족도 조사 처리(S430)이 수행되므로, 고객인 피평가자는 고객 만족도 조사 입력을 전송하여야 평가 결과를 열람하거나 수신(이를 테면 다운로드)할 수 있다. 즉, 고객 만족도 조사 과정의 누락이 방지될 수 있다.

고객 만족도 조사 처리(S430) 내지 평가 결과 전송(S440) 과정은 도 7을 참조하여 보다 상세히 후술한다.

그리고, 단계(S450)에서 평가 결과 데이터를 수신한 피평가자 단말기(210)로부터 이의신청이 수신되는 지의 여부가 판단된다.

이러한 판단은 일정한 임계 시간 동안 수행되며, 상기 임계 시간이 경과하면 이의신청은 없는 것으로 간주되어, 상기 전송된 평가 결과 파일이 최종본으로 확정된다.

하지만, 단계(S450)에서 이의신청이 수신되는 경우, 단계(S410) 이하의 평가 과정이 다시 수행될 수 있다.

물론, 이의신청의 원인이나 대상, 이전의 이의신청 횟수, 등을 고려하여 일부 이의신청은 바로 각하되고 평가 결과 파일이 확정되는 응용 예도 가능하다.

그리고, 도시되지 않았지만, 상술한 바와 같이, 평가 결과 파일이 확정되는 경우, 도 1의 평가 결과 관리부(150)는 평가 결과 파일에 대해 관리자 결재 라인에 있는 담당자 단말기들 및 상급 기관(이를 테면, 지식경제부 담당자)에 결재 요청을 전송할 수 있다.

상기 결재 과정이 완료되면 해당 연구과제에 대한 해당 단계의 평가 업무가 종료된다.

도 5는 도 4의 평가위원 추출 과정(S410)을 상술한 예시적 흐름도이다.

단계(S510)에서는, 현재 평가 업무에서 평가되어야 할 연구과제 보고서 파일이 피평가자의 단말로부터 전송되어, 관리 시스템(100)에 수신된다.

이러한 연구과제 보고서 파일에는, 연구과제 보고서의 기술 분야(대분류, 중분류, 세부기술분류 등), 평가 받고자 하는 해당 연구과제의 현재 단계(과제 선정 단계, 진도 보고 단계, 최종 보고 단계 등), 연구과제의 주제와 연구 내용, 피평가자의 개별 정보, 과거 평가 이력, 평가 일시와 장소 등이 포함될 수 있다.

이하에서는 이렇게 연구과제 보고서 파일에 포함되는 데이터 중, 연구 내용을 제외한 정보를 포괄하여, 연구과제 특성 정보라고 한다.

그러면 단계(S520)에서 평가위원 Pool DB(111)에 액세스 하여 상기 평가위원 리스트를 읽어 들인다.

그리고, 단계(S530)에서 상기 수신된 연구과제 보고서 파일로부터 인식되는 연구과제 특성 정보를 이용하여, 상기 평가위원 리스트로부터 평가에 적합한 적어도 한 명 이상의 평가위원이 자동으로 검색된다.

이러한 검색 과정에서, 도 1의 평가위원 추출부(110)는 상기 연구과제 특성 정보를 이용하여, 세부 기술 분류가 동일하거나 가장 인접하고, 해당 연구과제의 현재 단계 평가 업무가 가능하며, 평가 일시와 장소에 응할 수 있는 평가위원을 평가위원 리스트로부터 추출한다.

이 경우, 피평가자와 같은 기관 소속이거나, 과거나 현재 거래 관계에 있는 등의 제척 사유를 고려하여 평가위원 중 일부를 필터 아웃(filter out)할 수 있다. 다만, 상기한 제척 사유는 예시적인 것일 뿐이므로, 본 발명의 사상을 변경하지 않는 범위에서는 다른 제척 사유가 이들과 함께 또는 이들을 대신하여 고려될 수 있다.

또한, 평가위원의 과거 고객 만족 지수 또한 평가위원 선정에 참고될 수 있다.

그리고, 본 발명의 일 실시예에 따르면, 평가위원의 과거 고객 만족 지수는, 다음 번 평가위원 선정 때 위촉 대상으로 평가위원 Pool에 포함시킬 지를 결정하는 데에 활용될 수 있다.

이러한 과정에 미리 지정된 인원의 평가위원이 추출된다(S540).

도 6은 도 4의 평가 계획 파일 생성 과정(S420)을 상술한 예시적 흐름도이다.

단계(S610)에서는 도 1의 평가 계획 파일 생성부(120)에 의해, 상기 추출된 평가위원의 개별 정보와 연구과제의 특성 정보 등을 고려한 평가 일시와 장소, 해당 단계와 세부 기술분류에 맞는 평가 항목, 평가 지수 산출 방법 등의 세부 계획을 포함한 평가 계획 파일이 생성된다.

이러한 평가 계획 파일은 단계(S620)에서 도 1의 평가 관리 DB(121)에 저장된다.

그리고, 상기 평가 계획 파일은 이메일, 문자 메시지, 음성 안내 메시지, FAX 전송 등의 수단을 이용하여 피평가자 단말기(210), 평가위원의 단말기(220) 및/또는 관리자 단말기(230) 등에 전송된다.

따라서, 피평가자, 평가위원, 및 평가기관 관리자(이를 테면 KEIT 담당 직원)은 평가 일정을 확인 할 수 있다.

또한, 본 발명의 일부 실시예에서는, 관리 시스템(100)이 평가 계획 파일 상 일정에 맞도록 평가 업무 지원(Support)을 위한 데이터 처리를 수행할 수 있다.

이를 테면, 평가 기관 내부의 특정한 장소(이를 테면, 특정한 회의실)에서 소정의 일시에 연구과제 설명회가 이루어져야 한다면, 관리 시스템(100)은 상기 장소의 예약 권한을 갖는 메인 시스템(240)에 접근하여, 장소 예약을 자동으로 수행할 수 있다(S640).

이러한 장소 예약은 관리 시스템(100)이 지원할 수 있는 다양한 자동화 업무 중 일 예에 불과하며, 평가 업무 자동화를 위해 필요하거나, 필요로 할 것으로 예상될 수 있는 통상적 범위 내에서는, 다른 응용도 가능하다.

이러한 과정 이후에는, 평가위원이 해당 연구과제를 실제로 평가할 것이고, 이 평가 결과 데이터는 평가위원의 단말기(220)로부터 관리 시스템(100)으로 전송된다.

도 7은 도 4의 고객 만족도 처리 과정을 상술한 예시적 흐름도이다.

본 발명의 일 실시예에 따르면, 단계(S710)에서 평가 결과 데이터가 평가위원의 단말기(220)로부터 관리 시스템(100)으로 수신된다. 그러면, 상술한 바와 같이, 관리 시스템(100)의 고객 만족도 조사 처리부(130)는, 단계(S720)에서 고객 만족도 조사 입력 요청의 메시지가 피평가자 단말기(210)로 전송된다.

이러한 고객 만족도 조사 입력 요청의 메시지 또한, 이메일, 문자 메시지, 음성 메시지, FAX 전송 등의 다양한 방법으로 피평가자 단말기(210)에 전송될 수 있다.

한편, 이러한 개별 단계 마다, 평가 업무의 관리자 단말기(230)에도 진행 상황이 수시로 보고될 수 있다.

그리고, 이러한 고객 만족도 조사 입력 요청의 메시지에는, 평가 결과가 나왔다는 내용의 안내와 함께, 고객 만족도 조사 입력 요청에 응답하여 설문 내용에 답을 하여야 평가 결과를 열람하거나 수신할 수 있다는 내용이 포함된다.

이러한 방법에 의해, 고객 만족도 조사는 어느 정도 강제될 수 있으며, 설문 응답의 불균형으로 인한 통계적 가치의 감소가 방지된다.

한편, 고객 만족도 조사 입력을 위한 설문 내에는, 평가위원의 전문성을 비롯하여 평가의 공정성과 평가 내용의 적절성 등 평가의 내용적인 면과, 평가 과정 동안 절차상 불편한 점, 관리자의 친절도, 업무 이해도 등등의 절차적인 면에 대한 항목이 포함될 수 있다.

그리고, 이러한 항목은 수치화 하여 응답할 수 있는 정량적 평가와, 서술형으로 응답하는 정성적 평가로 구분될 수 있다.

관리 시스템(100)은 단계(S730)에서 고객 만족도 조사 입력 데이터가 관리 시스템(100)에 수신되었는지의 여부를 판단하며, 수신되지 않은 경우는 소정의 시간 주기 마다 다시 단계(S720) 이하를 반복하여 고객 만족도 조사 입력 요청 메시지를 전송할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 이렇게 입력된 고객 만족도 조사 입력 데이터는 정량적 부분(수치화 되는 평가 항목의 응답 부분)과 정성적 부분(서술형으로 입력되는 응답 부분)을 포함한다.

이렇게 고객 만족도 조사 입력 데이터 중 정량적인 부분은, KEIT와 같은 평가 기관의 평가 업무 관리자(절차적 업무를 지원하거나 평가 업무를 관리하는 담당 직원 개인 및 그 소속 팀)를 평가하기 위한 개인 별 또는 부서 별 MBO에 즉각적으로 반영될 수 있다.

마찬가지로 상기 입력된 고객 만족도 조사 입력 데이터는 평가위원 개인의 고객 만족도 지수에도 반영되어, 평가위원 Pool DB 내의 데이터를 수정할 수 있다.

한편, 고객 만족도 조사 입력 데이터 중 정성적인 부분은, 평가 업무 관리자 단말기에 내용이 전송되며, 이로써 평가 업무 관리자가 사안에 따라 고객 불만 사항은 즉시 시정하고 및/또는 재발 방지(예방) 조치를 취할 수 있다.

그리고, 이러한 조치 결과는 데이터화 되어 다시 고객 단말기로 피드백 될 수 있다.

또한, 이러한 조치 결과는 관리 시스템에 의해 통계분석되어, 다시 상기 평가 업무 관리 담당자의 개인 별 및/또는 부서 별 MBO에 반영되어, 실적 평가에 활용될 수 있다.

한편, 고객 만족도 조사 입력 데이터 중 정성적인 부분 중에서 즉시 시정할 성격이 아니라 추후 제도 개선 등을 요하는 부분에 대해서는 이를 월별, 분기별, 연도별로 정리하여 제도 개선에 활용될 수 있도록 고객만족 DB에 누적한다.

이러한 제도 개선에 대한 결과 역시 데이터화 되어 고객 단말기로 다시 피드백 될 수 있음은 물론이다.

이러한 고객 만족 DB에의 데이터 누적은 상기한 통계분석 과정을 거쳐, 내부 시스템(이를 테면, 메인 시스템)에의 데이터 누적으로 포워딩될 수 있으며, 평가 기관의 전체 직원은 인트라넷(Intranet)을 통해 사례를 공유할 수 있어, 직원 교육 효과 또한 기대될 수 있다.

이러한 과정을 통해, 실질적으로 고객의 필요(needs)에 부합하는 평가 업무 프로세스를 만들어갈 수 있으며, KEIT와 같은 평가 기관은 매년 말 상기 고객 만족 조사 결과의 처리 결과 또는 사례를 종합 안내할 수도 있다.

또한, 이러한 과정을 통해 평가위원과 평가 업무 관리자 전체의 책임감과 서비스 품질을 향상시킬 수 있는 등, 조직 경영시스템의 변화도 예상될 수 있다.

이상, 상세히 본 발명의 실시예들을 설명하였으며, 요약하면 아래와 같다.

산업원천기술개발사업과 같은 국가연구개발과제에 있어서, 표준화된 경영시스템 프로세스와 업무흐름도 매뉴얼에 따라 평가위원 선정에서부터, 평가 업무 계획, 평가 결과 통보 등 일련의 과정을 자동으로 수행하는 관리 시스템 및 방법이 제공된다.

연구과제 평가를 자동으로 관리하는 시스템에 있어서, 상기 관리 시스템은, 평가위원 풀 데이터베이스, 평가 관리 데이터베이스, 평가되어야 할 연구과제 보고서 파일이 피평가자 단말기로부터 수신되는 경우에 상기 연구과제의 특성 정보를 이용하여 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출부, 및 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 평가 계획 파일을 생성하여 상기 평가 관리 데이터베이스에 저장하고 상기 평가 계획 파일을 상기 평가위원의 단말기, 상기 피평가자 단말기 및 평가 관리자 단말기 중 적어도 하나에게 전송하는 평가 계획 파일 생성부를 포함한다.

한편, 상기 관리시스템에 의해, 고객 만족도의 조사를 평가 결과 통보에 연동됨으로써 즉각적이고 실효적인 고객 만족도가 피드백 되어 데이터베이스화가 수행되며, 나아가 상기 피드백 중 정량적인 부분은 이를 평가업무 관리 조직의 개별 또는 팀 별 MBO에 자동으로 반영하며, 정성적인 부분은 즉시 시정, 제도 개선 등의 조치가 가능하도록 데이터베이스화 될 수 있다.

본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

100: 연구과제 평가 업무를 자동으로 관리하는 관리 시스템
110: 평가위원 추출부
111: 평가위원 Pool DB
120: 평가 계획 파일 생성부
121: 평가 관리 DB
130: 고객 만족도 조사 처리부
131: 고객 만족 DB
140: 평가 결과 전송부
150: 평가 결과 관리부

Claims (10)

1. 유선 통신 또는 무선 통신 중 적어도 하나를 이용하여, 연구과제 평가를 자동으로 관리하는 관리 시스템에 있어서,
   평가위원 풀 데이터베이스;
   평가 관리 데이터베이스;
   고객 만족 데이터베이스;
   평가되어야 할 연구과제 보고서 파일이 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 연구과제를 제출할 피평가자에 대응하는 피평가자 단말기로부터 수신되는 경우, 상기 연구과제의 특성 정보를 이용하여 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출부;
   상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 상기 연구과제 평가를 위한 평가 계획 파일을 생성하여 상기 평가 관리 데이터베이스에 저장하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여, 상기 평가 계획 파일을 상기 추출된 적어도 한 명의 평가위원에 대응하는 평가위원의 단말기, 상기 피평가자 단말기 및 상기 연구과제 평가의 평가 관리자에 대응하는 평가 관리자 단말기 중 적어도 하나에게 전송하는 평가 계획 파일 생성부;
   상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 평가위원의 단말기로부터 상기 연구과제에 대한 평가 결과 데이터를 수신하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 피평가자 단말기에 고객 만족도 조사의 입력 요청 메시지를 전송하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 피평가자 단말기로부터 상기 고객 만족도 조사의 입력 요청에 대응하는 고객 만족도 조사 응답 데이터를 수신하는 고객 만족도 조사 처리부; 및
   상기 고객 만족도 조사 응답 데이터의 수신이 완료되는 경우 상기 고객 만족도 조사 응답 데이터를 상기 고객만족 데이터베이스에 저장하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 평가 결과 데이터를 상기 피평가자 단말기로 전송하는 평가 결과 전송부
   를 포함하고,
   상기 관리 시스템의 고객 만족도 조사 처리부는, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가 관리자에 연관된 데이터는 상기 평가 관리자에 대한 인사 평가(MBO) 데이터에 추가하고, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가위원에 연관된 데이터는 상기 평가위원 풀 데이터베이스 내의 평가위원 정보 데이터에 추가하는, 관리 시스템.
2. 제1항에 있어서,
   상기 특성 정보는, 상기 연구과제에 대한 평가 단계, 평가 일시, 평가 장소, 피평가자 정보, 및 세부기술분야 중 적어도 하나를 포함하는, 관리 시스템.
3. 제2항에 있어서,
   상기 평가위원 추출부는, 상기 평가위원 풀 데이터베이스 내의 평가위원 리스트 중, 상기 평가 단계 업무 가부, 상기 평가 일시 및 상기 평가 장소가 가능한지 여부, 및 상기 피평가자 정보를 참고하여 제척사유가 없는지의 여부를 판단하여, 적어도 한 명의 평가위원을 추출하는, 관리 시스템.
4. 제1항에 있어서,
   상기 평가 계획 파일은, 상기 평가 단계에 따른 표준 업무 흐름도에 기초하여 결정되는 세부 평가 항목, 평가 일시, 평가 장소, 및 평가 점수 산출 방식 중 적어도 하나의 정보를 포함하는, 관리 시스템.
5. 제4항에 있어서,
   상기 평가 계획 파일 생성부는, 상기 결정된 세부 평가 항목을 이용하여 평가 양식 파일을 생성하여 상기 평가위원의 단말기로 전송하고, 상기 평가 장소를 상기 평가 일시에 이용할 수 있도록 장소 예약을 수행하는, 관리 시스템.
6. 제1항에 있어서,
   상기 평가 계획 파일 생성부가 이용하는 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나는, 이메일, 문자 메시지, 음성 메시지 및 FAX 중 적어도 하나인, 관리 시스템.
7. 제1항에 있어서,
   상기 고객 만족도 조사 처리부가 이용하는 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나는, 이메일, 문자 메시지, 음성 메시지 및 FAX 중 적어도 하나인, 관리 시스템.
8. 제1항에 있어서,
   상기 고객 만족도 조사 처리부는, 상기 피평가자 단말기로부터 상기 고객 만족도 조사 응답 데이터의 수신이 완료될 때까지, 소정의 시간 주기로 상기 고객 만족도 조사의 입력 요청 메시지를 반복적으로 전송하는, 관리 시스템.
9. 제1항에 있어서,
   상기 평가 결과 데이터에 대한 이의신청이 상기 피평가자 단말기로부터 수신되지 않는 경우 상기 평가 결과 데이터 확정을 위한 전자 결재 요청을 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 전송하는 평가 결과 관리부
   를 더 포함하는, 관리 시스템.
10. 유선 통신 또는 무선 통신 중 적어도 하나를 이용하여, 관리 시스템이 연구과제 평가를 자동으로 관리하는 방법에 있어서,
    평가되어야 할 연구과제 보고서 파일이 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 연구과제를 제출할 피평가자에 대응하는 피평가자 단말기로부터 수신되는 경우, 상기 관리 시스템의 평가위원 추출부가, 상기 연구과제의 특성 정보를 이용하여 상기 관리 시스템의 평가위원 풀 데이터베이스 내의 평가위원 리스트로부터 적어도 한 명의 평가위원을 추출하는 평가위원 추출 단계;
    상기 관리 시스템의 평가 계획 파일 생성부가, 상기 특성 정보 및 상기 추출된 적어도 한 명의 평가위원의 정보를 이용하여 상기 연구과제 평가를 위한 평가 계획 파일을 생성하여 상기 관리 시스템의 평가 관리 데이터베이스에 저장하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여, 상기 평가 계획 파일을 상기 추출된 적어도 한 명의 평가위원에 대응하는 평가위원의 단말기, 상기 피평가자 단말기 및 상기 연구과제 평가의 평가 관리자에 대응하는 평가 관리자 단말기 중 적어도 하나로 전송하는 평가 계획 파일 생성 단계;
    상기 관리 시스템의 고객 만족도 조사 처리부가, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 평가위원의 단말기로부터 상기 연구과제에 대한 평가 결과 데이터를 수신하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 피평가자 단말기에 고객 만족도 조사의 입력 요청 메시지를 전송하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 피평가자 단말기로부터 상기 고객 만족도 조사의 입력 요청에 대응하는 고객 만족도 조사 응답 데이터를 수신하는 고객 만족도 조사 처리 단계;
    상기 관리 시스템의 평가 결과 전송부가, 상기 고객 만족도 조사 응답 데이터의 수신이 완료되는 경우 상기 고객 만족도 조사 응답 데이터를 상기 관리 시스템의 고객만족 데이터베이스에 저장하고, 상기 유선 통신 또는 상기 무선 통신 중 적어도 하나를 이용하여 상기 평가 결과 데이터를 상기 피평가자 단말기로 전송하는 평가 결과 전송 단계; 및
    상기 관리 시스템의 고객 만족도 조사 처리부가, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가 관리자에 연관된 데이터는 상기 평가 관리자에 대한 인사 평가(MBO) 데이터에 추가하고, 상기 수신된 고객 만족도 조사 응답 데이터 중 상기 평가위원에 연관된 데이터는 상기 평가위원 풀 데이터베이스 내의 평가위원 정보 데이터에 추가하는 단계
    를 포함하는, 관리 방법.

Images