KR101830747B1 - 온라인 면접 시스템 및 그 방법 - Google Patents

온라인 면접 시스템 및 그 방법 Download PDF

Info

Publication number
KR101830747B1
KR101830747B1 KR1020160032645A KR20160032645A KR101830747B1 KR 101830747 B1 KR101830747 B1 KR 101830747B1 KR 1020160032645 A KR1020160032645 A KR 1020160032645A KR 20160032645 A KR20160032645 A KR 20160032645A KR 101830747 B1 KR101830747 B1 KR 101830747B1
Authority
KR
South Korea
Prior art keywords
data
interview
unit
moving image
text data
Prior art date
Application number
KR1020160032645A
Other languages
English (en)
Other versions
KR20170108554A (ko
Inventor
이유섭
Original Assignee
주식회사 이노스피치
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 이노스피치 filed Critical 주식회사 이노스피치
Priority to KR1020160032645A priority Critical patent/KR101830747B1/ko
Publication of KR20170108554A publication Critical patent/KR20170108554A/ko
Application granted granted Critical
Publication of KR101830747B1 publication Critical patent/KR101830747B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/105Human resources
    • G06Q10/1053Employment or hiring
    • G06F17/28
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278Subtitling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Economics (AREA)
  • Acoustics & Sound (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 온라인 면접 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 면접지원자의 동영상 면접 영상을 면접관의 요구사항에 맞게 편집된 형태로 제공함으로써 면접의 효율성을 실현할 수 있는 면접시스템에 관한 것이다. 이를 위한 본 발명은, 면접 지원자가 서비스 서버로부터 질문정보를 수신하여 이에 대응하는 면접 영상을 촬영한 동영상 데이타를 형성하여 이를 송신하는 면접 단말기; 네트워크를 통해 상기 동영상 데이타를 수신하여 저장하고, 상기 동영상 데이타를 가공편집하고, 가공편집된 동영상 데이타를 면접관 단말에 송신하는 서비스 서버; 및 네트워크를 통해 상기 서비스 서버로부터 상기 가공편집된 동영상 데이타를 수신하는 면접관 단말기;를 포함하는 온라인 면접시스템에 있어서, 상기 서비스 서버는, 상기 동영상 데이타의 음성 데이타를 검출하여 상기 검출된 음성데이타를 텍스트 데이타로 변환하여 텍스트 데이타를 인덱스하고, 상기 인덱스된 텍스트 데이타와 대응되는 상기 동영상 데이타를 연계하여 인덱스화하여, 텍스트 데아타와 동영상 데이타를 매칭하는 데이타 매칭부; 상기 텍스트 데이타의 특성을 평가하는 데이타 판별부; 상기 데이타 판별부의 평가에 따라 상기 텍스트 데이타를 선택하고, 상기 선택된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타를 추출하는 데이타 추출부; 및 상기 데이타 추출부를 통해 얻어진 동영상 데이타들을 병합하는 데이타 병합부;를 포함하여 이루어지는 것을 특징으로 하는 면접시스템이다.

Description

온라인 면접 시스템 및 그 방법{Online Interview system and method thereof}
본 발명은 온라인 면접 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 면접지원자의 동영상 면접 영상을 면접관의 요구사항에 맞게 편집된 형태로 제공함으로써 면접의 효율성을 실현할 수 있는 면접시스템에 관한 것이다.
최근 기업들의 신입사원 채용 방식이 서류와 필기시험 위주에서 면접평가, 적성평가 등의 방식으로 많이 바뀌고 있다. 이러한 이유는 면접을 통해 면접지원자와 면접관이 인성 및 사고 등을 종합적으로 파악하거나 피력할 수 있기 때문이다. 또한, 다양한 경영환경 변화에 따라 창의적이고 능동적인 인재의 필요성이 강조되는 상황에서 이를 파악하기 위한 방법으로 면접의 중요성이 이전에 비해 더욱 커지고 있다.
종래의 경우, 다수의 지원자들로부터 이력서와 구직을 희망하는 업종, 지역 정보 등을 웹사이트에 등록받고, 다수의 구인회사로부터 채용 정보 등을 제공받아 각 면접자에게 접합한 채용 정보를 제공하도록 되어 있다. 그리고 웹사이트로부터 서류면접을 통과한 지원자는 해당 구인 회사에 직접 방문하여 오프라인 면접을 받아 채용 여부를 결정받게 된다. 그러나, 지원자가 구인회사에 직접 방문해야 하며, 지원자와 구인회사의 거리가 멀리 떨어져 있는 경우 그 이동에 따른 불편함이 상당하게 된다. 또한 면접자도 채용규모의 많고 적음에 상관없이 지원자에 대한 오프라인 면접을 준비해야 하기 때문에, 시간 및 비용상 적지 않은 부담이 있게 된다.
따라서, 면접지원자와 면접관이 시간 및 비용을 절감하고, 면접의 효과도 우수한 시스템이 필요한 실정이다. 통신기술의 발달에 따라 원격지의 단말간에 영상과 음성에 의한 영상 면접이 그 대안으로 떠올랐다. 면접지원자의 단말기와 이를 통한 동영상의 등록, 등록된 동영상을 수신, 확인하는 면접관 단말기를 기본으로 구성하는 형태로서, 이와 관련된 특허출원이 다수 이루어졌다.
공개특허 KR10-2004-0006879호에서는, 다수의 구직자에게 구인회사별 채용정보를 제공함과 더불어 구인 및 구직을 위한 면접 동영상이나 자기소개 동영상을 용이하게 제작하고 이를 다수의 구인회사에 실시간 제공할 수 있도록 된 동영상 인터뷰 박수와 이를 이용한 온라인 면접 시스템을 개시하고 있다. 등록특허 KR10-0453838호에서는 온라인상 구인, 구직 처리단계와, 온라인상의 면접수행 및 정보 관리에 대한 전반적인 온라인 면접 시스템의 구성을 개시하고 있다. 공개특허 KR10-2002-0069973호에서는 인터넷망을 통하여 접속되는 서버에서 구인을 원하는 다수의 기업이나 기관의 업체 사업자들의 정보를 수집하여 취업을 원하는 다수의 개인 사용자들에게 원서와 이력서와 자기소개서 및 면접의 내용까지 제작하여 전송할 수 있도록 한 인터넷을 이용한 동영상 이력서 및 화상면접 서비스방법을 개시하고 있다. 그 외에도, 면접 동영상을 평가하는 다양한 방식들을 채택하는 구성을 가지는 특허들도 출원되고 있다.
한편, 동영상 면접과 관련한 특허들은 미리 입력된 질문들을 동영상 또는 문자화된 화면 등으로 제공받고서, 이에 대한 응답을 하는 형태로 대부분 이루어지고 있다. 이 경우, 면접 지원자의 동영상은 면접질문의 내용이나, 질문을 파악하기 위해 소요되는 핸들링 타임(handling time)등의 시간들을 포함하고 있게 된다. 또는, 질문에 대한 답변을 위해 소요되는 시간 동안 실제 면접지원자가 말을 하지 않고 있는 구간도 존재하게 된다. 즉, 소위 아이들 타임(idle time;유휴시간)이 발생하게 된다. 그러한 이유로, 면접지원자의 동영상을 수신, 검토하는 면접관의 입장에서는 불필요한 시간들을 낭비할 수 있다.
동영상 면접의 구체적인 과정에서, 면접지원자에 대한 평가 질문들에 대하여 일정한 답변시간을 제시하는 경우 그 답변시간을 다 채우지 못하는 경우 답변하는 과정에서도 아이들 타임이 발생할 수 있다. 또는 답변을 완료하였다는 신호를 입력하는 동안에도 아이들 타임이 발생할 수 있다. 평가 컨텐츠를 평가 항목별로 카테고리화하여 질문을 제공할 때, 이에 대한 설명을 하는 과정에서도 실제 면접관의 입장에서는 불필요한 아이들 타임들도 발생할 수 있다. 최근에는 인증수단의 활성화로 인해, 실제 지원면접자에 대한 질문요청을 휴대전화의 SMS를 통해 진행하거나, SMS의 인증번호를 누르게 하여 본인 확인 절차 등을 거치는 경우도 있다. 이러한 시간들은 면접관의 입장에서 면접지원자의 면접 영상을 평가하는 과정에서 아이들 타임이 될 수 있다.
또한, 구인하는 기업이나 기관의 입장에서, 질문과 동떨어진 답변의 내용들이나 또는 중요시되는 키워드를 포함하지 않는 답변내용은 불필요한 부분일 수 있고, 이를 포함하는 영상 구간은 면접관의 입장에서 불필요한 검토 시간일 수 있다. 역으로, 특정 키워드가 포함된 영상구간은 면접관의 입장에서 중요한 영상 구간일 수 있을 것이다. 한편, 구인하는 기업이나 기관의 입장에서는 수준에 미달하는 면접지원자를 보다 빠르게 찾아서 이를 제외할 필요가 있을 수도 있고, 보다 심층면접이나 오프라인 면접을 추가로 실시하여야 할 대상자에 대하여는 보다 면밀하게 동영상 면접영상을 고찰할 필요도 있을 것이다.
결국은, 동영상 면접의 효율성을 위하여, 면접관의 입장에서 불필요한 아이들 타임이 제거된 상태의 면접 동영상이 제공될 필요가 있다. 또는, 효율성과 아울러 면접의 정확성을 위해 특정 구간을 다시 찾아보거나, 보다 요약된 형태의 면접 자료가 제공될 필요가 있다.
공개특허 KR10-2004-0006879호 등록특허 KR10-0453838호 공개특허 KR10-2002-0069973호
본 발명은 동영상이 제공되는 온라인 면접 시스템에서의 면접 효율성을 높이기 위한 수단을 제공하고자 한다.
보다 구체적으로는, 면접관의 입장에서 불필요한 아이들 타임이 제거된 상태의 면접 동영상을 제공하는 면접시스템을 제공하고자 한다. 또한, 면접 평가의 정확성과 효율성을 위해 필요한 영상 부분을 추출하여 제공할 수 면접시스템을 제공하고자 한다.
이를 위한 본 발명은, 면접 지원자가 서비스 서버로부터 질문정보를 수신하여 이에 대응하는 면접 영상을 촬영한 동영상 데이타를 형성하여 이를 송신하는 면접 단말기; 네트워크를 통해 상기 동영상 데이타를 수신하여 저장하고, 상기 동영상 데이타를 가공편집하고, 가공편집된 동영상 데이타를 면접관 단말에 송신하는 서비스 서버; 및 네트워크를 통해 상기 서비스 서버로부터 상기 가공편집된 동영상 데이타를 수신하는 면접관 단말기;를 포함하는 온라인 면접시스템에 있어서,
상기 서비스 서버는, 상기 동영상 데이타의 음성 데이타를 검출하여 상기 검출된 음성데이타를 텍스트 데이타로 변환하여 텍스트 데이타를 인덱스하고, 상기 인덱스된 텍스트 데이타와 대응되는 상기 동영상 데이타를 연계하여 인덱스화하여, 텍스트 데아타와 동영상 데이타를 매칭하는 데이타 매칭부; 상기 텍스트 데이타의 특성을 평가하는 데이타 판별부; 상기 데이타 판별부의 평가에 따라 상기 텍스트 데이타를 선택하고, 상기 선택된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타를 추출하는 데이타 추출부; 및 상기 데이타 추출부를 통해 얻어진 동영상 데이타들을 병합하는 데이타 병합부;를 포함하여 이루어지는 것을 특징으로 하는 면접시스템이다.
그리고, 상기 텍스트 데이타를 인덱스하는 방식은 시간을 함수로 인덱스하는 방법을 채택할 수 있다. 그리고, 상기 텍스트 데이타의 인덱스는 어절 또는 음절 단위로 이루어질 수 있다.
그리고, 상기 데이타 판별부는 아이들 타임 부분을 평가하고, 상기 데이타 추출부는 아이들 타임 부분과 대응되는 동영상 데이타를 추출하며, 상기 데이타 병합부는 아이들 타임과 대응되는 동영상 데이타를 제외하고 병합하는 형태일 수 있다. 그리고, 상기 아이들 타임 부분의 평가는 시간간격을 함수로 하여 평가하는 것일 수 있다. 또는 상기 아이들 타임 부분의 평가는 어절 또는 문장 단위를 함수로 하여 평가하는 것일 수도 있다.
그리고, 상기 면접관 단말기는, 상기 서비스 서버에 동영상 데이타의 가공편집을 요청하는 데이타 편집 요청부를 포함하고, 상기 서비스 서버의 데이타 판별부는 상기 데이타 편집 요청부의 요청사항을 상기 텍스트 데이타와 대비하여 평가하는 것을 특징으로 하는 면접시스템을 제공한다. 그리고, 상기 데이타 편집 요청부는 특정 키워드를 포함하는 동영상 구간을 요청할 수 있으며, 상기 데이타 추출부의 동영상 데이타 추출은, 특정 키워드를 포함하는 텍스트 데이타를 문장 단위로 선택하거나, 시간 간격을 함수로 하여 선택하는 것일 수 있다. 그리고, 상기 데이타 편집 요청부는 기 저장된 질문지와 이에 대응하는 평가항목을 만족하는 동영상 구간을 요청하는 형태도 가능하다. 이때, 상기 데이타 추출부의 동영상 데이타 추출은, 시간 간격을 함수로 하여 선택하는 방법을 택할 수도 있다. 그리고, 상기 서비스 서버의 데이타 판별부는 평가항목과 텍스트 데이타의 일치성을 평가하고, 그 결과를 면접관 단말기로 송신하는 것을 구현할 수도 있다.
그리고 본 발명은, 면접 지원자가 서비스 서버로부터 질문정보를 수신하여 이에 대응하는 면접 영상을 촬영한 동영상 데이타를 형성하는 단계; 네트워크를 통해 상기 동영상 데이타를 수신하여 저장하고, 상기 동영상 데이타를 가공편집하는 단계; 및 네트워크를 통해 상기 서비스 서버로부터 상기 가공편집된 동영상 데이타를 수신하는 단계;를 포함하는 온라인 면접방법에 있어서,
상기 동영상 데이타를 가공편집하는 단계는, 상기 동영상 데이타의 음성 데이타를 검출하여 상기 검출된 음성데이타를 텍스트 데이타로 변환하고 텍스트 데이타를 인덱스 하는 단계; 상기 인덱스된 텍스트 데이타와 대응되는 상기 동영상 데이타를 연계하여 인덱스화하여, 텍스트 데아타와 동영상 데이타를 매칭하는 단계; 상기 텍스트 데이타의 특성을 평가하는 단계; 상기 데이타 특성의 평가에 따라 텍스트 데이타를 선택하고, 상기 선택된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타를 추출하는 단계; 및 상기 추출된 동영상 데이타들을 병합하는 단계;를 포함하는 것을 특징으로 하는 온라인 면접 방법을 제공한다.
본 발명에 따르면, 면접관의 입장에서 불필요한 아이들 타임이 제거된 상태의 면접 동영상을 제공받거나, 또는, 필요한 영상 부분을 추출하여 제공되는 면접 동영상을 제공받음으로써, 온라인 면접의 효율성과 정확성을 기할 수 있다.
또한, 적용 형태에 따라 실제 채용은 물론, 면접트레이닝용으로도 충분히 적용할 수 있다.
또한, 데이타 판별의 알고리즘에 따라 면접 자동평가시스템의 형태나 오토 헤드헌팅 시스템에 적용할 수도 있으며, 질문과 평가항목의 선정에 따라 구직자 매칭시스템에 적용도 가능하다.
도 1은 본 발명의 온라인 면접시스템을 설명하기 위한 기본 구성도이다.
도 2는 본 발명의 면접 단말기의 구성도이다.
도 3은 본 발명의 서비스 서버의 구성도이다.
도 4는 본 발명의 면접관 단말기의 구성도이다.
이하 본 발명의 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의한다.
특히 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 당업자에게 자명하거나 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
도 1은 본 발명의 온라인 면접시스템을 설명하기 위한 기본 구성도이다. 본 발명의 온라인 면접 시스템은 면접 단말기(100), 서비스 서버(200), 면접관 단말기(300)를 포함하여 이루어지며, 서비스 서버(200)를 중심으로 네트워크를 통해 연결된다.
서비스 서버(200)는 면접 단말기(100)에 면접을 위한 질문을 송신하게 된다. 면접 지원자는 면접 단말기(100)를 통해 서비스 서버로부터 질문 정보 내지 지시사항에 받아, 이에 따라 면접 영상을 촬영하여 동영상 데이터를 형성한다. 이러한 기본적인 구성은 온라인 면접 시스템의 일반적인 구성과 흐름이며, 본 발명 또한 이러한 구성을 가진다. 서비스 서버(200)는 면접 단말기(100)를 통해 질문 이외에도 면접 지원자의 필수적인 인적사항, 이력사항 등 구직과정에서 일반적으로 요청하는 사항 등도 요청할 수 있음은 자명하다. 또한 이러한 자료를 면접관이 열람할 수 있도록 하는 등의 내용도 일반적으로 당업자입장에서 자명한 사실들이며 이와 관련한 구체적인 화면구성, 질문 체계, 입력 체계, 구체적 흐름도 등은 매우 다양하게 구성할 수 있을 것이며, 이러한 사항은 본 발명의 핵심적인 기술적 구성을 모호하지 않게 하기 위해 생략한다.
서비스 서버(200)는 면접 단말기(100)로부터 받은 동영상 데이타를 저장하고, 상기 면접관 단말기(300)에 송신하게 된다. 면접관 단말기(300)는 동영상 데이타를 받아 면접 평가를 하게 된다. 면접관 단말기(300)는 면접을 위한 질문사항 내지 앞서 언급된 여러 가지 사항을 서비스 서버(200)에 전송하여 서비스 서버(200)로 하여금 면접 단말기(100)에 여러 가지 사항을 디스플레이하게 한다. 이러한 과정 역시 동영상 면접 시스템의 일반적인 흐름도라고 할 수 있다.
본 발명의 핵심적인 기술 사상은 면접 단말기(100)로 부터 받은 동영상 데이터를 어떻게 가공 편집하여, 면접관 단말기(300)에 송신함으로써, 면접의 효율성과 정확성을 확보할 수 있게 하는 방식에 있다.
도 2는 본 발명의 면접 단말기의 구성도이다. 면접 단말기(100)는 기본적으로 제어부(110), 통신모듈(120), 디스플레이모듈(130), 동영상모듈(140), 카메라모듈(150), 저장모듈(160)을 가질 수 있으며, 필요에 따라 다른 모듈 부분을 구성할 수 있다. 제어부(110)는 각각의 모듈들의 기능을 조율하고 제어한다. 각각의 모듈들은 공지되어 있는 형태의 것들이 채택가능하다.
면접 단말기(100)는 기 설정된 장소에 설치된 단말기일 수도 있고, 면접 시스템의 플랫폼을 갖는 프로그램이 설치된 데스크탑 컴퓨터이나 휴대가 가능한 스마트폰 같은 이동 단말기일 수 있으며, 복수개가 가능하다. 전체적인 면접 시스템은 플랫폼화되어 있는 형태가 바람직하며, 이러한 플랫폼이 면접 단말기(100)에 설치되어 서비스 서버와 연동되게 될 것이다. 면접 단말기(100)에서 생성하는 동영상 데이타는 영상 데이타와 음성 데이타를 포함하고 있으며, 영상 데이타와 음성 데이타가 서로 대응되게 서로 인덱스 되어 있을 수 있다. 인덱스 방식은 시간을 매개로 인덱스 될 수 있으며, 또는 다양한 코딩 방식으로 인덱스 될 수 있다. 영상 데이타와 음성 데이타가 결합된 형태로 서비스 서버(200)로 송신되거나, 또는 분리되어 송신될 수도 있고, 결합된 형태의 것도 서비스 서버(200) 내에서 분리될 수 있음은 자명하다.
한편, 면접 단말기(100)에서 서비스 서버(200)로 보내는 동영상 데이타는 질문에 대한 답변 부분만의 촬영만이 아니라, 면접질문의 내용이나, 질문을 파악하기 위해 소요되는 핸들링 타임(handling time)등의 시간들을 포함되거나, 답변을 하지 못하고 있는 시간들이 있을 수 있고, 이러한 시간들은 아이들 타임(idle time;유휴시간)을 포함할 수 있게 된다. 면접 단말기(100)의 제어부(110)를 통해 촬영 시기의 시작과 종결을 지시함으로써 답변 부분만을 촬영한다고 하여도 다양한 형태의 아이들 타임은 발생하게 된다. 서비스 서버(200)에서 개별 질문에 대한 답변시간을 설정하여 이 경우에만 촬영하게 하는 방식을 사용하게 되는 경우라도 역시 다양한 형태의 아이들 타임이 발생할 수 있다. 플랫폼의 방식을 개선하여 면접 단말기(100)의 플로우를 조절 내지 제어한다고 하여도, 결국, 면접 단말기(100)에서 서비스 서버(200)로 보내지는 동영상 데이타는 다양한 종류의 아이들 타임을 포함할 수 밖에 없다. 플랫폼 방식을 개선하여 최소한의 아이들 타임을 갖게 할 수는 있겠으나, 이 경우, 면접 지원자는 면접 응답 이외의 여러 가지 행위를 하여야 하고 이는 면접에 집중하지 못하게 하므로, 오히려 서비스 서버(200)를 통해 동영상 데이타를 가공 편집하는 것이 바람직할 것으로 생각된다. 플랫폼의 형태는 일정한 질문을 영상이나 텍스트로 화면에 디스플레이하고, 이에 대한 답변을 일정시간 부여하는 형태로 다음 질문으로 진행하는 형태가 될 것이다. 물론 다양한 형태의 플랫폼 설계가 가능할 것이지만, 여전히 아이들 타임이 발생된다는 사실은 변함이 없을 것이다.
도 3은 본 발명의 서비스 서버의 구성도로서, 동영상 데이타의 가공 편집을 실행하는 핵심적인 부분이다. 본 발명의 온라인 면접 시스템의 서비스 서버(200)는 데이타 매칭부(210), 데이타 판별부(220), 데이타 추출부(230) 및 데이타 병합부(240)를 포함하고 있다.
데이타 매칭부(210)는 수신받은 동영상 데이타에서 음성 데이타를 검출하여 상기 검출된 음성데이타를 텍스트 데이타로 변환하고, 해당 텍스트 데이타를 인덱스하되, 상기 인덱스는 상기 텍스트 데이타와 대응되는 상기 동영상 데이타와 연계되어 인덱스 되게 하여야 한다. 이렇게 함으로써, 텍스트 데이타와 동영상 데이타는 연관성 있게 매칭되게 된다. 데이타 매칭부(210)는 상기 과정을 수행하기 위한 보다 구체적인 기능부들(211, 212,..)을 포함할 수 있다. 예컨대, 영상(video) 데이타와 음성(audio) 데이타를 포함하는 동영상 데이타에서, 음성 부분만을 검출하여 이를 텍스트 데이타로 변환하기 위한 기능부를 포함할 수 있다. 이러한 기능을 수행하기 위한 모듈은 음성 데이타를 검출하는 오픈 소스(예를 들면, FFmpeg 라이브러리), 음성 인식에 관한 다양한 오픈 소스(예를 들면, HTK 오픈 소스)를 활용할 수 있으며, 이러한 부분은 공지의 사항으로 구체적으로 언급하지는 않는다.
상기 텍스트 데이타를 인덱스하는 방식은 여러가지 방식들이 있을 수 있다. 가장 편리한 방식은 시간을 함수로 인덱스 하는 방식일 것이다. 텍스트 데이타에 대한 대응되는 시간을 인덱스하고, 해당 인덱스는 동영상 데이타의 인덱스와 대응되게 매핑화 내지 사상화함으로써, 텍스트 데이타와 동영상 데이타는 서로 매칭되어진다. 따라서, 텍스트 데이타의 가공 편집 형태를 동영상 데이타에 적용할 수 있게 된다. 시간을 함수로 인덱스 하는 경우에, 인덱스를 음절 단위나, 또는 어절 단위로 할 수도 있을 것이다. 즉, 텍스트 데이타의 어떤 위치의 음절은 특정 시간의 인덱스를 가지게 되고, 해당 인덱스와 대응되는 동영상 데이타의 인덱스를 통해 가공 편집할 동영상 데이타의 위치를 검출할 수 있게 된다.
데이타 판별부(220)는 텍스트 데이타의 여러가지 특성을 평가하는 부분으로, 본 발명에서 동영상 데이타의 가공편집의 기준은 텍스트 데이타의 특성을 파악하는데서 시작된다. 동영상 데이타의 가공편집을 위해 음성을 음향음성학(acoustic phonetics)으로 분석하여 심리적 자신감이나 감정상태 등을 분석하는 것도 가능하다고 하나, 오류의 가능성이 높으며 객관적 기준이 정립되지 않은 상태이다. 또는 동영상 데이타의 가공편집을 위해 영상내의 면접 지원자의 움직임, 표정, 자세 등을 분석하여 이를 특정 기준에 맞춰 분석하는 것도 영상분석기술의 발달로 가능하다고 하나, 이 역시 오류의 가능성이 높고 객관적 기준을 세우기 어렵다고 생각된다. 본 발명에서는 텍스트 데이타의 특성 파악을 통해, 아이들 타임 부분의 동영상을 제외하는 가공 편집을 함으로써 면접관이 면접 평가를 하는 시간등을 줄일 수 있게 하는 것도 하나의 기술적 과제로 하고 있다. 그리고, 텍스트 데이타의 특성 파악을 통해, 특정 답변을 포함하는 부분을 검색하는 가공 편집을 하여 보여주거나, 면접 질문에 대한 답변의 핵심적 사항만을 모아 하이라이트 형태로 가공 편집을 하여 보여주는 것도 가능하게 한다. 또한, 텍스트 데이타의 특성 분석을 통해 시스템적으로 평가항목에 대한 점수를 부여하는 방식등을 통해 면접 평가를 수행하는 것도 가능하다.
데이타 판별부(220)는 텍스트 데이타를 분석하여 아이들 타임 부분을 평가할 수 있다. 플랫폼 내에서 아이들 타임을 어떻게 정의하느냐에 따라 매우 다양한 아이들 타임을 평가할 수 있다. 가장 쉽게 생각할 수 있는 것은 질문과 답변사이의 시간이 될 수 있다. 또한, 질문이 개시되는 시간도 면접관의 입장에서는 아이들 타임이 될 수 있다. 왜냐하면, 면접관은 이미 질문의 내용을 알고 있기 때문에 동영상 데이타에서 해당 부분은 불필요한 부분일 수 있기 때문이다. 그리고, 특정질문에 대한 답변시간을 제한하는 형태로 플랫폼이 설계되었다면, 답변시간이 지나지 않은 상황에서 이미 답변을 마쳤다면, 답변하지 않고 있는 시간 또한 아이들 타임이 될 수 있다. 앞서 언급하였듯이 텍스트 데이타를 시간의 함수로 인덱스 한 경우, 각각의 인덱스 사이의 시간의 간격을 함수로 하여 평가함으로써 이러한 아이들 타임을 찾아낼 수 있다. 물론, 다른 여러 가지 알고리즘을 통해 아이들 타임을 찾아 내는 것도 가능할 것이다. 예를 들면, 텍스트 데이타의 분석 내지 평가에 있어서, 문장 단위 또는 어절 단위를 함수로 하여 평가할 수 있을 것이다. 문장은 기본적으로 특정 생각을 내포하는 단위로 이해되기 때문에 문장 사이의 간격은 아이들 타임이 될 수 있다. 어절의 경우에도 생각이 포함되는 단어를 포함하고 있을 수 있으므로, 보다 많은 연구를 통해 어절 분석의 방식이 객관화된다면 충분히 사용가능한 함수가 될 것이다.
데이타 추출부(230)는 데이타 판별부(220)의 평가에 따라 동영상 데이타의 특정 부분을 추출할 수 있고, 추출된 동영상 데이타를 필요에 따라 선택하거나 버릴 수 있는 기능을 한다. 동영상 데이타의 특정 부분을 추출하기 위한 전제는 텍스트 데이타의 평가 내지 분석이 전제되어야 하므로, 순서상으로는 텍스트 데이타의 추출이 먼저 이루어질 것이고, 추출된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타의 인덱스를 찾아 동영상 데이타를 추출하게 될 것이다. 앞서 언급된 아이들 타임의 평가를 예로 들면, 아이들 타임에 해당하는 부분과 대응되는 동영상 데이타를 버리거나, 또는 아이들 타임이 아닌 부분에 해당하는 부분과 대응되는 동영상 데이타를 추출하게 될 것이다.
데이타 병합부(240)는 데이타 추출부(230)를 통해 얻어진 동영상 데이타들을 병하여 새로운 동영상 데이타를 구성하는 역할을 한다. 데이타 병합에 대한 오픈 소스를 활용하여 병합모듈을 구성할 수 있음은 물론이며, 이러한 사항은 발명의 요지를 모호하지 않게 하기 위해 생략한다.
기타 서비스 서버는 여러가지 기능부를 포함할 수 있다. 상기 추출하여 병합된 새로운 동영상 데이타에 대하여 코딩을 하여 새로운 이름으로 저장하는 DB를 포함할 수 있으며, 그 밖에 온라인 면접 시스템의 편리성을 위해 구현될 수 있는 다양한 플랫폼의 기능을 위한 요소들을 구비할 수 있음은 물론이다.
도 4는 본 발명의 면접관 단말기(300)의 구성도로서, 온라인 면접 시스템을 위한 다양한 기능을 갖춘 모듈을 구비할 수 있다. 본 발명에서는 특히, 서비스 서버(200) 대하여 동영상 데이타를 필요에 맞게 가공을 하도록 요청하는 데이타 편집 요청부(310)를 구비하고 있다. 데이타 편집 요청부(310)가 특정 조건을 만족하는 요청을 하게 되는 경우, 텍스트 데이타와 요청 조건을 대비하여 평가함으로서 특정 조건 구간의 텍스트 데이타 구간을 찾을 수 있고, 마찬가지 방식으로 요청 조건을 만족하는 동영상 데이타를 추출하여 이를 병합하여 제공할 수 있을 것이다.
면접관 단말기(300)는 기업이나 공공기관의 특정서버와 연동되는 형태의 단말기일 수도 있다. 기업이나 공공기관이 복수일 있고, 단수인 경우라면 면접관 단말기(300)는 복수개의 형태일 수 있다.
상기 데이타 편집 요청부(310)는 특별히 면접 단말기(100)를 통해 동영상 데이타가 서비스 서버(200)에 저장된 이후 이의 가공 편집을 요청하는 경우일 수 있다. 특정 키워드를 포함하는 동영상 구간을 요청하는 경우, 앞서 설명한 바와 마찬가지로, 텍스트 데이타와 대비하여 텍스트 데이타를 추출한 후에 이에 대응되는 동영상 데이타를 추출하는 방식이 될 것이다. 키워드를 포함하는 동영상 구간의 설정의 경우, 선택되는 텍스트 데이타는 음절이나, 어절 단위가 아니라 최소 문장단위로 선택되어야 할 것이다. 좀 더 확장하여 문단 단위의 것이 바람직할 것인데, 이를 찾아내는 알고리즘은 시간 간격을 함수로 하는 알고리즘이 바람직할 것이다. 생각이나 사상이 전환되는 시기에 어느 정도의 시간 간격이 있을 수 있고, 이러한 시간 간격을 파악하는 알고리즘을 통해 텍스트 데이타의 선택단위를 결정할 수도 있을 것이다. 최근에는 텍스트 데이타의 의미 분석 기술이 발달하여, 특정 키워드를 포함하는 부분과 연관성이 있는 텍스트를 추출하는 기술도 발달하였기 때문에 이러한 기술을 이에 응용할 수도 있을 것이며, 이러한 부분은 본 발명의 기술적 사상내의 것으로 해석되어야 할 것이다.
한편, 통상적으로 면접단말기(100)를 통한 면접 지원자의 면접이 이루어지기 전에 면접관 단말기 내지 면접관 단말기와 연동되는 다른 서버를 통해 서비스 서버(200)에 질문사항 내지 기타 사항이 이미 전달된다. 따라서, 면접관 단말기(300)의 데이타 편집 요청부(310)에서 기 저장된 질문지와 이에 대응하는 평가항목을 만족하는 동영상 구간을 요청할 수 있다. 이 경우, 면접관 단말기(300)에서 받아 볼 수 있는 동영상 데이타는 면접 지원자의 답변의 하일라이트만을 추출한 형태의 동영상 데이타일 수 있다. 데이타 판별부(220)의 평가 방법이나, 데이타 추출부(230)의 추출방식은 앞서 언급한 형태의 것들이 응용될 수 있을 것이다.
또는, 온라인 면접 시스템의 플랫폼의 구현 방식의 변화를 통해, 미리 서비스 서버(200)에서 하일라이트 영상을 추출하는 알고리즘을 구비하도록 하여 하일라이트 영상을 별도로 저장하는 방식도 가능하다. 데이타 편집 요청부(310)는 면접관 단말기(200)를 통해 해당 동영상 데이타를 선택할 수 있다. 필요에 따라서는 아이들 타임이 포함된 원본의 동영상 데이타를 통해 보다 심도있는 선택을 할 필요성이 있을 경우라면, 원본 동영상 데이타를 선택할 수 있을 것이다.
기 저장된 질문지의 요지를 추출하고, 텍스트 데이타를 대비 비교하여 이의 일치 정도의 판별을 통해 면접 지원자의 역량을 수치화하는 형태도 가능할 것이다. 텍스트 데이타의 특성을 평가하는 데이타 판별부(220)를 통해 이러한 기능의 수행이 가능할 것이다. 따라서, 데이타 판별의 알고리즘에 따라 면접 자동평가시스템의 형태나 오토 헤드헌팅 시스템에 적용할 수도 있으며, 질문과 평가항목의 선정에 따라 구직자 매칭시스템에 적용도 가능하다.
특히, NCS(National competency stanadards; 국가직무능력표준)은 그 분류체계 및 구성이 매우 잘 이루어져 있기 때문에 본 발명의 기술개념을 사용하여 온라인 면접시스템에 적용하는 경우라면, 정확성과 효율성이 높아진 면접 자동평가시스템으로의 구현도 가능할 것으로 보인다.
또한, 적용 형태에 따라 실제 채용은 물론, 면접트레이닝용으로도 충분히 적용할 수 있다. 그리고, 데이타 판별부(220)를 통해 욕설 등의 불건전한 요소를 포함하는 경우를 추출하여 이를 평가항목에 추가할 수도 있을 것이다.
그리고 본 발명은 면접 지원자가 서비스 서버로부터 질문정보를 수신하여 이에 대응하는 면접 영상을 촬영한 동영상 데이타를 형성하는 단계; 네트워크를 통해 상기 동영상 데이타를 수신하여 저장하고, 상기 동영상 데이타를 가공편집하는 단계; 및 네트워크를 통해 상기 서비스 서버로부터 상기 가공편집된 동영상 데이타를 수신하는 단계;를 포함하는 온라인 면접방법에 있어서, 상기 동영상 데이타를 가공편집하는 단계는, 상기 동영상 데이타의 음성 데이타를 검출하여 상기 검출된 음성데이타를 텍스트 데이타로 변환하고 텍스트 데이타를 인덱스 하는 단계; 상기 인덱스된 텍스트 데이타와 대응되는 상기 동영상 데이타를 연계하여 인덱스화하여, 텍스트 데아타와 동영상 데이타를 매칭하는 단계; 상기 텍스트 데이타의 특성을 평가하는 단계; 상기 데이타 특성의 평가에 따라 텍스트 데이타를 선택하고, 상기 선택된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타를 추출하는 단계; 및 상기 추출된 동영상 데이타들을 병합하는 단계;를 포함하는 것을 특징으로 하는 온라인 면접 방법을 제공한다. 상기한 방법이 구현하는 플랫폼을 구축하여 실시될 수 있을 것이며, 기타 부가적 기능이 추가될 수 있을 것이다.
이상에서 본 발명의 바람직한 실시예에 대해 도시하고 설명하였으나, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.
100 : 면접 단말기
200 : 서비스 서버
210 : 데이타 매칭부 220 : 데이타 판별부
2230 : 데이타 추출부 240 : 데이타 병합부
300 : 면접관 단말기 310 : 데이타 편집 요청부

Claims (13)

  1. 면접 지원자가 서비스 서버로부터 질문정보를 수신하여 이에 대응하는 면접 영상을 촬영한 동영상 데이타를 형성하여 이를 송신하는 면접 단말기;
    네트워크를 통해 상기 동영상 데이타를 수신하여 저장하고, 상기 동영상 데이타를 가공편집하고, 가공편집된 동영상 데이타를 면접관 단말에 송신하는 서비스 서버; 및
    네트워크를 통해 상기 서비스 서버로부터 상기 가공편집된 동영상 데이타를 수신하는 면접관 단말기;를 포함하는 온라인 면접시스템에 있어서,
    상기 서비스 서버는,
    상기 동영상 데이타의 음성 데이타를 검출하여 상기 검출된 음성데이타를 텍스트 데이타로 변환하여 텍스트 데이타를 인덱스하고, 상기 인덱스된 텍스트 데이타와 대응되는 상기 동영상 데이타를 연계하여 인덱스화하여, 텍스트 데이타와 동영상 데이타를 매칭하는 데이타 매칭부;
    상기 텍스트 데이타의 특성을 평가하는 데이타 판별부;
    상기 데이타 판별부의 평가에 따라 상기 텍스트 데이타를 선택하고, 상기 선택된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타를 추출하는 데이타 추출부; 및
    상기 데이타 추출부를 통해 얻어진 동영상 데이타들을 병합하는 데이타 병합부;를 포함하여 이루어지고,
    상기 면접관 단말기는, 상기 서비스 서버에 특정 키워드를 포함하는 동영상 구간이 포함되도록 동영상 데이타의 가공편집을 요청하는 데이타 편집 요청부를 포함하되,
    상기 데이타 매칭부에서 상기 텍스트 데이타를 인덱스하는 방식은 시간을 함수로 인덱스하되 텍스트의 어절 단위로 이루어지며,
    상기 데이타 판별부는 어절 단위로 인덱스된 시간의 간격을 함수로 하여 평가하여 아이들 타임을 평가하며, 또한 텍스트 테이타에 특정 키워드가 포함되었는지 여부를 평가하며,
    상기 데이타 추출부는 동영상 데이타를 추출하기 위한 텍스트 데이타를 선택함에 있어서, 텍스트 데이타 중 아이들 타임 부분으로 평가된 부분은 제외하고, 특정 키워드를 포함하는 텍스트 데이타는 특정 키워드가 포함된 어절을 포함하는 문장 단위로 텍스트 데이타가 선택되어, 선택된 텍스트 데이타의 인덱스와 대응되는 동영상 데이타를 추출하는 것을 특징으로 하는 면접시스템.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
KR1020160032645A 2016-03-18 2016-03-18 온라인 면접 시스템 및 그 방법 KR101830747B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160032645A KR101830747B1 (ko) 2016-03-18 2016-03-18 온라인 면접 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160032645A KR101830747B1 (ko) 2016-03-18 2016-03-18 온라인 면접 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20170108554A KR20170108554A (ko) 2017-09-27
KR101830747B1 true KR101830747B1 (ko) 2018-02-21

Family

ID=60036228

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160032645A KR101830747B1 (ko) 2016-03-18 2016-03-18 온라인 면접 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR101830747B1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102011870B1 (ko) * 2018-10-29 2019-08-20 박혁재 동영상 기반 구인구직 매칭 서버 및 방법
KR102297947B1 (ko) * 2019-07-25 2021-09-03 주식회사 제네시스랩 온라인 면접을 제공하는 방법, 시스템 및 컴퓨터-판독가능 매체
CN112862436A (zh) * 2021-02-01 2021-05-28 五八到家有限公司 在线面试方法、装置、设备和存储介质
CN114220055B (zh) * 2021-12-15 2024-04-05 中国平安人寿保险股份有限公司 辅助用户面谈的方法、装置、计算机设备及存储介质
KR102607570B1 (ko) * 2022-02-25 2023-11-29 박경호 데이터 수신자의 권한에 따라 편집된 면접 데이터를 제공하는 면접 플랫폼 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003263537A (ja) * 2002-03-07 2003-09-19 Sanyo Electric Co Ltd 通信方法、通信システム、中央装置、コンピュータプログラム、及び記録媒体
JP2007189343A (ja) * 2006-01-11 2007-07-26 Toshiba Corp 映像要約装置、映像要約方法および映像要約プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003263537A (ja) * 2002-03-07 2003-09-19 Sanyo Electric Co Ltd 通信方法、通信システム、中央装置、コンピュータプログラム、及び記録媒体
JP2007189343A (ja) * 2006-01-11 2007-07-26 Toshiba Corp 映像要約装置、映像要約方法および映像要約プログラム

Also Published As

Publication number Publication date
KR20170108554A (ko) 2017-09-27

Similar Documents

Publication Publication Date Title
KR101830747B1 (ko) 온라인 면접 시스템 및 그 방법
US20200143329A1 (en) Systems and methods for unbiased recruitment
CN111741356B (zh) 双录视频的质检方法、装置、设备及可读存储介质
US9275370B2 (en) Virtual interview via mobile device
KR102011870B1 (ko) 동영상 기반 구인구직 매칭 서버 및 방법
US20070088601A1 (en) On-line interview processing
US20150356512A1 (en) System and Method for Optimizing Job Candidate Referrals and Hiring
CN111641514A (zh) 电子会议智能
WO2021175019A1 (zh) 音视频录制引导方法、装置、计算机设备及存储介质
CN104463423A (zh) 一种格式化的视频简历采集方法及系统
CN109766412B (zh) 一种基于图像识别的学习内容获取方法及电子设备
US20200357302A1 (en) Method for digital learning and non-transitory machine-readable data storage medium
KR20210001419A (ko) 면접 컨설팅 서비스를 제공하기 위한 사용자 단말, 시스템 및 방법
CN110211590B (zh) 一种会议热点的处理方法、装置、终端设备及存储介质
US9525841B2 (en) Imaging device for associating image data with shooting condition information
KR102283134B1 (ko) 회의록 열람 문서 생성 방법 및 그 장치
CN112261419B (zh) 直播面试的方法、设备及系统
US9547995B1 (en) Dynamic instructional course
KR102523808B1 (ko) 외국인을 위한 ai 면접 수행 방법 및 장치
KR102225472B1 (ko) 인터뷰 코칭 장치 및 방법
WO2017159902A1 (ko) 온라인 면접 시스템 및 그 방법
CN111091035A (zh) 一种科目识别方法及电子设备
KR101863721B1 (ko) 모바일 리서치 서비스 제공 방법 및 이를 기록한 기록매체
US11810132B1 (en) Method of collating, abstracting, and delivering worldwide viewpoints
KR101723500B1 (ko) 정보 제공 장치 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant