KR20060128022A - 사용성 테스트를 실시하기 위한 자동화 시스템 및 방법 - Google Patents

사용성 테스트를 실시하기 위한 자동화 시스템 및 방법 Download PDF

Info

Publication number
KR20060128022A
KR20060128022A KR1020067019373A KR20067019373A KR20060128022A KR 20060128022 A KR20060128022 A KR 20060128022A KR 1020067019373 A KR1020067019373 A KR 1020067019373A KR 20067019373 A KR20067019373 A KR 20067019373A KR 20060128022 A KR20060128022 A KR 20060128022A
Authority
KR
South Korea
Prior art keywords
computer
recording
recorder
based method
input streams
Prior art date
Application number
KR1020067019373A
Other languages
English (en)
Inventor
윌리엄 해밀턴
도널드 알렌 달튼
딘 크래븐
Original Assignee
테크스미쓰 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 테크스미쓰 코포레이션 filed Critical 테크스미쓰 코포레이션
Publication of KR20060128022A publication Critical patent/KR20060128022A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3438Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/3476Data logging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3419Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/86Event-based monitoring

Abstract

본 발명은 사용성 테스트(usability test)를 실시하기 위한 자동화 시스템 및 방법에 관한 것이다. 상기 시스템은 사용성 테스트를 실시하고, 사용자로부터의 비디오와 오디오 모두와 함께 컴퓨터 스크린 상에서 발생하는 이벤트를 동기화시켜 레코딩하고, 애플리케이션과 운영 체제에서 발생하는 이벤트의 완전한 연대기를 형성한다. 구성에서 특정된 설정에 따라서, 상기 시스템은 그 밖의 다른 입력 스트림을 캡처하고, 그 후, 요망 이벤트와 캡처와 함께, 사용성 테스트의 완전한 레코딩을 저장한다. 시스템에 의해, 원격 관찰자가 상기 사용성 테스트의 레코딩을 실시간으로 관찰할 수 있고, 레코딩 동안 중요 순간(critical moment)에서 표시가 설정되며, 이는 레코딩된다. 또한 상기 시스템에 의해, 관리자가 선호도를 구성할 수 있고, 사용성 테스트와 레코딩 파일을 가져와서 분석할 수 있고, 상기 분석된 기준을 바탕으로 사용성 테스트의 프리젠테이션 비디오를 준비할 수 있다.

Description

사용성 테스트를 실시하기 위한 자동화 시스템 및 방법{AUTOMATED SYSTEM AND METHOD FOR CONDUCTING USABILITY TESTING}
본 발명은 사용성 테스트에 관한 것이며, 더욱 세부적으로는 고유한 자동화 시스템과, 생산 사용성 테스트를 실시하는 방법에 관한 것이다.
사용성 전문가(usability professionals)가 사용성 테스트(usability testing)를 실시하여 더욱 생산적이고, 효율적이며, 사용자 친화적인 제품을 생산할 수 있도록 하기 위한 표준이 현재는 존재하지 않는다. 예를 들어, 전문가는 윈도우즈 애플리케이션, 또는 소프트웨어 프로그램, 또는 웹 사이트 설계안의 특정 특징이나 양태, 또는 훈련용 비디오 및 문서의 제작에 있어서, 사용성 테스트를 실시하기를 원할 수 있다. 이러한 제품들을 대상으로 테스트를 실시하기 위한 절차가 사용자 전문가마다 다양할 수 있지만, 테스트의 핵심적인 부분은 제품의 특징, 또는 양태에 관련된 어떠한 것을 사용자가 작동하느냐, 하지 않느냐를 이해하는 것이다. 공통적인 테스트 시나리오가 다음과 같다.
전문가(이하, 검사자)는 제품의 사용성을 테스트하기 위해 4-8개의 테스트 대상, 즉 사용자를 보유하고 있다. 그 후, 사용자는 가령, 윈도우즈 애플리케이션, 또는 웹 사이트, 또는 소프트웨어 프로그램 등에 관련된 특정 작업을 수행할 것을 요구받는다. 이러한 프로세스 동안, 검사자는 사용자를 관찰하여, 사용자의 수행력과 발생하는 문제점에 대하여 랩탑 컴퓨터, 또는 서면에 레코딩한다. 일부 경우에서, 검사자는 사용자의 표정 및 음성을 녹화하기 위한 비디오 장비를 또한 사용할 수 있다. 완료되면, 검사자는 하이라이트 장면들을 하나로 통합하여, 어떠한 문제점이 본 프로그램에 존재하는지에 대한 자료로서, 또는 사용자가 그러한 행동을 한 이유에 대한 자료로서 개발자와 엔지니어에게 제공할 수 있다. 이러한 테스트의 요약본과 상세한 보고서가 준비되며, 통계적 분석, 그래프, 차트, 그 밖의 다른 데이터가 생성된다.
이러한 사용성 테스트는 전문가에게는 유용한 도구인 반면에, 전문가가 테스트를 실시하고 정보가 수집, 저장, 검색, 복구되는 방식은 구식이며, 수동적인 상호 작용에 의존한다. 인간인 검사자는 관찰 정보를 수동으로 레코딩해야한다. 이에 따라서 정보 분실이 발생하고, 관련 정보가 레코딩되지 않거나, 검사자가 레코딩하는 동안 관찰되지 못할 수 있다. 비디오 설비가 사용될 경우, 이에 따라 사용자의 표정 및 음성 정보는 제공될 수 있으나, 윈도우즈 애플리케이션, 또는 프로그램, 또는 웹 사이트, 또는 소프트웨어 프로그램 어디쯤 사용자가 진행하고 있는지에 대한 정보는 제공되지 못하며(왜냐하면 이러한 정보는 오직 영상과 음성에 독립적인 검사자로부터 획득되어질 수 있기 때문이다.), 검사자는 무엇으로 인하여 사용자의 특정한 표정 및 음성이 발생하였는지를 정확하게 알지 못할 것이다.
그러나 본 발명에 의하여, 컴퓨터 활동과, 사용자의 비디오 및 오디오를 레코딩하기 위해 설계된 소프트웨어 프로그램을 이용하여 사용성 테스트를 실시하는 자동화 시스템 및 방법이 창조됨으로써, 이러한 문제점이 해결됐다. 특히, 사용자에 의해 생성되는 하나 이상의 대응하는 컴퓨터 입력 스트림을 레코딩할 수 있도록, 소프트웨어 프로그램이 구성된다. 상기 입력 스트림은, (a) 컴퓨터 스크린의 비디오와, (b) 상기 컴퓨터로부터의 사용자의 카메라 비디오와, (c) 상기 컴퓨터 스크린 상의 텍스트 및 사용자에 의해 타이핑된 임의의 키 스트로크(key stroke)의 키보드 텍스트와, (d) 사용자로부터의 오디오와, (e) 어느 애플리케이션이 활성화 상태인지, 어느 대화/창이 활성화 상태인지, 어느 버튼/메뉴 아이템이 사용자에 의해 선택되는지의 시스템 이벤트, (f) 마우스 클릭과, (g) 웹 페이지 변동을 포함한다(그러나 제한받지 않음). 이러한 입력 스트림은 프로그램에 의해 레코딩되고, 레코딩된 세그먼트의 검색가능한 파일로 삽입된다. 그 후, 검사자는 삽입되는 레코딩된 세그먼트의 검색을 준비할 수 있으며, 이러한 검색에 대하여 시각적인 출력을 생성하고, 컴퓨터 활동을 분석할 수 있다.
본 발명은, 3가지 이상의 주요 이점을 제공하며, 이는 (1) 프로그램이 모든 유효하고 대응하는 컴퓨터 활동과, 오디오와, 비디오 입력 스트림(즉, 전술한 (a) ~ (g))을 캡처할 수 있다는 것이다. 또한 이러한 정보는, 긴 기간 동안, 가령 며칠, 또는 몇달 동안에 걸쳐 발생하는 컴퓨터 시스템 활동의 커다란 집합체를 형성할 수 있다. 또 하나의 이점은, (2) 프로그램은 모든 컴퓨터 활동과, 오디오와, 비디오 입력 스트림(즉, 전술한 (a) ~ (g))을 모두 자동으로 동기회시킬 수 있다는 것이며, (3) 상기 프로그램이 상기 레코딩된 정보를 자동으로 표시할 수 있다는 것이다. 상기 레코딩된 정보는 레코딩된 세그먼트의 내용, 또는 의미에 의해 특정하 게 식별된다. 예를 들어, 사용되는 특정 애플리케이션, 활동 대화(active dialog)에 의해, 또는 사용자에 의해 선택된 특정 버튼에 의해, 상기 레코딩된 정보는 식별될 수 있다. 또 하나의 이점은, (4)상기 프로그램이, 임의의 선택된 컴퓨터 활동, 또는 레코딩된 세그먼트의 전체 스크린 멀티미디어 비디오를 디스플레이함으로써, 모든 이벤트에 대한 시각적인 레코드를 제공한다는 것이다.
다음의 특허들은 제품의 사용성에 관련하여 공개됐다.
발명자 특허 날짜 특허의 명칭 U.S. 특허 No.
Okunishi 03/06/2003 Learning Support System US 2003/0046057
Dong 02/25/2003 Method, System And Program For Performing Remote Usability testing 6,526,526
Bushey 12/26/2002 Method And System For AutomatingCreation Of Customer-Centric Interfaces US 2002/0196277
Barrett 12/19/2002 Business Engagement Method US 2002/0194053
Mitry 12/06/2001 Interactive Rewards-BasedPedagogical System Using An Engine of Artificial Intelligence US 2001/0049084
Hameluck 05/22/2001 Buffered Screen Capturing Software Software Tool For Usability Testing of Computer Applications 6,237, 138
Ghahramani 09/15/1998 Method For Measuring The Usability of A System 5,808,908
Ghahramani 03/03/1998 Method For Measuring The Usability of A System And For Task Analysis And Re-Engineering 5,724,262
Kerr 06/15/1993 System For Testing A Performance OfUser Interactive-Commands Using An Emulator-Overlay For Determining The Progress Of The User Timing Response 5,220,658
Kerr 02/04/1992 System For Testing Human Factors And Performance Of A System Program 5,086,393
Heath 07/04/1989 Simulation Of Computer Program External Interfaces 4,845,665
각각의 선행 특허가 사용성 테스트, 또는 분석에 관련한 방법 및 시스템에 대해 공개하고 있다. 그러나, 선행 특허의 각각의 장치는, 본 출원인의 발명에 비하여, 그 응용예가 매우 제한적이다.
가령, 제품의 사용성을 테스트하기 위한 방법을 공개하는 다수의 특허가 발견됐다. U.S. 특허 No. 6,526,526, "Method, System And Program For Performing remote Usability Testing(원격 사용성 테스트를 수행하기 위한 방법, 시스템 및 프로그램)"은, 네트워크에 연결되어 있는 데이터 처리 시스템을 사용하여 소프트웨어 애플리케이션의 원격 자동 사용성 테스트를 수행하기 위한 방법, 시스템, 프로그램을 공개한다. 특정 소프트웨어 애플리케이션에 대한 자동 사용성 테스트를 사용자가 제공받는다. 사용자는 자동화 사용성 테스트의 활성화에 응답하여 특정 작업을 수행한다. 소프트웨어 애플리케이션의 사용성을 나타내는 데이터가 다음의 (1) ~ (2) 과정을 통해 수집된다. (1) 사용자가 디스플레이된 프롬프트에 응답한다. (2) 정보, 가령, 사용자가 요청된 특정 작업을 수행하기 위해 걸린 시간이 간접 수집된다. 그 후, 데이터가 컴파일되며, 네트워크 내에서 원격 사이트의 데이터 수집 위치로 자동 전송되어, 다중 데이터 처리 시스템으로부터의 사용성 테스트 데이터가 다중 데이터 처리 시스템으로부터 원격으로 떨어진 위치에서 수집된다.
이와 유사하게, U.S. 특허 No.5,220,658, "System For Testing A Performance of User Interactive-Commands Using An Emulator Overlay For Determining The Progress of The User Timing Response"와, U.S. 특허 No. 5,086,393 "System For Testing Human Factors And Performance of A System Program"이 상호 작용 시스템 프로그램의 특정 속성(가령, 성능 및 사용성)을 테스트하기 위한 시스템을 공개한다. 상기 시스템은, 스크린 이미지와, 사용자 세션 동안 입력되는 그에 연계된 키 스트로크를 포함하는 사람 요인 데이터를 캡처하여, 상기 스크린 이미지와 키 스트로크 간의 시간 간격을 측정하고, 소프트웨어가 내장된 호스트 컴퓨터의 사용성을 판단하기 위해, 이러한 데이터를 시스템 분석자에게 제공할 수 있다. 상기 시스템은, 이전 세션과의 비교를 위해, 사용자 세션의 사람 요인을 저장하는 메모리 장치를 추가로 제공하고, 이전 세션과의 비교를 위해 에뮬레이터를 사용하며, 시스템의 사용자 수행력을 판단할 수 있다.
앞서 언급한 특허에서, 사용성 방법은 스크린 텍스트 및 키보드 응답의 레코딩, 또는 저장에 대한 것일 뿐이다. 이러한 공개된 특허 중 어느 것도, 예를 들어, 본 출원인의 사용자에 의해 생성되는 다중 컴퓨터 입력 스트림의 레코딩을 제안하지 않으며, 프로그램 개발자가 전체 스크린 멀티미디어 비디오를 검토할 수 있도록 이러한 모든 이벤트에 대한 시각적인 레코드를 형성하지 않는다.
앞서 언급한 특허 중 하나가, 컴퓨터 모니터 상에서 나타나는 모든 진행 활동에 대한 실시간 비디오 레코딩을 공개하고 있다. U.S. 특허 No. 6,237,138 "Buffered Screen Capturing Software Tool For Usability Testing of Computer Applications"가 컴퓨터 모니터 상에서 나타나는 모든 진행 활동에 대한 실시간 비디오 레코더로서 기능하는 소프트웨어 사용성 툴을 공개한다. 임의의 하나 이상의 애플리케이션을 따라 소프트웨어가 컴퓨터 시스템 상에서 실행되는 동안, 사용자가 레코더를 실행시킬 때, 상기 소프트웨어는 말단 사용자가 운용하는 애플리케이션의 진행하는 스크린 활동(즉, 크리티컬 이벤트(critical event))을 계속적으로 레코딩한다. 이러한 크리티컬 이벤트는 파일로 저장되고, 검토를 위해 나중에 다시 재생될 수 있다. 소프트웨어 툴은, 모든 크리티컬 이벤트가 리스트로 작성되고, 전문가에 의해 검토될 수 있게 하는 브라우저 애플리케이션을 제공한다. 이러한 특허에 의해, 스크린/키보드 텍스트와 특정 시스템 이벤트를 포함하는 컴퓨터 모니터 상에서의 모든 진행 활동에 대한 레코딩은 공개되지만, 또 다른 입력 스트림, 가령 스크린의 비디오, 사용자의 카메라 비디오, 임의의 오디오가 레코딩될 수 있고, 그 밖의 다른 레코딩된 진행 활동과 동시에 저장될 수 있다는 것이 공개되지는 않는다. 또한 이러한 특허는, 본 출원인의 발명에서와 같이 디스플레이될 수 있고, 프로그램 개발자에 의해 검토될 수 있는, 컴퓨터 활동에 대한 전체 스크린 멀티미디어 비디오를 제안하지 않는다.
U.S. 특허 5,808,908 "Method For Measuring The Usability of A System"과, U.S. 특허 5,724,262 "Method For Measuring The Usability of A System And For Task Analysis and Re-Engineering"은 다음의 3가지 방법을 사용하여 시스템의 사용성을 양적으로 객관적으로 측정하는, 시스템의 사용성 테스트를 공개한다. (1) 사용성 만족도(usability satisfaction), (2) 사용성 성능도(usability performance), (3) 사용성 성능 인디케이터(usability performance indicator)를 이용한다. 시스템에 대해 식별되는 크리티컬 요인으로 구성된 하나의 세트에 관련하여 시스템 사용자 모집단으로부터 데이터를 획득함에 따라 사용성 만족도가 측정된다. 데이터를 획득함으로써, 특정 작업을 수행하는데 있어 전문가와 비전문가 사 이에서 통계를 내기 위한 사용성 성능이 측정된다. 사용성 성능 인디케이터는, 측정된 매개변수, 가령, 수행 시간, 직면한 문제점, 취한 행동, 도움의 요청, 미해결과제에 따라 연산된 목표 성취 인디케이터(goal achievement indicator)와, 작업률 사용성 인디케이터(work rate usability indicator)와, 사용가능성 인디케이터(operability indicator)를 포함한다. 이러한 특허는, 사용성 테스트 동안, 사용자의 컴퓨터 활동으로부터 야기된 입력 스트림의 자동적이고 동시적인 축적보다는, 사용성 테스트로부터의 데이터의 수치적인 비교에 관련되어 있다.
U.S. 특허 No. 4,845,665 "Simulation of Computer Program External Interfaces"는 인터페이스를 실험함으로써, 컴퓨터 프로그램 외부 인터페이스를 발전시켜, 실험된 프로그램을 위한 프로그램 코드가 형성되기 전에, 의도된 사용자가 상기 프로그램의 설계를 평가할 수 있도록 하는 방법을 공개하고 있다. 상기 인터페이스는 실행 동안 변경될 수 있는 실험 프로그램으로서, 실행된다. 이러한 특허의 목적은 사용자, 또는 프로그램 개발자가 프로그램 코드 없이 컴퓨터 프로그램의 연산을 실험하여, 대표 사용자에게 상기 실험된 프로그램을 실행하도록 요청하는 것이다. 이러한 프로그램은 통상적인 사용성 테스트에서는 유용한 반면에, 본 출원인의 사용성 테스트에 대한 발명의 다양한 입력과 출력의 레코딩을 제공하지는 않는다.
U.S. 특허 출원 US2003/0046057 "Learning Support System", U.S. 특허 출원 US2002/0196277 "Method And System For Automating The Creation of Customer-Centric Interface", U.S. 특허 출원 US2002/0194953 "Business Engagement Method"와, U.S. 특허 출원 US2001/0049084 "Interactive Rewards Based Pedagogical System Using An Engine of Artificial Intelligence"는 사용성 타입 장치가 아니며, 따라서, 본 발명을 제안하지 않는다.
또한, 전술한 각각의 특허는, 사용성 테스트 동안 사용자에 의해 생성되는 컴퓨터 활동으로부터 다양한 입력의 특정 레코딩에 대하여 공개하고 있으나, 그 어느 것도 오디오 정보를 다른 입력, 또는 본 발명의 입력 스트림에 의해 생성되는 전체 스크린 멀티미디어 비디오와 동시에 레코딩하는 것을 제안하고 있지는 않는다.
따라서 본원에서는 본 출원인의 사용성 테스트를 실시하기 위한 고유한 자동화 시스템 및 방법을 공개한다.
본 발명은 사용성 테스트(usability test)를 실시하기 위한 자동화 시스템 및 방법에 관한 것이다. 상기 시스템은 사용성 테스트를 실시하고, 사용자로부터의 비디오와 오디오 모두와 함께 컴퓨터 스크린 상에서 발생하는 이벤트를 동기화시켜 레코딩하고, 애플리케이션과 운영 체제에서 발생하는 이벤트의 완전한 연대기를 형성한다. 구성에서 특정된 설정에 따라서, 상기 시스템은 그 밖의 다른 입력 스트림을 캡처하고, 그 후, 요망 이벤트와 캡처와 함께, 사용성 테스트의 완전한 레코딩을 저장한다. 시스템에 의해, 원격 관찰자가 상기 사용성 테스트의 레코딩을 실시간으로 관찰할 수 있고, 레코딩 동안 중요 순간(critical moment)에서 표시가 설정되며, 이는 레코딩된다. 또한 상기 시스템에 의해, 관리자가 선호도를 구성할 수 있고, 사용성 테스트와 레코딩 파일을 가져와서 분석할 수 있고, 상기 분석된 기준을 바탕으로 사용성 테스트의 프리젠테이션 비디오를 준비할 수 있다.
도 1은 본 발명의 시스템에서 사용되는 컴퓨터 하드웨어를 도시한 도면이다.
도 2는 레코더와 원격 관찰자를 위한 본 발명의 컴퓨터 소프트웨어 시스템의 기본적인 연산을 도시한 도면이다.
도 3은 관리자와 플레이어를 위한 본 발명의 컴퓨터 소프트웨어 시스템의 기본적인 연산을 도시한 흐름도이다.
도 4는 레코더 인터페이스 스크린의 도면이다.
도 4a는 레코더 인터페이스의 정지 세부사항 섹션 스크린을 도시한 도면이다.
도 5는 레코더 인터페이스 스크린의 메뉴 바로부터의 레코더 드롭 다운 메뉴를 도시한 도면이다.
도 5a는 레코더 인터페이스 스크린의 레코더 항목 드롭 다운 메뉴로부터의 설정 대화 박스의 스크린 비디오 옵션에 대한 도면이다.
도 5b는 레코더 인터페이스 스크린의 레코드 항목 드롭 다운 메뉴로부터의 설정 대화 박스의 오디오 옵션을 도식한 도면이다.
도 5c는 레코더 인터페이스 스크린의 레코드 항목 드롭 다운 메뉴로부터의 설정 대화 박스의 카메라 옵션을 도시한 도면이다.
도 5d는 레코더 인터페이스 스크린의 레코드 항목 드롭 다운 메뉴로부터의 설정 대화 박스의 선호도 옵션을 도시한 도면이다.
도 6은 원격 관찰자 인터페이스 스크린의 도면이다.
도 7은 원격 관찰자 인터페이스 스크린의 메뉴 바로부터의 원격 관찰자 드롭 다운 메뉴를 도시한 도면이다.
도 8은 원격 관찰자 인터페이스 스크린의 메뉴 바로부터의 연결 항목 드롭 다운 메뉴로부터의 레코더 대화 박스를 도식한 도면이다.
도 9는 관리자 인터페이스 스크린의 분석 탭을 도시한 도면이다.
도 10은 관리자 인터페이스 스크린의 분석 탭의 메뉴 바로부터의 관리자 드롭 다운 메뉴를 도시한 도면이다.
도 11은 관리자 인터페이스 스크린의 검색 판을 확대 도시한 도면이다.
도 12는 관리자 인터페이스 스크린의 분석 탭의 검색 판의 이벤트 검색 설정 대화 박스를 도식한 도면이다.
도 13은 관리자 인터페이스 스크린의 분석 탭의 검색 판으로부터의 리스트 디스플레이들 도식한 도면이다.
도 14는 관리자 인터페이스 스크린의 분석 탭의 검색 판으로부터의 그래프 디스플레이를 도식한 도면이다.
도 15는 관리자 인터페이스 스크린의 분석 탭의 검색 판으로부터의 리스트 디스플레이의 플레이어 창의 스크린을 도식한 도면이다.
도 16은 관리자 인터페이스 스크린의 분석 탭의 검색 판으로부터의 그래프 디스플레이의 플레이어 창의 스크린을 도식한 도면이다.
도 17은 관리자 인터페이스 스크린의 분석 탭의 검색 판의 텍스트 검색 설정 대화 박스를 도식한 도면이다.
도 18은 관리자 인터페이스 스크린의 분석 탭의 메뉴 바로부터의 표시 항목 드롭 다운 메뉴로부터의 표시 세부사항 대화 박스를 도식한 도면이다.
도 19는 관리자 인터페이스 스크린의 분석 탭의 메뉴 바로부터의 세그먼트 항목 드롭 다운 메뉴로부터의 세그먼트 세부사항 대화 박스를 도식한 도면이다.
도 20은 관리자 인터페이스 스크린의 프리젠터 탭을 도식한 도면이다.
도 21은 관리자 인터페이스 스크린의 프리젠터 탭의 메뉴 바로부터의 관리자 드롭 다운 메뉴를 도식한 도면이다.
도 22는 관리자 인터페이스 스크린의 프러젠터 탭의 메뉴 바로부터의 프리젠터 클립 항목 드롭 다운 메뉴로부터의 비디오 클립 세부사항을 도식한 도면이다.
도 23은 관리자 인터페이스 스크린의 프리젠터 탭의 메뉴 바로부터의 프리젠터 클립 항목 드롭 다운 메뉴로부터의 타이틀 클립 세부사항을 도식한 도면이다.
도 24는 관리자 인터페이스 스크린의 프리젠터 탭의 메뉴 바로부터의 플레이어 드롭 다운 메뉴를 도식한 도면이다.
도 25는 플레이어 인터페이스 스크린으로부터의 드롭 다운 메뉴를 도식한 도면이다.
도 26은 관리기 인터페이스 스크린의 분석 탭의 검색 판의 검색 설정 대화 박스의 대안적 실시예를 도식한 도면이다.
본 발명은 도 1에서 도시된 컴퓨터 하드웨어와, 도 2 ~ 3에서 도시된 컴퓨터 소프트웨어 시스템 사이의 상호작용으로 구성되어 있다. 본 발명에서, 사용성 테스트(usability test)는 배경기술 섹션에서 서술된 종류의 테스트로서 정의될 것이다.
도 1을 참조하여, 컴퓨터 하드웨어는 레코딩 소스, 즉 사용자 컴퓨터(50)와, 원격 관찰자 컴퓨터(remote viewer computer)(52)와, 프로젝트 관리자 컴퓨터(project manager computer)(54)로 구성되어 있으며, 이때 각각은 네트워크 연결(54), 가령 LAN(Local Area Network)이나 WAN(Wide Area Network)에 걸쳐, 서로에 대해 연결되어 있다. 또는, 원할 경우, 프로젝트 관리자 컴퓨터(54)는 상기 네트워크에 연결되어 있지 않을 수 있다. 상기 레코딩 소스, 즉 사용자 컴퓨터(50)는 중앙 처리 유닛(51)과, 컴퓨터 스크린(53)과, 키보드(55)와, 마우스(63)와, 마이크로폰(57)과, 스피커(59)와, 카메라(61)로 구성되어 있다. 마찬가지로, 상기 원격 관찰자 컴퓨터(52)와 상기 프로젝트 관리자 컴퓨터(54)도 각각, 동일한 중앙 처리 유닛(51)과, 컴퓨터 스크린(53)과, 키보드(55)와, 마우스(63)로 구성되어 있다. 또한 상기 프로젝트 관리 컴퓨터(54)는 동일한 마이크로폰(57)과, 스피커(59)로 구성되어 있다. 컴퓨터와 그 구성요소는 종래 분야에서 잘 알려져 있으며, 임의의 제조사에서 제작한 임의의 호환 종류, 버전, 사이즈가 본 발명의 의도된 목적을 성취시키기 위해 사용가능하다.
컴퓨터 하드웨어 상에 컴퓨터 소프트웨어를 설치하고 실행시키기 위해, 상기 레코딩 소스, 즉 사용자 컴퓨터(50)와 프로젝트 관리자 컴퓨터(54)는, Microsoft 윈도우즈 2000(또는 XP)과, Microsoft DirectX 8.1(9.0이나 그 이상의 버전 권장)과, 1㎓ 프로세서(2㎓ 권장)와, 128Mbyte 판독 전용 메모리(512Mbyte 권장)와, 64Mbyte 비디오 카드(128Mbyte 권장)와, 윈도우즈 호환 사운드 카드와, 마이크로폰(57) 및 스피커(59)와, 설치를 위한 하드 디스크의 20Mbyte 가용 공간을 필요로 한다. 또한, 상기 레코딩 소스, 즉 사용자 컴퓨터(50)는 USB 카메라(61)를 필요로 하며, 원격 관찰자 컴퓨터를 사용할 경우, 인프라(infra)로서 10Mbps 연결(100Mbps 권장)을 이용하여 네트워크 연결된 컴퓨터가 요구된다. 원격 관찰자 컴퓨터(52)는 Microsoft 윈도우즈2000(또는 XP)과, 800㎒ 프로세서(1㎓ 프로세서 권장)와, 128mbyte RAM과, 10Mbps 연결(100Mbps 권장)로 네트워킹된 컴퓨터와, 설치를 위한 5Mbyte의 하드 드라이브 공간을 제공한다. 또는, Macintosh 기반 시스템과 Unix 기반 시스템에서 사용될 수 있도록 컴퓨터 소프트웨어가 수정될 수 있다.
도 2를 참조하면, 사용성 테스트를 실시하기 위한 고유한 자동화 시스템 및 방법의 기본 동작이 도시되어 있다. 바람직한 실시예에서, 레코딩 소스, 즉 사용자 컴퓨터(50)는 레코딩 컴퓨터 소프트웨어(58)를 사용하고, 원격 관찰자 컴퓨터(52)는 원격 관찰자 컴퓨터 소프트웨어(60)를 사용하며, 프로젝트 관리 컴퓨터(54)는 관리자 컴퓨터 소프트웨어(62)를 사용한다(도 3 참조).
전체적으로, 사용성 테스트 중에, 레코딩 컴퓨터 소프트웨어(58)(이하, "레코딩")는 상기 컴퓨터 스크린 상에서 발생하는 이벤트를, 사용자의 비디오 및 음성 모두와 동기화시켜서 레코딩하며, 애플리케이션과 운영 체제에서 발생한 상기 이벤트에 대한 완전한 레코딩을 생성한다. 구성에서의 세부 설정에 따라, 또한 레코더 는 다수의 입력 스트림을 획득하고, 나중에 관리자 컴퓨터 소프트웨어(62)의 프로젝트로 불러들일 수 있는 파일 포맷으로 레코딩을 저장한다.
상기 원격 관찰자 컴퓨터 소프트웨어(60)(이하 “원격 관찰자”)에 의하여, 관찰자는 레코딩 소스, 즉 사용자 컴퓨터(50) 상의 레코더로부터 발생하는 사용성 테스트의 레코딩(즉, 스크린 활동)을 실시간으로 관찰할 수 있다. 또한 원격 관찰자에 의해, 관찰자가 레코더에 의해 레코딩되는 동안, 중요 순간에서 표시를 설정할 수 있다.
상기 관리자 컴퓨터 소프트웨어(62)(이하 “관리자”)는 레코더를 위한 구성 파일을 생성하고, 그 결과값의 분석과 프리젠테이션을 위하여, 레코더에 의해 생성되는 레코딩을 가져온다.
레코더의 스텝(101)에서, 사용성 테스트의 레코딩에 대한 프로세스가 시작된다. 레코딩에 관련되어 있는 초기 정보가 승인될 필요성이 있거나, 변화될 필요가 있을 경우, 스텝(102)으로 진행된다. 레코딩과 관련된 정보가 특정 구성 파일에 이미 저장되어 있으며, 상기 구성이 새로운 레코딩을 위해 사용되는 것이 바람직할 경우, 스텝(103)으로 진행한다.
스텝(102)에서, 도 4에서 도시된 레코더 인터페이스(64)는 상기 레코더의 레코딩 상세사항을 디스플레이한다. 레코더 인터페이스(64)는 레코더의 모든 옵션으로의 접근을 제공하는 메뉴 바(78)와, 레코더의 가장 자주 사용되는 옵션을 제공하는 툴 바(80)와, 레코딩 세션 동안 레코더의 설정을 사용하기에 최적으로 제공하는 구성 판(66)과, 레코더의 상태에 관한 도움말 정보를 표시하는 상태 바(82)와, 카 메라 비디오의 미리보기와, 적정한 마이크로폰의 볼륨 레벨을 표시하는 카메라 미리보기 판(84)을 포함한다.
구성 판(66)은 레코딩을 위한 5개의 카테고리의 구성 설정을 제공하며, 이는 레코딩 파일 세부사항 섹션(68)과, 캡처 옵션 섹션(70)과, 레코딩 동안의 비주얼 섹션(72)과, 시작 세부사항 섹션(74)과, 정지 세부사항 섹션(76)을 포함한다.
상기 레코딩 파일 세부사항 섹션(68)은 레코딩의 저장을 제공하며, 이때 레코딩을 위한 파일명이 할당될 수 있도록 하는 옵션(128)과, 레코딩 파일을 저장하기 위한 폴더의 지정, 또는 선택을 제공하는 폴더 옵션(130)과, 폴더의 디렉토리를 나타내는 대화 박스를 디스플레이하는 브라우즈(browse) 옵션(132)과, 레코딩과 관련된 설명이나 그 밖의 다른 텍스트 형식의 데이터가 타이핑되어 상기 레코딩 파일과 함께 저장될 수 있게 하는 설명 옵션(134)과, 박스에 체크되어 있을 경우, 레코딩의 완성 여부에 따라서 상기 레코딩 파일 세부사항 섹션(68)의 레코딩 파일 세부사항에 대한 프롬프트를 제공하는, 레코딩 정지 시 세부사항을 위한 프롬프트 세부사항(136)과, 박스가 체크되어 있을 경우, 레코딩 파일을 보호하기 위해, 암호를 입력하기 위한 프롬프트를 제공하는 암호 보호 레코딩 파일 옵션(138)이 제공된다.
캡처 옵션 섹션(70)은, 사용성 테스트 중에, 부착된 카메라(61)로부터 사용자의 비디오의 레코딩을 제공하는 카메라 옵션(140)과, 사용성 테스트 중에, 부착된 마이크로폰(57)으로부터 음성 데이터의 레코딩을 제공하는 마이크로폰 옵션(142)과, 사용성 테스트 중에 사용자가 입력함으로써 레코딩 소스 컴퓨터(50)의 키보드(55)로부터의 활동과 관련된 데이터(이러한 데이터는 키보드(55)에서 압력이 가해진 모든 숫자 및 알파벳 키를 포함하며)의 레코딩을 제공하는 키보드 옵션(144)과, 레코딩 소스 컴퓨터(50)의 컴퓨터 스크린(53) 상에 디스플레이되는 텍스트(이러한 스크린의 텍스트는 컴퓨터 스크린(53) 상에 나타난 모든 단어를 포함하며)의 레코딩을 제공하는 스크린 텍스트 옵션(146)과, 사용성 테스트의 레코딩 중에, 마우스(63)로부터 발생하는 마우스 클릭(오른쪽 클릭, 왼쪽 클릭)의 레코딩을 제공하는 마우스 클릭 옵션(148)과, 사용성 테스트의 레코딩 중에, 컴퓨터에서 실행되는 모든 애플리케이션으로부터 발생하는 윈도우즈의 임의의 모든 이벤트(상기 윈도우즈의 이벤트는 메인 애플리케이션 창을 열고 닫는 것을 포함하며, 상기 메인 창 내부의 부수적인 창(가령, 대화 박스, 경고 창 등), 대화 창에서 나타나는 메뉴, 버튼, 또는 그 밖의 다른 창에 관련된 객체(가령, 슬라이더 바, 리스트 목록, 편집 박스 등)를 포함하며)이나 웹 사이트의 변화에 대한 레코딩을 제공하는 애플리케이션의 이벤트 옵션(150)과, 세션을 레코딩하는 동안, 원격 관찰자에 의한 사용성 테스트의 원격 관찰을 제공하는 원격 관찰자 옵션(152)을 제공한다.
레코딩 동안의 비주얼 섹션(72)은, 최소화될 때, 레코더가 레코딩 소스 컴퓨터(50)의 컴퓨터 스크린(53) 상의 트레이 아이콘으로서 보여질 수 있게 하는, 트레이로의 최소화 옵션(154)과, 최소화될 때, 레코딩 소스 컴퓨터(50) 상에서 레코더가 보여질 수 있게 하는 작업 바 최소화 옵션(156)과, 사용성 테스트의 레코딩 동안, 레코딩 소스 컴퓨터(50) 상에서 레코더가 완전하게 숨겨질 수 있게 하는 완전 숨김 옵션(158)을 제공한다. 레코딩 동안, 완전 숨김 옵션(158)이 선택되어지고, 사용될 경우, 단축 키의 조합(Ctrl + Alt + Scroll Lock)을 누름으로써, 레코더가 다시 나타나게 될 것이다.
시작 세부사항 섹션(74)은, 레코딩이 시작될 때, 레코딩이 수동으로 시작될 수 있게 하는 수동 시작 옵션(160)과, 특정 이벤트가 발생할 때 레코딩이 시작될 수 있게 하는 이벤트 기반 옵션(162)과, 특정 날짜와 시간에서 레코딩이 시작될 수 있게 하는 시간 기반 옵션(164)을 제공한다.
이벤트 기반 옵션(162)에 관련하여, 이벤트 기반 드롭 다운 메뉴(166)가 제공되어 레코딩을 시작하게 하는 이벤트의 종류를 선택할 수 있다. 이벤트 기반 드롭 다운 메뉴(166)에서, 레코딩의 시작을 촉발시키는 이벤트의 종류로는, 마우스 클릭, 특정 애플리케이션의 시작, 특정 애플리케이션의 정지가 있다. 특정 애플리케이션 실행 파일에 따라, 레코딩이 시작될 경우, 애플리케이션 이름 박스(168)가 제공되어, 특정 애플리케이션 실행 파일(가령, exe 파일)로 들어갈 수 있다. 특정 애플리케이션 실행 파일의 실행에 따라 레코딩이 시작되고, 상기 애플리케이션 실행 파일의 정확한 이름이 알려지지 않은 경우, 이벤트 기반 브라우즈 옵션(170)이 제공되어, 애플리케이션 이름 박스(168)로 들어가기 위해, 애플리케이션 실행 파일의 리스트를 디스플레이할 수 있다.
시간 기반 옵션(164)과 관련하여, 날짜 박스(172)와, 시간 박스(174)가 제공되어, 레코딩을 시작하기 위한 날짜와 시간으로 들어갈 수 있다. 날짜 박스(172)는 (mm/dd/yyyy)의 형식으로 날짜를 수신하는 것이 바람직하며, 시간 박스(174)는 (hh:mm:ss; am/pm)의 형식으로 수신하는 것이 바람직하다. 날짜 박스(174)에 날짜가 제공되지 않을 경우, 시간 박스(174)에 입력된 시간이 되는 임의의 날짜 동안 레코딩이 시작될 것이다.
도 4a에서 도시된 바와 같이, 정지 세부사항 섹션(76)은 수동 정지 옵션(176)과, 이벤트 기반 옵션(178)과, 시간 기반 옵션(180)과, 지속시간 기반 옵션(182)을 제공한다. 바람직한 실시예에서, 상기 수동 정지 옵션(176)과, 이벤트 기반 옵션(178)과, 시간 기반 옵션(180)이, 레코딩 세션이 선택된 옵션들 중 하나의 발생에 따라서 정지될 것을 제외하고, 시작 세부사항 섹션(74)에서의 옵션과 동일한 방식으로 동작한다.
스텝(102)에서, 모든 레코더 인터페이스(64) 설정이 구성된다. 이는 레코딩 파일 세부사항 섹션(68)과, 캡처 옵션 섹션(70)과, 레코딩 동안의 비주얼 섹션(72)과, 시작 세부사항 섹션(74)과, 정지 세부사항 섹션(76)에 내포된 모든 옵션을 포함한다. 완료되면, 스텝(104)으로 진행한다.
스텝(103)에서, 이전에 저장된 구성 설정에 대한 구성 파일이 로딩되고, 새로운 레코딩을 위해 사용될 수 있다. 로딩된 구성 설정은 스텝(102)에서와, 동일한 레코더 인터페이스(64)의 설정이다. 메뉴 바(78), 또는 툴바(80) 중 하나를 이용하여, 구성 파일이 로딩될 수 있다.
메뉴 바(78)는 파일(File)(86), 레코딩(Record)(88), 관찰(Veiw)(90), 도움말(Help)(92)로 구성되어 있다. 메뉴 바(78)를 이용하여, 도 5에서 도시된 바와 같이, 파일 항목 드롭 다운 메뉴(94)를 표시하는 파일(86)이 선택되어진다. 파일 항목 드롭 다운 메뉴(94)는 구성 새로 만들기(96), 구성 열기(98), 구성 저장하기(100), 최근 파일(104), 정지(106)의 선택을 제공한다. 구성 열기(98)를 선택함 으로써, 모든 저장된 구성 파일로의 액세스가 제공되고, 요망 구성 파일이 열리고 레코더 인퍼페이스(64)의 구성 판(66)으로 로딩된다. 이러한 프로세스는 “파일 > 구성 열기”의 명칭에 의해 명시될 수 있다. 상기 “파일”은 “파일 항목(86)”을 의미하고, “구성 열기”는 구성 열기(98)를 의미한다.
또는, 구성 열기 아이콘(110)을 제공하는 툴바(80)를 이용하여, 구성 설정이 로딩될 수 있다. 구성 열기 아이콘(110)을 선택함으로써, 모든 저장된 구성 파일로의 액세스가 제공될 것이며, 요망 구성 파일이 열리고, 레코딩 인터페이스(64)의 구성 판(66)으로 로딩될 것이다.
스텝(104)에서, 레코더에 대한 광역 설정(global setting)이 이뤄진다. 상기 광역 설정은, 스텝(102)에서 구성되는 레코딩 구성 설정과 다르다. 왜냐하면, 광역 설정은, 어느 구성 파일이 열리는 것인가에 상관없이, 레코더에서 생성되는 모든 레코딩에 영향을 주기 때문이다. 메뉴 바(78), 또는 툴 바(80) 중 하나를 이용하여, 상기 광역 설정은 구성될 수 있다.
메뉴 바(78)를 이용하여, 레코딩 항목(88)을 선택함으로써, 레코딩 항목 드롭 다운 메뉴(12)가 도 5에서 도시된 바와 같이 나타난다. 설정(122)을 선택함으로써, 설정 대화 박스(614)가 나타난다(도 5a ~ 도 5d). 상기 설정 대화 박스(614)는 스크린 비디오 옵션(616)(도 5a)과, 음성 옵션(618)(도 5b)과, 카메라 옵션(620)(도 5c)과, 선호도 옵션(622)(도 5d)을 제공한다. 또한 이러한 프로세서는 “레코딩 > 설정”의 명칭에 의해 명시될 수 있다. 상기 “레코딩”은 레코딩 항목(88)을 의미하고, “설정”은 설정(122)을 의미한다.
도 5a에서 도시된 바와 같이, 설정 대화 박스(614)는 스크린 비디오를 압축하기 위한 코덱의 사용을 허용하며, 상기 코덱과 연계된 품질 옵션이 설정되고, 레코더가 스크린을 레코딩할 프레임 속도(frame rate)가 설정된다, 즉, 시간 단위마다 레코딩되는 프레임의 수가 설정되며, 상기 프레임 속도 설정에서 사용될 시간 단위가 설정된다.
도 5b에서 도시된 바와 같이, 음성 옵션(618)은 레코딩을 허용하고, 재생 속도 옵션(playback rate option)이 설정되고, 음성을 레코딩하기 위한 장치가 설정되며, 입력 장치를 위한 볼륨 레벨의 레코딩이 설정된다.
도 5c에서 도시된 바와 같이, 카메라 옵션(620)은 카메라가 레코더와 함께 사용될 수 있게 하며, 비디오 품질, 가령, 밝기, 콘트라스트(contrast), 샤프니스(sharpness), RGB 값 등 같은 다양한 부분이 설정될 수 있게 하며, 프레임 속도, 출력 크기가 조정될 수 있게 하며, 비디오 코덱이 카메라와 함께 사용될 수 있게 하며, 압축 품질, 키 프레임 속도, 데이터 속도가 구성될 수 있게 하며, 현재 설정을 기반으로 비디오 레코딩이 어떻게 나타나느냐에 대한 미리보기를 설정할 수 있게 한다.
도 5d에서 도시된 바와 같이 선호도 옵션(622)이 레코딩을 위한 초기 및 임시 출력 폴더가 지정되도록 할 수 있으며, 캡처 동안 디스플레이 가속에 대한 선호도 옵션을 제공한다.
또는, 레코더 설정 아이콘(111)을 제공하는 툴바(80)를 이용하여 레코더에 대한 광역 설정이 이뤄질 수 있다. 레코더 설정 아이콘(111)을 선택함으로써, 설정 대화 박스(614)로의 액세스가 자동으로 제공될 것이다(도 5a ~ 5d). 설정 대화 박스(614)의 각각의 옵션에 대하여, 요망 설정을 선택한다. 모든 바람직한 광역 구성 설정에 접어들면, 구성 설정이 테스트될 경우, 스텝(105)으로 진행한다. 그렇지 않을 경우, 스텝(106)으로 바로 진행한다.
스텝(105)에서, 선택된 구성 설정으로의 테스트가 레코딩된다. 바람직한 실시예에서, 테스트 레코딩은 10초 테스트이다. 이러한 테스트 동안, 레코더가 캡처하기 위한 데스크탑의 활동 및 사운드가 생성될 것이다(예를 들어, 마이크로폰(57)으로 말하는 것과 소스 컴퓨터(50)와의 상호작용). 이러한 테스트 중에 직면하게 되는 임의의 문제점이 지시될 것이며, 이에 따라 실제로 레코딩하기 전에, 문제점이 해결될 수 있다. 상기 테스트 레코딩이 완료되면, 특정 사용성 테스트가 실시되기 위해 적정한 선택이었는지를 확인하기 위한 선택된 구성 설정의 검토를 위해, 생성되는 스크린 비디오와 음성 데이터가 자동으로 재생될 것이다. 메뉴 바(78)와 툴 바(80) 중 하나를 사용하여, 테스트 레코딩이 실행될 수 있다. 메뉴 바(78)를 사용하여, 레코딩 항목 드롭 다운 메뉴(112)를 디스플레이하는 레코딩 항목(88)이 선택된다(도 5 참조). 상기 레코딩 항목 드롭 다운 메뉴(112)는 시작(114), 정지(116), 일시 정지(118), 테스트 레코딩(120), 설정(122) 중 선택을 제공한다. 테스트 레코딩(120)을 선택함으로써, 테스트 레코딩이 시작될 것이다. 이러한 프로세서는 “레코딩 > 테스트 레코딩”으로 지시될 수 있다. “레코딩”은 레코딩 항목(88)을 의미하며, “테스트 레코딩”은 테스트 레코딩(120)을 의미한다. 또는, 테스트 레코딩 아이콘(124)을 제공하는 카메라 미리보기 판(84)을 이용하여, 테스 트 레코딩이 시작될 수 있다. 테스트 레코딩 아이콘(124)을 선택함으로써, 또한 테스트 레코딩이 자동으로 시작될 수 있다.
테스트 레코딩이 시작되면, 카메라 미리보기 판(84)은 “레코딩 진행 중”을 판독할 수 있는 상태 메시지 영역(186)에 메시지를 디스플레이할 것이며, 상태 바(82)가 레코딩이 만들어지고 있음을 확인할 것이다. 테스트 레코딩 중에, 사용자는 레코더가 캡처하기 위한 데스크탑 활동 및 음향을 생성할 것이다. 그 예로는, 레코딩 소스 컴퓨터(50)와의 상호작용과, 마이크로폰(57)으로의 음성 전달이 있다. 테스트 레코딩의 종료 시점에서, 카메라 미리보기 영역(188)은 카메라(61)가 레코딩하고 있는 것을 디스플레이할 것이다. 카메라(61)가 적정하게 위치하지 않을 경우, 상기 카메라 미리보기 영역(188)이 사용되어, 상기 카메라(61)의 위치를 정확하게 조정할 수 있다. 마이크 볼륨 인디케이터 바(190)는, 장착된 마이크로폰(57)으로부터 유입되는 사운드 레벨의 정확한 시각적인 표시를 제공한다. 플레이어 컴퓨터 소프트웨어(이하 “플레이어”)가 스크린 비디오 및 오디오를 재생할 것이고, 테스트 레코딩으로부터의 이미지로 카메라 화상을 보여줄 것이다. 테스트 레코딩의 관찰이 종료되고, 구성 설정으로 만족되면, 플레이어를 수동으로 종료하고, 스텝(106)으로 진행한다.
스텝(106)에서, 구성 설정으로 들어가서 테스트하는 것을 완료하면, 그 후 메뉴 바(78), 또는 툴바(80)를 사용하여 구성 설정이 저장된다.
메뉴 바(78)를 사용하여, 파일 항목 드롭 다운 메뉴(94)를 디스플레이하는 파일 항목(86)이 선택된다. 구성 저장하기(100)을 선택함으로써, 레코딩 파일 세부 사항 섹션(68)에서 제공된 이름 및 위치로 구성 설정이 저장될 수 있으며, 원할 경우, 동일한 구성 파일이 동시에 열린다. 이러한 프로세스는 “파일 > 구성 저장하기”에 의해 명시될 수 있다. “파일”은 파일 항목(86)을 의미하며, “구성 저장하기”은 구성 저장하기(100)을 의미한다. 또는 새 이름으로 구성 저장하기(102)을 선택함으로써, 동시에 들어간 레코딩 파일 세부사항 섹션(68)에서 제공된 파일 이름 및 위치를 다른 파일 이름 및 위치로 바꿀 수 있다. 이러한 프로세스는 “파일 > 새 이름으로 구성 저장하기”에 의해 명시된다. 상기 “파일”은 파일 항목(86)을 의미하고, 상기 “새 이름으로 구성 저장하기”은 새 이름으로 구성 저장하기(102)을 의미한다.
파일 항목 드롭 다운 메뉴(94)가 실수에 의해 무의식적으로 선택될 경우, 종료(106)를 선택함으로써, 파일 항목 드롭 다운 메뉴(94)가 취소되어, 레코딩 애플리케이션으로부터 빠져나갈 수 있다.
또는 구성 저장하기 아이콘(108)을 제공하는 툴바(80)를 이용하여 구성 설정이 저장될 수 있다. 구성 저장하기 아이콘(108)을 선택함으로써, 레코딩 파일 세부사항 섹션(68)에서 제공되는 이름 및 위치로, 구성 설정이 자동으로 저장될 것이다. 구성 설정이 구성되고 저장되면, 스텝(107)으로 진행된다.
스텝(107)에서, 레코딩이 시작된다. 메뉴 바(78)와 툴 바(80) 중 하나를 이용하여, 레코더가 시작된다. 메뉴 바(78)를 사용하여, 레코딩 항목 드롭 다운 메뉴(112)를 디스플레이하는 레코딩 항목(88)이 선택된다. 시작(114)을 선택함으로써, 레코딩이 시작된다. 이러한 프로세스는 “레코딩 > 시작”으로 명시될 수 있 다. 상기 “레코딩”은 레코딩 항목(88)을 의미하고, “시작”은 시작(114)을 의미한다.
또는, 시작 아이콘(126)을 제공하는 툴바(80)를 사용하여 레코딩이 시작될 수 있다. 시작 아이콘(126)을 선택함으로써, 레코딩이 자동으로 시작될 것이다. 레코딩이 시작되면, 사용자가 사용성 테스트를 수행하는 스텝(108)으로 진행한다.
스텝(108)에서, 시작 세부사항 섹션(74)에서의 수동 시작 옵션(160)이 선택되면, 레코더는 사용성 테스트의 모든 입력 스트림을 레코딩하기 시작할 것이다. 이벤트 기반 옵션(162)이 선택될 경우, 특정 이벤트, 가령 이벤트 기반 드롭 다운 메뉴(166)에서 선택된 이벤트, 또는 애플리케이션 이름 박스(168)의 이름이 부여된 애플리케이션이 발생해야지 레코딩이 시작될 것이다. 시간 기반 옵션(164)이 선택될 경우, 날짜 박스(172)의 날짜, 또는 시간 박스(174)의 시간, 또는 둘 모두가 발생해야지 레코딩은 시작될 것이다.
바람직한 실시예에서, 사용성 테스트 동안, 레코딩은, 레코딩 인터페이스(64)의 구성 판(66)에서 선택된 구성 설정을 사용하여 모든 정보를 레코딩할 것이다. 캡처 옵션 섹션(70)에서, 카메라 옵션(140)이 선택될 경우, 사용성 테스트 중에 사용자가 나타남에 따라, 카메라(61)가 사용자의 비디오를 레코딩할 것이다. 마이크로폰 옵션(142)이 선택될 경우, 사용성 테스트 동안, 마이크로폰(57)은 사용자로부터 음성을 레코딩할 것이다. 키보드 옵션(144)이 선택될 경우, 사용성 테스트 중에 사용자에 의해 키보드(55) 상에서 타이핑되는 임의의 키 스트로크가, 텍스트, 엔터 키, 쉬프트 키, 기능 키 등으로서 저장된다. 스크린 텍스트 옵션(146)이 선택된 경우, 사용성 테스트 동안, 상기 컴퓨터 스크린(53) 상에 디스플레이되는 텍스트가 레코딩된다. 마우스 클릭 옵션(148)이 선택된 경우, 사용자에 의한 상기 마우스(63)의 왼쪽 클릭 및 오른쪽 클릭이 사용성 테스트 동안 레코딩될 것이다. 애플리케이션 이벤트 옵션(150)이 선택된 경우, 사용성 테스트 동안 발생하는 각각의 애플리케이션 이벤트가 레코딩될 것이다. 애플리케이션 이벤트로는, 어떤 애플리케이션이 활성 상태인지, 어떤 대화 박스나 창이 활성 상태인지, 또는 어떤 버튼, 또는 메뉴 아이템이 사용자에 의해 선택되는지가 있다. 또한, 각각의 레코딩, 또는 사용성 테스트 동안, 또 다른 옵션이 선택과는 무관하게, 컴퓨터 스크린의 비디오는 항상 레코딩되거나, 캡처된다. 상기 컴퓨터 스크린의 비디오는 비디오 파일이며, 캡처되는 또 다른 정보는 데이터 파일이다. 특정 데이터 파일에 대한 참조 기준은 비디오 파일의 맥락에서 관찰될 수 있다. 데이터 파일 입력 스트림은, 비디오 파일의 비디오 스트림과 시간으로 동기화된다. 이는 관리자에 대해 설명할 때, 더욱 상세하게 논의된다. 이러한 각각의 캡처 옵션은 “입력 스트림”이라고 총체적으로 일컬어진다.
사용성 테스트가 완료될 때, 스텝(109)으로 진행하여, 레코딩이 정지된다. 스텝(109)에서, 메뉴 바(78)나 툴바(80) 중 하나를 사용하여, 레코더가 정지한다. 메뉴 바(78)를 사용하여, 레코딩 항목 드롭 다운 메뉴(112)를 디스플레이하는 레코딩 항목(88)이 선택된다. 정지(116)를 선택함으로써, 레코딩이 정지된다. 또한 이러한 프로세스는 “레코딩 > 정지”에 의해 명시된다. 상기 “레코딩”은 레코딩 항목(88)을 의미하며, “정지”는 정지(116)를 의미한다.
또는, 정지 아이콘(192)을 제공하는 툴바(80)를 이용하여, 레코딩이 정지할 수 있다. 정지 아이콘(192)을 선택함으로써, 레코딩이 자동으로 정지될 것이다.
캡처 옵션 섹션(70)에서의 수동 정지 옵션(176)이 선택될 경우, 레코더는 사용성 테스트의 레코딩을 정지할 것이다. 이벤트 기반 옵션(178)이 선택될 경우, 특정 이벤트가 발생해야 상기 레코딩이 정지될 것이다. 시간 기반 옵션(180)이 선택된 경우, 데이터, 또는 시간, 또는 둘 모두가 발생해야, 상기 레코딩이 정지될 것이다. 실행 시간 박스(184)가 선택된 경우, 시간 지속 주기가 발생해야 레코딩이 정지될 것이다. 또는, 정지 아이콘(192)은 항상 레코딩을 정지시킬 것이다. 레코딩이 정지하면, 스텝(110)으로 진행한다.
스텝(110)에서, 레코딩이 중단될 시 세부사항에 대한 프롬프트 옵션(136)이 선택될 경우, 스텝(102)에서, 레코딩 파일 세부사항 섹션(68)이 다시 디스플레이되어, 옵션(128), 폴더 옵션(130), 서술 옵션(132)에 따라, 레코딩 저장이 동시에 이뤄질 수 있다. 파일 세부사항에 대한 구성이 완료될 때, 스텝(111)으로 진행한다.
스텝(111)에서, 저장된 레코딩 파일(가령, 레코딩 파일 세부사항 섹션(68)의 옵션(128)에 따르는 레코딩 저장 하에서 저장된 레코딩 파일)이 관리자에 의해 사용되기 위해, 프로젝트 관리자 컴퓨터(54)로 보내진다. 레코딩 파일이 꽤 크기 때문에, 특히, 테스트가 오랜 주기의 시간 동안 레코딩되는 경우, 또는 빈번한 레코딩으로 인한 경우, 레코딩 파일을 더 작은 이동식 저장 디스크(가령, 플로피 디스크나 짚 디스크) 상으로 가져올 수 있다. 이러한 것을 용이하게 하기 위해, 레코딩 파일을 내보내기 위한 3가지 방법이 존재한다.
첫째로, 레코딩 소스 컴퓨터(50)가 프로젝트 관리 컴퓨터(54)와 함께, 네트워크에 연결되어 있는 경우, 또는 두 개의 구성요소가 동일한 기계 장치 상에 설치된 경우, 레코딩 파일은 양 구성요소가 모두 함께 공유하는 디렉토리에 저장될 수 있다.
이러한 방식으로, 관리자를 사용하여, 레코딩 파일이 관리자로 직접 위치하고 가져오게 된다. 두 번째로, 레코딩 파일이 상기 레코딩 소스 컴퓨터(50)의 하드 드라이브에 임시로 저장될 수 있다. 이러한 방식으로, 관리자를 사용하여, 레코딩 파일이 레코딩 소스 컴퓨터(50)의 하드 드라이브에 임시 저장될 수 있다. 이러한 방식으로, 레코딩 파일은 CD(Compact Disc)로, 또는 DVD(Digital Video Disc)로 저장될 수 있고, 관리자로 쉽게 옮겨질 수 있다. 마지막으로, 레코딩 소스 컴퓨터(50)가 썸 드라이브(thumb drive), 또는 휴대용 외부 드라이브에 연결된 경우, 레코딩 파일이 상기 드라이브로 직접 저장될 수 있다. 레코딩이 완료되면, 상기 드라이브의 연결을 간단하게 해제하고, 프로젝트 관리자 컴퓨터(54)로 재-연결시키고 레코딩 파일을 상기 휴대용 드라이브로부터 관리자로 직접 가져온다.
다음은 레코더에서의 스텝의 기본적인 예제이다.
사용성 조사원이 회계 소프트웨어 프로그램에 대한 사용성 테스트를 실시하고 있다. 핵심 목적은 사용자가 세금 환급을 파일링하는데 얼마나 걸리는지, 그리고 이러한 처리 과정 중에 사용자가 도움말 메뉴에 얼마나 자주 액세스 하는지를 판단하기 위함이다. 조사원은 참가자, 마우스 클릭, 키 스트로크, 윈도우 이벤트의 스크린, 비디오, 오디오를 레코딩하기를 원한다.
우선, 레코더가 설치되며, 카메라와 마이크로폰이 회계 소프트웨어 프로그램과 동일한 컴퓨터에 연결된다. 그 다음에, 레코딩 저장의 입력 박스에 조사원이 “참가자 1”이라고 입력하고, 파일의 저장 위치로서 컴퓨터의 하드 드라이브에 폴더를 특정한다. 레코딩 파일 세부사항 박스에서, 조사원은 다음의 정보를 입력한다.
“참가자 1 - John Doe
회계 소프트웨어 사용성 테스트
거주지: New York City"
조사원이 테스트에 앞서, 모든 레코딩 파일 세부사항을 입력하기 때문에, 레코딩 정지 시의 세부사항에 대한 프롬프트의 선택은 해제한다.
다음으로, 조사원은 어떠한 입력 스트림이 캡처될 것인지를 특정한다. 조사원은 표정 및 말의 감정을 캡처하기 위해 카메라 및 마이크로폰을 선택한다. 덧붙이자면, 조사원이 키 스트로크, 마우스 클릭을 선택하고, 원격 관찰자를 허용하여, 조사원은 실시간으로 테스트를 관찰할 수 있고, 표시할 수 있다.
레코딩 중의 비주얼 옵션에 대하여, 조사원은 트레이로의 최소화를 선택한다.
참가자가 회계 소프트웨어를 실행할 때, 조사원은 레코딩을 시작하는 것이 바람직하다. 이렇게 하기 위해, 조사원은 시작 세부사항 옵션에서 이벤트 기반을 선택하고, 그 후 드롭 다운 리스트로부터 애플리케이션 실행을 선택한다. 애플리케이션 이름 입력 박스로, 조사원은 회계 프로그램의 실행 파일의 명칭(가령, “accounting.exe")을 입력한다.
조사원은 상기 테스트가 얼마나 지속될 것인지에 대하여 알지 못하기 때문에, 조사원은 정지 세부사항 하의 수동 옵션을 선택한다. 이러한 방식으로,테스트가 종료할 때, 정지 툴 바 버튼을 클릭함으로써 조사원은 레코딩을 정지시킬 수 있다.
그 후, 조사원은 자신이 특정한 모든 설정을 포함하는 구성 파일을 저장한다. 구성 파일이 저장되면서, 조사원은 이것을, 다른 참가자에게 재-사용하여, 조사원은 매 시간마다 이러한 처리를 거치지 않는다. 덧붙이자면, 각각의 참가자에게 구성 파일을 사용함으로써, 조사원은 각각의 레코딩이 동일한 방식으로 실시될 것임을 알 수 있다.
이제, 조사원이 레코더에서 카메라 미리보기를 체크하고 조정하여, 참가자가 컴퓨터를 사용할 때, 참가자 얼굴을 적정하게 캡처할 수 있다. 또한 조사원은 카메라 미리보기 창 아래에 있는 마이크 볼륨 디스플레이에서 마이크로폰의 볼륨을 체크한다.
모든 설정과 조정이 이뤄지는 동안, 조사원은 레코더에 의해 모든 것이 적정하게 캡처될 것인지에 대한 확신을 원하며, 그래서 조사원은 테스트 레코딩 버튼 위를 클릭한다. 레코더 애플리케이션이 사라지고, 조사원은 마우스를 이동시켜, 애플리케이션을 열고, 크게 말한다. 10초 후에, 테스트 레코딩이 완료되고, Morae Player로 자동 재생된다. 조사원은 비디오 및 오디오가 적정하게 레코딩됐음을 확신한다.
모든 것이 완전하게 작동하면, 조사원이 제 1 참가자를 위한 준비를 한다. 조사원은 레코더를 초기화하기 위해, 레코더의 툴에 있는 시작 버튼을 클릭한다. 회계 애플리케이션이 실행될 때, 레코더가 시작되도록 조사원이 레코더를 구성했기 때문에, 상기 레코더는 트레이로 최소화되고, 레코딩을 시작하지 않는다. 구성 설정에서 특정된 바와 같이, 시작 트리거(start trigger)를 기다린다.
테스트를 시작하기 위해, 참가자가 회계 소프트웨어를 실행시킬 때, 레코더는 구성 파일에서 특정된 캡처 옵션(카메라, 마이크로폰, 키보드, 마우스 클릭)을 기반으로 레코딩을 자동으로 시작한다. 참가자가 상기 테스트를 마치면, 트레이의 아이콘을 오른쪽 클릭하여, 메뉴로부터 정지를 선택함으로써, 조사원이 상기 레코더를 수동으로 정지한다. 레코더는 레코딩을 정지하고, 이름 “참가자 1”로, 상기 구성 파일에서 특정된 위치로 레코딩 파일을 자동 저장한다.
모든 참가자가 테스트를 완료한 후, 조사원은 레코딩 파일을 관리자 구성요소로 이동시킬 준비를 하고, 연구의 목표에 대한 답을 찾기 위해 분석을 실시한다.
레코더에서 사용성 테스트 중에, 원격 관찰자는, 수동적으로, 또는 능동적으로 소스 컴퓨터(50) 상의 레코딩에서 발생하는 이벤트에 동시에 포함될 수 있다.
도 2의 원격 관찰자를 참조하여, 스텝(112)으로 진행한다. 스텝(112)에서, 원격 관찰자 인터페이스(194)는 도 6에서 도시된 바와 같이, 원격 관찰자에 대한 세부사항을 디스플레이한다. 원격 관찰자 인터페이스(194)는, 원격 관찰자의 모든 옵션으로의 액세스를 제공하는 메뉴 바(196)와, 원격 관찰자의 가장 일반적으로 사용되는 옵션을 제공하는 툴바(198)와, 레코더의 스텝(108)에서의 사용성 테스트 동안 레코딩 소스, 즉 사용자 컴퓨터(50) 상에서 발생하는 데스크탑 활동에 대한 관 찰을 제공하는 관찰 창(200)과, 원격 관찰자에 대한 도움말 정보를 디스플레이하는 상태 바(202)와, 원격 관찰자의 레코더로의 연결 상태를 시각적으로 나타내는 연결 상태 아이콘(즉, 상기 아이콘이 녹색일 경우, 상기 원격 관찰자는 레코더로 성공적으로 연결된 상태임)(204)과, 상기 레코더에서 레코딩의 상태를 시각적으로 나타내는 레코딩 상태 아이콘(즉, 아이콘이 빗금친 원일 경우, 어떠한 레코딩도 진행 중이지 않음을 나타냄)(206)으로 구성되어 있다.
원격 관찰자의 스텝(113)에서, 연결이 발생하기 위해, 스텝(114)의 조건이 충족되어야만 한다. 스텝(115)이 만족되어야만 원격 관찰자가 레코딩 소스, 즉 사용자 컴퓨터(50)의 스크린을 디스플레이한다.
스텝(114)에서, 레코더에서, 캡처 옵션 섹션(70)의 원격 관찰자 허용 옵션(152)이 선택될 경우, 사용성 테스트 동안, 관찰자는 레코딩 소스, 즉 사용자 컴퓨터(50) 상에서 발생하는 레코딩을 실시간으로 관찰할 수 있다(레코더의 스텝(108)). 만족할 경우, 스텝(115)으로 진행한다. 레코더에서 이러한 옵션이 선택되지 않을 경우, 스텝(119)으로 진행하며, 이러한 컴퓨터들 간에서는 어떠한 연결도 존재하지 않는다.
스텝(115)에서, 사용성 테스트, 또는 레코딩은 시작되어 있어야 한다, 즉 스텝(108)이 이미 실행됐어야 한다. 그럴 경우, 스텝(113)으로 진행된다. 사용성 테스트, 또는 레코딩이 실행되지 않았을 경우, 스텝(119)으로 진행하며, 관찰하기 위한 어떠한 레코딩도 존재하지 않으며, 컴퓨터로 연결시킬 어떠한 이유도 존재하지 않는다.
스텝(114)과 스텝(115)의 사전 조건이 만족되는 동안, 스텝(113)이 계속된다. 원격 관찰자 컴퓨터(52)와 원격 관찰자는 레코딩 소스 컴퓨터(50)로 연결될 수 있고, 레코더는 메뉴 바(196)와 툴바(198) 중 하나를 이용한다.
메뉴 바(196)는 연결 항목(208)과, 관찰 항목(210)과, 표시 항목(212)과, 도움말 항목(214)으로 구성된다. 메뉴 바(196)를 사용하여, 도 7에서 도시된 바와 같이, 연결 항목 드롭 다운 메뉴(224)를 디스플레이하는 연결 항목(208)이 선택된다. 상기 연결 항목 드롭 다운 메뉴(224)는 연결(226), 연결 해제(228), 종료(230)에 대한 선택을 제공한다. 연결(226)을 선택함으로써, 도 8에서 도시된 바와 같은, 레코딩 대화 박스(232)로의 연결이 디스플레이된다. 레코딩 대화 박스(232)로의 연결에 따라, 레코더가 실행될 컴퓨터의 이름을 선택할 수 있도록 레코딩 컴퓨터 이름 옵션(234)이 제공된다. 레코딩 컴퓨터 이름이 가용 상태가 아닐 경우, 네트워크(56)로부터 적정 컴퓨터 이름을 찾기 위해, 브라우즈 네트워크 옵션(236)을 선택한다. 컴퓨터 이름이 선택될 때, OK 옵션(238)을 선택한다. 이러한 프로세스는 “연결 > 연결 (Connection > Connect)”로 명시된다. 상기 "연결(Connection)"은 연결 항목(208)을 의미하고, 상기 “연결(Connect)"은 연결(226)을 의미한다.
적정 컴퓨터 이름을 선택에 있어 문제가 있을 경우, 도움말 옵션(240)을 선택하고, 임의의 지시를 따른다. 레코딩 대화 박스(232)가 실수로 열린 경우, 취소(242)를 선택함으로써, 레코딩 대화 박스(232)가 취소될 것이고, 파일 항목 드롭 다운 메뉴(224)로 복귀한다.
또는, 툴바(198)를 이용하여 연결이 이뤄질 수 있다. 상기 툴바(198)는 연결 아이콘(216)과, 토글 전체 스크린 아이콘(218)과, 조정 토글 스케일 아이콘(220)과, 표시 설정 아이콘(222)으로 구성되어 있다. 연결 아이콘(216)을 선택함으로써, 앞서 언급한 바와 동일한 방식으로 연결하기 위해 레코딩 컴퓨터 이름을 선택하도록, 레코딩 대화 박스(232)가 자동으로 열릴 수 있다. 성공적으로 연결되면, 스텝(116)으로 진행한다.
스텝(116)에서, 사용성 테스트, 또는 레코딩이 원격 관찰자에 의해 관찰된다. 원격 관찰자는, 초기 설정 값을 이용하거나, 전체 스크린 관찰, 또는 조정을 위한 스케일링한 관찰을 위한 메뉴 바(196)나 툴바(198)를 이용하여, 소스 컴퓨터(50) 상에서의 레코딩 중에 발생하는 이벤트를 관찰하기 위한 몇 가지 옵션을 제공한다.
기본 설정을 이용하여, 관찰 창(200)에서, 표준 관찰(normal view)이 디스플레이된다. 이러한 표준 관찰에서, 원격 관찰 메뉴 바(196)와, 툴바(198)와, 상태 바(202)를 이용하여 최대화된 창에 소스 컴퓨터(50)로부터의 활동이 디스플레이된다.
또는 전체 스크린 관찰이 선택될 수 있다. 이러한 전체 스크린 관찰에서, 상기 소스 컴퓨터(50)로부터의 활동이 디스플레이되거나, 원격 관찰자 컴퓨터(52)의 전체 컴퓨터 스크린(53)을 차지한다. 메뉴 바(196)를 이용하여, 관찰 항목(210)을 선택함으로써, 도 7에서 도시된 바와 같이, 관찰 항목 드롭 다운 메뉴(242)가 디스플레이된다. 상기 관찰 항목 드롭 다운 메뉴(242)는 조정을 위한 스케일(244)과, 전체 스크린(246)과, 툴바(248)와, 상태 바(250)와, 세부사항 레코딩(252)을 제공 한다. 전체 스크린(246)을 선택함으로써, 전체 스크린 관찰이 디스플레이된다. 이러한 프로세스는 “관찰 > 전체 스크린”으로 명시될 수 있다. 상기 “관찰”은 관찰 항목(210)을 의미하고, “전체 스크린”은 상기 관찰 항목 드롭 다운 메뉴(242) 상의 전체 스크린(246)을 의미한다. 또한, 툴바(198)를 이용하여, 토글 전체 스크린 아이콘(218)을 선택함으로써, 전체 스크린 관찰이 선택될 수 있다.
또는, 소스 컴퓨터(50)의 스크린 분해능 설정이 상기 원격 관찰자 컴퓨터(52)의 분해능보다 더 높을 경우, 관찰 조정을 위한 스케일이 선택될 수 있다. 이러한 관찰 조정을 위한 스케일에서, 상기 소스 컴퓨터(50)로부터의 활동이 조정을 위해 스케일링될 것이며, 원격 관찰자 컴퓨터(52)의 전체 컴퓨터 스크린(53)으로 디스플레이될 것이다. 메뉴 바(196)를 사용하여, 관찰 항목(210)을 선택함으로써, 도 7에서 도시된 바와 같이 관찰 항목 드롭 다운 메뉴(242)가 디스플레이된다. 조정을 위한 스케일(244)을 선택함으로써, 스크린 관찰을 조정하기 위한 스케일이 디스플레이된다. 이러한 프로세스는 “관찰 > 조정을 위한 스케일”에 의해 명시될 수 있다. 상기 “관찰”은 관찰 항목(210)을 의미하며, “조정을 위한 스케일”은 관찰 항목 드롭 다운 메뉴(242)의 조정을 위한 스케일(244)을 의미한다. 또한, 툴바(198)를 이용하여, 조정을 위한 토글 스케일 아이콘(220)을 선택함으로써, 스크린 관찰을 조정하기 위한 스케일이 선택될 수 있다.
사용성 테스트, 또는 소스 컴퓨터(50)로부터의 활동을 관찰하는 동안, 원격 관찰자는, 레코딩에서 의미 있는 라벨을 이용하여 중요 포인트로의 표시를 제공하는 표시를 설정할 수 있다. 상기 표시는 관리자에서 배정된 정의인 알파벳 문자(가 령, A 내지 Z)로 구성되어 있다. 예를 들어, 표시“A"는 "사용자가 도움말 요청”으로 관리자에서 정의될 수 있으며, 이러한 경우에서, 모든 표시 “A"는 원격 관찰자에서, 사용을 위한 정의로 배당될 것이다. 또는, 표시는 이름으로 할당될 수 있으며, 상기 이름과 연계된 텍스트 노트 필드를 가질 수 있다. 제한된 수의 표시가 설정될 수 있으며, 원할 경우 동일한 표시가 반복적으로 사용될 수 있다. 표시가 사용될 때, 스텝(117)에서, 표시는 원격 관찰자 컴퓨터(52) 상의 원격 관찰자로부터, 소스 컴퓨터(50) 상의 레코더로 전송되어, 최종적으로 상기 레코더에 저장되며, 이때, 상기 표시는 레코딩된 스트림과 시간적으로 동기된다. 그 후, 관리자로 이동될 때, 상기 표시가 보여질 수 있으며, 레코딩 파일에서 검색될 수 있다.
스텝(116)에서, 표시를 설정하기 위해 메뉴 바(196)와 툴바(198)가 사용될 수 있다. 메뉴 바(196)를 사용하여, 도 7에서 도시된 바와 같이, 표시 항목(212)을 선택함으로써, 표시 항목 드롭 다운 메뉴(254)가 디스플레이된다. 상기 표시 항목 드롭 다운 메뉴(254)는 알파멧 문자 A 내지 Z의 표시(256)를 제공하며, 관리자에서 각각 특정 정의로서 배당된다. A 내지 Z에서의 임의의 문자를 선택함으로써, 스텝(117)에서 이러한 특정 표시의 정의가 레코더로 입력될 것이다. 이러한 프로세스는 “표시 > 표시”에 의해 명시될 수 있다. 상기 “표시”는 표시 항목(212)을 의미하고, “표시”는 표시 항목 드롭 다운 메뉴(254) 상의 표시(256)를 의미한다. 또한, 툴바(198)를 이용하여, 표시 설정 아이콘(222)을 선택함으로써, 표시 항목 드롭 다운 메뉴(254)가 디스플레이되어, 요망 표시(256)가 설정될 수 있다. 스텝(116)이 완료되면, 스텝(118)으로 진행한다.
스텝(118)에서, 원격 관찰자 컴퓨터(52)와 원격 관찰자는 레코딩 소스 컴퓨터(50)와 레코더로부터 연결해제된다. 이는 메뉴 바(196), 또는 툴바(198) 중 하나를 이용하여 이뤄질 수 있다.
메뉴 바(196)를 이용하여, 도 7에서 도시된 바와 같이, 연결 항목 드롭 다운 메뉴(224)를 디스플레이하는 연결 항목(208)이 선택된다. 연결 항목 드롭 다운 메뉴(224)로부터 연결해제(228)를 선택함으로써, 레코더로부터 원격 관찰자의 연결이 해제된다. 이러한 프로세스는 “연결 > 연결해제”에 의해 명시될 수 있다. 상기 “연결”은 연결 항목(208)을 의미하고, “연결해제”는 연결해제(228)를 의미한다.
또는, 툴바(198)를 이용하여 상기 연결해제가 성취될 수 있다. 연결된 동안, 연결해제의 토글 아이콘인 연결 아이콘(216)을 선택함으로써, 레코더로부터의 상기 원격 관찰자의 연결이 자동 해제될 것이다. 성공적으로 연결이 해제되면, 관리자(62)로 진행한다(도 3).
레코더에서 사용성 테스트가 종료되면, 소스 컴퓨터(50)와 원격 관찰자 컴퓨터(52)로부터의 임의의 원격 관찰자로부터, 관리자(62)로 진행한다(도 3).
단계(120)에서, 관리자가 시작된다. 상기 프로그램에 의해서, 사용성 테스트의 결과의 분석 및 프리젠테이션을 위해, 사용자는 레코더에 의해 생성된 레코딩을 이동시킬 수 있다. 또한 상기 프로그램에 의해, 사용자는 레코더에 대한 구성 파일을 생성할 수 있다.
스텝(121)에서, 원할 경우, 레코딩을 위한 구성 설정의 임의의 개수의 구성 파일이 생성될 수 있고, 나중에 사용되기 위해 저장될 수 있다. 이러한 미리 저장된 구성 설정에 대한 구성 파일은, 레코더의 스텝(103)에서 선택되어진 것이다. 이러한 구성 설정에 대한 구성 파일은, 도 9에서 도시된 바와 같이, 메뉴 바(260)와 파일 항목(272)을 이용하여 저장될 수 있으며, 도 10에서 도시된 바와 같이, 분석 파일 헤딩 드롭 다운 메뉴(286)와 레코더 구성(302)을 이용하여 저장될 수 있으며, 다음에서 상세하게 서술된다. 이러한 프로세스는 “파일 > 레코더 구성”에 의해 명시될 수 있다. 상기 “파일”은 파일 헤딩(272)을 의미하고, “레코더 구성”은 레코더 구성(302)을 의미한다.
상기 관리자는, 분석기 섹션(analyzer section)(268)과 프리젠터 섹션(presenter section)(270)으로 식별되는 두 개의 기능으로 나뉜다. 분석기 섹션(268)에서 시작할 경우, 스텝(122)으로 진행한다.
스텝(122)에서, 프로젝트가 생성되거나 기존의 프로젝트가 불려올 수 있다. 이러한 프로젝트는, 사용성 테스트의 레코딩을 관리자로 가져오기 전에, 불려올 것이 요구되며, 이에 따라, 레코딩이 분석되기 위해 저장된다. 도 9에서 도시된 바와 같이 관리자 인터페이스(258)가 관리자에 대한 세부사항을 디스플레이한다. 상기 관리자 인터페이스(258)는 관리자의 모든 옵션으로의 액세스를 제공하는 메뉴 바(260)와, 관리자의 가장 일반적으로 사용되는 옵션을 쉽게 닿을 수 있는 영역 내에 제공하는 툴바(262)와, 분석기 탭(264)과, 프리젠터 탭(266)으로 구성되어 있다. 상기 분석기 탭(264)에 의해, 이벤트 및 텍스트의 검색, 세그먼트 생성, 관찰 및 표시 추가, 그 밖의 다른 네비게이션(navigation)을 포함하여, 다양한 방식으로 레코딩 파일이 분석될 수 있다. 상기 프리젠터 탭(266)에 의해, 레코딩, 또는 사용성 테스트의 분석 결과의 하이라이트 비디오가 제공된다.
메뉴 바(260), 또는 툴바(262) 중 하나를 이용하여 프로젝트가 생성될 수 있다. 상기 메뉴 바(260)는 파일 항목(272)과, 세그먼트 항목(274)과, 표시 항목(276)과, 검색 항목(278)과, 관찰 항목(280)과, 플레이어 항목(282)과, 도움말 항목(284)으로 구성된다. 상기 메뉴 바(260)를 사용하여, 도 10에서 도시된 바와 같이, 분석기 파일 항목 드롭 다운 메뉴(286)를 디스플레이하는 파일 항목(272)이 선택된다. 상기 분석기 파일 항목 드롭 다운 메뉴(286)는 새 프로젝트(288), 프로젝트 열기(290), 프로젝트 닫기(292), 프로젝트 저장하기(294), 레코딩 가져오기(recording import)(296), 레코딩 새 이름(298), 레코딩 제거(300), 레코더 구성(302), 선호도(304), 종료(306)의 선택을 제공한다. 새 프로젝트(288)를 선택함으로써, 상기 프로젝트를 위한 이름이 입력되고, 상기 프로젝트가 열릴 수 있다. 이러한 프로세스는 “파일 > 새 프로젝트”에 의해 명시될 수 있다. 상기 “파일”은 파일 항목(272)을 의미하고, “새 프로젝트”는 새 프로젝트(288)를 의미한다. 새 프로젝트에 이름이 부여되고 입력되면, 스텝(123)으로 진행한다.
또는, 툴바(262)를 이용하여 새 프로젝트가 생성될 수 있다. 상기 툴바(262)는 새 프로젝트 아이콘(308)과, 프로젝트 열기 아이콘(310)과, 프로젝트 저장하기 아이콘(312)과, 레코딩 가져오기(314)와, 토글 카메라(316)와, 관리자 도움말(318)로 구성된다. 새 프로젝트 아이콘(308)을 선택함으로써, 프로젝트를 위한 이름이 자동 입력될 수 있고, 상기 프로젝트가 열릴 수 있다.
새 프로젝트를 생성하는 대신에, 프로젝트로 부가적인 레코딩이 이동되도록 기존의, 즉, 이전에 생성된 프로젝트가 열릴 수 있다. 메뉴 바(260)를 사용하여, 도 10에서 도시된 바와 같이, 분석기 파일 항목 드롭 다운 메뉴(286)를 디스플레이하는 파일 항목(272)이 선택된다. 프로젝트 열기(290)를 선택함으로써, 이전에 저장된 모든 프로젝트로의 액세스가 제공되며, 프로젝트의 요망 이름이 입력되어, 열릴 수 있다. 이러한 프로세스는 “파일 > 프로젝트 열기”에 의해 명시될 수 있다. 상기 “파일”은 파일 항목(272)을 의미하고, “프로젝트 열기”는 프로젝트 열기(290)를 의미한다. 새 프로젝트의 이름이 정해지고 입력되면, 스텝(123)으로 진행한다.
또는, 툴바(262)를 이용하여, 기존의 프로젝트가 열릴 수 있다. 프로젝트 열기 아이콘(310)을 선택함으로써, 이전에 저장된 모든 프로젝트로의 액세스가 자동 제공될 수 있고, 프로젝트에 대한 요망 프로젝트 이름이 입력되고, 열려질 수 있다.
스텝(123)에서, 레코딩은 새 프로젝트나 기존 프로젝트(가령 선택된 프로젝트)로 이동된다. 이는 메뉴 바(260), 또는 툴바(262) 중 하나를 이용하여 이뤄질 수 있다. 메뉴 바(260)를 이용하여, 도 10에서 도시된 바와 같이, 분석기 파일 항목 드롭 다운 메뉴(286)를 디스플레이하는 상기 파일 항목(272)이 선택된다. 레코딩 가져오기(296)를 선택함으로써, 이전의 모든 사용성 테스트 및 상기 테스트의 레코딩으로의 액세스가 제공될 수 있고, 요망 레코딩이 입력되어 선택된 프로젝트에서 열리게 할 수 있다. 이러한 프로세스는 “파일 > 레코딩 가져오기”에 의해 명시될 수 있다. 상기 “파일”은 파일 항목(272)을 의미하고, “레코딩 가져오기”는 레코딩 가져오기(296)를 의미한다. 레코딩이 선택되고 입력되면, 관리자 인터페이스(258)의 분석기 탭(264)에 레코딩이 추가된다. 도 9를 참조하여, 분석기(264)가, 테스트될 열려진 프로젝트(320)를 나타내고 있으며, 열린 프로젝트(320) 아래의 동일한 판에 열린 레코딩(322)을 나타내고 있다. 완료되면 스텝(124)으로 진행한다.
또는, 툴바(262)를 이용하여, 임의의 레코딩이 선택된 프로젝트에서 열릴 수 있다. 레코딩 가져오기(314)를 선택함으로써, 이전에 저장된 모든 레코딩으로의 액세스가 자동 제공될 것이며, 요망 레코딩이 선택되어, 입력되고 상기 선택된 프로젝트에서 열릴 수 있다.
스텝(124)에서, 레코딩의 분석이 시작된다. 상기 레코딩이 검색될 수 있고 관찰될 수 있다. 레코딩의 특정 관심 섹션이 표시될 수 있으며, 레코딩의 세그먼트가 격리될 수 있다. 원하는 분석에 따라서, 스텝(125), 또는 스텝(126), 또는 스텝(127)로 진행한다.
스텝(125)에서, 도 9의 검색 판(324)에서 도시된 바와 같이, 레코딩은 검색될 수 있고, 관찰될 수 있다. 검색 판(324)이 나타내는 바가 도 11에서 도시된다. 상기 검색 판(324)은 이벤트 검색 탭(326)과 텍스트 검색 탭(328)으로 나뉜다.
이벤트 검색 탭(326)을 이용함으로써, 레코딩내의 특정 이벤트가 검색될 수 있다. 검색 버튼(330)을 선택함으로써, 도 12에서 도시된 바와 같이, 이벤트 검색 설정 대화 박스(332)가 디스플레이된다. 이벤트 검색 설정 대화 박스(332)는 그룹 을 위한 검색 박스(334)와, 애플리케이션 박스(336)와, 지속 시간 박스(338)로 구성된다.
이벤트 검색 설정 대화 박스(332)를 사용하여, 레코딩에서 검색하기 위한 이벤트는 창 이벤트(340)와, 키보드 이벤트(342)와, 마우스 클릭 이벤트(344)와, 웹 페이지 변동 이벤트(346)와, 표시 이벤트(348)와, 세그먼트 이벤트(350)로 구성된다.
선택된 이벤트를 검색하기 위한 애플리케이션이 애플리케이션 박스(336)의 애플리케이션 박스 선택(352)에서 선택되고, 디스플레이된다. 모든 애플리케이션이 검색에서 사용될 경우, 상기 애플리케이션 박스 선택(352)은 “모든 애플리케이션”이라고 디스플레이할 것이다.
전체 레코딩 시간 프레임(354)과, 시작 지점 시간 프레임 및 종료 지점 시간 프레임(356)과, 특정 시간 프레임(358)을 제공하는 상기 지속 시간 박스(338)에서, 검색에 대한 시간 프레임이 선택된다. 전체 레코딩에 걸쳐서 검색이 실시될 경우, 상기 전체 레코딩 시간 프레임(354)이 선택될 것이다. 레코딩내의 두 개의 지점 사이의 검색이 실시될 경우, 상기 시작 지점 시간 프레임 및 종료 지점 시간 프레임(356)이 선택될 것이다. 특정 시간 동안 검색이 실시될 경우, 상기 특정 시간 프레임(358)이 선택될 것이며, 이때 시작 시간이 시작 시간 박스(360)로 입력되며, 종료 시간이 종료 시간 박스(362)로 입력된다.
또는, 메뉴 바(260)를 이용하여 이벤트 검색이 실시될 것이다. 메뉴 바(260)를 이용하여, 도 10에서 도시된 바와 같이, 검색 항목 드롭 다운 메뉴(414)를 디스 플레이하는 검색 항목(278)이 선택된다. 상기 검색 항목 드롭 다운 메뉴(414)는 이벤트(416)와, 텍스트(418)와, 관찰(420)과, 결과 재생(422)과, 결과 내보내기(424)를 제공한다. 이벤트 기반 검색을 실시하기 위해, 이벤트(416)를 선택한다. 이벤트(416)를 선택함으로써, 도 12에서 도시된 바와 같이, 이벤트 검색 설정 대화 박스(332)가 디스플레이될 것이다. 그 후, 상기 이벤트 검색이 앞서 언급한 바와 동일한 방식으로 실시될 수 있다. 이러한 프로세스는 “검색 > 이벤트”에 의해 명시될 수 있다. 상기 “검색”은 검색 항목(278)을 의미하고, “이벤트”는 이벤트(416)를 의미한다.
모든 검색 기준이 선택되면, 검색을 실시하기 위해, 지금 검색 버튼(364)을 선택한다. 이벤트 검색이 완료될 때, 그 결과는 검색 판(324)의 결과 디스플레이(366)에 디스플레이된다. 예를 들어(그러나 제한받지 않음), 이벤트 검색 결과(368)가 도 11에서의 결과 디스플레이(366)에 나타내어진다.
이벤트 검색 결과(368)는 몇가지 서로 다른 관찰로 디스플레이될 수 있다. 검색 판(324)의 관찰 섹션(370)은, 도 13에서 도시된 바와 같이, 이벤트 검색 결과를 상세한 리스트로 디스플레이해주는 리스트 디스플레이(372)와, 도 14에서 도시된 바와 같이, 선, 또는 히스토그램 그래프 포맷으로 이벤트 검색 결과를 디스플레이하는 그래프 디스플레이(374)와, 왼쪽에서 리스트 디스플레이가, 오른쪽에 그래픽 디스플레이가 위치하는 리스트/그래프 결과의 조합을 디스플레이하는 타일 수직 디스플레이(376)와, 상단에 리스트 디스플레이가, 하단에 그래픽 디스플레이가 위치하는 리스트/그래프 결과의 조합을 디스플레이하는 타일 수평 디스플레이(378)를 제공한다.
또는, 메뉴 바(260)를 이용하여, 검색 결과(368)가 디스플레이될 수 있다. 메뉴 바(260)를 이용하여, 도 10에서 도시된 바와 같이, 검색 항목 드롭 다운 메뉴(414)가 디스플레이되는 검색 항목(278)이 선택된다. 관찰(420)을 선택함으로써, 리스트와, 그래프와, 수직 타일과, 수평 타일의 관찰 옵션(444)이 디스플레이된다. 이러한 각각의 관찰 옵션은, 앞서 언급한, 리스트 디스플레이(372)와, 그래프 디스플레이(374)와, 타일 수직 디스플레이(376)와, 타일 수평 디스플레이(376)와 각각 동일하다. 그 후, 앞서 언급된 바와 동일한 방식으로 이벤트 검색이 실시될 수 있다. 이러한 프로세스는 “검색 > 이벤트”에 의해 명시될 수 있다. 상기 “검색”은 검색 항목(278)을 의미하며, “이벤트”는 이벤트(416)를 의미한다.
결과 디스플레이(366)에서 관찰된 모든 이벤트 검색 결과(368)를 항행(navigating)하기 위해, 분석기 탭(264)의 플레이어 창(380)에서, 임의의 특정 이벤트에 대한 스크린 비디오와 카메라 비디오가 관찰될 수 있다. 예를 들어, 도 15에서 도시된 바와 같이 리스트 디스플레이(372)에 관련하여, 특정 이벤트(382)를 선택함으로써, 플레이어 창(380)에서 화살표(384)를 갖는 적색 박스로 상기 이벤트가 강조될 것이다. 상기 플레이어 창(380)의 하단에 위치하는 제어부(386)를 사용하여, 상기 강조된 특정 이벤트가, 스크린 비디오의 단일 프레임으로서 재생될 수 있다. 다수의 이벤트가 강조될 경우, 각각의 특정 이벤트는, 슬라이드 쇼와 같이, 일련의 스크린 비디오의 단일 프레임들로서 재생될 수 있다. 단일 프레임, 또는 일련의 스크린 비디오의 단일 프레임들이 나타날 것이고, 사용자를 위해, 동화상과 같이 재생될 것이다.
도 16에서 도시된 바와 같이, 그래픽 디스플레이(374)와 관련하여, 임의의 샘플링 포인트(388)를 선택함으로써, 화살표(384)를 갖는 적색 박스로, 이벤트가 강조될 것이다. 다시, 플레이어 창(380)의 하단에 위치하는 제어부(386)를 사용하여, 강조된 샘플링 포인트(388)가 재생될 수 있다.
도 11을 참조하여, 텍스트 검색 탭(328)을 사용하여, 레코딩의 검색이 실시될 수 있다. 검색 버튼(330)을 선택함으로써, 도 17에서 도시된 바와 같이, 텍스트 검색 설정 대화 박스(390)가 디스플레이될 수 있다. 텍스트 검색 설정 대화 박스(390)는 그룹에 대한 검색 박스(392)와, 애플리케이션 박스(336)와, 지속기간 박스(338)로 구성될 수 있다.
텍스트 검색 설정 대화 박스(390)를 사용하여, 텍스트 박스(394)에 입력함으로써, 특정 단어, 또는 어구가 검색될 수 있다. 레코딩에서 이러한 텍스트 검색이 실시될 경우, 레코딩(396)이 선택될 것이다. 이러한 텍스트 검색이 표시에서 실시될 경우, 표시 텍스트 노트(398)가 선택될 것이다. 이러한 텍스트 검색이 세그먼트에서 실시될 경우, 세그먼트 텍스트 노트(400)가 선택될 것이다. 대문자 표기로 고려되어 입력된 정보로 검색이 제한될 경우, 대/소문자 구분(match case)(402)이 선택될 것이다.
애플리케이션 박스(336)의 애플리케이션 박스 선택(352)에서, 선택된 텍스트를 검색하기 위한 애플리케이션이 선택되고, 디스플레이된다. 모든 애플리케이션이 검색에서 사용되는 경우, 상기 애플리케이션 박스 선택(352)은 “모든 애플리케이 션”을 디스플레이할 것이다.
전체 레코딩 시간 프레임(354)과, 시작 지점 시간 프레임 및 종료 지점 시간 프레임(356)과, 특정 시간 프레임(358)을 제공하는 지속 시간 박스(338)에서, 이러한 텍스트 검색의 시간 프레임이 선택된다. 텍스트 검색이 전체 레코딩에 걸쳐 실시될 경우, 상기 전체 레코딩 시간 프레임(354)이 선택될 것이다. 텍스트 검색이 레코딩내의 두 개의 지점 사이에서 실시될 경우, 상기 시작 지점 시간 프레임 및 종료 지점 시간 프레임(356)이 선택될 것이다. 특정 시간 동안, 텍스트 검색이 실시될 경우, 상기 특정 시간 프레임(358)이 선택될 것이며, 이때 시가 시간이 시작 시간 박스(360)에 입력되고, 종료 시간이 종료 시간 박스(362)에 입력된다.
또는, 메뉴 바(260)를 이용하여, 검색이 실시될 수 있다. 상기 메뉴 바(260)를 이용하여, 도 10에서 도시된 바와 같이, 검색 항목 드롭 다운 메뉴(414)를 디스플레이하는 검색 항목(278)이 선택된다. 텍스트 기반 검색을 실시하기 위해, 텍스트(418)를 선택한다. 텍스트(418)를 선택함으로써, 도 17에서 도시된 바와 같이, 텍스트 검색 설정 대화 박스(390)가 디스플레이될 것이다. 이러한 프로세스는 “검색 > 텍스트”에 의해 명시된다. 상기 “검색”은 검색 항목(278)을 의미하고, “텍스트”는 텍스트(418)를 의미한다.
모든 검색 기준이 선택되면, 지금 검색 버튼(364)을 선택하여, 텍스트 검색을 실시한다. 상기 텍스트 검색이 완료되면, 그 결과는 앞서 언급한 이벤트 기반 검색과 동일한 방식으로 디스플레이되고, 항행(navigating)이 이뤄진다.
검색/분석 : 예제 #1
다음은, 레코딩 결과를 분석하고, 온라인 구매와 지불 프로세스를 보장해주는 회사의 웹 사이트의 전자 상거래 부분에 대한 평가에 관련된 결론을 도출해내기 위한 이벤트/텍스트 검색의 조합에 대한 예제이다. 목표는 다음과 같다. (1) 참가자가 영수증 페이지로 가기까지 걸리는 시간(작업 수행 시간), (2) 참가자가 영수증 페이지로 가기까지 거치는 웹 페이지의 수, (3) 참가자가 구매 프로세스에 걸쳐 행한 클릭의 수를 알아내는 것이다.
검색/분석 스텝
당신이 필요로 하는 정보를 얻기 위해 다음의 검색 및 분석 스텝을 취하라.
스텝 1: 작업의 종료 지점 찾기
작업의 종료 지점을 찾음으로써 시작되며, 본 예제에서 이는 영수증 페이지이다. 상기 영수증 페이지는 상단에 텍스트“ TechSmith 에서 구매해주셔서 감사합니다.(Thank you for shopping at TechSmith )”를 포함한다. 애플리케이션 인터넷 익스플로러( Internet Explorer )에서 이러한 문구에 대한 텍스트 검색을 수행한다.
상기 검색을 실시하려면 ,
1. 선택하기 위해 프로젝트 판에서 레코딩( Recording )을 클릭하라.
2. 검색 판에서 텍스트 탭을 선택하고, 검색 버튼
Figure 112006067899751-PCT00001
을 클릭하라.
3. 텍스트 검색 설정 대화 박스가 열릴 것이다. 다음의 검색 기준을 입력하라.
검색 대상( Search for ) - " Thank you for shopping at TechSmith "
검색 장소( Search In ) - 레코딩( Recording )
민감도( Sensitivity ) - 낮음( Low )
애플리케이션 - 인터넷 익스플로러
지속 기간 - 전체 레코딩
4. 지금 검색( Search now ) 을 선택하여, 결과값의 검색 및 관찰이 이뤄지도록 하라. 이로써, 레코딩 내에서 지정된 작업이 종료된 지점을 정확히 알 수 있다.
Figure 112006067899751-PCT00003
주의 : 민감도를 낮음으로 설정했음에도 불구하고, 상기 검색으로부터 몇가지의 동일한 결과를 얻을 수 있다. 이는 사람이 인식할 수 있는 범위를 초과하는 결과에서 작은 차이를 감지할 수 있는 용량 때문이다. 상기 동일한 결과는 동일하게 유효하다고 고려될 수 있다. 리스트에서 작업 종료 지점으로서 상기 결과들 중 하나를 선택한다.
5. 결과 리스트에서 종료 지점을 선택하라, 그러면 비디오의 상기 지점으로 건너뛸 것이다. 플레이어 창에서 강조된 당신이 검색한 텍스트를 볼 수 있을 것이다.
Figure 112006067899751-PCT00004
6. 종료 지점을 찾으면, 종료 지점 설정 버튼
Figure 112006067899751-PCT00005
을 선택하여, 종료 지점으로서 이를 표시할 수 있다.
스텝 2 : 작업 시작 지점 찾기
상기 작업의 시작 부분을 찾기 위하여 유사한 검색을 이용한다. 본 예제에서 는 사용자가 구매 프로세스의 첫 번째 스크린에 도달할 때가 작업의 시작 지점이다. 이러한 페이지는 텍스트 " TechSmith 제품 온라인 주문( Order TechSmith Products Online .)"을 포함한다.
상기 검색을 실시하려면,
1. 선택하기 위해 프로젝트 판에서 레코딩(Recording)을 클릭하라.
2. 검색 판에서 텍스트 탭을 선택하고, 검색 버튼
Figure 112006067899751-PCT00006
을 클릭하라.
3. 텍스트 검색 설정 대화 박스가 열릴 것이다. 다음의 검색 기준을 입력하라.
검색 대상( Search for ) - " Order TechSmith Products Online "
검색 장소( Search In ) - 레코딩( Recording )
민감도( Sensitivity ) - 낮음( Low )
애플리케이션 - 인터넷 익스플로러
지속 기간 - 전체 레코딩
Figure 112006067899751-PCT00007
4. 지금 검색( Search now ) 을 선택하여, 결과값의 검색 및 관찰이 이뤄지도록 하라. 이로써, 레코딩 내에서 지정된 작업이 시작되는 지점을 정확히 알 수 있다:
Figure 112006067899751-PCT00008
5. 결과 리스트에서 시작 지점을 선택하라, 그러면 비디오의 상기 지점으로 건너뛸 것이다. 플레이어 창에서 강조된 당신이 검색한 텍스트를 볼 수 있을 것이다.
Figure 112006067899751-PCT00009
6. 시작 지점을 찾으면, 시작 지점 설정( Set In Point ) 버튼
Figure 112006067899751-PCT00010
을 선택하여, 이를 시작 지점으로서 표시할 수 있다.
스텝 3: 작업 수행 시간 연산하기
이제 시작 지점( In Point ) 종료 지점( Out Point ) 이 설정됐다. 세그먼트 생성(Create Segment ) 버튼
Figure 112006067899751-PCT00011
을 클릭하라. 이로써, 세그먼트 세부사항 옵션 대화 박스(Segment Details Options dialog box )가 열릴 것이다. 세그먼트를 "작업 수행 시간(Time on Task )"이라고 명명하고, 원할 경우 텍스트 설명을 입력한다. 상기 세 그먼트를 생성할 것에 OK 를 선택한다.
프로젝트 판에서 "작업 수행 시간( Time on Task )" 세그먼트를 선택할 때, 상기 세그먼트의 지속 시간( Duration ) 이 세부사항 판에서 나타날 것이다. 이러한 지속 시간이 작업 수행 시간이다.
Figure 112006067899751-PCT00012
결과 : 본 예제에서, 작업 수행 시간은 1분 35초이다.
스텝 4 : 마우스 클릭의 횟수와 웹 페이지 변동 횟수 연산하기
"작업 수행 시간( Time on Task )" 세그먼트 동안 발생한 마우스 클릭과 웹 페이지 변동에 대한 이벤트 검색을 수행해라.
이러한 검색을 실시하기 위하여,
1. 프로젝트 판에서 "작업 수행 시간( Time on Task )"을 선택하라.
2. 검색 판에서 이벤트 탭(Event tab)을 선택하고, 검색 버튼
Figure 112006067899751-PCT00013
을 클릭한다. 이벤트 검색 설정 대화 박스가 열릴 것이다.
3. 다음의 검색 기준을 입력한다.
검색 대상( Search For ) - 마우스 클릭 및 웹 페이지 변동( Mouse Clicks and Web Page Changes )
애플리케이션( In Application ) - 인터넷 익스플로러
지속 시간( During ) - 시작 지점 및 종료 지점( In and out points )
Figure 112006067899751-PCT00014
4. 지금 검색( Search Now ) 을 선택하여, 검색이 실시되게 한다. 이벤트의 종류d에 따라서가 아니라, 진행 시간에 따라 결과값이 리스트로 정리된다. 이벤트 종류에 의해, 상기 결과값을 분리하기 위해, 이벤트 컬럼 타이틀 바( Event column title bar )를 클릭한다.
5. 리스트의 상부에 위치하는 브라우저 이벤트를 선택하고, 마지막 브라우저 이벤트를 SHIFT + 클릭한다. 세부사항 영역이 9번의 웹 페이지 변동이 있었음을 보여줄 것이다. 브라우저 이벤트에 대한 URL 이 설명( Description ) 컬럼에서 나타난다.
Figure 112006067899751-PCT00015
6. 그 후, 상기 리스트에서 상부에 위치하는 마우스 이벤트를 선택하고, 가장 마지막 마우스 이벤트를 SHIFT + 클릭한다.
Figure 112006067899751-PCT00016
세부사항 영역이 24번의 마우스 이벤트가 있었음을 나타낼 것이다.
결과 : 본 예제에서, 참가자는 영수증 페이지까지 가기 위해, 9번의 웹 페이지 변경과 24번의 마우스 클릭을 했다.
또는, 이벤트 검색 탭(326)과 텍스트 검색 탭(328)은, 도 26에서 도시된 바와 같이 검색 편집기(Search Editor)(624)로 대체될 수 있다. 상기 검색 편집기(624)는 검색 지속 시간 박스(search during box)(626)와, 검색 대상 박스(search for box)(628)와, 검색 프로파일 박스(search profile box)(630, 632)와, 프로파일 저장하기(save profile)(634)과, 프로파일 조직(organize profile)(636)과, 지금 검색 버튼(search now button)(638)과, 취소 버튼(cancel button)(640)과, 도움말 버튼(help button)(642)으로 구성된다.
검색 편집기(624)를 이용하여, 레코딩에서 검색 대상으로의 입력 스트림이 검색 대상 박스(628)에서 선택되며, 이는 웹 페이지 변동, 윈도우/대화 이벤트, 마우스 클릭, 키 스트로크, 스크린 텍스트, 표시, 세그먼트를 포함한다(그러나 제한받지 않음.). 상기 검색 대상 박스(628)에서 입력 스트림을 선택하면, 검색 프로파일 박스(630)가 선택된 입력 스트림을 디스플레이하고, 상기 특정 입력 스트림을 지시하며, 이때, 검색이 상기 입력 스트림에 관련되어 있는 모든 활동에서 실시될 것이다.
예를 들어, 도 26에서 도시된 바와 같이, 검색 대상 박스(628)에서 마우스 클릭이 선택된다. 그 결과로서, 검색 프로파일 박스(630)는 "모든 마우스 클릭"을 디스플레이할 것이며, 이는 검색 지속 시간(626) 동안 발생하는 "모든" 마우스 클 릭에 대해 검색이 실시될 것임을 의미한다. 검색기가 마우스 클릭의 검색을 특정 마우스 클릭으로, 가령 "왼쪽" 마우스 클릭으로만 제한하길 원할 경우, 상기 검색기는 검색 프로파일 박스(630)에 디스플레이된 "모든 마우스 클릭"을 선택하고, 그 후 제공된 입력으로부터 특정 검색을 선택한다.
검색 지속 시간 박스(626)에서, 검색의 시간 프레임이 선택되고, 이벤트 검색 설정 대화 박스(332)와 텍스트 검색 설정 대화 박스(390)에서 지속 시간 박스(338)와 동일한 시간 프레임이 제공된다.
검색 편집기(624)에서 선택된 기준이 나중에 사용되거나 장래의 검색을 위하여 저장될 경우, 상기 검색 기준을 저장하기 위해, 검색 프로파일(632)에서 제공된 위치로 상기 프로파일 저장 버튼(634)이 선택된다.
검색/분석 : 예제 #2
사용성 조사원은, 전자 상거래 웹 사이트에서 지불 프로세스를 완료하기 위해 사용자가 취하는 행동의 횟수를 판단하기 위한 연구를 실시한다. 상기 조사원은 사용자들에게 사이트로부터 소프트웨어 라이센스를 구매하기 위한 작업을 수행할 것을 요청한다. 레코더가 설치되고, 사용자와 상호 작업할 레코딩 컴퓨터(50) 상에서 실행되며, 스크린의 비디오, 사용자의 비디오, 시스템의 모든 이벤트 (가령, 마우스 클릭, 키보드 입력, 웹 페이지 변동, 윈도우/대화 이벤트, 스크린 상에 나타나는 텍스트)를 포함하여, 발생하는 모든 것을 레코딩한다.
사용자가 작업을 완료한 후, 조사원은 레코더에 의해 생성되는 레코딩 파일을 저장한다. 여러 다른 참가자들과 함께 이러한 프로세스는 반복되어, 다양한 사 용자에 대한 샘플을 얻을 수 있다. 모든 사용자가 작업을 완료하면, 조사원이 관리자를 이용하여 결과물을 분석하기 시작할 준비를 한다.
조사원은 레코더에 의해 관리자의 프로젝트 파일로 생성되는 레코딩 파일을 가져온다. 그 후, 조사원은 레코딩을 재생시킴으로써, 스크린과 카메라 비디오뿐 아니라 사용자의 음성을 관찰할 수 있다. 각각의 사용자가 작업을 수행하기 위한 취하는 행동의 횟수 및 시간에 관한 세부사항을 알기 위해, 조사원은 관리자의 검색 기능을 사용할 것이다.
조사원의 목표는,
1. 구매를 완료하기 위해 사용자가 보게 되는 웹 페이지의 개수
2. 사용자가 상기 구매를 완료하기까지 걸리는 시간
3. 상기 구매를 완료하기까지 필요한 마우스 클릭의 횟수
를 판단하는 것이다.
검색 기능을 사용하지 않고, 조사원은 비디오를 시청하고, 작업을 완료하기 위해 거치는 모든 스텝을 계산할 것이다. 이러한 절차는 매우 까다로우면 많은 시간을 필요로 한다. 대신, 관리자의 검색 기능을 사용하여, 조사원은 정보들을 신속하고 손쉽게 찾을 수 있다.
시작하기 위해, 조사원은, 관리자의 분석기 탭의 검색 판 내부에 있는 검색 버튼을 클릭한다. 이에 따라, 조사원이 검색하고자 하는 것을 특정할 수 있게 해주는 대화 박스가 나타난다.
검색의 첫 번째 스텝은, 사용자가 작업을 완료한 위치 및 시각을 찾는 것이 며, 프로세스 동안 어떠한 웹 페이지가 보여졌는지를 찾는 것이다. 이러한 데이터들을 찾기 위하여, 조사원은 모든 웹 페이지 변동에 대하여 검색하기를 선택한다.
이러한 페이지의 나머지는 의도적으로 빈 페이지로 남겨진다.
Figure 112006067899751-PCT00017
이러한 옵션이 선택되는 동안, 관리자는 레코딩 동안 발생 되는 모든 웹 페이지 변동에 대하여 레코딩 파일을 검색할 것이다. 그 후, 조사원이 지금 검색 버튼을 클릭하여, 검색을 실시하고, 검색 리스트가 결과를 보여준다.
Figure 112006067899751-PCT00018
<이러한 하이라이트 이벤트는 작업이 시작된 때와 종료된 때를 보여준다. 각각의 항목은 작업 중에 사용자가 보게 되는 서로 다른 웹 페이지이다.>
조사원은 사용자가 어느 웹 페이지를 봤는지를, 그리고 그들이 각각의 페이지에서 얼마나 오래 머물렀는지를 정확하게 검색 결과로부터 신속하게 알 수 있다. 이제, 조사원은 상기 연구의 첫 번째 목적에 대하여 답할 수 있다. 사용자는 구매 프로세스를 완료하기 위해 22개의 웹 페이지를 거쳤다.
URL을 조사함으로써, 조사원은 사용자가 기대되지 않은 페이지를 봤는지를 식별할 수 있다. 예를 들어, 상기 리스트의 4번째 항목은 두 번 반복된다. 이는 사용자가 동일한 페이지를 연속적으로 세 번 봤다는 것을 의미한다. 조사원은 이러한 것을 예견하지 않았으며, 이유를 알기를 원한다. 상기 리스트에서 이벤트를 선택함으로써, 비디오 및 오디오 레코딩에서, 사용자에 의해 상기 웹 페이지가 로딩된 지점으로 자동으로 넘어간다. 이러한 페이지의 나머지는 의도적으로 빈 페이지로 남겨진다.
이러한 옵션이 선택되는 동안, 관리자는 레코딩 동안 발생 되는 모든 웹 페이지 변동에 대하여 레코딩 파일을 검색할 것이다. 그 후, 조사원이 지금 검색 버튼을 클릭하여, 검색을 실시하고, 검색 리스트가 결과를 보여준다.
Figure 112006067899751-PCT00019
<이러한 하이라이트 이벤트는 작업이 시작된 때와 종료된 때를 보여준다. 각각의 항목은 작업 중에 사용자가 보게 되는 서로 다른 웹 페이지이다.>
이벤트가 비디오에서 표시되는 동안, 조사원은 사용자가 무엇을 했는지를 알기 위해 비디오를 재생할 수 있다. 웹 페이지 상에 디스플레이되는 메시지로부터, 특별 프로모션으로 사용자가 둘 이하의 수량을 주문하려고 했음을 알 수 있다.
Morae에 의해, 비디오에 이벤트가 표시되기 때문에, 상기 비디오에서 특정 행동이 발생한 것을 찾아내기가 매우 용이하다. 조사원은 전체 비디오를 관찰하거나, 행동이 발생한 시점을 찾기 위해 앞뒤로 빠르게 감을 필요가 없다. 이벤트를 검색하고, 이벤트를 선택함으로써, 비디오는 상기 이벤트가 발생한 시점으로 즉시 이동한다.
프로세스 중에 사용자가 어려움, 또는 혼란을 느꼈던 시점과 위치를 판단하기 위해, 조사원은 여러 다른 검색을 반복적으로 실시할 수 있으며, 본 연구의 나머지 목표에 대해서 답할 수 있다. 사용자의 비디오 및 오디오를 캡처함으로써, 조사원은 사용자가 말하는 바를 들을 수 있고, 사용자의 표정을 볼 수 있으며, 이에 따라, 사용자가 구매 프로세스에 어떻게 반응하는 지에 관한 풍부한 양질의 정보가 제공될 수 있다. 정보를 찾고, 상기 비디오를 항행하기 위해 검색 기능을 이용함에 따라, 분석 작업이 훨씬 더 빨라진다.
도 3을 다시 참조하여, 스텝(125)이 완료되면, 스텝(126)으로 진행한다. 스텝(126)에서, 원격 관찰자(remote viewer)에서 레코딩 중에 표시(256)가 설정될 때, 분석기 섹션(268)에서의 레코딩으로 같거나 추가적인 표시가 추가될 수 있다. 이는 도 9에서 도시된 메뉴 바(260)를 이용하여 성취될 수 있다.
메뉴 바(260)를 사용하여, 도 10에서 도시된 바와 같이 표시 항목 드롭 다운 메뉴(404)를 디스플레이하는 표시 항목(276)이 선택된다. 표시 항목 드롭 다운 메뉴(404)는 표시 생성(406)과, 표시 편집(408)과, 표시 삭제(410)와, 표시 종류 정의(412)를 제공한다. 표시 생성(406)을 선택함으로써, 도 18에서 도시된 바와 같이, 표시 세부사항 대화 박스(426)가 디스플레이된다. 상기 표시 세부사항 대화 박스(426)는 표시 이름(428)과, 표시 타입(430)와, 텍스트 노트(432)와, 오디오 노트(434)와, 시간(436)과, OK 버튼(438)과, 취소 버튼(440)과, 도움말 버튼(442)을 제공한다. 이러한 프로세스는 "표시 > 표시 생성"에 의해 명시될 수 있다. 상기 "표시"는 표시 항목(276)을 의미하며, 상기 "표시 생성"은 표시 생성(406)을 의미한 다.
표시 세부사항 대화 박스(426)를 사용하여 표시를 생성하기 위해(즉, 레코딩 중에 특정 시간 지점에 대한 플래그, 또는 주석을 생성하기 위해), 요망 표시가 이름(428)으로 삽입되며, 표시의 식별 문자가 타입(430)으로 삽입되며, 이는 원격 관찰자에서 사용되는 표시 항목 드롭 다운 메뉴(254)에서의 표시(256)와 동일하다. 임의의 텍스트 노트가 텍스트 노트(432)로 입력될 수 있다. 상기 텍스트 노트는 문자 제한이 없으며, 그 내용은 모두 검색 가능하다. 임의의 오디오 노트가 오디오 노트(434)로 입력될 수 있다. 부착된 마이크로폰(57)을 이용하여, 임의의 오디오 노트가 생성될 수 있다. 오디오 노트(434)가 포함되지 않을 경우, 오디오 노트 버튼(446)을 선택함으로써, 상기 레코딩으로부터 명확해질 수 있다. 설정이 입력될 때, OK 버튼(438)을 선택하여, 표시를 생성할 수 있다. 설정이 정확하지 않을 경우, 취소 버튼(440)을 선택하여 표시 세부사항 대화 박스(426)로부터 빠져나올 수 있다. 완료되면, 도 3의 스텝(127)으로 진행한다.
스텝(127)에서, 레코딩의 특정 관심 섹션이 레코딩 내에서 고립되어, 분석기 섹션(268)에 저장될 수 있다. 도 9에서 도시된 바와 같이, 이는 메뉴 바(260)를 사용하여 이뤄질 수 있다.
메뉴 바(260)를 사용하여, 도 10에서 도시된 바와 같이, 세그먼트 항목 드롭 다운 메뉴(448)를 디스플레이하는 세그먼트 항목(274)이 선택된다. 상기 세그먼트 항목 드롭 다운 메뉴(448)는 세그먼트 생성(450)과, 세그먼트 재생(452)과, 세그먼트 편집(454)과, 세그먼트 삭제(456)를 제공한다. 세그먼트 생성(450)을 선택함으 로써, 도 19에서 도시된 바와 같이, 세그먼트 세부사항 대화 박스(458)가 디스플레이된다. 상기 세그먼트 세부사항 대화 박스(458)는 세그먼트 이름(460)과, 텍스트 노트(462)와, 오디오 노트(464)와, 지속 시간(466)과, OK 버튼(468)과, 취소 버튼(470)과, 도움말 버튼(472)을 제공한다. 이러한 프로세스는 "세그먼트 > 세그먼트 생성"에 의해 명시된다. 상기 "세그먼트"는 세그먼트 항목(274)을 의미하며, 상기 "세그먼트 생성"은 세그먼트 생성(450)을 의미한다.
세그먼트 세부사항 대화 박스(458)를 이용하여 세그먼트를 생성하기 위해, 상기 세그먼트의 이름이 세그먼트 이름(460)으로 입력된다. 표시에 대하여 앞서 언급한 방식과 동일한 방식으로, 텍스트 노트(462)와 오디오 노트(464)가 입력되고, 사용된다. 레코딩 중에 세그먼트가 특정 시간 프레임을 형성하는 바와 같이, 이는 지속 시간(466)에서 설정된다. 세그먼트가 시작되는 시작 지점(474)과, 세그먼트가 종료되는 종료 지점(476)이 입력된다. 이러한 설정이 입력되면, OK 버트(468)을 선택하여, 세그먼트를 생성한다. 상기 설정이 정확하지 않은 경우, 취소 버튼(470)을 선택하여 세그먼트 세부사항 대화 박스(458)로부터 빠져나올 수 있다. 완료되면, 프리젠테이션 섹션(270)으로 진행하고, 도 3의 스텝(128)으로 진행한다.
스텝(128)에서, 레코딩, 또는 사용성 테스트의 분석의 결과에 대한 하이라이트 비디오, 또는 비디오 프리젠테이션이 분석기 섹션(268)으로부터 생성될 수 있다. 다음에서 더욱 상세하게 서술되며, 하이라이트 비디오는 스토리보드 상에 배열된 일련의 비디오 클립으로 구성되어 있다. 상기 비디오 클립은, 상기 하이라이트 비디오에 포함될 세그먼트, 또는 레코딩에서 선택된 섹션의 복사본이다. 상기 비디 오 클립은 원본 세션 레코딩을 변경시키지 않는다.
도 20을 참조하여, 관리자 인터페이스(258)가 프리젠테이션 탭(266)을 더욱 명료하게 나타내고 있다. 관리자 인터페이스(258)는 프리젠테이션 탭(266)에 대한 관리자의 모든 옵션으로의 액세스를 제공하는 메뉴 바(478)와, 프리젠터 탭(266)에 대하여 관리자의 가장 흔하게 사용되는 옵션을 쉽게 닿을 수 있는 영역에서 제공하는 툴바(480)와, 이전에 생성된 모든 레코딩과 세그먼트의 리스트를 작성하는 프리젠터 프로젝트 판(482)과, 하이라이트 비디오용으로 생성되는 클립이 생성되고 저장되는 클립 빈(484)과, 선택된 레코딩으로부터 스크린 비디오, 세그먼트, 표시, 클립이 디스플레이되는 플레이어 윈도우(486)와, 상기 클립 빈(484)에서의 클립이 하이라이트 비디오용으로 바람직한 순서로 구성되는 스토리보드(488)로 구성된다.
비디오의 하이라이트 비디오 및 타이틀 클립이 생성되기 전에, 요망 레코딩, 세그먼트, 표시를 내포하는 프로젝트가 프리젠터 프로젝트 판(482)으로 열릴 수 있다. 이러한 정보는 메뉴 바(478)나 툴바(480)를 이용하여 열릴 수 있다. 상기 메뉴 바(478)는 파일 항목(490)과, 클립 항목(492)과, 관찰 항목(494)과, 플레이어 항목(496)과, 도움말 항목(498)으로 구성되어 있다. 메뉴 바(478)를 사용하여, 도 21에서 도시된 바와 같이, 프리젠터 파일 항목 드롭 다운 메뉴(500)를 디스플레이하는 파일 항목(490)이 선택된다. 상기 프리젠터 파일 항목 드롭 다운 메뉴(500)는 새 프로젝트(502)와, 프로젝트 열기(504)와, 프로젝트 종료(506)와, 프로젝트 저장하기(508)과, 레코딩 가져오기(510)와, 하이라이트 비디오 생성하기(512)와, 팩 앤드 쇼(pack and show)(514)와, 레코딩 구성(516)과, 선호도(518)와, 종료(520의 선 택을 제공한다. 새 프로젝트(502)를 선택함으로써, 프로젝트를 위한 이름이 입력되고, 상기 프로젝트가 열릴 수 있게 된다. 이러한 프로세스는 "파일 > 새 프로젝트"에 의해 명시된다. 상기 "파일"은 파일 항목(490)을 의미하며, "새 프로젝트"는 새 프로젝트(502)를 의미한다. 프리젠터 프로젝트 판(482)으로 기존 프로젝트가 열릴 경우, 프로젝트 열기(504)를 선택함으로써, 기존 프로젝트를 위한 이름이 입력되고 열릴 수 있다. 이러한 프로세스는 "파일 > 프로젝트 열기"에 의해 명시될 수 있다. 이러한 "파일"은 파일 항목(490)을 의미하며, "프로젝트 열기"는 프로젝트 열기(504)를 의미한다. 이와 유사하게, 특정 레코딩을 현재 열려 있는 프로젝트로 가져온다면, 레코딩 가져오기(510)를 선택함으로써, 레코딩을 상기 프로젝트로 가져올 수 있다. 이러한 프로세스는 "파일 > 레코딩 가져오기" 에 의해 명시될 수 있다. 상기 "파일"은 파일 항목(490)을 의미하며, 상기 "레코딩 가져오기"는 레코딩 가져오기(510)를 의미한다.
또는, 툴바(480)를 이용하여, 새 프로젝트, 또는 기존 프로젝트, 또는 임의의 레코딩을 열거나 가져올 수 있다. 상기 툴바(480)는 새 프로젝트 아이콘(522)과, 프로젝트 열기 아이콘(524)과, 프로젝트 저장하기 아이콘(526)과, 레코딩 가져오기(528)와, 타이틀 클립 생성하기(530)와, 하이라이트 비디오 생성하기(532)와, 스토리보드 비우기(534)와, 관리자 도움말(536)로 구성되어 있다. 새 프로젝트를 열기 위해, 새 프로젝트 아이콘(522)을 선택함으로써, 자동으로 프로젝트가 입력되고 열릴 것이다. 기존 프로젝트를 열기 위해, 프로젝트 열기 아이콘(524)을 선택함으로써, 자동으로 기존 프로젝트가 입력되고 열린다. 레코딩을 현재 열린 프로젝트 로 가져오기 위해, 레코딩 가져오기(528)를 선택함으로써, 프리젠터 프로젝트 판(482) 내의 열려진 프로젝트로 레코딩을 가져올 수 있다. 새 프로젝트가 열리면, 스텝(128)을 계속한다.
스텝(128)을 계속하여, 일련의 비디오 및 타이틀 클립이, 프리젠터 프로젝트 판(482)에서 열린 세그먼트, 또는 레코딩으로부터 생성된다. 메뉴 바(478)를 사용하여 비디오 클립이 생성될 수 있다. 메뉴 바(478)를 사용하여, 도 21에서 도시된 바와 같이, 프리젠터 클립 항목 드롭 다운 메뉴(538)를 디스플레이하는 클립 항목(492)이 선택된다. 상기 프리젠터 클립 항목 드롭 다운 메뉴(538)는 비디오 클립 생성(540)과, 타이틀 클립 생성(542)과, 클립 빈(544)과, 축소(thumbnail size)(546)와, 클립 빈 비우기(548)와, 스토리보드(550)와, 스토리보드 비우기(552)의 선택을 제공한다. 비디오 클립 세부사항 대화 박스(554)는 이름(556)과, 텍스트 노트(558)와, 오디오 노트(560)와, 지속 시간(562)과, 오디오 트랙(564)과, 카메라 PIP 옵션(566)과, OK 버튼(568)과, 취소 버튼(570)과, 도움말 버튼(572)으로 구성된다. 이러한 프로세스는 "클립 > 비디오 클립 생성"에 의해 명시될 수 있다. 상기 "클립"은 클립 항목(492)을 의미하며, "비디오 클립 생성"은 비디오 클립 생성(540)을 의미한다.
비디오 클립 세부사항 대화 박스(554)를 이용하여 비디오 클립을 생성하기 위해, 이름(556)으로 이름이 입력된다. 표시와 세그먼트를 위해 앞서 언급한 바와 동일한 방식으로 텍스트 노트(558)와, 오디오 노트(560)와, 지속 시간(562)이 입력되어 사용된다. 대응하는 카메라 비디오를 갖는 각각의 비디오 클립에 대하여, PIP 보여주기 박스(574)에서 체크표시를 위치시킴으로써 이러한 카메라 비디오는 스크린 비디오 위에 PIP(picture-in-picture) 이미지로서 디스플레이될 수 있다. 상기 PIP 이미지는 이동될 수 있고, 리사이즈(resize)될 수 있으며, 다음에서 더욱 상세하게 서술될, 편집 클립(598)의 일부로서 투명도가 조정될 수 있다. 설정이 입력될 때, OK 버튼(568)을 선택하여 비디오 클립을 생성할 수 있다. 이전에 생성된 비디오 클립이 클립 빈(484)에서 나타난다. 설정이 정확하지 않을 경우, 취소 버튼(570)을 선택하여 비디오 클립 세부사항 대화 박스(554)로부터 빠져나올 수 있다.
메뉴 바(478)나 툴바(480)를 이용하여, 타이틀 클립이 생성될 수 있다. 메뉴 바(478)를 이용하여, 도 21에서 도시된 바와 같이, 프리젠터 클립 항목 드롭 다운 메뉴(538)를 디스플레이하는 상기 클립 항목(492)이 선택된다. 타이틀 클립 생성하기(542)를 선택함으로써, 도 23에서 도시된 바와 같이 타이틀 클립 세부사항 대화 박스(576)가 디스플레이된다. 상기 타이틀 클립 세부사항 대화 박스(576)는 타이틀(578)과, 설명(580)과, 배경 색상(582)과, 오디오 노트(584)와, 오디오 노트 비우기(586)와, OK 버튼(588)과, 취소 버튼(590)과, 도움말 버튼(592)으로 구성된다. 이러한 프로세스는 "클립 < 타이틀 클립 생성하기"로 명시될 수 있으며, 상기 "클립"은 클립 항목(492)을 의미하며, "타이틀 클립 생성하기"는 타이틀 클립 생성하기(542)를 의미한다.
타이틀 클립 세부사항 대화 박스(576)를 이용하여 타이틀 클립을 생성하기 위해, 타이틀(578)로 타이틀이 입력되며, 상기 타이틀(578) 아래에서 나타나는 설 명이 설명(580)으로 입력된다. 앞서 언급한 바와 동일한 방식으로, 오디오 노트(584)가 입력되고, 사용된다. 설정이 입력될 때, OK 버튼(588)을 선택하여 타이틀 클립을 생성할 수 있다. 이전에 생성된 타이틀 클립이 클립 빈(484)에서 나타날 것이다. 설정이 정확하지 않을 경우, 취소 버튼(590)을 선택하여, 상기 타이틀 클립 세부사항 대화 박스(576)로부터 빠져나올 수 있다. 또는, 툴바(480)를 사용하여, 상기 타이틀 클립이 생성될 수 있다. 타이틀 클립 생성하기(530)를 선택함으로써, 상기 타이틀 클립 대화 박스(576)가 자동으로 디스플레이되어 타이틀 클립이 생성될 수 있다. 완료되면, 도 3의 스텝(129)으로 진행한다.
스텝(129)에서, 비디오 클립, 또는 타이틀 클립이 편집될 수 있다. 상기 클립은 메뉴 바(478)를 이용하여 편집될 수 있다. 메뉴 바(478)를 이용하여, 도 21에서 도시된 바와 같이, 프리젠터 클립 항목 드롭 다운 메뉴(538)를 디스플레이하는 클립 항목(492)이 선택된다. 클립 빈(544)을 선택함으로써, 클립 빈 세부사항 대화 박스 메뉴(594)가 디스플레이된다. 상기 클립 빈 세부사항 대화 박스 메뉴(594)는 클립 재생하기(596)와, 클립 편집하기(598)와, 스토리보드에 클립 추가하기(600)와, 클립 삭제하기(602)로 구성된다. 클립 편집하기(598)를 선택함으로써, 비디오 클립 세부사항 대화 박스(554), 또는 어느 클립이 선택되는지에 따라서, 타이틀 클립 세부사항 대화 박스(576)가 다시 디스플레이되어, 상기 클립의 임의의 변경이 이뤄질 수 있다. 이러한 프로세스는 "클립 > 클립 빈 > 클립 편집하기"에 의해 명시된다. 상기 "클립"은 클립 항목(492)을 의미하며, 상기 "클립 빈"은 클립 빈(544)을 의미하고, "클립 편집하기"는 클립 편집하기(598)를 의미한다.
비디오 클립과 타이틀 클립이 생성되면, 스토리보드로 요망 클립이 추가된다. 상기 클립은, 메뉴 바(478)나 클립 빈(484)을 이용하여 스토리보드로 추가될 수 있다. 메뉴 바(478)를 사용하여, 도 21에서 도시된 바와 같이 프리젠터 클립 항목 드롭 다운 메뉴(538)를 디스플레이하는 클립 항목(492)이 선택된다. 클립 빈(544)을 선택함으로서 클립 빈 드롭 다운 메뉴(594)가 디스플레이된다. 스토리보드에 클립 추가하기(600)를 선택함으로써, 선택된 비디오, 또는 타이틀 클립이 스토리보드(488)로 삽입된다. 모든 요망 비디오 클립 및 타이틀 클립이 스토리보드(488)에 위치할 때까지, 이러한 단계들이 반복된다. 이러한 프로세스는 "클립 > 클립 빈 > 클립 추가하기"로 명시될 수 있다. 상기 "클립"은 클립 항목(492)을 의미하며, 상기 "클립 빈"은 클립 빈(544)을 의미하며, "클립 추가하기"는 스토리보드에 클립 추가하기(600)를 의미한다. 또는, 클립 빈(484)에서의 임의의 비디오 클립, 또는 타이틀 클립이 선택되어, 스토리보드(488)로 드래깅될 수 있다. 그 후, 모든 비디오 클립과 타이틀 클립이 하이라이트 비디오를 프러젠테이션하기 위한 선호도의 요망 순서로 배열된다.
스토리보드(488)에 추가되는 비디오 클립, 또는 타이틀 클립이 상기 스토리보드(488)에서 더 이상 필요 없을 경우, 메뉴 바(478)를 이용하여, 상기 비디오 클립, 또는 타이틀 클립이 제거될 수 있다. 상기 메뉴 바(478)를 사용하여, 도 21에서 도시된 바와 같이, 프리젠터 클립 항목 드롭 다운 메뉴(538)를 디스플레이하는 클립 항목(492)이 선택된다. 스토리보드(550)를 선택함으로써, 스토리보드 드롭 다운 메뉴(604)가 디스플레이된다. 상기 스토리보드 드롭 다운 메뉴(604)는 클립 재 생하기(606)와, 클립 편집하기(608)와, 스토리보드로부터 클립 제거하기(610)로 구성된다. 상기 스토리보드로부터 클립 제거하기(610)를 선택함으로써, 선택된 비디오, 또는 타이틀 클립이 상기 스토리보드(488)로부터 삭제된다. 상기 스토리보드(488)로부터 제거되는 것이 바람직한 임의의 다른 비디오 클립, 또는 타이틀 클립에 대하여 이러한 단계가 반복된다. 이러한 프로세스는 "클립 > 스토리보드 > 클립 제거하기"에 의해 명시될 수 있다. 상기 "클립"은 클립 항목(492)을 의미하며, 상기 "스토리보드"는 스토리보드(550)를 의미하고, "클립 제거하기"는 스토리보드로부터 클립 제거하기(610)를 의미한다. 또는, 키보드의 키를 이용하여, 스토리보드(488)의 임의의 비디오 클립, 또는 타이틀 클립이 상기 스토리보드(488)로부터 선택되어 삭제될 수 있다. 스토리보드(488)에서의 작업이 완료되면, 스텝(130)으로 진행한다.
스텝(130)에서, 일련의 비디오의 하이라이트 비디오 및 타이틀 클립이 상기 스토리보드(488)에서 생성된다. 메뉴 바(478), 또는 툴바(480)를 이용하여, 상기 하이라이트 비디오가 생성될 수 있다. 메뉴 바(478)를 이용하여, 도 21에서 도시된 바와 같이, 프리젠터 파일 항목 드롭 다운 메뉴(500)를 디스플레이하는 파일 항목(490)이 선택된다. 하이라이트 비디오 생성하기(512)를 선택함으로써, 요망 색상, 프레임 속도, 오디오 코덱(또는 포맷), 비디오 코덱, 비디오 크기에 따라, 하이라이트 비디오가 렌더링(rendering)되거나 생성될 수 있다. 이러한 프로세스는 "파일 > 하이라이트 비디오 생성하기"에 의해 명시될 수 있다. 상기 "파일"은 파일 항목(490)을 의미하고, "하이라이트 비디오 생성하기"는 하이라이트 비디오 생성하 기(512)를 의미한다.
또는, 툴바(480)를 이용하여, 상기 하이라이트 비디오가 생성될 수 있다. 하이라이트 비디오 생성하기(532)를 선택함으로써, 요망 색상, 프레임 속도, 오디오 코덱(또는 포맷), 비디오 코덱, 비디오 크기에 따라, 자동으로 하이라이트 비디오는 렌더링되거나 생성될 수 있다. 완료되면, 스텝(131)으로 진행하고, 프리젠터(270)를 빠져나온다. 그 후, 플레이어(612)로 진행하고, 스텝(132)으로 진행한다(도 3).
스텝(132)을 참조하여, 플레이어가 시작된다. 이러한 프로그램에 의해, 사용자는 프리젠터(270)에서 생성된 하이라이트 비디오를 로딩하고 재생할 수 있다.
스텝(133)에서, 도 25에서 도시된 바와 같이, 플레이어에 의해, 요망 하이라이트 비디오의 선택에 의해, 열리고 재생되며, 녹음 재생(playback) 제어, 가령 재생/일시 정지, 정지, 시작, 뒤로 감기, 앞으로 감기, 종료, 전체 스크린, 반복, 볼륨이 제공될 수 있다.
따라서 사용성 테스트를 실시하기 위해 고유한 자동화 시스템 및 방법이 제공된다. 본 발명이 특정 실시예를 들어 서술되는 동안, 많은 대안 예, 수정 예, 변형 예들이 전술한 기술의 당업자에게 자명하다. 따라서 본 발명의 사상과 범위내에 모든 대안 예, 수정 예, 변형 예가 포함될 수 있다.

Claims (71)

  1. 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법에 있어서, 상기 방법은
    다수의 선택된 레코딩 설정을 이용하여, 레코더 컴퓨터(recorder computer) 상에서의 레코딩을 시작하는 단계로서, 이때 상기 레코더 컴퓨터는 상기 레코딩을 디스플레이하기 위한 스크린을 제공하는 단계(a),
    여러 다른 입력 장치로부터의 다수의 입력 스트림을 캡처하여, 레코딩 동안, 다수의 캡처된 입력 스트림을 생성하는 단계(b),
    상기 다수의 입력 스트림을 동기화시키는 단계(c),
    상기 레코딩을 지정 시간에서 정지시키는 단계(d),
    다수의 캡처된 입력 스트림의 레코딩 파일을 저장하는 단계(e)
    를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  2. 제 1 항에 있어서, 다수의 선택된 레코딩 설정을 형성하기 위해, 다수의 레코딩 설정을 구성하는 단계를 더 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  3. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 레코더 컴퓨터의 스크린의 비디오를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  4. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상으로 디스플레이되는, 상기 레코더 컴퓨터에 부착된 키보드로부터의 다수의 텍스트를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  5. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  6. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터에 부착된 마우스로부터 상기 레코더 컴퓨터의 스크린 상으로 디스플레이되는 다수의 마우스 클릭을 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  7. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에서 발생하는 다수의 시스템 이벤트(system event)를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  8. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 레코더 컴퓨터를 동작시키는, 레코더 컴퓨터에 부착된 카메라로부터의 사용자의 비디오를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  9. 제 1 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 레코더 컴퓨터를 동작시키는, 레코더 컴퓨터에 부착된 마이크로폰(microphone)으로부터의 사용자의 오디오를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  10. 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법에 있어서, 상기 방법은
    다수의 선택된 레코딩 설정(recording setting)을 이용하여, 레코더 컴퓨터(recorder computer) 상에서 레코딩을 시작하는 단계로서, 이때 상기 레코더 컴퓨터는 상기 레코딩을 디스플레이하기 위한 스크린을 제공하는 단계(a),
    상기 레코더 컴퓨터를 원격 컴퓨터로 연결하는 단계(b),
    레코딩 중에, 여러 다른 입력 장치로부터의 다수의 입력 스트림(input stream)을 캡처하여, 캡처된 입력 스트림을 형성하는 단계(c),
    상기 원격 컴퓨터로부터 다수의 정보를 상기 레코딩에 추가시켜 다수의 추가된 정보를 형성하는 단계(d),
    지정 시간에서 레코딩을 정지시키는 단계(e),
    다수의 캡처된 입력 스트림과 다수의 추가된 정보에 대한 레코딩 파일을 저장하는 단계(f)
    를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  11. 제 10 항에 있어서, 다수의 선택된 레코딩 설정을 형성하기 위해, 다수의 레코딩 설정을 구성하는 단계를 더 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  12. 제 11 항에 있어서, 다수의 선택된 레코딩 설정을 테스트하는 단계를 더 포함하는 것을 특징으로 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  13. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 레코더 컴퓨터의 스크린의 비디오를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  14. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상으로 디스플레이되는, 상기 레코더 컴퓨터에 부착된 키보드로부터의 다수의 텍스트를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  15. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  16. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 마우스로부터의 다수의 마우스 클릭을 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  17. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에서 발생하는 다수의 시스템 이벤트를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  18. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 카메라로부터의 사용자의 비디오를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  19. 제 10 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 마이크로폰(microphone)으로부터의 사용자의 오디오를 포함하는 것을 특징으로 하는 컴퓨터 활동(computer activity)을 레코딩하기 위한 컴퓨터를 기반으로 하는 방법.
  20. 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법에 있어서, 상기 방법은
    다수의 선택된 레코딩 설정(recording setting)을 사용하여, 레코더 컴퓨터(recorder computer) 상에서 사용성 테스트를 시작하는 단계로서, 이때 상기 레코더 컴퓨터는 상기 사용성 테스트를 디스플레이하기 위한 스크린을 제공하는 단계(a),
    사용성 테스트 중에, 다수의 입력 스트림을 캡처하여, 다수의 캡처된 입력 스트림을 형성하는 단계(b),
    다수의 입력 스트림을 동기화시키는 단계(c),
    상기 사용성 테스트를 지정 시간에서 정지시키는 단계(d),
    상기 레코더 컴퓨터의 스크린의 비디오의 레코딩 파일과, 다수의 상기 캡처된 입력 스트림을 저장하는 단계(e)
    를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  21. 제 20 항에 있어서, 다수의 레코딩 설정을 구성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  22. 제 20 항에 있어서, 여러 다른 입력 장치들로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린의 비디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  23. 제 20 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 키보드로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  24. 제 20 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 사용성 테스트로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  25. 제 20 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 마우스로부터의 다수의 마우스 클릭을 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  26. 제 20 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에서 발생하는, 상기 사용성 테스트로부터의 다수의 시스템 이벤트를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  27. 제 20 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 카메라로부터의 사용자의 비디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  28. 제 20 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키기 위한, 상기 레코더 컴퓨터에 부착된 마이크로폰(microphone)으로부터의 사용자의 오디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  29. 제 20 항에 있어서, 상기 레코더 컴퓨터를 원격 컴퓨터로 연결시키는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  30. 제 29 항에 있어서, 상기 원격 컴퓨터로부터 다수의 표시를 상기 사용성 테스트에 추가하여, 다수의 추가된 표시를 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  31. 제 30 항에 있어서, 상기 레코더 컴퓨터로부터 상기 원격 컴퓨터의 연결을 해제시키는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  32. 제 31 항에 있어서, 상기 다수의 추가된 표시와 함께, 상기 레코딩 파일을 저장하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test) 의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  33. 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법에 있어서, 상기 방법은
    선택된 레코딩 설정을 형성하기 위해 다수의 레코딩 설정을 구성하는 단계로서, 이때 다수의 선택된 레코딩 설정은, 여러 다른 입력 장치로부터의 다수의 입력 스트림을 포함하는 단계(a),
    상기 선택된 레코딩 설정을 테스트하는 단계(b),
    다수의 상기 선택된 레코딩 설정을 이용하여, 레코더 컴퓨터 상에서 사용성 테스트를 시작하는 단계로서, 이때 상기 레코더 컴퓨터는 상기 사용성 테스트를 디스플레이하기 위해 스크린을 제공하는 단계(c),
    상기 레코더 컴퓨터를 원격 컴퓨터에 연결하는 단계(d),
    사용성 테스트 동안, 다수의 입력 스트림을 캡처하여, 다수의 캡처된 입력 스트림을 형성하는 단계(e),
    상기 원격 컴퓨터로부터의 다수의 표시로 구성된 제 1 세트를 상기 사용성 테스트에 추가하여 다수의 추가된 표시를 형성하는 단계(f),
    상기 사용성 테스트를 지정 시간에서 정지하는 단계(g),
    상기 원격 컴퓨터를 상기 레코더 컴퓨터로부터 연결 해제시키는 단계(h),
    다수의 캡처된 입력 스트림의 레코딩 파일과, 상기 다수의 추가된 표시를 저장하는 단계(i),
    프로젝트를 여는 단계(j),
    다수의 레코딩 파일을 열린 상기 프로젝트로 가져오는 단계(k),
    상기 다수의 레코딩 파일을 분석하여, 분석된 정보로 구성된 하나의 세트를 고립시키는 단계(l),
    상기 분석된 정보의 하이라이트 비디오를 형성하는 단계(m),
    상기 하이라이트 비디오를 재생하는 단계(n)
    를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  34. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 레코더 컴퓨터의 스크린의 비디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  35. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 키보드로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  36. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 사용성 테스트로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  37. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 마우스로부터의 다수의 마우스 클릭을 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  38. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에서 발생하는, 상기 사용성 테스트로부터의 다수의 시스템 이벤트를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  39. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 카메라로부터의 사용자의 비디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  40. 제 33 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 마이크로폰(microphone)으로부터의 사용자의 오디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  41. 제 33 항에 있어서, 상기 선택된 레코딩 설정을 테스트하는 단계는, 상기 선택된 레코딩 설정을 이용하여 연습 사용성 테스트를 시작하는 단계를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  42. 제 33 항에 있어서, 상기 선택된 레코딩 설정을 테스트하는 단계는, 상기 연습 사용성 테스트 동안, 다수의 연습 입력 스트림을 캡처하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  43. 제 33 항에 있어서, 상기 선택된 레코딩 설정을 테스트하는 단계는, 상기 연습 사용성 테스트 동안에 나타나는 임의의 문제점을 교정하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  44. 제 33 항에 있어서, 상기 선택된 레코딩 설정을 테스트하는 단계는, 특정 지속 시간이 지난 후에, 상기 연습 사용성 테스트를 정지시키는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  45. 제 33 항에 있어서, 다수의 레코딩 파일을 분석하는 단계는, 상기 다수의 캡처된 입력 스트림 내에 포함된 정보에 대한 다수의 레코딩 파일을 검색하는 단계를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  46. 제 33 항에 있어서, 다수의 레코딩 파일을 분석하는 단계는, 다수의 표시들로 구성된 제 2 세트를, 검색되는 다수의 캡처된 입력 스트림으로부터의 프로젝트로 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  47. 제 33 항에 있어서, 다수의 레코딩 파일을 분석하는 단계는, 검색되는 다수의 캡처된 입력 스트림으로부터의 프로젝트로 다수의 세그먼트들로 구성된 제 1 세트를 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  48. 제 33 항에 있어서, 분석된 정보들로 구성된 세트로부터의 다수의 비디오 클립을 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  49. 제 33 항에 있어서, 상기 다수의 비디오 클립으로부터 스토리보드를 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  50. 제 33 항에 있어서, 상기 다수의 비디오 클립에 대한 다수의 타이틀 클립을 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  51. 제 33 항에 있어서, 상기 스토리보드로부터 하이라이트 비디오를 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  52. 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법에 있어서, 상기 방법은,
    레코딩 설정(recording setting)이 구성될 경우, 선택된 레코딩 설정을 형성 하기 위해 다수의 레코딩 설정을 구성하는 단계(a)로서, 이때 상기 다수의 선택된 레코딩 설정이 여러 다른 입력 장치로부터의 다수의 입력 스트림(input stream)을 포함하는 단계(a),
    상기 레코딩 설정이 구성되지 않을 경우, 선택된 레코딩 설정을 형성하기 위해, 이전에 레코딩된 다수의 레코딩 설정을 가져오는 단계(b)로서, 이때 다수의 선택된 레코딩 설정은 여러 다른 입력 장치로부터의 다수의 입력 스트림을 포함하는 단계(b),
    다수의 선택된 레코딩 설정이 테스트될 경우, 상기 선택된 레코딩 설정을 테스트하는 단계(c),
    상기 다수의 선택된 레코딩 설정을 이용하여, 레코더 컴퓨터 상에서 사용성 테스트를 시작하는 단계로서, 이때 상기 레코더 컴퓨터는 상기 사용성 테스트를 디스플레이하기 위한 스크린을 제공하는 단계,
    상기 레코더 컴퓨터가 원격 컴퓨터에 연결될 경우, 상기 레코더 컴퓨터를 원격 컴퓨터로 연결시키는 단계(d), 그리고 사용성 테스트 동안, 상기 원격 컴퓨터로부터 상기 다수의 표시(marker)들로 구성된 제 1 세트를 추가하여 다수의 추가된 표시를 형성하는 단계(e),
    사용성 테스트 동안, 다수의 입력 스트림을 캡처하여 다수의 캡처된 입력 스트림을 형성하는 단계,
    상기 다수의 입력 스트림을 동기화시키는 단계,
    상기 사용성 테스트를 지정 시간에서 정지시키는 단계,
    상기 레코더 컴퓨터가 연결되어 있는 경우, 상기 레코더 컴퓨터로부터 상기 원격 컴퓨터의 연결을 해제하는 단계(f),
    상기 다수의 캡처된 입력 스트림의 레코딩 파일과, 상기 다수의 추가된 표시를 저장하는 단계,
    상기 사용성 테스트가 분석될 경우, 하나의 프로젝트를 여는 단계(g)와, 다수의 레코딩 파일을 열려진 상기 프로젝트로 가져오는 단계(h)와, 다수의 레코딩 파일을 분석하여 분석된 정보들로 구성된 하나의 세트를 고립시키는 단계(i)와, 상기 분석된 정보의 하이라이트 비디오를 형성하는 단계(j)와, 상기 하이라이트 비디오를 재생하는 단계(k)
    를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  53. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린의 비디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  54. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 키보드로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  55. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 사용성 테스트로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  56. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 마우스로부터의 다수의 마우스 클릭을 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  57. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에서 발생하는, 상기 사용성 테스트로부터의 다수의 시스템 이벤트를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  58. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 카메라로부터의 사용자의 비디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  59. 제 52 항에 있어서, 여러 다른 입력 장치로부터의 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 마이크로폰(microphone)으로부터의 사용자의 오디오를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  60. 제 52 항에 있어서, 상기 선택된 레코딩 설정이 테스트되는 경우가 선택될 경우,
    선택된 레코딩 설정을 이용하여 연습 사용성 테스트를 시작하는 단계(l),
    연습 사용성 테스트 동안, 다수의 연습 입력 스트림을 캡처하는 단계(m),
    상기 연습 사용성 테스트 동안 발생하는 임의의 문제점을 교정하는 단계(n),
    특정 지속 시간이 지난 후에, 연습 사용성 테스트를 정지시키는 단계(o)
    를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  61. 제 52 항에 있어서, 상기 사용성 테스트가 분석될 경우,
    상기 다수의 캡처된 입력 스트림 내에 포함된 정보에 대하여 다수의 레코딩 파일을 검색하는 단계(p),
    검색되는 다수의 캡처된 입력 스트림으로부터의 프로젝트로 상기 다수의 표시들로 구성된 제 2 세트를 형성하는 단계(q),
    검색되는 다수의 캡처된 입력 스트림으로부터의 프로젝트로 상기 다수의 표시들로 구성된 제 1 세트를 형성하는 단계(r)
    를 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  62. 제 52 항에 있어서, 분석된 정보들로 구성된 세트로부터 다수의 비디오 클립을 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  63. 제 52 항에 있어서, 상기 다수의 비디오 클립으로부터 스토리보드를 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  64. 제 52 항에 있어서, 상기 다수의 비디오 클립에 대한 다수의 타이틀 클립을 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  65. 제 52 항에 있어서, 상기 스토리보드로부터 하이라이트 비디오를 형성하는 단계를 더 포함하는 것을 특징으로 하는 사용성 테스트(usability test)의 실시 및 분석을 위한 컴퓨터를 기반으로 하는 방법.
  66. 컴퓨터 판독형 매체에 있어서, 상기 컴퓨터 판독형 매체는
    다수의 선택된 레코딩 설정(recording setting)을 이용하여 레코더 컴퓨터(recorder computer) 상에서 레코딩(recording)을 시작하기 위한 단계(1)로서, 이때 상기 레코더 컴퓨터는 상기 레코딩을 디스플레이하기 위해 스크린을 제공하는 단계(1),
    상기 레코더 컴퓨터의 상기 스크린의 비디오를 캡처하기 위한 단계(2),
    상기 레코더 컴퓨터를 동작시키는, 사용자의 비디오를 캡처하기 위한 단계(3),
    레코딩 동안, 다수의 입력 스트림을 캡처하여, 다수의 캡처된 입력 스트림을 형성하는 단계(4),
    상기 레코딩을 지정 시간에서 정지시키는 단계(5),
    상기 레코더 컴퓨터의 스크린의 비디오의 레코딩 파일과, 상기 레코더 컴퓨터를 동작시키는, 사용자의 비디오와, 상기 다수의 캡처된 입력 스트림을 저장하기 위한 단계(6)
    를 실행시키는 컴퓨터 프로그램을 포함하는 것을 특징으로 하는 컴퓨터 판독 형 매체.
  67. 제 66 항에 있어서, 상기 다수의 캡처된 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에서 디스플레이되는, 상기 레코더 컴퓨터에 부착된 키보드로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
  68. 제 66 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코딩으로부터의 다수의 텍스트 정보를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
  69. 제 66 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터의 스크린 상에 디스플레이되는, 상기 레코더 컴퓨터에 부착된 마우스로부터의 다수의 마우스 클릭을 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
  70. 제 66 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터 상에서 발생하는, 상기 레코딩으로부터의 다수의 시스템 이벤트를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
  71. 제 66 항에 있어서, 상기 다수의 입력 스트림 중 하나는, 상기 레코더 컴퓨터를 동작시키는, 상기 레코더 컴퓨터에 부착된 마이크로폰(microphone)으로부터의 사용자의 오디오를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
KR1020067019373A 2004-04-01 2005-03-31 사용성 테스트를 실시하기 위한 자동화 시스템 및 방법 KR20060128022A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US55869204P 2004-04-01 2004-04-01
US60/558,692 2004-04-01

Publications (1)

Publication Number Publication Date
KR20060128022A true KR20060128022A (ko) 2006-12-13

Family

ID=35125791

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067019373A KR20060128022A (ko) 2004-04-01 2005-03-31 사용성 테스트를 실시하기 위한 자동화 시스템 및 방법

Country Status (7)

Country Link
US (1) US7184918B2 (ko)
EP (1) EP1763808A4 (ko)
JP (1) JP2007531940A (ko)
KR (1) KR20060128022A (ko)
AU (1) AU2005232047A1 (ko)
CA (1) CA2556995C (ko)
WO (1) WO2005099255A2 (ko)

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050246241A1 (en) * 2004-04-30 2005-11-03 Rightnow Technologies, Inc. Method and system for monitoring successful use of application software
US7636892B2 (en) * 2004-06-22 2009-12-22 International Business Machines Corporation Graphical user interface (GUI), method, system and program product for generating usability data for a remote computer user
US7310625B2 (en) * 2004-08-12 2007-12-18 Sap Aktiengesellschaft Knowledge network generation
US20060073462A1 (en) * 2004-09-22 2006-04-06 Aspire, Inc. Inline help and performance support for business applications
US8340130B2 (en) 2005-01-14 2012-12-25 Citrix Systems, Inc. Methods and systems for generating playback instructions for rendering of a recorded computer session
US8935316B2 (en) 2005-01-14 2015-01-13 Citrix Systems, Inc. Methods and systems for in-session playback on a local machine of remotely-stored and real time presentation layer protocol data
US8230096B2 (en) * 2005-01-14 2012-07-24 Citrix Systems, Inc. Methods and systems for generating playback instructions for playback of a recorded computer session
US8296441B2 (en) 2005-01-14 2012-10-23 Citrix Systems, Inc. Methods and systems for joining a real-time session of presentation layer protocol data
US8145777B2 (en) * 2005-01-14 2012-03-27 Citrix Systems, Inc. Method and system for real-time seeking during playback of remote presentation protocols
US8200828B2 (en) 2005-01-14 2012-06-12 Citrix Systems, Inc. Systems and methods for single stack shadowing
US7831728B2 (en) 2005-01-14 2010-11-09 Citrix Systems, Inc. Methods and systems for real-time seeking during real-time playback of a presentation layer protocol data stream
US20060159432A1 (en) 2005-01-14 2006-07-20 Citrix Systems, Inc. System and methods for automatic time-warped playback in rendering a recorded computer session
JP2006311366A (ja) * 2005-04-28 2006-11-09 Matsushita Electric Ind Co Ltd 画像記録装置及び画像記録装置の駆動方法
US8191008B2 (en) 2005-10-03 2012-05-29 Citrix Systems, Inc. Simulating multi-monitor functionality in a single monitor environment
US7478182B2 (en) * 2006-01-31 2009-01-13 Schweig Marc E Keyboard, mouse, and video (KVM) session capture system that stores and can playback portions of live KVM session via forensic capture module
US9110934B2 (en) 2006-06-02 2015-08-18 International Business Machines Corporation System and method for delivering an integrated server administration platform
US8554596B2 (en) * 2006-06-05 2013-10-08 International Business Machines Corporation System and methods for managing complex service delivery through coordination and integration of structured and unstructured activities
US20070282692A1 (en) * 2006-06-05 2007-12-06 Ellis Edward Bishop Method and apparatus for model driven service delivery management
US8001068B2 (en) * 2006-06-05 2011-08-16 International Business Machines Corporation System and method for calibrating and extrapolating management-inherent complexity metrics and human-perceived complexity metrics of information technology management
US8468042B2 (en) 2006-06-05 2013-06-18 International Business Machines Corporation Method and apparatus for discovering and utilizing atomic services for service delivery
US8254648B2 (en) * 2007-01-04 2012-08-28 General Electric Company Method for providing adaptive hanging protocols for image reading
US20080229288A1 (en) * 2007-03-13 2008-09-18 Steve Nelson Software Plugin Modules for Device Testing
KR101335867B1 (ko) * 2007-04-13 2013-12-02 엘지전자 주식회사 영상표시기기에서 데이터 업데이트 장치 및 방법
US7822702B2 (en) * 2007-06-27 2010-10-26 International Business Machines Corporation Creating a session log for studying usability of computing devices used for social networking by filtering observations based on roles of usability experts
US20090006966A1 (en) * 2007-06-27 2009-01-01 Bodin William K Creating A Usability Observation Video For A Computing Device Being Studied For Usability
US20090006108A1 (en) * 2007-06-27 2009-01-01 Bodin William K Creating A Session Log For A Computing Device Being Studied For Usability
US7912803B2 (en) * 2007-06-27 2011-03-22 International Business Machines Corporation Creating a session log with a table of records for a computing device being studied for usability by a plurality of usability experts
US9779173B2 (en) * 2007-07-12 2017-10-03 Go Daddy Operating Company, LLC Recording and transmitting a network user's network session
US20090132920A1 (en) * 2007-11-20 2009-05-21 Microsoft Corporation Community-based software application help system
US8977958B2 (en) * 2007-11-20 2015-03-10 Microsoft Technology Licensing, Llc Community-based software application help system
US20090162024A1 (en) * 2007-12-20 2009-06-25 Geevee, Inc. Intra-Media Demarcation
US20100057405A1 (en) * 2008-08-28 2010-03-04 Sony Corporation Automated software testing environment
JP5133919B2 (ja) * 2009-02-19 2013-01-30 株式会社沖データ アプリケーションプログラム及び画像処理装置
US8332765B2 (en) * 2009-03-06 2012-12-11 Microsoft Corporation Problem reporting system based on user interface interactions
US9442621B2 (en) * 2009-05-05 2016-09-13 Suboti, Llc System, method and computer readable medium for determining user attention area from user interface events
US20100306232A1 (en) * 2009-05-28 2010-12-02 Harris Corporation Multimedia system providing database of shared text comment data indexed to video source data and related methods
US9754224B2 (en) * 2009-06-26 2017-09-05 International Business Machines Corporation Action based to-do list
US8806341B2 (en) * 2009-12-10 2014-08-12 Hulu, LLC Method and apparatus for navigating a media program via a histogram of popular segments
JP5565557B2 (ja) * 2010-01-12 2014-08-06 日本電気株式会社 業務システム用ユーザビリティ評価装置、業務システム用ユーザビリティ評価方法およびプログラム
US20140052853A1 (en) * 2010-05-26 2014-02-20 Xavier Mestres Unmoderated Remote User Testing and Card Sorting
US11934475B2 (en) * 2010-05-26 2024-03-19 Userzoom Technologies, Inc. Advanced analysis of online user experience studies
US10691583B2 (en) * 2010-05-26 2020-06-23 Userzoom Technologies, Inc. System and method for unmoderated remote user testing and card sorting
US11348148B2 (en) 2010-05-26 2022-05-31 Userzoom Technologies, Inc. Systems and methods for an intelligent sourcing engine for study participants
US11544135B2 (en) 2010-05-26 2023-01-03 Userzoom Technologies, Inc. Systems and methods for the analysis of user experience testing with AI acceleration
US11562013B2 (en) * 2010-05-26 2023-01-24 Userzoom Technologies, Inc. Systems and methods for improvements to user experience testing
US11494793B2 (en) 2010-05-26 2022-11-08 Userzoom Technologies, Inc. Systems and methods for the generation, administration and analysis of click testing
US11068374B2 (en) 2010-05-26 2021-07-20 Userzoom Technologies, Inc. Generation, administration and analysis of user experience testing
US8966447B2 (en) * 2010-06-21 2015-02-24 Apple Inc. Capturing and displaying state of automated user-level testing of a graphical user interface application
FI123008B (fi) * 2010-06-22 2012-09-28 Janne Pitkaenen Laitteisto ja menetelmä käytettävyystestausta varten
US20120130933A1 (en) * 2010-11-22 2012-05-24 Makino Ksal Company, Limited Method and system for supporting to make invention
US9830599B1 (en) * 2010-12-21 2017-11-28 EMC IP Holding Company LLC Human interaction detection
US20120218396A1 (en) * 2011-02-24 2012-08-30 Usertesting, Inc. Method and apparatus for usability testing of a mobile device
US8615159B2 (en) 2011-09-20 2013-12-24 Citrix Systems, Inc. Methods and systems for cataloging text in a recorded session
KR102007749B1 (ko) * 2012-08-29 2019-08-06 삼성전자주식회사 단말에서의 화면 녹화 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
US8798598B2 (en) 2012-09-13 2014-08-05 Alain Rossmann Method and system for screencasting Smartphone video game software to online social networks
US20140095023A1 (en) 2012-09-28 2014-04-03 Tesla Motors, Inc. Vehicle Air Suspension Control System
US10180727B2 (en) 2012-09-28 2019-01-15 Tesla, Inc. Method of launching an application and selecting the application target window
US9152872B2 (en) * 2012-11-12 2015-10-06 Accenture Global Services Limited User experience analysis system to analyze events in a computer desktop
US9195829B1 (en) * 2013-02-23 2015-11-24 Fireeye, Inc. User interface with real-time visual playback along with synchronous textual analysis log display and event/time index for anomalous behavior detection in applications
US20140344257A1 (en) * 2013-05-16 2014-11-20 International Business Machines Corporation Detecting a Preferred Implementation of an Operation
US9430509B2 (en) * 2013-09-16 2016-08-30 Axis Ab Event timeline generation
US9766769B1 (en) * 2014-12-31 2017-09-19 FullStory, Inc. Evaluation of interactions with a user interface
US10275341B2 (en) 2015-01-21 2019-04-30 Somo Innovations Ltd Mobile application usability testing
US10380966B2 (en) 2015-08-31 2019-08-13 International Business Machines Corporation Power and processor management for a personal imaging system
US11036458B2 (en) 2015-10-14 2021-06-15 Google Llc User interface for screencast applications
US10860461B2 (en) 2017-01-24 2020-12-08 Transform Sr Brands Llc Performance utilities for mobile applications
US10691429B2 (en) 2017-07-11 2020-06-23 International Business Machines Corporation Converting whiteboard images to personalized wireframes
CN110737570A (zh) * 2018-07-20 2020-01-31 北京奇虎科技有限公司 自动化测试行为的训练方法和装置
US11909100B2 (en) 2019-01-31 2024-02-20 Userzoom Technologies, Inc. Systems and methods for the analysis of user experience testing with AI acceleration
EP4042348A4 (en) * 2019-10-09 2023-08-16 Userzoom Technologies, Inc. SYSTEMS AND PROCEDURES FOR AN INTELLIGENT PROCUREMENT MACHINE FOR STUDY PARTICIPANTS
US20210372831A1 (en) * 2020-06-01 2021-12-02 Right Testing Labs Product testing with synchronized capture and presentation of multimedia and sensor data

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4845665A (en) * 1985-08-26 1989-07-04 International Business Machines Corp. Simulation of computer program external interfaces
US5086393A (en) * 1986-03-10 1992-02-04 International Business Machines Corp. System for testing human factors and performance of a system program
US5220658A (en) * 1986-03-10 1993-06-15 International Business Machines Corporation System for testing a performance of user interactive-commands using an emulator-overlay for determining the progress of the user timing response
US5724262A (en) * 1994-05-31 1998-03-03 Paradyne Corporation Method for measuring the usability of a system and for task analysis and re-engineering
CA2190043C (en) * 1996-11-12 2001-10-16 Don E. Hameluck Buffered screen capturing software tool usability testing of computer applications
US6526526B1 (en) * 1999-11-09 2003-02-25 International Business Machines Corporation Method, system and program for performing remote usability testing
US20040006473A1 (en) * 2002-07-02 2004-01-08 Sbc Technology Resources, Inc. Method and system for automated categorization of statements
US20010049084A1 (en) * 2000-05-30 2001-12-06 Mitry Darryl Joseph Interactive rewards-based pedagogical system using an engine of artificial intelligence
US20020194053A1 (en) * 2001-06-15 2002-12-19 International Business Machines Corporation Business engagement method
EP1280122A3 (en) * 2001-07-27 2004-12-29 Sharp Kabushiki Kaisha Learning support system
US7843490B2 (en) * 2003-04-25 2010-11-30 Arrowsight, Inc. Method and system for image information processing and analysis

Also Published As

Publication number Publication date
EP1763808A4 (en) 2008-01-23
JP2007531940A (ja) 2007-11-08
AU2005232047A1 (en) 2005-10-20
WO2005099255A2 (en) 2005-10-20
WO2005099255A3 (en) 2006-12-28
US20050254775A1 (en) 2005-11-17
CA2556995A1 (en) 2005-10-20
EP1763808A2 (en) 2007-03-21
CA2556995C (en) 2011-02-15
US7184918B2 (en) 2007-02-27

Similar Documents

Publication Publication Date Title
KR20060128022A (ko) 사용성 테스트를 실시하기 위한 자동화 시스템 및 방법
JP3943635B2 (ja) コンピュータ制御型ディスプレイシステムにおいてセッションの再生ポイントを制御する方法
JP3943636B2 (ja) コンピュータ制御型ディスプレイシステム
US8805929B2 (en) Event-driven annotation techniques
US20070266304A1 (en) Annotating media files
TW201342047A (zh) 錄製及播放程式之存取記錄及視訊記錄
JPH07182365A (ja) マルチメディア会議録作成支援装置および方法
US5315697A (en) Method for linking program execution status information
US7103842B2 (en) System, method and program for handling temporally related presentation data
KR20180116292A (ko) 작업 분석 장치, 작업 분석 방법, 프로그램 및 정보 기억 매체
JP3925445B2 (ja) 分析機器の制御装置
US7512289B2 (en) Apparatus and method for examination of images
WO2008087742A1 (ja) 動画再生システム、情報端末装置および情報表示方法
CA2260077A1 (en) Digital video system having a data base of coded data for digital audio and video information
JP2008097384A (ja) 履歴情報表示装置および方法
Jokela et al. Mobile video editor: design and evaluation
JP4670056B2 (ja) ユーザビリティ評価システム及びユーザビリティ評価プログラム
JP2008263305A (ja) 電子機器および録画制御方法
JPH05242166A (ja) マルチメディアデータ編集/提示方式
JP2985998B2 (ja) ビデオを用いたコンピュータ支援作業解析装置
JP6978815B1 (ja) 情報処理システム、情報処理方法及びプログラム
JP2005080000A (ja) インデキシング装置、映像再生装置及び方法
JP4160997B1 (ja) 操作画像再生装置及び操作画像再生プログラム
JPH07334523A (ja) 情報処理装置
JP4116513B2 (ja) 動画情報インデキシング支援装置、動画情報インデキシング支援方法およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application