KR20110011538A - 폼 조작에 대한 개선된 스크린 캡쳐 - Google Patents

폼 조작에 대한 개선된 스크린 캡쳐 Download PDF

Info

Publication number
KR20110011538A
KR20110011538A KR1020100062905A KR20100062905A KR20110011538A KR 20110011538 A KR20110011538 A KR 20110011538A KR 1020100062905 A KR1020100062905 A KR 1020100062905A KR 20100062905 A KR20100062905 A KR 20100062905A KR 20110011538 A KR20110011538 A KR 20110011538A
Authority
KR
South Korea
Prior art keywords
image
computer
field values
text data
stored
Prior art date
Application number
KR1020100062905A
Other languages
English (en)
Other versions
KR101572273B1 (ko
Inventor
앤드류 알. 존
수와미나탄 발라수브라마니안
키스 레이몬드 워커
브라이언 마샬 오코넬
Original Assignee
인터내셔널 비지네스 머신즈 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인터내셔널 비지네스 머신즈 코포레이션 filed Critical 인터내셔널 비지네스 머신즈 코포레이션
Publication of KR20110011538A publication Critical patent/KR20110011538A/ko
Application granted granted Critical
Publication of KR101572273B1 publication Critical patent/KR101572273B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/41—Analysis of document content
    • G06V30/412—Layout analysis of documents structured with printed lines or input boxes, e.g. business forms or tables
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/174—Form filling; Merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/75—Indicating network or usage conditions on the user display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Character Input (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 일 실시예에 따라, 이미지에 기반하여 폼들을 처리하는 방법이 제공된다. 폼이 이미지내에 캡쳐되고, 상기 이미지내 상기 폼안의 다수의 필드값들이 검출된다. 상기 다수의 필드값들은 상기 이미지의 메타데이터내에 저장된다.
다른 개시된 실시예에서, 폼에 대한 엑세스 요청이 검출된다. 상기 폼이 다수의 저장된 이미지들내 저장된 이미지에 대응하는지 여부에 대한 결정이 이루어진다. 만약 상기 폼이 저장된 이미지에 대응하면, 상기 저장된 이미지에 연관된 메타데이터가 리트리빙 된다. 상기 메타데이터는 상기 폼에 대응하는 다수의 필드값들과 연관된 텍스트 데이터를 포함한다. 상기 폼이 상기 저장된 이미지와 연관된 상기 메타데이터에서 나온 상기 다수의 필드값들과 상기 연관된 텍스트 데이터로 채워진다.

Description

폼 조작에 대한 개선된 스크린 캡쳐{ENHANCED SCREEN CAPTURE FOR FORM MANIPULATION}
본 발명은 일반적으로 컴퓨터 스크린으로부터 정보를 캡쳐하는 것에 관한 것으로서, 보다 상세하게는 엔드유저에 의해서 입력된 웹 기반 폼들내 데이터에 관한 정보를 저장하는 것에 관한 것이다.
스크린 캡쳐 기술과 컴퓨터 기반 폼(forms)들은 본 기술분야에서 잘 알려진 별도의 기술들이다. 스크린 캡쳐 소프트웨어 프로그램들은 컴퓨터 스크린들이나 컴퓨터 스크린들의 서브셋들(예를 들어 영역들이나 특정 윈도우들)의 정적 카피(static copy)를 생성하고, 이들을 예를 들어 JPEG(Joint Photographic Expert Group)나 TIFF(Tag Image File Format) 파일들과 같이 유저들 사이에서 쉽게 공유될 수 있는 일반적인 포맷들의 이진 이미지 데이터로 디지털화해서 저장한다. 또한 이러한 파일 포맷들은 상기 이미지에 대한 추가적인 정보들을 포함할 수 있는데, 상기 정보들은 주로 메타데이터로 호칭되며, 상기 이미지의 위치를 기술하고, 상기 이미지의 특정 위치의 참조 및 상기 이미지가 생성된 시간을 명시할 수 있다.
컴퓨터 기반 폼들은 상기 폼 그 자체의 프롬프트들에 응답하여, 정보를 입력하기 위한 수단들을 유저에게 제공한다. 정보는 예를 들어 엔트리 필드들, 셀렉션 박스들 및 체크 박스들을 이용하여 입력될 수 있다. 폼들은 유저 입력을 처리하는 서버나 클라이언트 기반 애플리케이션들로 상기 정보를 전송하기 위해 사용된다. 폼들의 예들로는 온라인 주문이나 예약 폼 그리고 로컬 데이터베이스나 스프레드시트 폼이 될 수 있다.
본 발명의 일 실시예에 따라, 이미지에 기반하여 폼들을 처리하기 위한 방법을 제안한다. 폼이 이미지내에 캡쳐되고, 상기 이미지내 상기 폼안의 다수의 필드 식별자들과 값들이 검출된다. 상기 다수의 필드 식별자들 및 값들은 상기 이미지의 메타데이터내에 저장된다.
다른 개시된 실시예에서, 폼에 대한 엑세스 요청이 검출된다. 상기 폼이 다수의 저장된 이미지들내 하나의 저장된 이미지에 대응하는지 여부에 대한 결정이 이루어진다. 만약 상기 폼이 저장된 이미지에 대응하면, 상기 저장된 이미지와 연관된 메타데이터가 리트리브된다(retrieve). 상기 메타데이터는 상기 폼에 대응하는 다수의 필드값들 및 연관된 텍스트 데이터를 포함한다. 상기 폼은 상기 저장된 이미지와 연관된 상기 메타데이터에서의 상기 다수의 필드값들 및 상기 연관된 텍스트 데이터로 채워진다.
개시된 실시예들의 신규 특징들로 여겨지는 구성들이 첨부된 청구항들에 제시되어 있다. 그러나 상기 개시된 실시예들 및 그들의 바람직한 사용은 목적들 및 장점들은 이하의 개시된 실시예들의 상세한 설명을 첨부된 도면들과 함께 참고함으로써 가장 잘 이해될 수 있다.
도 1은 개시된 실시예들이 구현될 수 있는 데이터 처리 시스템들의 네트워크를 도시적으로 표시한다.
도 2는 도시된 실시예들이 구현될 수 있는 데이터 처리 시스템의 블럭도이다.
도 3은 도시된 실시예들이 구현될 수 있는 개선된 스크린 캡쳐 프로그램의 블럭도이다.
도 4는 도시된 실시예들이 구현될 수 있는 개선된 스크린 캡쳐 프로그램의 블럭도이다.
도 5는 도시된 실시예들이 구현될 수 있는 스크린 캡쳐 프로그램의 블럭도이다.
도 6은 도시된 실시예들이 구현될 수 있는 폼 메타데이터를 가진 개선된 스크린 캡쳐의 블럭도이다.
도 7은 도시된 실시예들이 구현될 수 있는 폼 채우기를 위한 저장된 이미지 리트리벌의 블럭도이다.
도 8은 도시된 실시예들이 구현될 수 있는 이미지내 폼을 캡쳐하는 프로세스를 도시하는 흐름도이다.
도 9는 도시된 실시예들이 구현될 수 있는 캡쳐된 폼내 보안 데이터를 보호하는 프로세스를 도시하는 흐름도이다. 그리고
도 10은 도시된 실시예들이 구현될 수 있는 폼 필드 값들을 채우는 프로세스를 도시하는 흐름도이다.
본 기술분야에서 통산의 기술을 가진 자에 의해서 인지되다시피, 본 발명의 실시예들은 시스템, 방법 또는 컴퓨터 프로그램 제품으로 포함될 수 있다. 또한, 본 발명의 실시예들은 전체적으로 하드웨어 구현, 전체적으로 소프트웨어 구현(펌웨어, 레지던트 소프트웨어, 마이크로-코드 등을 포함), 또는 일반적으로 여기서 "회로", "모듈"이나 "시스템"으로 호칭되는 소프트웨어와 하드웨어 실시예들을 조합하는 구현의 형태를 취할 수 있다. 또한, 본 발명의 실시예들은 내장된 컴퓨터 판독가능 프로그램 코드를 가지는 하나 또는 그 이상의 컴퓨터 판독 가능매체(들)에 포함된 컴퓨터 프로그램 제품의 형태를 취할 수 있다.
임의의 하나 또는 그 이상의 컴퓨터 판독가능 매체(들)가 활용될 수 있다. 상기 컴퓨터 판독가능 매체는 컴퓨터 판독가능 신호 매체나 컴퓨터 판독가능 저장매체일 수 있다. 컴퓨터 판독가능 저장매체는 예를 들어(그러나 이에 한정은 아님) 전자, 자기, 광, 전자기, 적외선이나 반도체 시스템, 장치 또는 디바이스이거나, 또는 이들의 적절한 조합일 수 있다. 상기 컴퓨터 판독가능 저장매체의 더 자세한 예들로는(불완전 리스트임) 이하를 포함할 수 있다: 하나 또는 그 이상의 전선들을 가지는 전자연결, 휴대용 컴퓨터 디스켓, 하드 디스크, RAM, ROM, EPROM이나 플래쉬 메모리, 광섬유, CDROM, 광 저장장치, 자기 저장장치 또는 이들의 적절한 조합. 본 문서의 구문에서, 컴퓨터 판독가능 매체는 명령 실행 시스템, 장치 또는 디바이스에 의해서 또는 이에 연결하여 사용하기 위한 프로그램을 포함하거나 저장할 수 있는 임의의 유형 매체일 수 있다.
컴퓨터 판독가능 신호 매체는 컴퓨터 판독가능 프로그램코드가 내장된 전파 데이터 신호(예를 들어 기저대내에 또는 전소파의 일부로서)를 포함할 수 있다. 그러한 전파 신호는 전자기, 광 또는 이들의 적절한 조합을 포함하는(그러나 이에 한정은 아님) 다양한 형태들을 취할 수 있다. 컴퓨터 판독가능 신호 매체는 컴퓨터 판독가능 저장매체가 아니고 명령 실행 시스템, 장치 또는 디바이스에 의해서 또는 이에 연결하여 사용하기 위한 프로그램을 통신하고, 전파하고 또는 전송할 수 있는 임의의 컴퓨터 판독가능 매체일 수 있다.
컴퓨터 판독가능 매체상에 포함된 프로그램 코드는 무선, 유선, 광섬유 케이블, RF 등이나 이들의 적절한 조합을 포함하는(그러나 이에 한정은 아님) 임의의 적절한 매체를 이용하여 전송될 수 있다.
본 발명의 실시예들에 대한 작동들을 수행하기 위한 컴퓨터 프로그램 코드는 예를 들어 자바, 스몰토크, C++ 등의 객체 지향 프로그래밍 언어나 예를 들어 C 프로그래밍 언어나 유사한 프로그래밍 언어들과 같은 종래 절차적 프로그래밍 언어들을 포함하는 하나 또는 그 이상의 프로그래밍 언어들의 조합으로 작성될 수 있다. 상기 프로그램 코드는 독립형 소프트웨어 팩키지로서 유저의 컴퓨터상에서 전부가, 유저의 컴퓨터상에서 일부가 실행되거나, 유저의 컴퓨터에서 일부가 그리고 원격 컴퓨터상에서 일부가 또는 상기 원격 컴퓨터나 서버상에서 전체가 실행될 수 있다. 후자의 경우, 상기 원격 컴퓨터는 LAN이나 WAN을 포함하는 모든 타입의 네트워크를 통해서 상기 유저의 컴퓨터에 연결될 수 있으며 또는 상기 연결은 외부 컴퓨터를 통해서(예를 들어, ISP를 이용하여 인터넷을 통해서) 이루어질 수 있다.
본 발명의 실시예들은 본 발명의 실시예들에 따른 방법들, 장치들(시스템들) 및 컴퓨터 프로그램 제품들의 흐름도를 및/또는 블럭도들을 참고로 하여, 이하에서 기술된다. 상기 흐름도들 및/또는 블럭도들의 각각의 블럭, 그리고 상기 흐름도들 및/또는 블럭도들의 블럭들의 조합들은 컴퓨터 프로그램 명령들에 의해서 구현될 수 있다는 점이 이해되어질 것이다. 이러한 컴퓨터 프로그램 명령들은 범용 컴퓨터, 전용 컴퓨터 또는 머신을 제공하기 위한 다른 프로그램가능 데이터 처리 장치들의 프로세서에 제공되어질 수 있으며, 이에 상기 명령들-상기 컴퓨터나 다른 프로그램가능 데이터 처리 장치들의 프로세서를 통해 실행함-은 흐름도 및/또는 블럭도의 블럭이나 블럭들에 특화된 함수들/동작들을 구현하기 위한 수단을 생성한다.
이러한 컴퓨터 프로그램 명령들은 또한 컴퓨터, 다른 프로그램가능 데이터 처리 장치, 또는 다른 디바이스들에 특정 방법으로 기능하도록 지시할 수 있는 컴퓨터 판독가능 매체내에 저장될 수 있으며, 이에 상기 컴퓨터 판독가능 매체에 저장된 명령들은 흐름도 및/또는 블럭도내 블럭이나 블럭들에 특화된 함수/동작을 구현하는 명령들을 포함하는 생산방법을 제공한다.
상기 컴퓨터 프로그램 명령들은 또한 컴퓨터상에서 수행될 작동 단계들의 시리즈를 유발하기 위해, 컴퓨터나 다른 프로그램가능 데이터 처리장치상에 로드될 수 있으며, 이에 상기 컴퓨터나 다른 프로그램가능 장치에서 실행되는 상기 명령들은 흐름도 및/또는 블럭도내 블럭이나 블럭들에 특화된 함수/동작을 구현하기 위한 프로세스를 제공한다.
도면들을 참고하여, 특히 도 1-2를 참고하여 개시된 실시예들이 구현될 수 있는 데이터 처리 환경들의 바람직한 도면이 제공된다. 도 1-2는 단지 예시이고 환경들에 관해서 그 어떤 한정을 주장하거나 암시하려는 의도는 아니며, 다른 실시예들이 구현될 수 있다는 점을 인식해야만 한다. 상기 도시된 실시예들에 대해 많은 변형들이 만들어질 수 있다.
도 1은 개시된 실시예들이 구현될 수 있는 데이터 처리 시스템들의 네트워크를 도시한다. 네트워크 데이터 처리 시스템(100)은 도시된 실시예들이 구현될 수 있는 컴퓨터들의 네트워크이다. 네트워크 데이터 처리 시스템(100)은 네트워크(102)를 포함하는데, 이는 네트워크 데이터 처리 시스템(100)내에서 서로 연결된 다양한 디바이스들과 컴퓨터들간의 통신 링크들을 제공하는데 사용되는 매체이다. 네트워크(102)는 예를 들어 유선, 무선 통신 링크들 또는 광섬유 케이블들과 같은 연결들을 포함할 수 있다.
상기 도시된 실시예들에서, 서버(104)와 서버(106)는 저장장치 유닛(108)과 마찬가지로 네트워크(102)에 연결된다. 또한, 클라이언트(110,112 및 114)가 네트워크에 연결된다. 클라이언트(110,112 및 114)는 예를 들어 퍼스널 컴퓨터들이나 네트워크 컴퓨터들일 수 있다. 도시된 예에서, 서버(104)는 데이터(예를 들어 부트 파일들), 운영 시스템 이미지들 및 애플리케이션들(예를 들어 이메일 애플리케이션들 및 달력 애플리케이션들)을 클라이언트(110,112 및 114)에 제공한다. 클라이언트들(110,112 및 114)은 본 예에서는 서버(104)에 대한 클라이언트들이다. 네트워크 데이터 처리 시스템(100)은 미도시된 추가적인 서버들, 클라이언트들 및 다른 디바이스들을 포함할 수 있다.
상기 도시된 예들에서, 네트워크 데이터 처리 시스템(100)은 상호 통신용 TCP/IP 프로토콜들을 사용하는 네트워크들 및 게이트웨이들의 월드와이드 컬렉션을 나타내는 네트워크(102)를 쓰는 인터넷이다. 인터넷의 핵심은 데이터 및 메시지들을 라우트하는 수천개의 상업,정부, 교육 및 다른 컴퓨터 시스템들을 구성하는 메이저 노드들 또는 호스트 컴퓨터들간의 고속 데이터 통신 라인들의 백본이다. 물론, 네트워크 데이터 처리 시스템(100)은 또한 예를 들어 인트라넷, LAN, WAN 등과 같이 다수의 서로 다른 타입들의 네트워크들로서 구현될 수도 있다. 도 1은 예시를 하려는 의도이고, 다른 도시된 실시예들에 대한 아키텍쳐적인 한정을 하려는 의도는 아니다.
도 2를 참조하면, 개시된 실시예들이 구현될 수 있는 데이터 처리 시스템의 블럭도가 보여진다. 데이터 처리 시스템(200)은 예를 들어 도 1내 서버(104)나 클라이언트(110)와 같은 컴퓨터의 일 예이고, 여기서 상기 프로세스들을 구현하는 컴퓨터 사용가능 프로그램 코드나 명령들은 상기 도시된 실시예들을 위해 위치될 수 있다. 이러한 도시된 실시예에서, 데이터 처리 시스템(200)은 프로세서 유닛(204)간의 통신을 제공하는 통신 패브릭(202), 메모리(206), 영속적 저장장치(208), 통신 유닛(210), 입/출력(I/O) 유닛(212), 디스플레이(214) 및 미팅 매니저(222)를 포함한다.
프로세서 유닛(204)은 메모리(206)로 로드될 수 있는 소프트웨어에 대한 명령들의 실행을 제공한다. 프로세서 유닛(204)은 구현방법에 따라 하나 또는 그 이상의 프로세서들의 세트이거나 또는 멀티-프로세서 코어일 수 있다. 또한, 프로세서 유닛(204)은 하나의 칩상에 메인 프로세서가 보조 프로세스들과 동시에 존재하는 하나 또는 그 이상의 이종 프로세서 시스템들을 이용하여 구현될 수 있다. 다른 도시된 예로서, 프로세서 유닛(204)은 동일한 타입의 다수의 프로세서들을 포함하는 대칭 멀티-프로세서 시스템일 수 있다.
본 실시예들에서 메모리(206)는 예를 들어 램(RAM)이나 다른 적절한 휘발성 또는 비휘발성 저장 디바이스일 수 있다. 영속적 저장장치(208)는 특정 구현에 따라 다양한 형태들을 취할 수 있다. 예를 들어, 영속적 저장장치(208)는 하나 또는 그 이상의 컴포넌트들이나 디바이스들을 포함할 수 있다. 예를 들어, 영속적 저장장치(208)는 하드 드라이브, 플래시 메모리, 재기록 광 디스크, 재기록 자기 테이블이거나 이들의 조합들일 수 있다. 영속적 저장장치(208)에 의해 사용되는 매체는 착탈가능할 수 있다. 예를 들어, 착탈가능한 하드드라이브가 영속 저장장치(208)를 위해 사용될 수 있다.
본 예들에서, 통신 유닛(210)은 다른 데이터 처리 시스템들이나 디바이스들과의 통신을 제공한다. 이러한 예들에서, 통신 유닛(210)은 네트워크 인터페이스 카드이다. 통신 유닛(210)은 물리적이나 무선 통신링크들 중 하나 또는 둘 다 사용하여 통신을 제공할 수 있다.
입/출력 유닛(212)은 데이터 처리 시스템(200)과 연결될 수 있는 다른 디바이스들과의 데이터의 입력 및 출력을 허용한다. 예를 들어, 입/출력 유닛(212)은 키보드나 마우스에 대한 유저 입력에 대한 연결을 제공할 수 있다. 또한 입/출력 유닛(212)은 프린터에 출력을 전송할 수 있다. 디스플레이(214)는 유저에게 정보를 디스플레이하는 메카니즘을 제공한다.
운영 시스템 및 애플리케이션에 대해서 작동하기 위한 명령들 또는 프로그램들이 영속적 저장장치(208)상에 위치된다. 이러한 명령들은 프로세서 유닛(204)에 의한 실행을 위해 메모리(206)로 로드될 수 있다. 상기 서로 다른 실시예들의 프로세스들이 컴퓨터 구현 명령들을 이용해 프로세서 유닛(204)에 의해 수행될 수 있는데, 상기 컴퓨터 구현 명령들은 메모리(예를 들어 메모리(206))내에 위치될 수 있다. 이러한 명령들은 프로세서 유닛(204)내 프로세서에 의해서 판독되거나 실행될 수 있는 프로그램 코드, 컴퓨터 사용가능 프로그램 코드 또는 컴퓨터 판독가능 프로그램 코드들로 호칭된다. 다른 실시예들에서 상기 프로그램 코드는 서로 다른 물리적 또는 유형 컴퓨터 판독 미디어(예를 들어 메모리(206)이나 영속적 저장매체(208))상에 포함될 수 있다.
프로그램 코드(216)는 선택적으로 착탈가능한 컴퓨터 판독가능 매체(218)상에 함수 형태로(function form) 위치되고, 프로세서 유닛(204)에 의해 실행되기 위해 데이터 처리 시스템(200)으로 로드되거나 전송될 수 있다. 프로그램 코드(216) 및 컴퓨터 판독가능 매체(218)는 이러한 예들에서 컴퓨터 프로그램 제품(220)을 형성한다. 일 예에서, 컴퓨터 판독가능 매체(218)는 예를 들어 광 또는 자기 디스크와 같이 예를 들어 영속적 저장매체(208)의 일부인 하드드라이브와 같은 저장장치 디바이스로 전송되기 위해서, 영속적 저장매체(208)의 일부인 드라이브나 다른 디바이스내로 인서트되거나 위치되는 유형 형태일 수 있다. 유형 형태로, 컴퓨터 판독가능 매체(218)는 또한 데이터 처리 시스템(200)에 연결된 영속적 저장장치(예를 들어 하드드라이브, 썸 드라이브, 또는 플래쉬 메모리)의 형태를 취할 수 있다. 컴퓨터 판독가능 매체(218)의 유형 형태는 또한 컴퓨터 기록가능 저장매체로도 호칭된다. 몇몇 인스턴스에서, 컴퓨터 기록가능 매체(218)는 삭제가 불가능할 수 있다.
또는, 프로그램 코드(216)는 통신 유닛(210)으로의 통신 링크를 통해서 및/또는 입/출력 유닛(212)으로의 커넥션을 통해서, 컴퓨터 판독가능 매체(218)로부터 데이터 처리 시스템(200)으로 전송될 수 있다. 상기 통신 링크 및/또는 상기 커넥션은 도시된 예들에서 물리적이거나 무선일 수 있다. 상기 컴퓨터 판독가능 매체는 또한 예를 들어 상기 프로그램 코드를 포함하는 통신 링크들이나 무선 전송과 같은 무형 매체의 형태를 취할 수도 있다.
데이터 처리 시스템(200)에 대해 도시된 서로 다른 컴포넌트들은 다른 실시예들이 구현될 수 있는 방법에 대해 아키텍쳐적인 한정을 제공하려는 의도는 아니다. 다른 실시예들이 데이터 처리 시스템(200)에 대해 도시된 것들에 추가되거나 대체되는 컴포넌트를 포함하는 데이터 처리 시스템내에서 구현될 수 있다. 도 2에 도시된 다른 컴포넌트들은 개시된 실시예들로부터 변형될 수 있다.
일 실시예에서, 데이터 처리 시스템(200)내 저장장치 디바이스는 데이터를 저장할 수 있는 어떤 하드웨어도 될 수 있다. 메모리(206), 영속 저장장치(208) 및 컴퓨터 판독가능 매체(218)는 유형 형태의 저장장치 디바이스들의 예들이다.
다른 실시예에서, 버스 시스템이 통신 패브릭(202)을 구현하기 위해서 사용될 수 있으며, 예를 들어 시스템 버스나 입/출력 버스와 같은 하나 또는 그 이상의 버스들로 구성될 수 있다. 물론 상기 버스 시스템은 상기 버스 시스템에 부착된 서로 다른 컴포넌트들이나 디바이스들간에 데이터 전송을 제공하는 적절한 타입의 아키텍쳐를 사용해서 구현될 수 있다. 또한, 통신 유닛은 예를 들어 모뎀이나 네트워크 아답터와 같이, 데이터를 전송하고 수신하는데 사용되는 하나 또는 그 이상의 디바이스들을 포함할 수 있다. 또한 메모리는 예를 들어 메모리(206)나 예를 들어 통신 패브릭(202)내 존재할 수 있는 인터페이스나 메모리 제어 허브내에서 발견되는 것과 같은 캐시일 수 있다.
개시된 실시예들은 폼 데이터를 캡쳐한 이미지내의 임베딩된 메타데이터에 의한 자동 폼 채우기를 위한 필요성을 인식하는데, 상기 폼 데이터는 동일 또는 다른 유저에 대한 폼을 채우기 위해서 이후에 추출될 수 있다. 개량된 실시예에서, 이러한 방법들은 사람들이 스크린 캡쳐에 기반하여 폼 파일링(form filling)을 자동화하는 것을 허용한다. 일 실시예에서, 지원 업무들이나 또는 낮은 레벨의 정보 기술 레벨의 사람들이, 문제를 해결하거나 시스템을 구성하기 위해서, 유저가 거치는 단계들의 수많은 스크린 샷들을 포함하는 문서들을 보는 것은 일반적이다.
개시된 실시예들은 현재 방법들이 필드 식별자들 및 값들이 스크립트들로 공유될 수 있는 폼으로부터 추출되는 필드 캡쳐를 생성하긴 하지만, 상기 스크립트들은 그래픽 요소들을 포함하지 않는다는 점을 인식한다. 그러므로 현재 방법들은 유저가 프리뷰(preview) 할 수 있는 그래픽 요소를 전송하거나 저장하는 것을 허용하지 않으며, 또한 현재 방법들은 구문이 다르지만 폼이 동일하거나 유사할 때 메타데이터를 사용할 수 있는 기회를 인식하는 기능도 허용하지 않는다. 예를 들어, 현재 방법들은 유저가 데이터베이스 레코드 엔트리 스크린의 스크린 캡쳐를 취하고, 이 스크린 캡쳐를 다른 데이터베이스 스크린들, 다른 데이터베이스들 또는 다른 플랫폼들(예를 들어 웹 폼)에 적용하는 것을 허용하지 않는다. 현재 방법은 스크린이나 윈도우의 정적 카피를 생성하지만, 상기 정적 카피는 상기 캡쳐된 이미지의 콘텐츠에 대한 구문이나 메타데이터를 포함하지 않는다. 만약 스크린이나 윈도우의 카피가 폼을 포함하면, 현재 방법에서는 오직 이미지가 캡쳐되는 순간의 디스플레이 되어 있는 상기 이미지의 이진 표시만을 캡쳐하고, 상기 폼이나 이의 콘텐츠에 대한 어떠한 정보도 캡쳐하지 않는다.
따라서, 개시된 실시예들은 폼을 이미지를 기반하여 처리하기 위한 방법과 컴퓨터 프로그램 제품을 제공한다. 이미지내 폼이 캡쳐되고, 상기 이미지내 상기 폼안의 다수의 필드 식별자들 및 값들이 검출된다. 상기 다수의 필드 식별자들 및 값들은 상기 이미지의 메타데이터내에 저장된다. 또한, 방법들이 민감한 정보를 적절히 보호하기 위해 기술된다.
다른 실시예에서는, 폼에 대한 엑세스 요청도 검출된다. 상기 폼이 다수의 저장된 이미지들내 하나의 저장된 이미지에 대응하는지 여부에 대한 결정이 이루어진다. 만약 상기 폼이 저장된 이미지에 대응한다면, 상기 저장된 이미지에 연관된 메타데이터가 리트리브된다. 상기 메타데이터는 상기 폼에 대응하는 다수의 필드값들 및 연관된 텍스트 데이터를 포함한다. 상기 폼이 상기 저장된 이미지에 연관된 메타테이터로부터의 상기 다수의 필드값들 및 상기 연관된 텍스트 데이터를 가지고 채워진다.
도 3으로 참고하여, 개시된 실시예들이 구현될 수 있는 개선된 스크린 캡쳐 프로그램의 블럭도가 도시되어 있다. 개선된 스크린 캡쳐 프로그램(300)은 예를 들어 도 2내의 데이터 처리 시스템(200)과 같은 데이터 처리 시스템내에서 구현될 수 있다.
개선된 스크린 캡쳐 프로그램(300)은 필드 추출부(field extracter, 302), 스크린 캡쳐 모듈(304) 및 론치 모듈 검출부(launch module detector, 306)를 포함한다. 필드 추출부(302)는 컴퓨터 기반 폼의 다수의 필드들내에서 텍스트 데이터 및 다른 값들을 검출하고 상기 텍스트 데이터 및 다른 값들을 상기 필드들로부터 추출한다. 스크린 캡쳐 모듈(304)은 컴퓨터 기반 폼들의 이진 표시(binary representation)를 캡쳐한다. 론치 모듈 검출부(306)는 상기 컴퓨터 기반 폼의 캡쳐된 이진 표시를 포함하는 애플리케이션을 검출한다. 몇몇 개시된 실시예들에서, 론치 모듈 검출기(306)는 상기 폼에 대응하는 상태로 애플리케이션을 세팅하기 위한 명령들을 검출할 수 있다. 개시된 실시예에서, 만약 폼이 웹폼이라면, 웹 브라우저 애플리케이션 및 상기 폼의 URL이 론치 모듈 검출기(306)에 의해서 검출될 수 있다.
도 4를 참고하여, 개시된 실시예들이 구현될 수 있는 개선된 스크린 캡쳐 프로그램의 블럭도가 도시되었다. 예를 들어 개선된 스크린 캡쳐 프로그램(400)은 도 2내 데이터 처리 시스템(200)과 같은 데이터 처리 시스템내에서 구현될 수 있다.
개선된 스크린 캡쳐 프로그램(400)은 스크린 캡쳐 데이터 저장부(402), 폼 검출부(404), 론치 모듈(406) 및 폼 검출부에 대한 스크린 캡쳐부(408)를 포함한다. 스크린 캡쳐 데이터 저장부(402)는 예를 들어 로컬이나 원격으로 개선된 스크린 캡쳐 프로그램(300)으로부터 저장된 스크린 캡쳐들을 포함한다. 폼 검출부(404)는 예를 들어 폼들을 포함하는 웹 브라우저나 애플리케이션과 같은 것들내에서 폼의 존재를 검출한다. 론치 모듈(406)은 상기 컴퓨터 기반 폼의 상기 캡쳐된 이진 표시에 대응하는 애플리케이션을 시작한다. 몇몇 개시된 실시예들에서, 론치 모듈(406)은 상기 애플리케이션을 상기 폼에 대응하는 상태로 셋업하기 위한 명령들을 포함한다. 개시된 실시예에서, 만약 폼이 웹 폼이면, 웹 브라우저는 상기 폼의 URL을 포함하는 명령라인 인수(argument, 引數)를 가지고 시작될 수 있다. 폼 검출부에 대한 스크린 캡쳐부(408)가 애플리케이션내의 폼이 스크린 캡쳐 데이터 저장부(402)내 저장된 폼과 매치하는지 여부를 검출한다.
도 5를 참고하여, 개시된 실시예들이 구현될 수 있는 스크린 캡쳐 프로그램의 블럭도가 도시되어 있다. 스크린 캡쳐 프로그램(500)은 예를 들어 도 2내의 데이터 처리 시스템(200)과 같은 데이터 처리 시스템내에서 구현될 수 있다.
유저(502)가 유저 입력을 필요로하는 컴퓨터 기반 폼(504)을 제공하는 컴퓨터 프로그램을 구동한다. 이러한 개시된 실시예에서, 유저(502)는 인간 유저이나, 유저(502)는 예를 들어 인간 유저, 프로그램 또는 디바이스(예를 들어 도2의 데이터 처리 시스템(200))상에서 실행하는 다른 프로세스를 포함하는(한정은 아님) 모든 타입의 유저가 될 수 있다. 도시된 실시예에서, 유저(502)가 처리하는 개선된 스크린 캡쳐 프로그램(506)은 예를 들어 폼을 론치하는 스케쥴 태스크와 같은 시스템 이벤트에 의해서 인보크(invoke) 될 수 있다.
개시된 실시예에서, 컴퓨터 기반 폼(504)은 예를 들어 문제 해결, 문제 알림, 소프트웨어 구성, 주문 엔트리, 피드백, 설문조사 등과 같은 프로세스의 부분일 수 있다. 컴퓨터 기반 폼(504)은 예를 들어 마법사들, 오픈 다이얼로그 박스등과 같이 프로세스를 위한 폼을 가진 임의의 애플리케이션으로 확장될 수 있다. 유저(502)가 데이터를 컴퓨터 기반 폼(504)에 입력한 후에, 유저(502)는 개선된 스크린 캡쳐 프로그램(506)을 인보크 할 수 있다. 개선된 스크린 캡쳐 프로그램(506)은 필드값들과 컴퓨터 기반 폼(504)의 필드값들내 연관된 텍스트 데이터를 포함하는 텍스트 데이터(510)와 함께, 컴퓨터 기반 폼(504)의 이진 표시인 컴퓨터 기반 폼 바이너리(508)를 캡쳐한다. 컴퓨터 기반 폼 바이너리(508)와 텍스트 데이터(510)는 폼 메타데이터(512)를 가진 개선된 스크린 캡쳐로 저장된다. 연관된 텍스트 데이터는 만약 동일하거나 유사한 폼을 식별하기 위해서 사용될 수 있는 필드 라벨들, 폼 텍스트, 상기 컴퓨터 기반 폼의 CRC 및 다른 폼 데이터가 사용되면, 다른 스크린 캡쳐들에 대한 링크들을 포함할 수 있다.
개시된 실시예에서, 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)는 예를 들어(한정은 아님) JPEG 파일, TIFF 파일, GIF 파일, PDF 파일 등등과 같은 이미지 파일로 저장될 수 있다. 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)는 하나의 파일, 다수의 파일들, 레퍼런스나 다른 파일로의 링크를 가진 하나의 파일, 데이터베이스 엔트리 또는 다른 복합 데이터 타입등을 포함하는(한정은 아님) 다양한 방법으로 저장될 수 있다. 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)는 예를 들어(한정은 아님) 로컬 파일, 로컬 데이터베이스, 원격 데이터베이스, 전자 메시지에 대한 MIME 첨부, 로터스 노츠 다큐먼트(Lotus Notes Documentⓒ) 내의 이미지 등등과 같은 다수의 위치들에 저장될 수 있다. 만약 폼 메타데이터(512)를 가진 개선된 스크린 캡쳐가 외부에 또는 원격에 저장되어 있다면, 상기 이미지 메타데이터를 분류하고(catalogue) 상기 이미지를 대응하는 메타데이터에 인덱스하기 위한 추가 단계들이 필요할 것이다. 이러한 분류 단계는 예를 들어 CRC(cyclic redundancy check) 함수를 이용해서 실행될 수 있다. 두 개의 서로 다른 이미지 파일들에 대응되는 두 개의 CRC 값들을 가지는 것이 가능하다. 이 때문에, CRC 함수를 사용하는 것은 또한 고유 식별자를 상기 이미지 메타데이터와 연관된 데이터 태그에 대응되는 이미지 파일에 할당하는 것을 동반할 수 있다.
유저(514)는 유저(502)와 동일할 수 있거나 다른 유저일 수 있다. 유저(514)는 유저 입력을 필요로하는 컴퓨터 기반 폼(504)을 제공하는 동일한 컴퓨터 프로그램을 구동한다. 유저(514)는 개선된 스크린 캡쳐 프로그램(506)에 의해 이전에 저장된 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)를 리트리브 할 수 있다. 그리고나서 유저(514)는 텍스트 데이터(510)을 이용해서, 유저(502)가 컴퓨터 기반 폼(504)에 입력했었던 동일한 데이터를 가지고 상기 폼을 채운다. 다른 실시예에서, 유저(514)가 자동-필 특징(auto-fill feature)을 인보크할 수 있는데, 이는 개선된 스크린 캡쳐 프로그램(506)이, 유저(502)가 컴퓨터 기반 폼(504)에 입력했던 동일한 데이터를 가지고, 컴퓨터 기반 폼(504)을 자동으로 채우도록 트리거한다. 개선된 스크린 캡쳐 프로그램(506)은 또한 레버레징(leveraging) 공지 기술들에 의해 사용될 수 있다. 예를 들어, 개시된 실시예에서, 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)가 빈 폼을 가진 웹 브라우저상으로 드래그 될 수 있고, 상기 웹 브라우저내 플러그인이 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)와 연관된 텍스트 데이터(510)를 추출하고 상기 폼을 완성할 수 있다. 다른 개시된 실시예에서, 유저(514)가 인터프리테이션(interpretation) 프로그램을 인보크하고, 상기 인터프리테이션 프로그램으로 폼 메타데이터를 가진 개선된 스크린 캡쳐(512)를 로드하고, 그리고 상기 인터프리테이션 프로그램을 다른 프로그램상의 폼에 기입하도록(fill out) 사용할 수 있다.
도 6을 참고하여, 개시된 실시예들이 구현될 수 있는 폼 메타데이터를 가진 개선된 스크린 캡쳐의 블럭도가 개시되어 있다. 폼 메타데이터를 가진 개선된 스크린 캡쳐(600)는 도 5의 컴퓨터 기반 바이너리(508)의 일 예이다.
폼 메타데이터를 가진 개선된 스크린 캡쳐(600)는 엔트리 필드 1 데이터(606) 및 엔트리 필드 2 데이터(608) 뿐만 아니라 이진 이미지 데이터(602)를 캡쳐하기 위한 메쏘드를 포함한다. 이진 이미지 데이터(602)는 웹 페이지(604)의 이미지인데, 이는 예를 들어 폼을 포함하는 컴퓨터 스크린이나 윈도우일 수 있다. 엔트리 필드 1 데이터(606)는 필드(610)에 대한 필드값을 검출하고, 엔트리 필드 2 데이터(608)는 필드(612)에 대한 필드값을 검출한다. 검출은 특정 폼들이나 폼 소프트웨어 패키지의 이해, 폼 언어들, 광학 문자 인식(Optical character recognition)을 통해서, 또는 이미지 검출들의 개선된 수단들을 통해서 중 어느 하나에 의해 수반될 수 있다. 일 실시예에서, 상기 유저는 상기 이미지 메타데이터내에 저장되어야 하는 폼 필드값들 및/또는 데이터를 선택할 수 있다. 다른 실시예에서, 모든 폼 필드값들이 상기 이미지의 메타데이터내에 저장된다. 상기 필드값들은 예를 들어 텍스트 데이터, 전용 텍스트 데이터, 체크박스 셀렉션 또는 리스트 박스 셀렉션일 수 있다.
도 5의 개선된 스크린 캡쳐 프로그램(506)은 또한 어느 폼 필드값들이 비공개(private)인지를 검출할 수 있다. 비공개인 폼 필드값은 예를 들어(한정이 아님) 패스워드나 패스워드 객체 태그와 같은 비공개 텍스트 데이터를 포함한다. 비공개 텍스트 데이터를 포함하는 상기 폼 필드값들은, 상기 이미지 메타데이터내에 저장되지 않을 보안 필드들 및 원본값들로, 또는 비공개 텍스트데이터로 표시될 것이다.
도 7을 참고로 하여, 개시된 실시예들이 구현될 수 있는 추가 폼에 대해 저장된 이미지의 블럭도가 도시되어있다. 추가 폼(700)은 예를 들어 도 5의 스크린 캡쳐 프로그램(500)과 같이 개선된 스크린 캡쳐 프로그램에 의해서 구현된다.
컴퓨터 기반 폼(702)은 컴퓨터 기반 폼이 웹 브라우저상에서 엑세스되는 실시예의 일 예이다. 컴퓨터 기반 폼(702)은 URL(704), 필드(706) 및 필드(708)를 포함한다. 컴퓨터 기반 폼(702)이 유저(예를 들어 도 5의 유저(514)와 같은)나 프로세스를 통해서 엑세스될 때, 도 4의 폼 검출부에 대한 스크린 캡쳐부(408)는 컴퓨터 기반 폼(702)을 검출하고 스크린 캡쳐 데이터 저장부(710)내 저장된 폼이 매치하는지를 식별한다. 스크린 캡쳐 데이터 저장부(710)는 도 4내 스크린 캡쳐 데이터 저장부(402)의 구현의 도시된 일 실시예일 수 있다. 상기 검출은 컴퓨터 기반 폼(702)의 특징을 파싱하고 스크린 캡쳐 데이터 저장부(710)내 저장된 하나 또는 그 이상의 폼들(예를 들어 이미지들(712,714,716 및 718))의 특징들과 비교하는 것에 의해 생성될 수 있다. 파싱에 대해 많은 수단들은 API 호출을 통해서 엑세스가능하며, 상기 애플리케이션을 다른 폼 타이틀 또는 다른 식별자(예를 들어 URL이나 윈도우 식별자)와 비교하는 것을(그러나 이에 한정은 아님) 포함한다. 스크린 캡쳐 데이터 저장부(710)에 대한 쿼리들을 줄이기 위해서, 애플리케이션이 론치되면, 스크린 캡쳐 데이터 저장부(710)는 임의의 레코드들에 대해서 애플리케이션으로부터 쿼리될 수 있고, 그리고 만약 존재하지 않는다면, 폼 검출기에 대한 스크린 캡쳐부(예를 들어 도 4의 폼 검출부에 대한 스크린 캡쳐부(408))는 폼들에 대해 애플리케이션의 모니터링이 중지될 수 있다.
스크린 캡쳐 데이터 저장부(710)는 이미지(712), 이미지(714), 이미지(716) 및 이미지(718)를 포함하는데, 이들은 예를 들어 도 5의 스크린 캡쳐 프로그램(500)과 같이 개선된 스크린 캡쳐 프로그램에 의해 생성된 이미지 메타데이터와 연관된 저장된 이미지들의 예들이다. 이미지(714)는 컴퓨터 기반 폼(702)의 개선된 스크린 캡쳐이다. 컴퓨터 기반 폼(702)이 유저에 의해 엑세스 될 때, 스크린 캡쳐 데이터 저장부(710)도 컴퓨터 기반 폼(702)에 대응되는 저장된 이미지가 스크린 캡쳐 데이터 저장부(710)내에 저장되어 있는지를 결정하기 위해서 엑세스된다. 일 실시예에서, 상기 웹 브라우저가 URL(704)을 이전에 엑세스되고 저장된 컴퓨터 기반 폼으로 인식한 경우, 상기 웹 프라우저는 스크린 캡쳐 데이터 저장부(710)로부터 식별된 URL(704)와 함께 이미지(714)를 풀(pull)할 수 있고, 유저에게 컴퓨터 기반 폼(702)을 이미지(714)로부터의 데이터로 채울 수 있는 옵션을 줄 수 있다. 예를 들어, 이미지(714)의 필드(706)가 텍스트 데이터(720)을 포함하고 이미지(714)의 필드(708)가 텍스트 데이터(722)를 포함한다. 그리고나서 상기 하나 또는 그 이상의 선택된 텍스트나 다른 데이터는, 상기 선택된 텍스트나 다른 데이터에 대응하는 상기 필드들을 채우기 위해서, 예를 들어 상기 데이터를 상기 웹 페이지의 DOM(document object model)으로 전송하는 것과 같은 API 호출을 이용해서 웹 브라우저에 패스될 수 있다. 제공된 API가 없는 실시예들에서는, 사용될 수 있는 다른 기법은 상기 애플리케이션을 선택하기 위해 OS 호출을 전송하고 그리고나서 키 명령을 상기 애플리케이션에 전송하는 것이다. 예를 들어, 상기 웹 브라우저를 선택하고 나서 두 개의 탭 키들이 전송되고 상기 선택된 텍스트 데이터와 대응되는 키들이 전송되고 이어서 엔터키가 전송되는데, 이는 상기 폼상에서 제2 필드를 선택하고 상기 폼 데이터를 타이핑하고 그리고나서 상기 폼 서브밋 버튼을 클릭하는 것과 동일한 효과를 가진다. 예를 들어 입력 디바이스 조작이나 버튼 상호작용과 같은 다른 유사한 기법들이 사용될 수 있다.
도 8을 참조하면, 개시된 실시예들이 구현될 수 있는 이미지내 폼을 캡쳐하는 흐름을 도시하는 흐름도가 도시되어 있다. 상기 흐름도는 도 5내에 개선된 스크린 캡쳐 프로그램(506)내에서 구현될 수 있다.
상기 프로세스는 이미지내 폼을 캡쳐하기 위한 요청을 수신함으로써 시작한다(단계802). 이 요청은 유저, 프로그램이나 프로세스에 의해 (예를 들어 도 5내 개선된 스크린 캡쳐 프로그램(506)을 인보크하는 유저(502)와 같은) 인보크 될 수 있다. 상기 프로세스는 상기 이미지내 폼을 캡쳐하고(단계804) 그리고 상기 폼안의 다수의 필드값들을 검출한다(단계806). 상기 필드값들은 예를 들어 텍스트 데이터, 비공개 텍스트 데이터, 체크 박스 셀렉션이나 리스트 박스 셀렉션일 수 있다. 그리고나서 상기 프로세스는 상기 필드값들을 이미지 메타데이터내에 저장하고 그 후에 상기 프로세스를 종료한다(단계808).
도 9을 참고하면, 개시된 실시예들이 구현될 수 있는 캡쳐된 폼내 보안 데이터를 보호하기 위한 프로세스를 도시하는 흐름도가 도시되어 있다. 상기 프로세스는 도 5내의 개선된 스크린 캡쳐 프로그램(506)내에서 구현될 수 있다.
상기 프로세스는 이미지내 폼을 캡쳐함으로써 시작한다(단계902). 상기 프로세스는 상기 필드값들내의 비공개 텍스트 데이터를 검출한다(단계904). 비공개 텍스트 데이터는 예를 들어 패스워드나 패스워드 객체 태그일 수 있다. 그리고나서 상기 프로세스는 보안 필드값을 비공개 텍스트 데이터를 포함하는 필드값들과 연관시킨다(단계906). 상기 프로세스는 상기 필드값들을 상기 비공개 텍스트 데이터없이 이미지 메타데이터내에 저장하고 그 후에 프로세스를 종료한다(단계908).
도 10을 참고하면, 개시된 실시예들이 구현될 수 있는 폼 필드값들을 채우는(populating) 프로세스를 도시하는 흐름도가 도시되어 있다. 상기 프로세스는 도 5내 개선된 스크린 캡쳐 프로그램(506)에서 구현될 수 있다.
상기 프로세스는 폼 엑세스를 위한 요청을 수신하는 것에 의해서 시작한다(단계 1002). 개시된 실시예에서, 상기 요청은 예를 들어 도 5내 유저(514)와 같은 유저, 프로세스나 프로그램에 의해서 만들어질 수 있다. 상기 프로세스는 상기 폼이 예를 들어 도 5내 컴퓨터 기반 폼 바이너리(508)와 같이 저장된 이미지에 대응하는지를 결정한다(단계 1004). 만약 상기 폼이 저장된 이미지에 대응하지 않으면, 상기 프로세스는 종료된다. 만약 상기 폼이 저장된 이미지에 대응하면, 상기 프로세스는 상기 저장된 이미지에 대한 이미지 메타데이터를 리트리브한다(단계 1006). 그리고나서 상기 프로세스는 리트리브된 이미지 메타데이터를 이용해서 상기 폼을 채우고, 그리고나서 상기 프로세스는 종료된다.
도면들내의 상기 흐름도 및 블록도들은 본 발명의 다양한 실시예들에 따른 시스템들, 방법들 및 컴퓨터 프로그램 제품들의 가능한 구현들의 아키텍쳐, 기능들 및 작동들을 도시한다. 이러한 관점에서, 흐름도 및 블럭도들내 각각의 블럭은 상기 특화된 논리 함수(들)을 구현하기 위한 하나 또는 그 이상의 실행가능한 명령들을 포함하는 모듈, 세그먼트, 코드의 일부분을 나타낼 수 있다. 또한 몇몇 다른 구현예들에서, 블록내에 언급된 함수들은 도면들내에 언급된 순서와는 다르게 발생할 수 있다는 점에 유념해야 한다. 예를 들어, 연속적으로 도시된 두 개의 블럭들이 관련된 기능에 따라 실제로는 실질적으로 동시에 실행될 수 있고, 또는 상기 블럭들은 때때로는 반대 순서로 실행될 수 있다. 또한 블럭도들 및/또는 흐름도내 각각의 블럭과 블럭도들 및/또는 흐름도내 블럭들의 조합은 특화된 함수 및 동작들을 수행하는 전용 하드웨어-기반 시스템들에 의해 또는 전용 하드웨어와 컴퓨터 명령들의 조합에 의해 구현될 수 있다는 점에 유념해야 한다.
따라서, 상기 개시된 실시예들은 이미지에 기초하여 폼들을 처리하기 위한 방법 및 컴퓨터 프로그램 제품을 제공한다. 폼은 이미지내에 캡쳐되고, 상기 폼내의 다수의 필드값들이 검출된다. 상기 다수의 필드값들은 이미지 메타데이터로 저장된다. 또한 민감하거나 비공개 데이터를 포함하는 필드값들이 검출되고 보안 필드들로 식별된다. 상기 식별된 보안 필드들내의 데이터는 상기 이미지 메타데이터내에 저장되지 않는다. 이는 예를 들어 패스워드와 같이 일 개시된 실시예에서 폼의 하나 또는 그 이상의 필드값들 내에서 발결된 수 있는 민감한 정보에 대해 보안을 제공한다.
상기 개시된 실시예들은 폼에 대한 엑세스 요청을 검출하기 위한 방법 및 컴퓨터 프로그램 제품을 더 제공한다. 상기 폼이 다수의 저장된 이미지들내 저장된 이미지에 대응하는지에 대한 결정이 만들어진다. 만약 상기 폼이 저장된 이미지에 대응하면, 상기 저장된 이미지에 연관된 메타데이터가 리트리브된다. 상기 메타데이터는 상기 폼에 대응하는 다수의 필드값들과 연관된 텍스트 데이터를 포함한다. 상기 폼은 상기 저장된 이미지에 연관된 메타데이터의 상기 다수의 필드값들 및 상기 연관된 텍스트 데이터를 가지고 채워진다.
여기서 사용된 용어는 특정 실시예들을 기술하기 위한 목적일 뿐이면, 본 발명을 한정하려는 의도는 아니다. 여기서 사용된 바와 같이, 상기 단수 용어 "하나", "한" 및 "상기"는 구문에서 명확하게 지시하지 않는 한 복수형 형태들도 포함하려는 의도이다. 또한 용어들 "포함하는" 및/또는 "포함"이 본 상세한 설명에서 사용된 경우, 명시된 특징들, 정수들, 단계들, 작동들, 요소들, 및/또는 컴포넌트들의 존재를 나타내는 것이고 하나 또는 그 이상의 다른 특징들, 정수들, 단계들, 작동들, 요소들, 컴포넌트들 및/또는 이들의 그룹들의 존재나 부가를 제한하려는 것은 아니다라는 점도 이해되어져야 한다.
이하의 청구항내의 기능식 요소를 포함하는 모든 수단들 및 단계들의 대응되는 구조들, 물질들, 작동들 및 균등물들은 특별히 청구된 다른 청구항의 요소와 조합하여 함수로서 수행하는 구조, 물질 또는 동작들을 포함하는 것을 의도하는 것이다. 본 발명의 상세한 설명은 개시 및 설명의 목적으로 표시되었으며, 개시된 폼으로 본 발명을 총망라하거나 제한하려는 의도는 아니다. 많은 변경들이나 변형들이 본 발명의 권리범위나 사상을 벗어남이 없이 본 기술분야에서 통상의 기술을 가진 자에 의해서 나타날 수 있다. 상기 실시예들은 본 발명의 주제 및 응용을 가장 잘 설명하고, 그리고 본 기술분야에서 통상의 기술을 가진 자들이 특정 사용법에 적합한 다양한 변경들에 대해서 본 발명을 이해할 수 있도록 하기 위해서 선택되고 기술되었다.
본 발명은 전체적으로 하드웨어 구현, 전체적으로 소프트웨어 구현 또는 하드웨어와 소프트웨어 요소들 둘다를 포함하는 구현의 형태를 취할 수 있다. 바람직한 실시예에서, 본 발명은 펌웨어, 레지던스 소프트웨어, 마이크로 코드등을 포함하는(그러나 한정은 아님) 소프트웨어로 구현된다.
또한, 사용시에 컴퓨터 또는 임의의 명령 실행 시스템에 의해서 또는 연결해서, 프로그램 코드를 제공하는 컴퓨터 사용가능 또는 컴퓨터 판독가능 매체로부터 엑세스 가능한 컴퓨터 프로그램 제품의 형태를 취할 수 있다. 이러한 상세한 설명의 목적을 위해서, 컴퓨터 사용가능 또는 컴퓨터 판독가능 매체는 사용시에 명령 실행 시스템, 장치 또는 디바이스에 의해서 또는 연결해서, 프로그램을 포함, 저장, 통신, 전파 또는 전송할 수 있는 임의의 유형 장치들일 수 있다.
상기 매체는 전자, 자기, 광, 전자기, 적외선 또는 반도체 시스템(또는 장치 또는 디바이스) 또는 전파 매체일 수 있다. 컴퓨터 판독가능 매체의 예들로는 반도체나 SSD, 자기 테이프, 착탈가능 컴퓨터 디스켓, RAM, ROM, 강자기 디스크(rigid magnetic disk) 및 광디스크를 포함한다. 광 디스크들의 가능한 예들로는 CD-ROM, CD-R/W 및 DVD를 포함한다.
프로그램 코드를 저장 및/또는 실행에 적절한 데이터 처리 시스템은 시스템 버스를 통해서 메모리 요소에 직간접으로 연결된 적어도 하나의 프로세서를 포함할 것이다. 상기 메모리 요소는 상기 프로그램 코드의 실제 실행동안에 적용되는 내장 메모리, 벌크 저장장치 및 실행동안 벌크 저장장치로부터 코드가 리트리브 되어야 하는 회수를 줄이기 위해서 적어도 몇몇 프로그램 코드의 임시 저장공간을 제공하는 캐시 메모리들을 포함할 수 있다.
입/출력 또는 I/O 디바이스들( 키보드들, 디스플레이들, 포인팅 디바이스들 등을 포함, 그러나 이에 한정은 아님)은 직접으로 또는 인터리빙 I/O 제어기들을 통해서 시스템에 연결될 수 있다.
또한 상기 데이터 처리 시스템이 인터리빙 사설이나 공용 네트워크들을 통해서 다른 데이터 처리 시스템들이나 원격 프린터들 또는 저장장치 디바이스들에 연결되도록, 네트워크 아답터들이 시스템에 연결될 수 있다. 모뎀들, 케이블 모뎀들 및 이더넷 카드들은 네트워크 아답터들의 현재 가능한 타입들의 일부이다.
본 발명의 상세한 설명들은 개시 및 설명을 하려는 목적들로 표시되었으며, 기술된 폼으로 본 발명을 총망라하거나 한정하려는 의도는 아니다. 많은 변형들이나 변경들이 본 기술분야에서 통상의 기술을 가진 자에 의해서 이루어질 수 있다. 상기 실시예들은 본 발명의 주제 및 응용을 가장 잘 설명하고, 그리고 본 기술분야에서 통상의 기술을 가진 자들이 특정 사용법에 적합한 다양한 변경들에 대해서 본 발명을 이해할 수 있도록 하기 위해서 선택되고 기술되었다.

Claims (16)

  1. 이미지에 기반하여 폼들을 처리하는 방법에 있어서,
    프로세서 유닛에 의해서, 상기 이미지내 폼을 캡쳐하는 단계;
    상기 프로세서 유닛에 의해서, 상기 이미지내 상기 폼안의 다수의 필드값들을 검출하는 단계; 및
    상기 다수의 필드값들을 이미지 메타데이터로 저장하는 단계를 포함하는
    이미지에 기반하여 폼들을 처리하는 방법.
  2. 제 1항에 있어서,
    상기 다수의 필드값들은
    텍스트 데이터, 비공개(private) 텍스트 데이터, 체크박스 셀렉션 및 리스트박스 셀렉션 중 적어도 하나를 포함하는
    이미지에 기반하여 폼들을 처리하는 방법.
  3. 제 1항에 있어서,
    상기 이미지내 상기 폼안의 상기 다수의 필드값들을 검출하는 단계는
    상기 이미지내 상기 폼안의 상기 다수의 필드값들안의 텍스트 데이터를 검출하는 단계를 더 포함하는
    이미지에 기반하여 폼들을 처리하는 방법.
  4. 제 3항에 있어서,
    상기 텍스트 데이터는 광학 문자 인식(Optical character recognition)을 이용하여 검출되는
    이미지에 기반하여 폼들을 처리하는 방법.
  5. 제 1항에 있어서,
    상기 이미지내 상기 폼안의 상기 다수의 필드값들을 검출하는 단계는
    상기 이미지내 상기 폼안의 상기 다수의 필드값들안의 비공개 텍스트 데이터를 검출하는 단계; 및
    보안 필드값을 상기 비공개 텍스트 데이터를 포함하는 상기 다수의 필드값들내 각각의 필드값에 연관시키는 단계를 더 포함하는
    이미지에 기반하여 폼들을 처리하는 방법.
  6. 제 5항에 있어서,
    상기 보안 필드값을 상기 비공개 텍스트 데이터를 포함하는 상기 다수의 필드값들내 상기 각각의 필드값에 연관시키는 것에 응답하여, 상기 다수의 필드값들을 상기 비공개 텍스트 데이터를 제외하고 상기 이미지 메타데이터내에 저장하는 단계를 더 포함하는
    이미지에 기반하여 폼들을 처리하는 방법.
  7. 이미지에 기반하여 폼들을 처리하는 방법에 있어서,
    프로세서 유닛에 의해서, 폼에 대한 엑세스 요청을 검출하는 단계;
    상기 프로세서 유닛에 의해서, 상기 폼이 다수의 저장된 이미지들내 저장된 이미지에 대응하는지 여부를 결정하는 단계;
    상기 폼이 상기 다수의 저장된 이미지들내 상기 저장된 이미지에 대응하는 것에 응답하여, 상기 저장된 이미지에 연관된 메타데이터를 리트리빙(retrieving)하는 단계 -여기서 상기 메타데이터는 상기 폼에 대응하는 다수의 필드값들 및 연관된 텍스트 데이터를 포함함-; 및
    상기 폼을 상기 저장된 이미지와 연관된 상기 메타데이터에서 나온 상기 다수의 필드값들 및 상기 연관된 텍스트 데이터로 채우는(populating) 단계를 포함하는
    컴퓨터 구현 방법.
  8. 제 7항에 있어서,
    상기 폼이 상기 다수의 저장된 이미지들내 상기 저장된 이미지에 대응하는지 여부를 결정하는 단계는,
    브라우저안의 윈도우 타이틀을 식별하는 단계; 및
    상기 윈도우 타이틀이 상기 다수의 저장된 이미지들 중 하나로 캡쳐된 이전에 엑세스된 폼과 대응하는지 여부를 결정하는 단계를 더 포함하는
    컴퓨터 구현 방법.
  9. 컴퓨터 판독가능 저장 매체내의 컴퓨터 프로그램 제품에 있어서,
    상기 컴퓨터 판독가능 저장 매체는
    이미지내 폼을 캡쳐하는 컴퓨터 사용가능 프로그램 코드;
    상기 이미지내 상기 폼안의 다수의 필드값들을 검출하는 컴퓨터 사용가능 프로그램 코드; 및
    상기 다수의 필드값들을 이미지 메타데이터로 저장하는 컴퓨터 사용가능 프로그램 코드를 포함하는
    컴퓨터 프로그램 제품.
  10. 제 9항에 있어서,
    상기 다수의 필드값들은
    텍스트 데이터, 비공개 텍스트 데이터, 체크박스 셀렉션 및 리스트박스 셀렉션 중 적어도 하나를 포함하는
    컴퓨터 프로그램 제품.
  11. 제 9항에 있어서,
    상기 이미지내 상기 폼안의 상기 다수의 필드값들을 검출하는 컴퓨터 사용가능 프로그램 코드는
    상기 이미지내 상기 폼안의 상기 다수의 필드값들안의 텍스트 데이터를 검출하는 컴퓨터 사용가능 프로그램 코드를 더 포함하는
    컴퓨터 프로그램 제품.
  12. 제 11항에 있어서,
    상기 텍스트 데이터는 광학 문자 인식을 이용하여 검출되는
    컴퓨터 프로그램 제품.
  13. 제 9항에 있어서,
    상기 이미지내 상기 폼안의 상기 다수의 필드값들을 검출하는 컴퓨터 사용가능 프로그램 코드는
    상기 이미지내 상기 폼안의 상기 다수의 필드값들안의 비공개 텍스트 데이터를 검출하는 컴퓨터 사용가능 프로그램 코드; 및
    보안 필드값을 상기 비공개 텍스트 데이터를 포함하는 상기 다수의 필드값들내 각각의 필드값에 연관시키는 컴퓨터 사용가능 프로그램 코드를 더 포함하는
    컴퓨터 프로그램 제품.
  14. 제 13항에 있어서,
    상기 보안 필드값을 상기 비공개 텍스트 데이터를 포함하는 상기 다수의 필드값들내 상기 각각의 필드값에 연관시키는 것에 응답하여, 상기 다수의 필드값들을 상기 비공개 텍스트 데이터를 제외하고 상기 이미지 메타데이터내에 저장하는 컴퓨터 사용가능 프로그램 코드를 더 포함하는
    컴퓨터 프로그램 제품.
  15. 컴퓨터 기록가능 저장 매체내의 컴퓨터 프로그램 제품에 있어서,
    상기 컴퓨터 기록가능 저장 매체는
    폼에 대한 엑세스 요청을 검출하는 컴퓨터 사용가능 프로그램 코드;
    상기 폼이 다수의 저장된 이미지들내 저장된 이미지에 대응하는지 여부를 결정하는 컴퓨터 사용가능 프로그램 코드;
    상기 폼이 상기 다수의 저장된 이미지들내 상기 저장된 이미지에 대응하는 것에 응답하여, 상기 저장된 이미지에 연관된 메타데이터를 리트리빙하는 컴퓨터 사용가능 프로그램 코드 -여기서 상기 메타데이터는 상기 폼에 대응하는 다수의 필드값들 및 연관된 텍스트 데이터를 포함함-; 및
    상기 폼을 상기 저장된 이미지와 연관된 상기 메타데이터에서 나온 상기 다수의 필드값들 및 상기 연관된 텍스트 데이터로 채우는 컴퓨터 사용가능 프로그램 코드를 포함하는
    컴퓨터 프로그램 제품.
  16. 제 15항에 있어서,
    상기 폼이 상기 다수의 저장된 이미지들내 상기 저장된 이미지에 대응하는지 여부를 결정하는 컴퓨터 사용가능 프로그램 코드는,
    브라우저안의 윈도우 타이틀을 식별하는 컴퓨터 사용가능 프로그램 코드; 및
    상기 윈도우 타이틀이 상기 다수의 저장된 이미지들 중 하나로 캡쳐된 이전에 엑세스된 폼과 대응하는지 여부를 결정하는 컴퓨터 사용가능 프로그램 코드를 더 포함하는
    컴퓨터 프로그램 제품.


KR1020100062905A 2009-07-28 2010-06-30 폼 조작에 대한 개선된 스크린 캡쳐 KR101572273B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/510,758 2009-07-28
US12/510,758 US8571319B2 (en) 2009-07-28 2009-07-28 Enhanced screen capture for form manipulation

Publications (2)

Publication Number Publication Date
KR20110011538A true KR20110011538A (ko) 2011-02-08
KR101572273B1 KR101572273B1 (ko) 2015-12-04

Family

ID=43527073

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100062905A KR101572273B1 (ko) 2009-07-28 2010-06-30 폼 조작에 대한 개선된 스크린 캡쳐

Country Status (4)

Country Link
US (2) US8571319B2 (ko)
JP (1) JP5753350B2 (ko)
KR (1) KR101572273B1 (ko)
CN (1) CN101986292B (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102282025B1 (ko) 2021-02-08 2021-07-28 로지스원 주식회사 컴퓨터를 이용한 문서 분류 및 문자 추출 방법
KR20230013836A (ko) 2021-07-20 2023-01-27 로지스원 주식회사 컴퓨터를 이용한 문서 분류 및 문자 추출 방법

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7930447B2 (en) 2008-10-17 2011-04-19 International Business Machines Corporation Listing windows of active applications of computing devices sharing a keyboard based upon requests for attention
US8571319B2 (en) * 2009-07-28 2013-10-29 International Business Machines Corporation Enhanced screen capture for form manipulation
JP5291663B2 (ja) * 2010-04-30 2013-09-18 株式会社エヌ・ティ・ティ・ドコモ データ送信方法、基地局装置及び移動局装置
JP5291664B2 (ja) * 2010-04-30 2013-09-18 株式会社エヌ・ティ・ティ・ドコモ データ送信方法、基地局装置及び移動局装置
US9092640B2 (en) * 2010-11-09 2015-07-28 International Business Machines Corporation Access control for server applications
JP5201541B2 (ja) * 2011-02-22 2013-06-05 日本電気株式会社 表示箇所抽出装置及び表示箇所抽出方法
US9858548B2 (en) * 2011-10-18 2018-01-02 Dotloop, Llc Systems, methods and apparatus for form building
US8867838B2 (en) * 2012-09-13 2014-10-21 Xerox Corporation Method and system for a text data entry from an electronic document
US9088767B2 (en) 2012-10-08 2015-07-21 International Business Machines Corporation Activities duplication via recorded video
GB2509098A (en) 2012-12-20 2014-06-25 Ibm Synchronising screenshots in documentation with product functionality
US10826951B2 (en) 2013-02-11 2020-11-03 Dotloop, Llc Electronic content sharing
US9961127B2 (en) * 2013-03-15 2018-05-01 Foresee Results, Inc. System and method for capturing interaction data relating to a host application
US9575622B1 (en) 2013-04-02 2017-02-21 Dotloop, Llc Systems and methods for electronic signature
KR101678389B1 (ko) * 2014-02-28 2016-11-22 엔트릭스 주식회사 클라우드 스트리밍 기반의 영상데이터 제공 방법, 이를 위한 장치 및 시스템
US9824079B1 (en) 2014-07-11 2017-11-21 Google Llc Providing actions for mobile onscreen content
CN105335404B (zh) * 2014-07-29 2019-05-28 北京奇虎科技有限公司 页面信息加载方法和装置
US9965559B2 (en) 2014-08-21 2018-05-08 Google Llc Providing automatic actions for mobile onscreen content
US10733364B1 (en) 2014-09-02 2020-08-04 Dotloop, Llc Simplified form interface system and method
US10120542B2 (en) 2014-10-08 2018-11-06 International Business Machines Corporation Reproducing state of source environment when image was screen captured on a different computing device using resource location, resource navigation and positional metadata embedded in image
US10437779B2 (en) 2015-03-27 2019-10-08 International Business Machines Corporation Intelligent interactive screen capture
US9703541B2 (en) 2015-04-28 2017-07-11 Google Inc. Entity action suggestion on a mobile device
US10078803B2 (en) 2015-06-15 2018-09-18 Google Llc Screen-analysis based device security
US10049096B2 (en) * 2015-06-19 2018-08-14 Infosys Limited System and method of template creation for a data extraction tool
US10970646B2 (en) 2015-10-01 2021-04-06 Google Llc Action suggestions for user-selected content
US10178527B2 (en) 2015-10-22 2019-01-08 Google Llc Personalized entity repository
US10055390B2 (en) 2015-11-18 2018-08-21 Google Llc Simulated hyperlinks on a mobile device based on user intent and a centered selection of text
US10535005B1 (en) 2016-10-26 2020-01-14 Google Llc Providing contextual actions for mobile onscreen content
US10262010B2 (en) * 2016-11-02 2019-04-16 International Business Machines Corporation Screen capture data amalgamation
US11237696B2 (en) 2016-12-19 2022-02-01 Google Llc Smart assist for repeated actions
WO2020058570A1 (en) * 2018-09-20 2020-03-26 Nokia Technologies Oy An apparatus and a method for artificial intelligence
US11403455B2 (en) * 2020-07-07 2022-08-02 Kudzu Software Llc Electronic form generation from electronic documents
US11341318B2 (en) 2020-07-07 2022-05-24 Kudzu Software Llc Interactive tool for modifying an automatically generated electronic form

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5953481A (en) 1996-01-08 1999-09-14 Canon Kabushiki Kaisha Reproducing apparatus having an editing function
US6178426B1 (en) 1998-01-15 2001-01-23 Symbol Technologies, Inc. Apparatus with extended markup language data capture capability
JP2000040294A (ja) 1998-05-20 2000-02-08 Sony Corp 情報処理装置および方法、並びに記録媒体
US6727996B1 (en) 1999-05-25 2004-04-27 Silverbrook Research Pty Ltd Interactive printer
US7415188B2 (en) 2000-11-17 2008-08-19 Matsushita Electric Industrial Co., Ltd. Method and apparatus for recording/reproduction
EP1388062A2 (en) 2001-03-12 2004-02-11 Nice Systems Limited System and method for capturing, analyzing and recording screen events
US7171106B2 (en) 2001-03-27 2007-01-30 Elbex Video Ltd. Method and apparatus for processing, digitally recording and retrieving a plurality of video signals
JP3888306B2 (ja) 2002-12-27 2007-02-28 ブラザー工業株式会社 データ処理装置
KR20040087150A (ko) 2003-04-04 2004-10-13 삼성전자주식회사 디지털 데이터 복제 장치 및 그 방법
EP1631960A1 (en) 2003-06-11 2006-03-08 Matsushita Electric Industrial Co., Ltd. Reproduction apparatus, program, integrated circuit
KR100562276B1 (ko) 2004-07-27 2006-03-22 최태헌 전자문서 분철기술과 전문검색기술을 통합한 페이지 검색정보 제공 시스템 및 방법
US20060080432A1 (en) 2004-09-03 2006-04-13 Spataro Jared M Systems and methods for collaboration
JP2006106937A (ja) * 2004-10-01 2006-04-20 Ricoh Co Ltd 画像処理装置およびその制御方法
JP2006127600A (ja) 2004-10-27 2006-05-18 Funai Electric Co Ltd Ｉｅｅｅ１３９４シリアルバスに接続されるｄｖｄレコーダ及びｉｅｅｅ１３９４シリアルバスに接続される録画装置
US20060140591A1 (en) 2004-12-28 2006-06-29 Texas Instruments Incorporated Systems and methods for load balancing audio/video streams
KR100710568B1 (ko) 2005-07-22 2007-04-24 삼성에스디에스 주식회사 이미지 처리 시스템 및 그 방법
US20070217763A1 (en) 2005-09-20 2007-09-20 A4S Security, Inc. Robust surveillance system with partitioned media
JP2007214611A (ja) * 2006-02-07 2007-08-23 Fuji Xerox Co Ltd 画像処理装置
JP4948854B2 (ja) 2006-03-08 2012-06-06 株式会社リコー 画像印刷システム及び外部機器
JP4062339B2 (ja) 2006-04-05 2008-03-19 船井電機株式会社 情報記録再生装置
JP4902415B2 (ja) 2007-04-23 2012-03-21 キヤノン株式会社 記録再生装置及びその制御方法
US8977958B2 (en) 2007-11-20 2015-03-10 Microsoft Technology Licensing, Llc Community-based software application help system
EP2650790B1 (en) 2008-04-15 2015-09-16 Foresee Results Method for remote tracking and replay of user interaction with a webpage
CN201222256Y (zh) * 2008-07-18 2009-04-15 东莞市万维网络科技信息有限公司 一种数字化集成加工的档案系统
US8571319B2 (en) 2009-07-28 2013-10-29 International Business Machines Corporation Enhanced screen capture for form manipulation
US9055080B2 (en) 2009-12-14 2015-06-09 Citrix Systems, Inc. Systems and methods for service isolation
US20110289117A1 (en) 2010-05-19 2011-11-24 International Business Machines Corporation Systems and methods for user controllable, automated recording and searching of computer activity
US9088767B2 (en) 2012-10-08 2015-07-21 International Business Machines Corporation Activities duplication via recorded video

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102282025B1 (ko) 2021-02-08 2021-07-28 로지스원 주식회사 컴퓨터를 이용한 문서 분류 및 문자 추출 방법
KR20230013836A (ko) 2021-07-20 2023-01-27 로지스원 주식회사 컴퓨터를 이용한 문서 분류 및 문자 추출 방법

Also Published As

Publication number Publication date
US20130305134A1 (en) 2013-11-14
JP5753350B2 (ja) 2015-07-22
JP2011028737A (ja) 2011-02-10
CN101986292A (zh) 2011-03-16
CN101986292B (zh) 2014-05-21
US20110026828A1 (en) 2011-02-03
US8571319B2 (en) 2013-10-29
US9460072B2 (en) 2016-10-04
KR101572273B1 (ko) 2015-12-04

Similar Documents

Publication Publication Date Title
KR101572273B1 (ko) 폼 조작에 대한 개선된 스크린 캡쳐
US9608881B2 (en) Service compliance enforcement using user activity monitoring and work request verification
US11062022B1 (en) Container packaging device
US10007656B2 (en) DOM snapshot capture
US8666996B2 (en) Methods and systems for detecting broken links within a file
RU2595533C2 (ru) Система отображения почтовых вложений на странице веб-почты
US8671108B2 (en) Methods and systems for detecting website orphan content
US20200167213A1 (en) Synchronous ingestion pipeline for data processing
US11847204B2 (en) Systems and methods for cloud-based management of digital forensic evidence
US8706778B2 (en) Methods and systems for an action-based interface for files and other assets
US11775759B2 (en) Systems and methods for training and evaluating machine learning models using generalized vocabulary tokens for document processing
US10437779B2 (en) Intelligent interactive screen capture
CN111783004A (zh) 页面嵌入方法、装置及系统
US10042825B2 (en) Detection and elimination for inapplicable hyperlinks
CN107111649A (zh) 将用户和系统数据从源位置上传到目的地位置
US20210064448A1 (en) Utilizing source context and classification in a copy operation
US20080307367A1 (en) Method and apparatus for a drag and drop operation implementing a hierarchical path name
US9680910B2 (en) Storing information to manipulate focus for a webpage
CN101611423B (zh) 将结构化数据用于在线调查
US11356395B1 (en) Generating a rich hyperlink within a messaging environment
US11985158B2 (en) Adaptive machine learning platform for security penetration and risk assessment

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191029

Year of fee payment: 5