KR100448557B1

KR100448557B1 - Display capture system

Info

Publication number: KR100448557B1
Application number: KR10-2001-7000295A
Authority: KR
Inventors: 딕터칼
Original assignee: 인텔 코오퍼레이션
Priority date: 1998-07-20
Filing date: 1999-06-17
Publication date: 2004-09-13
Also published as: CA2338398C; KR20010053435A; TW420946B; CA2338398A1; AU4693299A; JP2002521759A; JP2005174320A; EP1099189A1; CN1131493C; WO2000005679A1; CN1309795A

Abstract

컴퓨터 시스템은 텔레비전 디스플레이 디지털 신호로부터 정보를 캡쳐링한다. 디지털 신호는 컴퓨터 시스템이 그 스크린에 디스플레이된 문자를 인식하도록 허용하기 위해서 광학 문자 인식된다. 문자 정보는 그 후 연락 정보와 연관된 소망 패턴에 대하여 스캐닝된다. 연락 정보가 일단 격리되었으면, 그것은 저장될 수 있거나 또는 즉시 접촉이 자동으로 구현될 수 있다.The computer system captures information from the television display digital signal. Digital signals are optical character recognition to allow the computer system to recognize the characters displayed on the screen. The text information is then scanned for the desired pattern associated with the contact information. Once the contact information has been quarantined, it may be stored or immediate contact may be automatically implemented.

Description

Display capture system {DISPLAY CAPTURE SYSTEM}

개인 컴퓨터는 이제 텔레비전 수상기에 의해 선점된 영역으로 이동하고 있다. 소위 셋톱 개인 컴퓨터는 고급 프로그래밍 기능, 디지털 텔레비전, 및 인터넷 액세스 및 게임과 같은 통상 개인 컴퓨터와 연관된 다른 기능을 제공하는 텔레비전 수상기와 상호작용한다. 따라서, 셋톱 개인 컴퓨터의 사용자는 텔레비전 기능 및 통상 개인 컴퓨터와 연관된 기능 둘 다를 자유롭게 사용할 수 있다. 셋톱 개인 컴퓨터는 컴퓨터 시스템 및 텔레비전 수상기 양용의 디스플레이로서 텔레비전 스크린을 사용한다.Personal computers are now moving to areas preempted by television receivers. So-called set-top personal computers interact with television receivers that provide advanced programming capabilities, digital television, and other functions commonly associated with personal computers such as Internet access and gaming. Thus, a user of a set top personal computer is free to use both television functions and functions typically associated with personal computers. Set-top personal computers use television screens as displays for both computer systems and television receivers.

컴퓨터는 또한 컴퓨터 디스플레이 또는 모니터상에서 텔레비전 영상을 디스플레이할 수 있다. 컴퓨터의 튜너 카드는 텔레비전 프로그램이 컴퓨터 모니터상에 보여질 수 있도록 하기 위해서 텔레비전 수상기로서 동작한다.The computer may also display television images on a computer display or monitor. The tuner card of a computer acts as a television receiver to allow television programs to be viewed on a computer monitor.

연락 정보(contact information)는 일반적으로 텔레비전 프로그래밍, 특히 텔레비전 광고시에 디스플레이된다. 연필과 종이를 찾을 때까지 정보가 더 이상 디스플레이되지 않기 때문에 많은 시청자가 연락 정보를 기록하는데 어려움을 갖는다. 따라서, 광고주는 중요한 기회를 잃을 수 있고 시청자는 원하는 정보를 놓칠 수 있다.Contact information is generally displayed during television programming, especially television advertising. Many viewers have difficulty recording contact information because the information is no longer displayed until a pencil and paper are found. Thus, advertisers may miss important opportunities and viewers may miss the desired information.

마찬가지로, 몇 연락 정보는 인터넷 웹 페이지상에서 그래픽 이미지(즉, 텍스트 모드보다는 그래픽에서)로서 디스플레이될 수 있다. 이것은 등록 상표를 갖는 예에서처럼, 정교한 폰트 또는 그래픽 디스플레이가 요구되는 경우일 수 있다.Similarly, some contact information can be displayed as a graphical image (ie in graphics rather than text mode) on an internet web page. This may be the case when sophisticated font or graphic displays are required, such as in examples with registered trademarks.

디스플레이로부터 비-텍스트 정보를 보유할 수 있도록 컴퓨터 시스템 사용자의 능력을 강화하는 것은 바람직할 것이다.It would be desirable to enhance the computer system user's ability to retain non-text information from the display.

(발명의 개요)(Summary of invention)

일 태양에 따라, 컴퓨터를 사용하여 이미지 신호로부터 정보를 얻는 방법은 디스플레이 이미지의 디지털 표현을 얻는 것을 포함한다. 이미지내의 문자가 인식되어 이미지 내의 원하는 콘텐트가 찾아진다.According to one aspect, a method of obtaining information from an image signal using a computer includes obtaining a digital representation of a display image. Characters in the image are recognized to find the desired content in the image.

본 발명은 일반적으로 컴퓨터에 관한 것이고, 특별한 실시예에서 텔레비전 또는 컴퓨터 디스플레이로부터 정보를 캡쳐링하는 것에 관한 것이다.The present invention relates generally to computers and in particular embodiments relates to capturing information from televisions or computer displays.

도 1은 광고를 보여주는 텔레비전의 디스플레이 스크린을 예시한 도;1 illustrates a display screen of a television showing an advertisement;

도 2는 도 1에 도시된 스크린상의 정보로부터 캡쳐링된 파일;2 is a file captured from the information on the screen shown in FIG. 1;

도 3은 도 1에 도시된 스크린으로부터 캡쳐링된 정보를 포함하는 파일;3 is a file containing information captured from the screen shown in FIG. 1;

도 4는 본 발명의 일실시예를 구현하기 위한 컴퓨터 시스템을 도시하는 블록선도; 및4 is a block diagram illustrating a computer system for implementing one embodiment of the present invention; And

도 5는 본 발명의 일실시예에 대한 순서를 도시하는 흐름도.5 is a flow chart showing the procedure for one embodiment of the present invention.

연락 정보를 포함하는 이미지는 텔레비전 화면 또는 컴퓨터 디스플레이로부터 캡쳐링될 수 있고 방송 콘텐트 제공자와의 접촉을 용이하게 하는 컴퓨터 시스템에 의해서 처리될 수 있는데, 콘텐트 제공자는 텔레비전 프로그램상의 광고주일 수 있다. 예를 들어, 텔레비전 광고주는 일반적으로 그들 생산품에 대한 다양한 정보를 디스플레이하는 도 1에 도시된 것과 같은 광고를 방송한다. 이들 광고는 또한 광고주 또는 다른 콘텐트 제공자와 접촉하는데 사용될 수 있는 성명, 주소, 전화번호 및 유니버셜 리소스 로케이터(URL)와 같은 연락 정보를 포함할 수 있다.Images containing contact information may be captured from a television screen or computer display and processed by a computer system that facilitates contact with a broadcast content provider, which may be an advertiser on a television program. For example, television advertisers typically broadcast advertisements such as those shown in FIG. 1 displaying various information about their products. These advertisements may also include contact information such as name, address, telephone number, and universal resource locator (URL) that may be used to contact the advertiser or other content provider.

컴퓨터 모니터 디스플레이는 또한 텍스트 모드보다는, 예를 들어 비트 맵 그래픽을 사용한, 이미지 또는 그래픽 모드에서의 연락 정보를 포함하는 이미지를 포함한다. 연락 정보는 예를 들어 인터넷 웹 페이지의 일부분으로서 포함될 수 있다.The computer monitor display also includes an image containing contact information in image or graphic mode, for example using bitmap graphics, rather than text mode. Contact information may be included, for example, as part of an internet web page.

일 태양에 따라, 텔레비전 또는 컴퓨터 디스플레이(10)상에서 이미지를 생성하는 신호 정보는 디지털식으로 캡쳐링된다. 예를 들어, 도 1에 도시된 디스플레이(10)상에 도시되어 있는 전화번호는 도 2에 나타낸 바와 같은 디지털 파일(12) 형태로 기록되고 제공될 수 있다. 마찬가지로, 스크린(10)으로부터의 부가적 정보는 캡쳐링되어 연락 정보의 유형에 따라 적합한 필드(15)에 놓일 수 있다.According to one aspect, signal information for generating an image on a television or computer display 10 is digitally captured. For example, the telephone number shown on the display 10 shown in FIG. 1 may be recorded and provided in the form of a digital file 12 as shown in FIG. Likewise, additional information from screen 10 may be captured and placed in the appropriate field 15 depending on the type of contact information.

소프트웨어는 어느 정보가 사람의 성명을 구성하는지, 어느 정보가 회사 명칭을 구성하는지, 어느 정보가 주소를 구성하는지, 어느 정보가 전화 번호인지 및 어느 정보가 인터넷 URL을 구성하는지를 결정하기 위해 논리적 경험지식을 사용할 수 있다. 그들 필드 각각의 일반적 특성은 주어진 정보가 특별한 필드에 속하는지를 결정하기 위해 프로그램에 저장된다.The software uses logical heuristics to determine which information constitutes a person's name, which information constitutes a company name, which information constitutes an address, which information is a telephone number, and which information constitutes an Internet URL. Can be used. The general characteristics of each of these fields is stored in the program to determine whether the given information belongs to a particular field.

도 4를 보면, 셋톱 컴퓨터 시스템(15)은 시스템 메모리(18) 및 노스 브리지(20)에 접속된 프로세서(16)를 포함한다. 노스 브리지(20)는 통상 텔레비전(25)에 접속되는 디스플레이 제어기(24)에 연결될 수 있는 버스(22)에 접속되어 있다. 버스(22)는 또한 사우스 브리지(26)에 접속할 수 있다. 브리지(26)는 예시된 실시예에서 광학식 문자 인식(OCR) 및 전화/주소 디렉토리 프로그램일 수 있는 하나 이상의 프로그램(30 및 31)을 포함할 수 있는 하드 디스크 드라이브(28)를 연결할 수 있다.4, set-top computer system 15 includes a processor 16 connected to system memory 18 and north bridge 20. The north bridge 20 is normally connected to a bus 22 which can be connected to a display controller 24 which is connected to a television 25. The bus 22 may also connect to the south bridge 26. The bridge 26 may connect a hard disk drive 28, which may include one or more programs 30 and 31, which may be optical character recognition (OCR) and telephone / address directory programs in the illustrated embodiment.

사우스 브리지(26)는 직렬 입출력(SIO) 포트(34)에 접속할 수 있는 버스(32)에 접속한다. 포트(34)는 키보드(36), 전화 다이얼러(40) 및 모뎀(38)에 접속할 수 있다. 기본 입출력 시스템(BIOS)(42)은 또한 버스(32)에 접속될 수 있다. 물론, 다른 구현도 가능하고 다양한 부가적 구성 부품 및 주변 장치가 통상의 셋톱 컴퓨터 시스템에 접속될 수 있다.South bridge 26 connects to bus 32, which may connect to serial input / output (SIO) port 34. Port 34 may connect to keyboard 36, telephone dialer 40, and modem 38. Basic input / output system (BIOS) 42 may also be connected to bus 32. Of course, other implementations are possible and various additional components and peripherals may be connected to conventional set top computer systems.

이제 도 5를 보면, 컴퓨터 시스템(15)은 처음에 블록(44)에 나타낸 바와 같은 캡쳐 서비스를 위한 요구를 수신한다. 이것은 사용자가 디스플레이 스크린(25)상의 버튼을 누르거나 또는 키보드(36)의 특정한 핫 키를 작동함으로써 생긴 결과이다. 이 요구는 텔레비전 디스플레이로부터의 정보를 캡쳐링하는 요구로서 해석된다. 요구시에 디스플레이되는 이미지는 프로세서(16)의 작동을 통하여 블록(46)에 나타낸 바와 같이 디지털식으로 캡쳐링될 수 있다. 캡쳐링된 디지털 이미지는 그 후 광학식 문자 인식 소프트웨어(30)를 사용하여, 블록(48)에 나타낸 바와 같이, 광학식 문자 인식 변환된다. 이 소프트웨어는 디지털 이미지내의 정보를 스캐닝하고 식별하고 이 이미지 형상을 숫자 및 글자와 같은 알려진 문자와 연관짓는다. 그것은 그 후 이미지 또는 그래픽 모드 데이터의 텍스트 모드 표현을 제공한다.Referring now to FIG. 5, computer system 15 initially receives a request for a capture service as shown in block 44. This is the result of the user pressing a button on the display screen 25 or operating a specific hot key on the keyboard 36. This request is interpreted as a request to capture information from a television display. The image displayed on demand can be digitally captured as shown in block 46 through the operation of the processor 16. The captured digital image is then optical character recognition transformed using optical character recognition software 30, as shown in block 48. The software scans and identifies the information in the digital image and associates the image shape with known characters such as numbers and letters. It then provides a text mode representation of the image or graphic mode data.

컴퓨터 시스템은 블록(50)에 나타낸 바와 같이, 연락 정보 스타일에 대응하는 정보를 찾기 위해서 발견적 방법(heuristics)을 사용한다. 예를 들어, 대문자를 갖는 단어 쌍이 성명으로서 인식될 수 있는 반면 문자를 수반하는 숫자는 주소로서 인식될 수 있다. 일반적인 이름은 사람의 성명이 포함되는지를 결정하는 것을 돕기 위해서 데이터베이스에 저장될 수 있다. 마찬가지로, 숫자의 특정한 시퀀스는 전화 번호로서 인식될 수 있고 특정한 문자 시퀀스는 URL로서 인식될 수 있다.The computer system uses heuristics to find information corresponding to the contact information style, as shown in block 50. For example, a word pair with an uppercase letter may be recognized as a full name while a number accompanying letters may be recognized as an address. Common names can be stored in a database to help determine whether a person's full name is included. Similarly, a particular sequence of numbers can be recognized as a telephone number and a specific character sequence can be recognized as a URL.

일단 연락 정보가 식별되었으면 그것은, 예를 들어, 디스플레이 스크린상에서 사용자에게 디스플레이될 수 있고 블록(51)에 나타낸 바와 같이, 사용자는 원하는 정보가 캡쳐링되었다는 것을 보증하기 위해서 디스플레이된 정보를 확인할 수 있다. 사용자는 수정 윈도우에서 수정을 할 수 있고 (블록(52)) 연락 정보는 정정된다(블록(53)). 예를 들어, 두 개의 전화 번호가 보고된다면, 사용자는 어느 전화 번호가 원하여지는지를 나타낼 수 있다.Once the contact information has been identified, it can be displayed to the user, for example, on the display screen and as shown in block 51, the user can verify the displayed information to ensure that the desired information has been captured. The user can make modifications in the modification window (block 52) and the contact information is corrected (block 53). For example, if two phone numbers are reported, the user can indicate which phone number is desired.

블록(54)에 나타낸 바와 같이, 선택된 연락 정보는 그 후 메모리(18)에 또는 하드 디스크 드라이브(28)에 저장될 수 있다. 몇 경우에 있어서, 블록(56)에 나타낸 바와 같이, 그 후 연락 정보를 사용하여 접촉하는 것이 바람직할 수 있다. 다이얼러(40)는 저장된 전화 번호를 호출하도록 자동으로 작동될 수 있다. 대안으로, URL이 식별된 경우에, 모뎀(38)은 적합한 인터넷 서비스 제공자와 자동으로 접촉하기 위해서 및 원하는 웹 페이지를 얻기 위해서 사용될 수 있다.As indicated by block 54, the selected contact information may then be stored in memory 18 or in hard disk drive 28. In some cases, as indicated by block 56, it may then be desirable to make contact using contact information. Dialer 40 may be automatically activated to call a stored telephone number. Alternatively, if the URL is identified, modem 38 may be used to automatically contact a suitable internet service provider and to obtain a desired web page.

텔레비전 디스플레이로부터 캡쳐링된 연락 정보는 그 후 소프트웨어 전화 또는 주소 디렉토리와 같은 연락 정보를 컴파일하는 통상적인 소프트웨어(31)의 데이터베이스에 자동으로 부가될 수 있다. 일단 정보가 식별되었고 적합한 필드에 놓이게 되면 블록(58)에 나타낸 바와 같이, 후사용을 위하여 그러한 소프트웨어 디렉토리에 공급될 수 있다. 이들 디렉토리는 검색 및 자동 다이얼링 기능등을 제공할 수 있다.The contact information captured from the television display can then be automatically added to a database of conventional software 31 that compiles contact information such as a software phone or address directory. Once the information has been identified and placed in the appropriate field, it may be supplied to such software directory for later use, as shown in block 58. These directories can provide search and auto dialing functions and the like.

컴퓨터 시스템(15)은 임의의 지역 코드와 소정의 근거리 지역 코드를 비교함으로써 전화번호가 근거리 번호인지 또는 장거리 번호인지를 판정한다. 호출이 장거리 호출이라면, 다이얼링 프리픽스(prefix)가 부가될 수 있다.Computer system 15 determines whether the telephone number is a near or long distance number by comparing an arbitrary area code with a predetermined near area code. If the call is a long distance call, a dialing prefix may be added.

본 시스템은 텔레비전 방송을 통한 광고 또는 웹 페이지상에서의 그래픽 모드 정보와 같은 콘텐트를 제공하는 정보 제공자와 접촉하는 것을 용이하게 한다. 그것은 또한 주소 또는 전화 디렉토리 소프트웨어와 같은 접촉 소프트웨어에 그러한 연락 정보를 저장하는 것을 용이하게 한다.The system facilitates contact with an information provider that provides content such as advertisements over television broadcasts or graphical mode information on web pages. It also facilitates storing such contact information in contact software such as address or phone directory software.

본 발명이 단일 실시예에 관하여 설명되었지만, 그것으로부터 당업자는 많은 수정 및 변형을 인식할 수 있을 것이다. 첨부된 청구항은 본 발명의 범위 및 취지 내에 속하는 모든 그러한 수정 및 변형을 포함하는 것으로 의도된다.Although the present invention has been described with respect to a single embodiment, those skilled in the art will recognize many modifications and variations. It is intended that the appended claims cover all such modifications and variations as fall within the scope and spirit of the invention.

Claims

A method for obtaining contact information from an image signal using a computer,

Obtaining a digital representation of the display image;

Recognizing text in the image; And

Finding the address information within the text, such that the contact can be contacted by an entity using the address information.

2. The method of claim 1 including finding a telephone number in the text and automatically dialing the telephone number.

2. The method of claim 1 including finding an Internet address in the text and automatically accessing the Internet address.

2. The method of claim 1, comprising storing the contact information on a computer.

2. The method of claim 1 including providing contact information to the user, allowing the user to change the contact information, and correcting the contact information in accordance with information from the user.

The method of claim 1 including recognizing a user command and obtaining a digital representation of the display image being displayed when the user command is received.

2. The method of claim 1, wherein said contact information includes a telephone number.

The method of claim 1 wherein the contact information comprises an internet address.

2. The method of claim 1 including automatically adding the contact information to a software address directory.

The method of claim 1, wherein said obtaining comprises obtaining a digital representation of a television display image.

The method of claim 1, wherein said obtaining comprises obtaining a digital representation of a computer display image in a graphics mode.

In a computer system,

A processor;

Memory coupled to the processor;

An input device coupled to the processor;

A television receiver coupled to the processor for displaying a television program; And

And an optical character recognition device arranged to scan signal information for generating a television image and to identify contact information in the signal information.

13. The computer system of claim 12 including a telephone dialer coupled to the processor.

13. The computer system of claim 12 comprising a modem coupled to the processor.

delete