KR101067360B1 - 정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템 - Google Patents

정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템 Download PDF

Info

Publication number
KR101067360B1
KR101067360B1 KR1020107015282A KR20107015282A KR101067360B1 KR 101067360 B1 KR101067360 B1 KR 101067360B1 KR 1020107015282 A KR1020107015282 A KR 1020107015282A KR 20107015282 A KR20107015282 A KR 20107015282A KR 101067360 B1 KR101067360 B1 KR 101067360B1
Authority
KR
South Korea
Prior art keywords
dot pattern
information
scanner
dot
paper
Prior art date
Application number
KR1020107015282A
Other languages
English (en)
Other versions
KR20100083862A (ko
Inventor
켄지 요시다
Original Assignee
켄지 요시다
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 켄지 요시다 filed Critical 켄지 요시다
Publication of KR20100083862A publication Critical patent/KR20100083862A/ko
Application granted granted Critical
Publication of KR101067360B1 publication Critical patent/KR101067360B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06F3/0317Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G06F3/0321Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface by optically sensing the absolute position with respect to a regularly patterned surface forming a passive digitiser, e.g. pen optically detecting position indicative tags printed on a paper sheet
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202Constructional details or processes of manufacture of the input device
    • G06F3/0219Special purpose keyboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/039Accessories therefor, e.g. mouse pads
    • G06F3/0395Mouse pads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device

Abstract

본 발명은 용이한 조작으로 컴퓨터에 대하여 문자 등의 입력이나, 오퍼레이션을 수행할 수 있는 키보드, 마우스, 타블렛 등의 하드웨어 디바이스를 대신하는 새로운 입력 시스템, 즉, 페이퍼 아이콘, 페이퍼 컨트롤러, 페이퍼 키보드 및 마우스 패드를 제안한다. 정보 처리 장치에 접속된 스캐너를 사용하여 그 매체면에 형성된 도트 패턴을 읽어들이도록 하여 상기 도트 패턴에 정의된 코드치 또는/및 좌표치로 변환하고, 정보 처리 장치에 기억된 상기 코드치 또는/및 좌표치에 대응하는 음성, 화상, 동영상, 문자 또는 프로그램, 웹에 대한 액세스 정보를 출력시키기 위한, 매체 상에 형성된 아이콘을 설치함으로써, 키보드나 마우스 등을 사용하지 않고, 미리 준비된 음성, 화상, 동영상, 문자 등의 정보, 프로그램의 기동, 웹에 대한 액세스 등이 가능하게 된다.

Description

정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템{PRINTING METHOD OF INFORMATION PROCESSING DEVICE AND PRINTING CONTROL SYSTEM OF ICON IMAGE}
본 발명은, 지면(紙面) 등의 매체면에 형성(인쇄)된 도트 패턴을 이용한 정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템에 관한 것이다.
컴퓨터는, 생활의 모든 곳에서 사용되도록 되어 있다. 문서를 작성하거나 계산을 하는 등 종래의 용도에 더하여, 인터넷의 웹 페이지(WEB Page)에 액세스(access)하여 필요한 정보를 얻거나, 상품 구입을 하는 등, 컴퓨터의 기능 및 용도는 비약적으로 증가하고 있다.
종래, 이들 행위를 함에 있어서, 키보드 및 마우스를 사용하여 문자 입력 등의 조작을 하는 것이 필요하게 되고 있다.
그러나, 키보드로 문자를 입력하는 데에는, 번잡한 조작이 많고, 습득하기까지 시간을 필요로 한다. 특히, 고령자나 장애자 등, 기기를 조작하는 데 지장이 있는 자에게는 조작이 곤란하다는 문제가 있었다. 그리고, 키보드나 마우스의 조작이 가능하여 컴퓨터를 잘 다루는 자와, 그러한 조작을 하지 못하여 컴퓨터를 잘 다루지 못하는 자 사이에서, 정보나 기회의 격차가 생기는 「디지털 디바이드(digital divide)」도 문제가 되고 있다.
이러한 문제를 해결하는 것으로서, 바코드(bar code)나 QR 코드 등(이하, 총칭하여 「바코드」라고 함)의 매체면 상에 인쇄되는 코드 패턴을 사용하여 컴퓨터에 정보를 입력할 수 있는 정보 처리 기기 및 서비스 제공 시스템이 제안되고 있다. 즉, 사업자가 제공하는 카탈로그나 홈 페이지 상에 바코드가 기재되어 있고, 유저(오퍼레이터)가, 컴퓨터에 접속된 바코드 리더를 사용하여 바코드를 독취(讀取)하면, 희망하는 정보를 얻거나 상품을 구입할 수 있다(예를 들면, 특허 문헌 1 참조).
<특허 문헌 1> 일본 특허 공개 2005-4574호 공보
그러나, 바코드는, 바코드만을 표시시키기 위하여 매체면 상의 소정 영역을 확보해야 하기 때문에, 매체면 상에 표시할 수 있는 코드 수에 한계가 있고, 키보드와 비교하여 많은 종류의 문자나 기호에 대응하는 코드를 입력하는 것은 곤란했다. 더구나, 바코드는 매체면의 미관을 해치는 요인이 되고 있었다.
본 발명은 이상의 점을 감안하여 이루어진 것으로서, 용이한 조작으로 컴퓨터에 대하여 문자 등의 입력이나, 오퍼레이션을 수행할 수 있는 키보드, 마우스, 타블렛(tablet) 등 하드웨어 디바이스를 대신하는 새로운 입력 시스템, 즉, 페이퍼 아이콘(paper icon), 페이퍼 컨트롤러(paper controller), 페이퍼 키보드(paper keyboard) 및 마우스 패드(mouse pad)를 제안하는 것이다.
본 발명은, 상기 과제를 해결하기 위하여 이하와 같은 수단을 채용했다.
본 발명의 청구항 1은, 표시 수단에 표시시킨 아이콘 화상을, 그 아이콘 화상에 대응한 도트 패턴과 함께 지면(紙面)에 인쇄하는 페이퍼 컨트롤러 생성 시스템으로서, 아이콘 화상을 생성하고 표시하는 표시 수단과, 표시 수단에 표시된 아이콘 화상을 미리 정의된 좌표치 및/또는 코드치에 관련지어, 해당 아이콘 화상과 도트 패턴과의 인쇄를 지시하는 제어 수단과, 상기 제어 수단으로부터의 지시를 토대로 상기 아이콘 화상과 상기 도트 패턴을 소정의 매체면에 인쇄하는 인쇄 수단으로 이루어지는 아이콘 화상의 인쇄 제어 시스템이다.
본 발명의 청구항 2는, 표시 수단에 표시된 데스크톱 화면을 도트 패턴과 함께 지면에 인쇄하는 정보 처리 장치의 인쇄 방법으로서, 상기 데스크톱 화면에 대응한 좌표치를 매핑(mapping)하고, 상기 데스크톱 화면을 인쇄할 때에 화면 상의 좌표치를 의미하는 도트 패턴을 생성하며, 상기 데스크톱 화면 상의 아이콘 화상 등의 기능 화상 상에는, 상기 좌표치와 함께 해당 기능을 의미하는 코드치를 하나의 포맷에 포함한 도트 패턴을 생성하고, 상기 데스크톱 화면을 상기 도트 패턴과 함께 인쇄하는 인쇄 방법이다.
본 발명에 의하면, 용이한 조작으로 컴퓨터에 대하여 문자 등의 입력이나, 오퍼레이션을 수행할 수 있는 키보드, 마우스, 타블렛 등의 하드웨어 디바이스를 대신하는 새로운 입력 시스템, 즉, 페이퍼 아이콘, 페이퍼 컨트롤러, 페이퍼 키보드 및 마우스 패드를 실현하는 것이 가능하다.
도 1은, 스캐너 및 컴퓨터의 시스템 구성을 나타내는 블럭도.
도 2는, GRID1의 도트 패턴을 나타내는 설명도.
도 3은, GRID1에 있어서 도트 패턴의 정보 도트의 일례를 나타내는 확대도.
도 4는, GRID1에 있어서 정보 도트의 배치를 나타내는 설명도.
도 5는, GRID1에 있어서 정보 도트 및 이에 정의된 데이터의 비트 표시의 예로서, 다른 형태를 나타내는 도면.
도 6은, GRID1에 있어서 정보 도트 및 그에 정의된 데이터의 비트 표시의 예로서, (a)는 도트를 2개, (b)는 도트를 4개, (c)는 도트를 5개 배치한 도면.
도 7은, GRID1에 있어서 도트 패턴의 변형예를 나타내는 것으로서, (a)는 정보 도트 6개 배치형, (b)는 정보 도트 9개 배치형, (c)는 정보 도트 12개 배치형, (d)는 정보 도트 36개 배치형의 개략도.
도 8은, GRID1에 있어서 도트의 배치를 나타내는 설명도.
도 9는, 본 실시 형태에 있어서 도트 패턴의 포맷에 대하여 설명한 도면.
도 10은, GRID2의 도트 패턴을 나타내는 설명도.
도 11은, GRID2에 있어서 도트와 격자선과의 관계를 나타내는 도면.
도 12는, GRID2에 있어서 정보 도트의 격자점으로부터 어긋난 형태를 나타내는 도면.
도 13은, GRID2에 있어서 차분(差分)에 의한 정보 취득을 설명하기 위한 도트 패턴도.
도 14는, GRID2에 있어서 정보 비트와 시큐어리티(security) 테이블과 진치(眞値)와의 관계를 설명하기 위한 도면.
도 15는, 본 발명의 실시 형태인 페이퍼 키보드의 사용 상태를 나타내는 설명도.
도 16은, 페이퍼 키보드의 전체 내용을 나타낸 도면.
도 17은, 페이퍼 키보드의 전체 내용을 나타낸 도면.
도 18은, 본 발명의 실시 형태인 페이퍼 컨트롤러를 나타내는 설명도.
도 19는, 페이퍼 컨트롤러의 다른 실시 형태를 나타내는 것으로서, 인터넷의 URL을 북마크(bookmark)로서 등록하기 위한 페이퍼 컨트롤러.
도 20은, 페이퍼 컨트롤러의 사용 상태를 나타내는 설명도.
도 21은, 페이퍼 컨트롤러의 사용 상태를 나타내는 설명도.
도 22는, 페이퍼 컨트롤러를 사용하여 조작한 경우에 모니터 상에 표시되는 화면을 나타낸 도면.
도 23은, 페이퍼 컨트롤러를 사용하여 조작한 경우에 모니터 상에 표시되는 화면을 나타낸 도면.
도 24는, 본 실시 형태에서 사용되는 테이블에 대하여 설명한 도면으로서, (a)는 퍼스널 컴퓨터 내에 설치된 인덱스 테이블, (b)는 관리 서버 내에 설치된 관리 서버 테이블에 대하여 나타낸 도면.
도 25는, 페이퍼 컨트롤러의 다른 실시 형태에 대하여 설명한 도면으로서, 가이드 뱅크가 설치된 것에 대하여 나타낸 도면.
도 26은, 페이퍼 컨트롤러의 다른 실시 형태에 대하여 설명한 도면으로서, 북마크를 수행하기 위한 페이퍼 컨트롤러에 대하여 나타내는 도면.
도 27은, 도 25에 나타내는 페이퍼 컨트롤러의 단면도.
도 28은, 페이퍼 컨트롤러와 가이드 뱅크가 별체로 되어 있는 상태를 나타내는 설명도.
도 29는, 페이퍼 컨트롤러의 다른 실시 형태를 나타내는 도면으로서, 도트 패턴과 함께 점자의 돌기를 설치한 것에 대하여 나타내는 도면.
도 30은, 페이퍼 컨트롤러의 다른 실시 형태를 나타내는 도면으로서, 도트 패턴과 함께 점자의 돌기를 설치한 것에 대하여 나타내는 도면.
도 31은, 스캐너를 동작시키는 것에 따른 페이퍼 키보드 조작에 대하여 설명하는 도면으로서, (a)는 그리드 스크래치(grid scratch) 동작, (b)는 그리드 태핑(grid tapping) 동작, (c)는 그리드 슬라이딩(grid sliding) 동작에 대하여 설명하는 도면.
도 32는, 스캐너를 동작시키는 것에 따른 페이퍼 키보드의 조작에 대하여 설명하는 도면으로서, (a)는 그리드 그라인드 라이트(grid grind right), (b)는 그리드 그라인드 레프트(grid grind left)에 대하여 설명하는 도면.
도 33은, 본 발명의 실시 형태인 마우스 패드의 사용 상태에 대하여 나타낸 설명도.
도 34는, 마우스 패드에 대하여 설명하는 도면으로서, (a) 및 (b)는 원형의 마우스 패드, (c) 및 (d)는 4각형 모양의 마우스 패드에 대하여 나타낸 도면.
도 35는, 마우스 패드의 구체적인 예에 대하여 설명한 도면.
도 36은, 마우스 패드를 사용한, 스캐너의 동작에 의한 브라우저 프로그램(browser program)의 웹 페이지(web page)의 스크롤 오퍼레이션(scroll operation)에 대하여 설명한 도면.
도 37은, 마우스 패드를 사용한, 스캐너의 동작에 의한 브라우저 프로그램의 웹 페이지의 스크롤 오퍼레이션에 대하여 설명한 도면.
도 38은, 마우스 패드의 다른 실시 형태에 대하여 설명한 도면으로서, 환(環) 형상의 홈(溝)을 설치한 것을 나타내는 도면.
도 39는, 마우스 패드의 다른 실시 형태에 대하여 설명한 도면으로서, 방사 형상의 홈을 설치한 것에 대하여 나타내는 도면.
도 40은, 페이퍼 키보드의 다른 실시 형태에 대하여 나타내는 도면으로서, 터치ㆍ앤드ㆍ릴리스(touch and release) 동작에 의해 입력하는 것에 대하여 설명하는 도면.
도 41은, 도 40에 나타낸 페이퍼 키보드를 사용하여 문자를 입력할 때의 문자 입력 방법에 대하여 설명한 도면.
도 42는, 도 40에 나타낸 페이퍼 키보드를 이용한 문자 입력의 구체적인 예에 대하여 설명한 도면.
도 43은, 음성 인식에 의해 문자 입력을 하기 위한 보조 장치로서의 용도에 대하여 설명한 도면.
도 44는, 적외선 리모콘과 일체로 된 스캐너에 대하여 나타내는 도면.
도 45는, 크래들에 스캐너를 재치(載置)할 수 있는 구조의 리모콘을 사용하여, 텔레비젼에 적외선 신호를 송신하는 조작에 대하여 설명하는 도면.
도 46은, 크래들에 스캐너를 재치할 수 있는 구조의 리모콘을 사용하여, 셋톱박스에 적외선 신호를 송신하는 조작에 대하여 설명하는 도면.
도 47은, 텔레비젼의 리모콘 기능 및 셋톱박스의 제어 기능을 포함하는 페이퍼 컨트롤러에 대하여 설명하는 도면.
도 48은, 텔레비젼의 리모콘 기능 및 셋톱박스의 제어 기능을 포함하는 페이퍼 컨트롤러에 대하여 설명하는 도면.
도 49는, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 50은, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 51은, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 52는, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 53은, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 54는, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 55는, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 56은, 도 47 및 도 48에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 57은, 호텔에서 각종 서비스를 제공하기 위한 페이퍼 컨트롤러에 대하여 설명한 도면.
도 58은, 음악 또는 동영상 플레이어의 제어를 수행하기 위한 페이퍼 컨트롤러에 대하여 설명한 도면.
도 59는, 음악 또는 동영상 플레이어의 제어를 수행하기 위한 페이퍼 컨트롤러에 대하여 설명한 도면.
도 60은, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 사용 방법에 대하여 설명한 도면이다.
도 61은, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러를 사용했을 때에 디스플레이에 표시되는 구체적인 예를 나타낸 도면.
도 62는, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 63은, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 64는, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 65는, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 66은, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 67은, 도 58 및 도 59에 나타낸 페이퍼 컨트롤러의 기능 및 조작에 대하여 설명한 도면.
도 68은, 도트 패턴이 인쇄된 화이트 보드에 대하여 설명한 도면으로서, 프로젝터를 사용하여 컨트롤러 및 영상을 표시한 상태를 나타내는 도면.
도 69는, 화이트 보드의 단면 구조를 확대하여 나타낸 종단면도.
도 70은, 도트 패턴이 인쇄된 화이트 보드에 대하여 설명한 도면으로서, 프로젝터를 사용하여 아이콘을 표시한 상태를 나타내는 도면.
도 71은, 도트 패턴이 인쇄된 아크릴 보드(acrylic board)에 대하여 설명한 도면으로서, 리어 프로젝터를 사용하여 아이콘의 초기 화면을 표시한 상태를 나타내는 도면.
도 72는, 아크릴 보드의 단면 구조를 확대하여 나타낸 종단면도.
도 73은, 페이퍼 키보드를 유저 자신이 작성하는 기능에 대하여 설명한 도면으로서, (a)는 디스플레이 장치에 표시된 영상, (b)는 용지에 프린트 아웃된 상태에 대하여 나타낸 도면.
도 74는, 본 발명의 일 실시 형태인 GAM(Grid Application Manager)에 대하여 설명한 도면.
도 75는, 본 발명의 일 실시 형태인 GAM에 대하여 설명한 도면.
도 76은, 본 발명의 일 실시 형태인 레스토랑 메뉴의 오더 시스템에 대하여 설명한 도면.
도 77은, 본 발명의 일 실시 형태인 레스토랑 메뉴의 오더 시스템에 대하여 설명한 도면.
도 78은, 스캐너에 내장된 카메라의 방향 및 스캐너의 기울기에 대하여 설명한 도면.
도 79는, 스캐너의 기울임에 의해 키 입력 인터럽트 처리 또는 GUI 오퍼레이션을 수행하는 경우에 있어서, 기울인 방향 및 각도를 측정하는 방법을 설명하기 위한 도면(1).
도 80은, 스캐너의 기울임에 의해 키 입력 인터럽트 처리 또는 GUI의 오퍼레이션을 수행하는 경우에 있어서, 기울인 방향 및 각도를 측정하는 방법을 설명하기 위한 도면(2).
도 81은, 스캐너의 기울임에 의해 키 입력 인터럽트 처리 또는 GUI의 오퍼레이션을 수행하는 경우에 있어서, 기울인 방향을 측정하는 방법을 설명하기 위한 도면.
도 82는, 스캐너의 기울기에 의해 키 입력 인터럽트 처리 또는 GUI의 오퍼레이션을 수행하는 경우에 있어서, 푸리에(Fourier) 함수를 사용함으로써 기울인 방향을 측정하는 방법을 설명하기 위한 도면.
도 83은, 스캐너의 기울기에 의해 키 입력 인터럽트 처리 또는 GUI의 오퍼레이션을 수행하는 경우에 있어서, n차 방정식을 사용함으로써 기울인 방향을 측정하는 방법을 설명하기 위한 도면.
도 84는, XY 좌표치를 마우스 패드로서 사용한 페이퍼 키보드에 대하여 설명하기 위한 도면.
도 85는, 매트릭스 구획이 형성된 화이트 보드에 대하여 설명하기 위한 도면.
도 86은, 도 85에 나타낸 화이트 보드에 사용하는 도트 패턴의 포맷에 대하여 설명하기 위한 도면.
도 87은, 도 85에 나타낸 화이트 보드에 사용하는 도트 패턴의 코드치와 코맨드의 대응 테이블을 나타낸 도면.
도 88은, 디스플레이 상의 데스크톱 화면을 인쇄하여 페이퍼 키보드를 작성하는 기능에 대하여 설명하기 위한 도면.
도 89는, 디스플레이 상의 데스크톱 화면을 인쇄하여 페이퍼 키보드를 작성할 때 생성되는, 코드치와 기동 프로그램의 대응 테이블에 대하여 나타낸 도면.
도 90은, 디스플레이 상의 데스크톱 화면을 인쇄하여 페이퍼 키보드를 작성할 때 생성되는 도트 패턴의 포맷에 대하여 설명하기 위한 도면.
이하, 본 발명을 도면에 따라서 상세히 설명한다.
도 1은, 퍼스널 컴퓨터와 스캐너의 구성을 나타내는 하드웨어 블럭도이다.
동 도에 나타내는 바와 같이, 퍼스널 컴퓨터는, 중앙 처리 장치(CPU)를 중심으로, 메인 메모리(MM), 버스(BUS)로 접속된 하드 디스크 장치(HD), 출력 수단으로서의 표시 장치(DISP), 입력 수단으로서의 키보드(KBD)를 포함하고 있다.
*그리고, USB 인터페이스(USB I/F)를 개재하여 촬영 수단으로서의 스캐너(SCN)가 접속되어 있다.
이 스캐너(SCN)의 내부 구성에 대해서는 도시를 생략하는데, 적외선 조사(照射) 수단(LED)과 그 반사광의 소정 파장 성분을 차단하는 필터 및 촬상하는 촬상 소자(CCD나 CMOS)가 내장되어 있고, 후술하는 매체로서 ID 태그(tag), 페이퍼 키보드나 페이퍼 컨트롤러로부터의 반사광을 촬상하여, 그 매체면에 인쇄된 도트 패턴을 화상 데이터로서 처리할 수 있도록 되어 있다.
그리고, 스캐너(SCN)의 측면에는 오른쪽 클릭 버튼과 왼쪽 클릭 버튼이 설치되어 있고, 각각 마우스의 오른쪽 클릭, 왼쪽 클릭 기능이 실현 가능하도록 되어 있다. 한편, 동 도에서는 독취부를 아래로 한 상태에서, 오른쪽 클릭 버튼을 상방, 왼쪽 클릭 버튼을 하방에 배치하고 있는데, 배치는 이에 국한되지 않는다.
한편, 도시를 생략하고 있으나, 디스플레이 장치(DISP) 이외에, 출력 장치로서 프린터, 스피커 등이 접속되어 있어도 된다.
또한, 버스(BUS)는, 네트워크 인터페이스(NW I/F)를 개재하여 인터넷 등의 범용 네트워크(NW)에 접속되어 있고, 전자 지도 데이터, 문자 정보, 화상 정보, 음성 정보, 동영상 정보, 프로그램 등을 도시하지 않은 서버로부터 다운로드할 수 있도록 되어 있다.
하드 디스크(HD) 내에는, 오퍼레이팅 시스템(OS)과 함께, 본 실시 형태에서 사용되는 도트 패턴의 해석 프로그램 등의 응용 프로그램(Application Program), 전자 지도 데이터, 문자 정보, 화상 정보, 음성 정보, 동영상 정보나 각종 테이블 등의 데이터가 등록되어 있다.
중앙 처리 장치(CPU)는, 스캐너(SCN)로부터의 매체면의 도트 패턴의 촬영 데이터를 독취하고 코드 또는 좌표치로 변환한 입력 신호를 USB 인터페이스를 개재하여 수신하면, 해당 입력 신호에 대응한 전자 지도 데이터, 문자 정보, 화상 정보, 음성 정보, 동영상 정보, 프로그램 등을 하드 디스크(HD)로부터 독취하여 디스플레이 장치(DISP) 또는 도시하지 않은 스피커 등의 출력 장치로부터 출력하도록 되어 있다.
한편, 스캐너(SCN)에서 읽어들이는 코드나 좌표치에 대해서는 나중에 상세히 설명한다.
스캐너는, 상세한 도시는 생략하지만, 적외선 조사 수단(적색 LED)과 IR필터(Infrared filter)와, CMOS 센서, CCD 센서 등의 광학 촬상 소자를 구비하고, 매체면에 조사(照射)한 조사광의 반사광을 촬영하는 기능을 포함하고 있다. 여기에서 매체면 상의 도트 패턴은 카본 잉크(carbon ink)로 인쇄되어 있고, 도트 패턴 이외의 화상이나 문자 부분은 논카본 잉크(non-carbon ink)로 인쇄되어 있다.
이 카본 잉크는 적외선 광을 흡수하는 특성을 포함하고 있기 때문에, 상기 광학 촬상 소자에서의 촬상 화상에서는, 도트 부분만이 검게 촬영된다.
이와 같이, 도트 패턴만이 카본 잉크로 인쇄되어 있기 때문에, 다른 카본 잉크로 인쇄된 화상이나 문자에 가시적(可視的)으로 영향을 주지 않으며, 도트 패턴을 통상의 인쇄와 중첩 인쇄할 수 있다.
한편, 적외선 광을 흡수하는 특성을 갖는 잉크로서 카본 잉크를 예시했는데, 도트 패턴의 인쇄는, 특정 파장에 반응하는 잉크이면, 카본 잉크에 국한되지 않는다.
이와 같이 하여 독취한 도트 패턴의 촬상 화상은, 스캐너 내의 중앙 처리 장치(CPU)에 의해 해석되고 좌표치 또는 코드치로 변환되어, USB 케이블 및 USB 인터페이스(USB I/O)를 개재하여 퍼스널 컴퓨터로 송신된다.
퍼스널 컴퓨터의 중앙 처리 장치(CPU)는, 수신한 좌표치 또는 코드치를 나타내는 테이블을 참조하여, 이들에 대응한 전자 지도 데이터, 문자 정보, 화상 정보, 음성 정보, 동영상 정보가 디스플레이 장치(DISP)나 도시하지 않은 스피커로부터 출력되도록 되어 있다.
<도트 패턴의 설명 GRID1>
다음에, 본 발명에서 사용하는 도트 패턴에 대하여 도 2~도 7을 이용하여 설명한다.
도 2는 본 발명의 도트 패턴의 한 예인 GRID1을 나타내는 설명도이다.
한편, 이들 도면에 있어서, 종횡 방향의 격자선은 설명의 편의를 위하여 붙인 것으로서 실제의 인쇄면에는 존재하고 있지 않다. 도트 패턴(1)을 구성하는 키 도트(2), 정보 도트(3), 기준 격자점 도트(4)등은 촬상 수단인 스캐너가 적외선 조사 수단을 가지고 있는 경우, 해당 적외선 광을 흡수하는 카본 잉크로 인쇄되어 있는 것이 바람직하다.
도 3은 도트 패턴의 정보 도트 및 그에 정의된 데이터의 비트 표시의 한 예를 나타내는 확대도이다. 도 4(a), (b)는 키 도트를 중심으로 배치한 정보 도트를 나타내는 설명도이다.
본 발명의 도트 패턴을 사용한 정보 입출력 방법은, 도트 패턴(1)의 생성과, 그 도트 패턴(1)의 인식과, 이 도트 패턴(1)으로부터 정보 및 프로그램을 출력하는 수단으로 이루어진다. 즉, 도트 패턴(1)을 카메라에 의해 화상 데이터로서 넣고, 먼저, 기준 격자점 도트(4)를 추출하고, 다음에 본래의 기준 격자점 도트(4)가 있는 위치에 도트가 찍히지 않음으로써, 키 도트(2)를 추출하며, 다음에 정보 도트(3)를 추출함으로써 디지털화하고 정보 영역을 추출하여 정보의 수치화를 도모하며, 그 수치 정보에 의해, 이 도트 패턴(1)으로부터 정보 및 프로그램을 출력시킨다. 예를 들면, 이 도트 패턴(1)으로부터 음성 등의 정보나 프로그램을, 정보 출력 장치, 퍼스널 컴퓨터, PDA 또는 휴대전화 등에 출력시킨다.
본 발명의 도트 패턴(1)의 생성은, 도트 코드 생성 알고리즘에 의해, 음성 등의 정보를 인식시키기 위하여 미세한 도트, 즉, 키 도트(2), 정보 도트(3), 기준 격자점 도트(4)를 소정의 규칙에 따라 배열한다. 도 2에 나타내는 바와 같이, 정보를 나타내는 도트 패턴(1)의 블럭은, 키 도트(2)를 기준으로 5×5의 기준 격자점 도트(4)를 배치하고, 4점의 기준 격자점 도트(4)에 둘러싸인 중심의 가상 격자점(5)의 주위에 정보 도트(3)를 배치한다. 이 블럭에는 임의의 수치 정보가 정의된다. 도 2에 도시한 예에서는, 도트 패턴(1)의 블럭(굵은 선 테두리 내)을 4개 병렬시킨 상태를 나타내고 있다. 다만, 도트 패턴(1)은 4블럭으로 국한되지 않는 것은 말할 나위도 없다.
하나의 블럭에 하나가 대응한 정보 및 프로그램을 출력시키거나, 또는, 복수의 블럭에 하나가 대응한 정보 및 프로그램을 출력시킬 수 있다.
기준 격자점 도트(4)는, 카메라에서 이 도트 패턴(1)을 화상 데이터로서 읽어들일 때, 그 카메라 렌즈의 일그러짐이나 비스듬한 방향에서의 촬상, 지면(紙面)의 신축, 매체 표면의 만곡(彎曲), 인쇄시의 일그러짐을 교정할 수 있다. 구체적으로는 일그러진 4점의 기준 격자점 도트(4)를 원래의 정방형으로 변환하는 보정용 함수(Xn, Yn)=f(Xn', Yn')를 구하고, 그 동일 함수로 정보 도트(3)를 보정하여, 바른 정보 도트(3)의 벡터(vector)를 구한다.
도트 패턴(1)에 기준 격자점 도트(4)를 배치하면, 이 도트 패턴(1)을 카메라로 읽어들인 화상 데이터는, 카메라가 원인이 되는 일그러짐을 보정하기 때문에, 왜곡율(歪率)이 높은 렌즈를 붙인 보급형 카메라로 도트 패턴(1)의 화상 데이타를 읽어들일 때에도 정확하게 인식할 수 있다. 또한, 도트 패턴(1)의 면에 대하여 카메라를 기울여 독취하더라도, 그 도트 패턴(1)을 정확하게 인식할 수 있다.
키 도트(2)는, 도 2에 나타내는 바와 같이, 블럭의 4모서리의 모서리부에 있는 4개의 기준 격자점 도트(4)를 일정한 방향으로 옮겨 배치한 도트이다. 이 키 도트(2)는, 정보 도트(3)를 나타내는 한 블럭 분의 도트 패턴(1)의 대표점이다. 예를 들면, 도트 패턴(1)의 블럭 4모서리의 모서리부에 있는 기준 격자점 도트(4)를 상방으로 0.1mm 옮긴 위치이다. 정보 도트(3)가 X, Y 좌표치를 나타내는 경우에, 키 도트(2)를 하방으로 0.1mm 옮긴 위치가 좌표점이 된다. 다만, 그 수치는 이에 국한되지 않고, 도트 패턴(1)의 블럭의 대소에 따라서 가변할 수 있다.
정보 도트(3)는 여러 가지 정보를 인식시키는 도트이다. 이 정보 도트(3)는, 키 도트(2)를 대표점으로 하고, 그 주변에 배치함과 동시에, 4점의 기준 격자점 도트(4)로 둘러싸인 중심을 가상 격자점(5)으로 하여, 이를 시작점으로 하여 벡터에 의해 표현한 종점에 배치한 것이다. 예를 들면, 이 정보 도트(3)는, 기준 격자점 도트(4)에 둘러싸이고, 도 3(a)에 나타내는 바와 같이, 그 가상 격자점(5)으로부터 0.1mm 떨어진 도트는, 벡터로 표현되는 방향과 길이를 가지기 때문에, 시계 방향으로 45°씩 회전시켜 8 방향으로 배치하여 3비트를 표현한다. 따라서, 1 블럭의 도트 패턴(1)으로 3비트×16개=48비트를 표현할 수 있다.
도 3(b)는, 도 2의 도트 패턴에 있어서, 하나의 격자마다 2비트를 가지는 정보 도트(3)의 정의 방법으로서,+방향 및 ×방향으로 도트를 옮겨 각 2비트의 정보를 정의하고 있다. 이에 따라, 본래 48비트의 정보를 정의할 수 있으나, 용도에 따라 분할하여 32비트마다 데이터를 부여할 수 있다. +방향 및 ×방향의 조합에 따라 최대 216(약 65000)비트의 도트 패턴 포맷을 실현할 수 있다.
한편, 도시한 예에서는 8 방향으로 배치하여 3비트를 표현하고 있는데, 이에 국한되지 않고, 16 방향으로 배치하여 4비트를 표현하는 것도 가능하며, 여러 가지 변경할 수 있음은 말할 나위도 없다.
키 도트(2), 정보 도트(3) 또는 기준 격자점 도트(4)의 도트 직경은, 외관, 지질(紙質)에 대한 인쇄의 정밀도, 카메라의 해상도 및 최적의 디지털화를 고려하여, 0.05mm 정도가 바람직하다.
또한, 촬상 면적에 대한 필요한 정보량과, 각종 도트(2, 3, 4)의 오인을 고려하여 기준 격자점 도트(4)의 간격은 가로ㆍ세로가 0.5mm 전후가 바람직하다. 기준 격자점 도트(4) 및 정보 도트(3)와의 오인을 고려하여, 키 도트(2)의 편차는 격자 간격의 20% 전후가 바람직하다.
이 정보 도트(3)와 4점의 기준 격자점 도트(4)로 둘러싸인 가상 격자점(5)의 간격은, 인접하는 가상 격자점(5) 간의 거리의 15~30% 정도의 간격이 바람직하다. 정보 도트(3)과 가상 격자점(5) 간의 거리가 이 간격보다 가까우면 도트끼리 큰 덩어리라고 인정되기 쉬워, 도트 패턴(1)으로서 외관이 불량하게 되기 때문이다. 반대로, 정보 도트(3)와 가상 격자점(5) 간의 거리가 이 간격보다 멀면 인접하는 어느 하나의 가상 격자점(5)을 중심으로 하여 벡터 방향성을 갖도록 한 정보 도트(3)라고 인정하기 곤란하기 때문이다.
예를 들면, 정보 도트(3)는, 도 4(a)에 나타내는 바와 같이, 블럭 중심으로부터 시계 방향으로 I1부터 I16을 배치하는 격자 간격은 0.5mm이고, 2mm×2mm에서 3비트×16=48비트를 표현한다.
한편, 블럭 내에 개개로 독립한 정보 내용을 포함하고, 아울러 다른 정보 내용에 영향을 받지 않는 서브 블럭을 더 설치할 수 있다. 도 4(b)는 이를 도시한 것으로서, 4개의 정보 도트(3)로 구성되는 서브 블럭[I1, I2, I3, I4], [I5, I6, I7, I8], [I9, I10, I11, I12], [I13, I14, I15, I16]은 각각 독립한 데이터(3비트×4=12비트)가 정보 도트(3)에 전개되도록 되어 있다. 이와 같이 서브 블럭을 설치함으로써, 에러 체크를 서브 블럭 단위로 용이하게 할 수 있다.
정보 도트(3)의 벡터 방향(회전 방향)은, 30도~90도마다 균등하게 정하는 것이 바람직하다.
도 5는 정보 도트(3) 및 그에 정의된 데이터 비트 표시의 예이고, 다른 형태를 나타내는 것이다.
또한, 정보 도트(3)에 대해서 기준 격자점 도트(4)로 둘러싸인 가상 격자점(5)으로부터 장단(長短)의 2 종류를 사용하여, 벡터 방향을 8 방향으로 하면, 4비트를 표현할 수 있다. 이 때, 긴 쪽이 인접하는 가상 격자점(5) 간의 거리의 25~30% 정도, 짧은 쪽은 15~20% 정도가 바람직하다. 다만, 장단의 정보 도트(3)의 중심 간격은, 이들 도트의 직경보다 길어지는 것이 바람직하다.
4점의 기준 격자점 도트(4)로 둘러싸인 정보 도트(3)는, 외관을 고려하여 1 도트가 바람직하다. 그러나, 외관을 무시하고, 정보량을 많게 하고 싶은 경우는, 1 벡터마다, 1비트를 할당하여 정보 도트(3)를 복수의 도트로 표현함으로써, 다량의 정보를 포함할 수 있다. 예를 들면, 동심원 8 방향의 벡터에서는, 4점의 격자 도트(4)에 둘러싸인 정보 도트(3)로 28의 정보를 표현할 수 있고, 1 블럭의 정보 도트 16개로 2128이 된다.
도 6은 정보 도트 및 그에 정의된 데이터 비트의 표시예로서, (a)는 도트를 2개, (b)는 도트를 4개 및 (c)는 도트를 5개를 배치한 것을 나타내는 것이다.
도 7은 도트 패턴의 변형예를 나타내는 것으로서, (a)는 정보 도트 6개 배치형, (b)는 정보 도트 9개 배치형, (c)는 정보 도트 12개 배치형, (d)는 정보 도트 36개 배치형의 개략도이다.
도 2와 도 4에 나타내는 도트 패턴(1)은, 1 블럭에 16(4×4)의 정보 도트(3)를 배치한 예를 나타내고 있다. 그러나, 이 정보 도트(3)는 1 블럭에 16개 배치하는 것에 국한되지 않고, 여러 가지로 변경할 수 있다. 예를 들면, 필요로 하는 정보량의 대소 또는 카메라의 해상도에 따라서, 정보 도트(3)를 1 블럭에 6개(2×3) 배치한 (a), 정보 도트(3)를 1 블럭에 9개(3×3) 배치한 (b), 정보 도트(3)를 1 블럭에 12개(3×4) 배치한 (c), 또는 정보 도트(3)를 1 블럭에 36개 배치한 (d)가 있다.
도 8~도 9는, 도트 패턴과 코드치와 식별자의 관계를 나타낸 설명도이다.
 도트 패턴은, 4×4개의 블럭 영역으로 구성된 도트 패턴으로서, 이 블럭 내에서 C1-0~C31 -30로 구획되어 있다. 각 영역의 도트 코드 포맷을 나타낸 것이 도 9이다.
도 9(a)는, 도트 패턴을 코드치만으로 구성했을 경우로서, C0~C27에는 도 8에서 나타낸 각각의 영역 도트 패턴의 도트마다 코드치가 등록된다. 그리고, C28~C30에는 패리티(parity)가 등록되도록 되어 있다.
또한, 도 9(b)는, 코드치와 함께 XY 좌표가 등록되도록 되어 있다. 즉, 도 8에 있어서, C0~C7에는 X 좌표, C8~C15에는 Y 좌표, C16~C27에는 코드치가 각각 등록되도록 되어 있다.
이와 같이, 본 실시 형태에서는, 도트 패턴 내에 코드치와 함께 XY 좌표를 등록해 둘 수 있다.
또한, 도 9(c)는, XY 좌표와 함께 좌표 인덱스(index)를 등록한 포맷이다. 좌표 인덱스란, 매체인 종이의 페이지 번호 등을 등록하는 영역이고, 도트 패턴으로서 XY 좌표가 등록된 매체 자체를 식별하는 식별자나 페이지 번호를 등록할 수 있다.
이와 같이, 본 발명의 도트 패턴은, 코드치만을 등록하는 경우, 코드치와 XY 좌표를 등록하는 경우, 좌표 인덱스와 함께 XY 좌표를 등록하는 경우와 같이, 유연성이 풍부한 포맷이 가능하다.
<도트 패턴의 설명 GRID2>
다음에 GRID2의 도트 패턴의 기본 원리에 대하여 도 10~14를 사용하여 설명한다. GRID2는 차분법을 사용한 도트의 배치(配置) 알고리즘이다.
먼저, 도 10에 나타내는 바와 같이, XY 방향으로 소정 간격 마다 격자선(y1~y7, x1~x5)을 가정한다. 이 격자선의 교점을 격자점이라고 부르기로 한다. 그리고, 본 실시 형태에서는 이 4개의 격자점으로 둘러싸인 최소 블럭(1 그리드)으로서 XY 방향으로 4 블럭(4 그리드)씩, 즉 4×4=16 블럭(16 그리드)을 하나의 정보 블럭으로 한다. 한편, 이 정보 블럭의 단위를 16 블럭으로 한 것은 어디까지나 일례로서, 임의의 블럭수로 정보 블럭을 구성할 수 있음은 말할 나위도 없다.
그리고 이 정보 블럭의 직사각형 영역을 구성하는 4개의 모서리 점을 코너 도트(x1y1, x1y5, x5y1, x5y5)로 한다(도면 중, 원형으로 둘러싼 도트). 이 4개의 코너 도트는 격자점과 일치시킨다.
이와 같이, 격자점과 일치하는 4개의 코너 도트를 발견함으로써, 정보 블럭을 인식할 수 있도록 되어 있다. 다만, 이 코너 도트만이라면 정보 블럭은 인식할 수 있어도, 그 방향을 알지 못한다. 예를 들면 정보 블럭의 방향을 인식할 수 없으면 동일한 정보 블럭이라도 ±90°또는 180°회전시킨 것을 스캔하면 전혀 별도의 정보가 되기 때문이다.
그래서, 정보 블럭의 직사각형 영역의 내부 또는 인접한 직사각형 영역의 격자점에 벡터 도트(키 도트)을 배치하고 있다. 동 도에서는, 삼각형으로 둘러싸인 도트(x0y3)가 그에 해당하며, 정보 블럭의 상변(上邊)을 구성하는 격자선의 중점의 연직 상방의 첫 번째 격자점에 키 도트(벡터 도트)가 배치되어 있다. 이와 마찬가지로, 해당 정보 블럭 내에 있어서 하변(下邊)을 구성하는 격자선의 중점의 연직 상의 첫 번째 격자점(x4y3)에 아래 정보 블럭 키 도트(key dot)가 배치되어 있다.
한편, 본 실시 형태에서는, 격자 간(그리드 간) 거리를 0.25mm로 했다. 따라서, 정보 블럭의 한 변은 0.25mm×4그리드=1mm가 된다. 그리고 이 면적은 1mm×1mm=1mm2가 된다. 이 범위 내에 14비트의 정보가 격납 가능하고, 이 중 2비트를 컨트롤 데이터로서 사용한 경우, 12비트 분량의 정보를 격납할 수 있게 된다. 한편, 격자 간(그리드 간) 거리를 0.25mm로 한 것은 어디까지나 일례로서, 예를 들면 0.25~0.5mm 초과한 범위에서 자유로이 변경해도 된다.
GRID2에 있어서, 정보 도트는 하나 걸러 격자점으로부터 x 방향, y 방향으로 어긋난 위치에 배치되어 있다. 정보 도트의 직경은 바람직하게는 0.03~0.05mm 초과로서, 격자점으로부터의 어긋난 양은 격자간 거리의 15~25% 정도로 하는 것이 바람직하다. 이 어긋난 양도 일례이기 때문에 반드시 이 범위가 아니라도 무방하지만, 일반적으로 25%보다 큰 어긋난 양으로 한 경우에는 눈으로 직접 확인했을 때 도트 패턴이 무늬가 되어 나타나기 쉬운 경향이 있다.
즉 격자점으로부터의 어긋난 쪽이, 상하(y 방향)의 어긋남과 좌우(x 방향)의 어긋남이 교대로 존재하기 때문에, 도트의 배치 분포의 편재(偏在)가 없어지고, 지면 상에 모아레(moir)나 무늬로 보이는 것이 없어져, 인쇄 지면의 미관을 유지할 수 있다.
이와 같은 배치 원칙을 채용함으로써, 정보 도트는 반드시 하나 걸러 y 방향(도 11 참조)인 격자선 상에 배치되게 된다. 이는, 도트 패턴을 독취할 때에는, 하나 걸러 y 방향 또는 x 방향으로 직선 형상으로 배치된 격자선을 발견하면 되고, 인식할 때의 정보 처리 장치에 있어서 계산 알고리즘을 단순하게 고속화할 수 있는 장점이 있다.
또한, 비록 도트 패턴이 지면의 만곡 등에 의해 변형하고 있는 경우, 격자선은 정확한 직선이 되지 않는 경우가 있는데, 직선과 근사(近似)한 완만한 곡선이어서, 격자선의 발견은 비교적 용이하기 때문에, 지면의 변형이나 독취 광학계의 어긋남이나 일그러짐에 강한 알고리즘이라고 할 수 있다.
정보 도트의 의미에 대하여 설명한 것이 도 12이다. 동 도에 있어서 +는 격자점, ●은 도트(정보 도트)를 나타내고 있다. 격자점에 대하여 -y 방향에 정보 도트를 배치한 경우를 0, +y 방향에 정보 도트를 배치한 경우를 1로 한다.
다음에 도 13을 사용하여 구체적인 정보 도트의 배치 상태와 독취 알고리즘에 대하여 설명한다.
동 도에서, 동그라미가 붙은 숫자인 1의 정보 도트[이하, 정보 도트(1)로 함]는 격자점(x2y1)보다 +방향으로 어긋나 있기 때문에 “1”을 의미하고 있다. 또한, 정보 도트(2)(도에서는 동그라미가 붙은 수치)는 격자점(x3y1)보다 +y 방향으로 어긋나 있기 때문에 “1”을 의미하고 있다. 또한 정보 도트(3)[도면에서는 동그라미가 붙은 숫자)는 격자점(x4y1)보다 -x 방향으로 어긋나 있기 때문에 “0”, 정보 도트(4)(도면에서는 동그라미가 붙은 숫자)는 “0”, 정보 도트(5)(도면에서는 동그라미가 붙은 숫자)는 “0”을 의미하고 있다.
도 13에 나타낸 도트 패턴의 경우, 정보 도트(1)~(17)는 이하의 값이 된다.
(1)=1
(2)=1
(3)=0
(4)=0
(5)=0
(6)=1
(7)=0
(8)=1
(9)=0
(10)=1
(11)=1
(12)=0
(13)=0
(14)=0
(15)=0
(16)=1
(17)=1
한편, 본 실시 형태에서는 상기 정보 비트에 대하여, 이하에 설명하는 차분법에 의한 정보 취득 알고리즘을 사용하여 값을 산출하도록 했는데, 이 정보 도트를 그대로 정보 비트로서 출력해도 된다. 또한, 이 정보 비트에 대하여 후술하는 시큐어리티 테이블의 값을 연산 처리하여 진치(眞値)를 산출하도록 해도 된다.
다음에, 도 13을 사용하여 본 실시 형태의 도트 패턴을 토대로 차분법을 적용한 정보 취득 방법을 설명한다.
한편, 본 실시 형태의 설명에 있어서, ()로 둘러싸인 숫자는 도면에 있어서 원형으로 둘러싸인 숫자(동그라미가 붙은 숫자), []로 둘러싸인 숫자는 도면에 있어서 4각형 모양으로 둘러싸인 숫자를 의미하고 있다.
본 실시 형태에 있어서, 정보 블럭 내의 14비트 각각의 값은 인접한 정보 도트의 차분에 의해 표현되어 있다. 예를 들면, 제1 비트는 정보 도트(1)에 대하여 x 방향으로 +1 격자 만큼의 위치에 있는 정보 도트(5)와의 차분에 의해 구할 수 있다. 즉, [1]=(5)-(1)이 된다. 여기에서 정보 도트 (5)는 “0”을, 정보 도트 (1)은 “1”을 의미하고 있기 때문에 제1 비트 [1]은 0-1, 즉“1”을 의미하고 있다. 마찬가지로 제2 비트 [2]는 [2]=(6)-(2), 제3 비트 [3]=(7)-(3)으로 나타낸다.
한편, 아래와 같은 차분식에 있어서, 값은 절대치를 취하는 것으로 한다.
[1]=(5)-(1)=0-1=1
[2]=(6)-(2)=1-1=0
[3]=(7)-(3)=0-0=0
다음에, 제4 비트 [4]에 있어서는, 벡터 도트 바로 밑 위치에 있는 정보 도트(8)과 정보 도트(5)의 차분으로 구한다. 따라서, 제4 비트 [4]~제6 비트 [6]은 +x 방향으로 1 격자, +y 방향으로 1 격자의 위치에 있는 정보 도트의 값과의 차분을 취한다.
이와 같이 하면, 제4 비트 [4]~제6 비트 [6]은 이하의 식으로 구할 수 있다.
[4]=(8)-(5)=1-0=1
[5]=(9)-(6)=0-1=1
[6]=(10)-(7)=1-0=1
다음에, 제7 비트 [7]~제9 비트[9]에 대해서는, +x 방향으로 1 격자, -y 방향으로 1 격자의 위치에 있는 정보 비트와의 값의 차분을 취한다.
이와 같이 하면, 제7 비트 [7]~제9 비트 [9]는 이하의 식으로 구할 수 있다.
[7]=(12)-(8)=0-1=1
[8]=(13)-(9)=0-0=0
[9]=(14)-(10)=0-1=1
다음에, 제10 비트 [10]~제12 비트[12]에 대해서는, +x 방향으로 1 격자의 위치에 있는 정보 도트의 차분을 취하여 이하와 같이 된다.
[10]=(15)-(12)=0-0=0
[11]=(16)-(13)=1-0=1
[12]=(17)-(14)=1-0=1
마지막으로, 제13 비트 [13]와 제14 비트 [14]는, 정보 도트(8)에 대하여 x 방향으로 각각+1, -1 격자의 위치에 있는 정보 도트와의 차분을 취하여 이하와 같이 구한다.
[13]=(8)-(4)=1-0=1
[14]=(11)-(8)=1-1=0
한편, 제1 비트 [1]~제14 비트 [14]를 그대로 진치(眞値)로서 독취하여 데이터로서 채용해도 되는데, 시큐어리티를 확보하기 위하여, 해당 14 비트에 대응하는 시큐어리티 테이블을 설치하고, 각 비트에 대응하는 키 파라미터(key parameter)를 정의해 두고, 독취 데이터에 대하여 키 파라미터를 가산, 승산(乘算) 등을 함으로써 진치를 얻도록 해도 된다.
이 경우, 진치 T는 Tn=[n]+Kn(n:1~14, Tn:진치, [n]:독취값, Kn:키 파라미터)으로 구할 수 있다. 이와 같은 키 파라미터를 격납한 시큐어리티 테이블은, 광학 독취 장치 내의 ROM 내에 등록해 둘 수 있다.
예를 들면, 시큐어리티 테이블로서, 이하와 같은 키 파라미터를 설정했을 경우,
K1=0
K2=0
K3=1
K4=0
K5=1
K6=1
K7=0
K8=1
K9=1
K10=0
K11=0
K12=0
K13=1
K14=1
진치 T1~T14는, 각각 이하와 같이 구할 수 있다.
T1=[1]+K1=1+0=1
T2=[2]+K2=0+0=0
T3=[3]+K3=0+1=1
T4=[4]+K4=1+0=1
T5=[5]+K5=1+1=0
T6=[6]+K6=1+1=0
T7=[7]+K7=1+0=1
T8=[8]+K8=0+1=1
T9=[9]+K9=1+1=0
T10=[10]+K10=0+0=0
T11=[11]+K11=1+0=1
T12=[12]+K12=1+0=1
T13=[13]+K13=1+1=0
T14=[14]+K14=0+1=1
이상에 설명한 정보 비트와, 시큐어리티 테이블과 진치와의 대응을 도 14에 나타낸다.
한편, 상기한 바에서는 정보 도트로부터 정보 비트를 얻어, 시큐어리티 테이블을 참조하여 진치를 구하는 경우를 설명했는데, 이것과는 반대로, 진치로부터 도트 패턴을 생성하는 경우에는, 제n 비트의 값 [n]은, [n]=Tn-Kn로 구할 수 있다.
여기에 일례로서 T1=1, T2=0, T3=1로 했을 경우, 제1 비트 [1]~제3 비트 [3]은, 이하의 식으로 구해진다.
[1]=1-0=1
[2]=0-0=0
[3]=1-1=0
그리고, 제1 비트 [1]~제3 비트 [3]은, 이하의 차분식에 의해 나타내진다.
[1]=(5)-(1)
[2]=(6)-(2)
[3]=(7)-(3)
여기에서, (1)=1, (2)=1, (3)=0이라는 초기치를 부여하면, 이하와 같이 도트(5)~(7)을 구할 수 있다.
(5)=(1)+[1]=1+1=0
(6)=(2)+[2]=1+0=1
(7)=(3)+[3]=0+0=0
이하의 설명은 생략하지만, 마찬가지로 도트(8)~(14)의 값도 구할 수 있고, 그 값을 토대로 도트를 배치하면 된다.
한편, 도트(1)~(3)의 초기치는 임의의 난수(0 또는 1)이다.
즉, 할당된 초기 도트(1)~(3)에 대하여 정보 비트 [1]~[3]의 값을 가산함으로써, 다음의 y 방향 격자선에 배치되는 도트(5)~(7)의 값을 구할 수 있다. 마찬가지로, 도트(5)~(7)의 값에 정보 비트 [4]~[6]의 값을 가산함으로써, 도트(8)~(10)의 값을 구할 수 있다. 또한, 이들에 정보 비트 [7]~[9]의 값을 가산함으로써 도트(12)~(14)의 값을 구할 수 있다. 또한, 이에 정보 비트[10]~[12]의 값을 가산하면 도트(15)~(17)의 값을 구할 수 있다.
한편, 도트(4) 및 (11)에 대해서는 상기에서 산출된 도트(8)를 토대로 정보 비트 [13]을 감산, 정보 비트 [14]를 가산함으로써 각각 구할 수 있다.
이와 같이, 본 실시 형태에서는, 격자선 yn 상의 도트 배치를 격자선 y(n-1) 상의 도트 배치를 토대로 결정하고, 그것을 순차적으로 반복함으로써 전체의 정보 도트의 배치가 결정된다.
<페이퍼 키보드>
도 15~도 17은, 본 발명의 실시 형태인 페이퍼 키보드에 대하여 설명한 도면이다.
도 15는, 매체로서의 페이퍼 키보드의 일면(매체면) 상에 인쇄된 도트 패턴을 스캐너(SCN)가 독취함으로써, 퍼스널 컴퓨터의 여러 가지의 입력ㆍ오퍼레이션을 수행하는, 페이퍼 키보드를 나타내는 설명도이다. 이 페이퍼 키보드는 한쪽의 장변측이 철해진 책자 모양으로 되어 있고, 그 책자의 각 페이지면에 키보드(키톱)의 도안이 인쇄되어 있다.
구체적으로는, 도 16에 나타내는 바와 같이, 퍼스널 컴퓨터의 키톱을 본떠서, 히라가나, 또는 영문자인 1문자( 「아(あ)」, 「이(い)」, 「A」, 「B」 등) 또는 복수 문자로 이루어지는 문구(「보내기」, 「예」 등)이 인쇄된 복수의 4각 화상 영역이 설치되어 있다.
이 각각의 4각형 모양의 화상 영역에는, 각각의 문자(1문자의 4각 화상 영역인 경우)에 대응하는 인터럽트 키의 코드치가 도트 패턴으로서 등록되어 있고, 이 인터럽트 키의 코드치는, 실제의 하드웨어 키보드의 각각의 문자의 키톱에 정의된 코드치와 일치하도록 되어 있다.
즉, 「A」의 영문자가 인쇄된 4각 화상 영역의 도트 패턴을 스캐너(SCN)가 독취한 경우, 하드웨어 키보드의 「A」의 키가 눌렸을 때에 발생하는 인터럽트 키의 코드치가 퍼스널 컴퓨터(정보 처리 장치)에 입력되도록 되어 있다.
한편, 하드웨어 키보드에는 없는 기능으로서, 인사장 등의 문구 「처음 뵙겠습니다」, 「오랜만입니다」, 「고맙습니다」 등이 4각 화상 영역으로서 인쇄되어 있고, 이들 영역에는 각각의 문언에 대응한 문자열의 코드치 열(列)이 도트 패턴으로서 인쇄되어 있다. 한편, 문자열을 라인을 그대로 키톱에 할당된 코드치의 도트 패턴으로서 인쇄하여 두는 경우 이외에는, 소정 자리수의 입력 명령 코드치가 도트 패턴으로서 인쇄되어 있고, 후술하는 도 24에서 설명하는 인덱스 테이블에 대응하는 문자 입력 정보를 미리 보지(保持)하도록 해도 된다.
한편, 도 16에서는, 이들 문언 이외에, 「홈 페이지 보기」, 「E메일 보내기」 등의 문구가 인쇄된 4각 화상 영역이 인쇄되어 있는데, 전자(前者)는 브라우저 프로그램, 후자는 메일러 프로그램의 기동 코맨드(command)의 코드치가 도트 패턴으로서 인쇄되어 있다.
도 16에서는, 키보드의 배치를 오십음(五十音) 순서, 알파벳 순서로 배치했는데, 이에 국한하지 않고, 실제의 JIS 배열 키보드와 동일한 배열로 해도 된다.
또한, 도 16에 나타낸 페이퍼 키보드 상에는, 각각의 4각 화상 영역에 있어서, 도트 패턴으로서 상기에서 설명한 코드치 이외에, 전술한 좌표치도 등록되어 있다.
여기에서, 해당 페이퍼 키보드면(매체면)의 도트 패턴을 촬상한 때에, 코드치를 사용하여 키보드 입력을 대체하는 경우 이외에, 좌표치를 사용하여 마우스나 타블렛 입력을 대체(代替)로 하는 것도 가능하다. 이와 같이, 코드치를 사용할지, 좌표치를 사용할지에 대해서는, 페이퍼 키보드 상에 「코드ㆍ좌표 전환」의 문자가 표시된 4각 화상 영역을 설치하고, 이 영역에 코드치를 채용할지 좌표치를 채용할지를 전환할 코드치를 도트 패턴으로서 인쇄해 두고, 이 4각 화상 영역을 스캔할 때마다 코드치와 좌표치의 입력이 전환되도록 해도 된다.
또한, 4각 화상 영역에 인쇄된 도트 패턴화된 코드치에 대해서도, 그 독취 순서에 의해, 코드치와는 다른 의미를 가지는 코드치로서 사용할 수 있다.
예를 들면, 「A」의 4각 화상 영역의 도트 패턴이 소정 시간 내에 연속하여 읽어들인 경우(「A」의 4각 화상 영역 상에서 스캐너를 태핑), 즉 스캐너의 선단을 연속적으로 매체면에 접촉시키거나 이반시키도록 상하동(上下動)을 반복한 경우나, 스캐너를 스크래치, 즉, 키톱 화상 상에서 스캐너를 전후 또는 좌우 방향으로 트래이스(trace)시키는 경우와 같이, 좌표치의 독취 화상이 변화한 경우에는, 하드웨어 키보드의 쉬프트 키가 눌린 것과 동일한 상태로 해도 된다.
구체적으로는, 소문자의 「a」를 스캐너(SCN)로 촬영하고, 상기 「A」에 대응하는 인터럽트 키의 코드치가 퍼스널 컴퓨터에 입력되고, 그 후, 태핑 동작을 수행한 경우에, 퍼스널 컴퓨터의 중앙 처리 장치(CPU)는, 프로그램을 토대로, 스캐너의 촬영 화상의 변화를 검출하고, 소문자인 「a」에 대응하는 인터럽트 코드치를 대문자인 「A」에 대응하는 인터럽트 코드치로 변환하여 워드 프로세서 등의 응용 프로그램에 전달한다.
또한, 태핑 동작의 경우, 최초의 1회만 도트 패턴의 독취를 하고, 후에는 스캐너(SCN)의 CMOS 센서가 인식하는 빛의 강약만을 검출하여 태핑 동작이 수행되고 있음을 검출해도 된다.
또한, 이들 태핑 동작 이외에, 해당 4각 화상 영역 상에서 스캐너를 일정한 시간 이상 정지시켜 도트 패턴의 독취를 수행한 경우에는 대문자인 「A」, 일정한 시간 이하의 경우에는 소문자인 「a」로 판정하고 각각의 코드치를 응용 프로그램으로 전달해도 된다.
또한, 상기 4각 화상 영역 상에서 동일한 코드치를 독취하면서 좌표치가 변화한 경우(스캐너의 스크래치 동작), 촬상 화상 범위 내의 빛의 강약 분포의 변화로 스캐너의 기울기를 검출한 경우 등에 대문자와 소문자의 입력을 전환하여 각각의 코드치를 응용 프로그램에 전달하도록 해도 된다.
도 31(b)은 그리드 태핑 동작을 설명하는 도면이다.
즉, 스캐너(SCN)의 그리드 태핑 동작이란, 스캐너를 지도에 수직으로 세우고, 상하에 스캐너를 움직여 매체면의 아이콘(여기에서는 영문자 「A」의 키톱 화상)을 두드리는 동작을 수행하는 것이다.
도 31(a) 및 (c)는 스캐너(SCN)의 그리드 스크래치 동작을 나타내는 설명도이다.
그리드 스크래치 동작이란, 지도 상에서, 긁듯이 스캐너를 복수회 움직이는 동작을 말한다. 유저(오퍼레이터)는, 매체면의 아이콘(여기에서는 영문자 「A」의 키톱 화상) 상에서 그리드 스크래치 동작을 한다. 이에 의해, 응용 프로그램에 대한 입력 문자가 대문자인 「A」와 소문자인 「a」의 인터럽트 코드로 상호 전환되도록 되어 있다.
도 32는 스캐너(SCN)의 그리드 그라인드 동작을 나타내는 설명도이다.
그리드 그라인드 동작이란, 매체면 상의 동일한 아이콘(여기에서는 영문자인 「A」의 키톱 화상)을 촬상하면서, 스캐너의 후단(도면에서는 상방)을 회전시키는 동작이다. 지면에 대하여 우방향(시계 방향)에 그리드 그라인드하는 것을 「그리드 그라인드 라이트」, 좌방향(반시계방향)으로 그리드 그라인드 하는 것을 「그리드 그라인드 레프트」라고 불러도 된다.
도 78에 나타낸 바와 같이, 스캐너의 촬상 화상의 명암을 인식하고, 그 명암 영역이 촬상 중심에 대하여 변화한 때에, 중앙 처리 장치는, 스캐너가 도 32와 같이 동작된 것을 인식할 수 있다. 이러한 스캐너의 오퍼레이션에 의해, 키보드의 쉬프트, 컨트롤, 입력 문자의 변환 등을 수행해도 된다.
또한, 스캐너의 촬상 화상의 명암이 변화하는 동작의 다른 일례로서 그리드 펌프 동작(도시는 생략)을 들 수 있다. 그리드 펌프 동작이란, 스캐너를 전방 또는 후방으로 반복하여 넘어뜨리는 조작이다.
도 78은, 스캐너의 기울기와 각도의 관계를 설명한 도면이다.
키톱 화상 상의 도트 패턴은, 지면의 종방향과 같은 방향으로 중첩 인쇄되어 있다. (a)에 나타내는 바와 같이, 도트 패턴의 방향과 스캐너 내의 카메라의 방향이 이루는 각도를 α로 한다. 또한, (b)에 나타내는 바와 같이, 유저가 스캐너를 기울였을 때, 스캐너의 기울기와 카메라의 방향이 이루는 각도를 β로 한다. 이 경우에, 도트 패턴의 방향과 스캐너의 기울기가 이루는 각도 γ가, 키톱 화상에 대하여 스캐너를 기울인 각도가 된다. 즉, 각도 γ는,
γ=α+β
가 된다.
도 79부터 도 83은, 상술한 스캐너의 동작에 있어서, 스캐너의 촬영 화상의 명암 및 경사 방향의 산출 방법에 대하여 설명한 도면이다.
스캐너(촬상 수단)의 매체면(키톱 화상)의 연직 방향에 대한 기울기에 대해서는, 도 78(b)에 나타내는 바와 같이, 해당 스캐너의 촬상 시야에 있어서 명도의 차로 인식할 수 있다.
스캐너의 경사 방향이란, 도 80(a)에 나타내는 바와 같이, 스캐너와 지도가 이루는 각도를 말한다. 유저가 어느 방향으로 스캐너를 기울였는지는, 이하의 방법에 의해 구할 수 있다.
먼저, 캘리브레이션(calibration)을 수행한다. 스캐너를 지도에 대하여 수직으로 세우고, 그 경우, 도 79에 나타낸, 1~48의 셀의 밝기를 측정한다. 도 79는, 스캐너 주변의 영역이다. 이 때의 밝기를 BL0(i)로 한다. i는, 측정한 셀의 값으로서, 예를 들면, 24번 셀의 밝기는, BL0(24)라고 표시한다.
스캐너 내부에는, LED가 2개 설치되어 있다. 그 때문에, 스캐너를 지도에 대하여 수직으로 세우더라도, LED 부근의 셀과 LED로부터 떨어진 위치에 있는 셀과는, 밝기가 다르다. 그 때문에, 캘리브레이션을 수행한다.
다음에, 스캐너를 기울인 경우의 밝기를 측정한다. 도 80(a)에 나타내는 바와 같이, 스캐너를 일정한 방향으로 기울였을 경우, 셀(1)로부터 셀(48)까지의 밝기를 측정하고, 셀(i)에 있어서 밝기를 BL(i)로 한다. 그리고, 각 셀에 있어서 BL(i)과 BL0(i)의 차분을 계산한다. 그리고,
Figure 112010044525296-pat00001
를 계산한다.
스캐너를 기울인 경우, 기울인 방향과 반대 방향이 어두워진다. 스캐너를 기울인 방향으로 LED도 기울기 때문에, 기울인 방향과 반대 방향에서는, LED와의 거리가 멀어지기 때문이다. 따라서, 도 80(b)에 나타내는 바와 같이, 차분이 최대치가 되는 셀과 반대 방향이, 스캐너를 기울인 위치가 된다.
이에 의해, 스캐너를 기울인 방향이 정해진다.
다음에, 도 79~도 80을 사용하여, 캘리브레이션을 수행함으로써, 경사 방향 및 각도를 결정하는 다른 방법에 대하여 설명한다.
최초에 캘리브레이션을 수행한다. 먼저, 스캐너를 지도에 대하여 수직으로 세워, 도 79에 나타낸 셀(1)부터 셀(48)의 밝기를 측정하고, 셀(i)에 있어서 밝기를 BL0(i)로 한다.
다음에, 스캐너를 45°기울이고, 도 80에 나타내는 바와 같이 펜 끝을 축으로 하여 일주(一周)시킨다. 이 경우에, 스캐너가 셀(i)의 위치에 온 경우의 밝기를 BL45(i)로 한다. 셀(1)부터 셀(48)까지의 BL45(i)를 구한다. 이상의 조작에 의해 캘리브레이션이 종료한다.
다음에, 유저가 스캐너를 기울인 경우, 셀(1)로부터 셀(48)까지의 밝기를 측정하고, 셀(i)에 있어서 밝기를 BL(i), i=1, n(=48)로 한다. 그리고,
Figure 112010044525296-pat00002
, i=1, n=1, n(=48)
을 구한다.
BL0(i)-BL45(i)는 일정하기 때문에, BL0(i)-BL(i)의 값이 가장 클 때, 즉, BL(i)가 최소가 될 때,
Figure 112010044525296-pat00003
, i=1, n=1, n(=48)
은 최대치가 된다. 상술한 바와 같이, 스캐너를 기울인 방향과 반대의 방향이 가장 어두워지기 때문에, 이 경우의 셀(i)의 반대 방향이, 스캐너를 기울인 방향이 된다.
또한, 스캐너를 기울인 각도는,
Figure 112010044525296-pat00004
, i=1, n=1, n(=48)
이 된다.
상술한 식은, 밝기에 대하여 각도 θ가 선형이 되는 것을 상정하고 있으나, 엄밀하게는, 삼각함수 등으로서 이하와 같이 근사하면 더욱 정밀도를 높일 수 있다. 이와 같이 하면, 각도는
Figure 112010044525296-pat00005
가 된다.
도 82는, 푸리에 함수를 사용하여, 경사 방향을 측정하는 방법이다.
도 81에 나타내는 바와 같이, 1에서 8의 8개 셀을 측정점으로 하고, 각 셀의 밝기를 측정한다.
싸인 함수는,
Figure 112010044525296-pat00006
로 나타난다. 즉, 미지수는 2개가 된다.
따라서, n개의 측정점을 가진 경우에는, 이산(離散)한 포인트가 n개가 되기 때문에, n/2개의 싸인 함수의 합을 구하고, 이것이 해석 중심으로부터 반경에 있어서 밝기 BL(i)이 된다. 즉,
Figure 112010044525296-pat00007
단, n=2m(n은 측정점의 수)
으로 나타난다.
본 실시예에 있어서는, 측정점이 8개이므로, n=8이다. 따라서, 4개의 싸인 함수의 식을 합성함으로써, 푸리에 급수의α1~α4 및 β1~β4를 구한다. 그리고, 해석 중심으로부터 반경에 있어서 밝기 BL(i)를, 4개의 싸인 함수의 합으로 나타낸다.
상기 식으로부터, BL(i)가 최소치가 되는 각도 θ가 가장 어두운 위치이며, 그 180°반대의 방향이, 스캐너를 기울인 방향이 된다.
도 83은, n차 방정식을 이용하여, 경사 방향을 측정하는 방법이다.
도 83의 그래프는, n차 함수를 나타낸 것이다. n차 함수를 사용한 경우, 해석 중심으로부터 반경에 있어서 밝기 BL(i)은,
Figure 112010044525296-pat00008
단, j=n/2, n=2m
으로 나타난다.
도 81에 나타내는 바와 같이, 본 실시예에 있어서는, 측정점이 8개이기 때문에, 8개의 해답을 구할 필요가 있다. 1개의 방정식에는,αj, βj인 2개의 미지수가 포함되어 있기 때문에, 4개의 방정식을 풀어,α1~α4 및 β1~β4를 구한다.
이에 의해, BL(i)가 최소치가 되는 각도 θ를 구한다. 각도 θ가 되는 위치가 가장 어두운 위치이며, 그 180°반대의 방향이, 스캐너를 기울인 방향이 된다.
한편, 도 82 및 도 83에 의한 측정 방법에서는, 키톱 화상의 연직선에 대한 스캐너의 기울기까지는 측정할 수 없다. 그래서, 도 79~도 80에 나타낸 측정 방법과 병용함으로써, 구체적으로 기울인 각도를 측정할 수 있다.
또한, 상술한 도 78에서 설명한 바와 같이, 스캐너를 사용하여 매체면 상의 도트 패턴을 독취할 때, 스캐너가 매체면에 대하여 기울어진 것을 스캐너의 촬상 화상의 명암 차에 의해 인식함으로써, 매체면에 대한 스캐너의 기울기 방향에 따라서 화면 상의 GUI의 오퍼레이션을 수행하는 것도 가능하다.
도 78에 나타낸 바와 같이, 중앙 처리 장치(CPU)가 스캐너의 촬상 화상의 명암을 인식하고, 그 명암 영역이 촬상 중심에 대하여 반대측으로 이동했을 때, 스캐너가 매체면에 대하여 기울어졌다고 판정할 수 있다.
한편, 촬상 화상의 명암이 상기 촬상 중심에 대하여 회전하도록 변화했을 때, 중앙 처리 장치(CPU)는, 스캐너가 그리드 그라인드 동작이 이루어진 것을 판정한다(도 32 참조).
또한, 촬상 화상의 명암이 촬상 중심에 대하여 전방향 또는 후방향으로 반복하여 변화했을 때, 중앙 처리 장치는, 스캐너가 전방(前方) 또는 후방으로 반복적으로 쓰러지는 동작(그리드 펌프 동작)이 이루어진 것을 판정할 수 있다. 이와 같은 스캐너의 오퍼레이션 동작에 따라, 디스플레이 화면 상에 표시된 커서의 이동, 화면의 스크롤등 GUI의 오퍼레이션을 수행해도 된다.
화면 상의 GUI의 오퍼레이션은, 구체적으로는, 화면의 스크롤, 커서 이동, 화면 상의 아이콘 지정, 드래그&드롭 조작, 메뉴 선택, 문자 등의 입력 위치 지시 동작 등의 마우스 조작의 오퍼레이션 등이다.
<페이퍼 컨트롤러>
도 18~도 30은, 본 발명의 일 실시 형태인 페이퍼 컨트롤러에 대하여 설명한 도면이다.
페이퍼 컨트롤러의 일면(매체면)에는, 도 18에 나타내는 바와 같이, 인터넷에 대한 액세스를 수행하는 브라우저 프로그램[마이크로소프트사의 인터넷 익스플로러(상표명) 등]에 대한 지시를 하는 명령이 종이 매체 등의 표면에 아이콘 영역으로서 인쇄되어 있다. 해당 페이퍼 컨트롤러 상에는, 동 도에 나타내는 바와 같이, 「유저(오퍼레이터) 등록」지시, 웹 열람 때의 커서의 이동 지시, URL의 복사/링크 지시, 디스플레이 장치 상에 표시되는, 등록ㆍ편집 패널의 조작 지시, 등록ㆍ편집 패널의 개폐 지시, 등록ㆍ편집 패널의 URL 및 그 링크의 삭제 지시를 의미하는 아이콘 영역이 인쇄되어 있다. 그리고, 이들의 아이콘 영역에는 각각의 지시 코드를 의미하는 도트 패턴이 인쇄되어 있다. 예를 들면, 웹 열람의 스크롤 아이콘 영역인 「위로 △」의 영역에는, 브라우저 프로그램에 표시되는 화면을 상방으로 이동시키는 인터럽트 코드가 등록되어 있고, 「아래로 ▽」의 영역에는, 브라우저 프로그램에 표시되는 화면을 하방으로 이동시키는 인터럽트 코드가 등록되어 있다.
도 19는, 인터넷의 URL를 북마크로서 등록하기 위한 페이퍼 컨트롤러를 나타내고 있다. 영문자인 G가 디자인된 4각형 영역(아이콘 영역)이 9행×11열 만큼 설치되고, 이들 99개의 아이콘 영역에 각각 다른 코드치의 도트 패턴이 등록되어 있다. 또한, 우측에는 9행×2열로 카테고리를 나타내는 아이콘 영역이 설치되어 있다.
도 20은, 도 18 및 도 19에서 설명한 페이퍼 컨트롤러의 일면(매체면) 상에 인쇄된 도트 패턴을 스캐너(SCN)가 독취함으로써, 퍼스널 컴퓨터의 여러 가지 오퍼레이션을 수행하고 있는 상태를 나타내는 설명도이다.
페이퍼 컨트롤러 본체는, 시트 형상의 종이 또는 합성수지로 형성되어 있고, 그 상면에는, 도트 패턴을 포함하는 인쇄면이 구성되어 있으며, 또한 그 인쇄면 상에는 투명인 보호 시트가 적층된 래미네이트(laminate) 구조로 되어 있다. 한편, 이러한 보호 시트는 반드시 필수적인 것은 아니고, 인쇄면이 노출된 것이어도 됨은 물론이다.
또한, 도 21은, 도 19에서 설명한 페이퍼 컨트롤러의 각 아이콘 영역을 박리 가능한 씰 구조로 하여, 시스템 수첩 등에 붙여, 음성이나 음악 데이터 등과의 관련짓기를 수행하는 것이다.
도 24(a)는, 퍼스널 컴퓨터의 하드 디스크 장치(HD) 내에 설치된 로컬 인덱스 테이블을 나타내고 있다.
로컬 인덱스 테이블에는 동 도(a)에 나타내는 바와 같이, 도트 코드가 의미하는 코드 번호와 명령이 대응되어 있다. 해당 인덱스 테이블의 내용은, 구체적으로는 태그(tag)에 등록된 도트 패턴의 ID를 독취했을 때에 실행되는 명령을 등록한 ID(회원용)에 관한 영역(제1 영역:도면에서는 「ID(회원용)」으로 한 영역)과, 페이퍼 컨트롤러의 도트 패턴을 독취하여 변환된 코드 번호와 액세스할 곳을 관련지은 영역(제2 영역:도면에서는 「페이퍼 컨트롤러」로 한 영역)과, 코드 번호와 컨텐츠(contents)의 등록할 곳을 관련지은 영역(제3 영역:도면에서는 「매체」로 한 영역)으로 나눌 수 있다.
예를 들면, 제1 영역을 사용하는 예로서, 태그의 도트 패턴 독취 결과에 있어서, 코드 번호 선두의 1자리수가 1인 경우에는, 중앙 처리 장치(CPU)는, 해석 프로그램을 토대로, 이 인덱스 테이블을 참조하여, 태그로부터의 정보임을 인식한다. 그리고, 이 경우에는 도트 코드 관리 서버에 대한 액세스를 수행하고 도트 코드 관리 서버의 인덱스 테이블[도 24의 (b)에 나타내는 관리 서버 테이블)에 액세스하도록 되어 있다.
제2 영역을 사용하는 예로서, 페이퍼 컨트롤러의 도트 패턴의 독취 결과에 있어서, 코드 번호가 00001~00004 이후인 경우에는, 각각에 대응된 파일에 액세스하도록 되어 있다.
예를 들면, 동 도에 나타내는 바와 같이, 액세스할 곳으로서는, 드라이브명과 기동 파일, 그리고 파라미터가 세트로 되어 등록되어 있다. 구체적으로는, 페이퍼 컨트롤러로부터 독취된 도트 패턴이, 코드 번호 00001인 경우, 전자 메일의 응용 프로그램이 이것에 대응되어 있고, 파라미터로서 신규인 메일 작성을 의미하는 코맨드가 설정되어 있다. 이에 의해 전자 메일의 프로그램이 기동하고, 전자 메일이 신규 작성될 수 있는 상태가 된다.
또한, 예를 들면 코드 번호 00002의 경우에는 무비 플레이어(movie player)의 기동이 지정되어 있고, 퍼스널 컴퓨터 내에 등록된 플레이어 소프트웨어가 기동하도록 되어 있다.
또한, 페이퍼 컨트롤러로부터 물리적인 키보드와 마찬가지로 문자열을 직접 입력할 수 있도록 되어 있고, 예를 들면 코드 번호 00003이 독취된 때에는, 특정한 어플리케이션에 있어서 영문자인 「A」, 또는 「B」가 입력되고, 이들 문자 코드가 어플리케이션에 전달되도록 되어 있다.
*또한, 제3 영역을 사용하는 예로서, 통신 판매 카탈로그(매체) 등에 인쇄된 도트 패턴을 읽어들이고, 코드 번호가 00100~인 경우, 그 코드 번호에 대응되도록 한 URL에 대한 액세스(Web 열람), 프로그램 실행, 무비 파일(movie file)의 기동(재생)이 이루어지게 되어 있다.
여기에서, 스캐너가 읽어들인 코드 번호로 변환하여, 해당 코드 번호가 인덱스 테이블에 존재하지 않는 경우에는, 중앙 처리 장치(CPU)는, 네트워크를 개재하여 관리 서버에 대한 액세스를 수행한다.
관리 서버에서는, 개인 정보를 관리하는 유저 데이터 베이스와 서버측의 인덱스 테이블[도 24(b) 참조]이 설치되어 있다. 도시를 생략한 서버측의 개인 정보 관리 테이블에는 태그로부터 독취한 코드 번호에 대응한 개인 정보가 등록되도록 되어 있는데, 전술한 선두 자리수에 1이 부여된 코드 번호에 대하여, 개인 정보가 등록되지 않은 경우에는, 관리 서버의 중앙 처리 장치(CPU)는, 프로그램에 따라서, 초기 등록 프로그램을 상기 퍼스널 컴퓨터에 대하여 다운로드시키도록 되어 있다.
이 초기 등록 프로그램에서는, 유저 자신의 개인 정보, 예를 들면 어드레스, 이름, 전화번호 등을 입력하도록 되어 있다. 이와 같이 입력된 개인 정보를 토대로, 관리 서버의 유저 데이터 베이스가 생성되도록 되어 있다.
즉, 관리 서버의 유저 데이터 베이스에 태그에 대응한 개인 정보를 등록해 둠으로써, 네트워크 액세스나, 결제 등의 인증 처리를 용이하게 할 수 있도록 되어 있다.
관리 서버의 관리 서버 테이블에도, 상기 도 24(a)에서 설명한 로컬 인덱스 테이블과 동일한 테이블이 생성되어 있다.
이 관리 서버 테이블은, 로컬 인덱스 테이블에 등록된 코드 번호를 보완하는 테이블로서, 스캐너에서 독취한 결과인 코드 번호가 로컬 인덱스 테이블에 존재하지 않는 경우에, 해당 관리 서버 테이블이 액세스된다.
예를 들면, 스캐너에서의 독취 결과가, 로컬 인덱스 테이블에 존재하지 않은 코드 번호 00200이었던 경우, 퍼스널 컴퓨터의 중앙 처리 장치(CPU)는, 프로그램에 따라서, 네트워크를 개재하여 관리 서버에 액세스하고, 관리 서버 테이블을 참조한다.
관리 서버 테이블에 있어서, 코드 번호 00200은, 소정 URL의 액세스(Web 열람)가 정의되어 있기 때문에, 해당 퍼스널 컴퓨터는 상기 URL에 대한 액세스(Web 열람)를 실행한다.
또한, 해당 코드 번호가 예를 들면 00201이고, 스트리밍 배신(配信)을 의미하고 있는 경우에는, 그 배신 서버에 대한 액세스를 수행하고, 스트리밍 데이터를 다운로드시키도록 되어 있다.
한편, 이 경우, 해당 스트리밍 데이터의 다운로드와 함께, 이 관리 서버 테이블의 내용도 상기 퍼스널 컴퓨터의 인덱스 테이블에 다운로드된다.
따라서, 그 후는, 퍼스널 컴퓨터가 스캐너로부터의 독취 결과가 코드 번호 00201이더라도, 관리 서버 테이블에 액세스하지 않고, 로컬 인덱스 테이블만으로 처리할 수 있게 된다.
도 25~도 28은, 페이퍼 컨트롤러의 다른 실시 형태에 대하여 설명한 도면이다.
이들 도면에 나타내는 페이퍼 컨트롤러는, 도 18~도 20에서 설명한 페이퍼 컨트롤러와 거의 동일한데, 소정의 아이콘 영역마다 가이드 뱅크가 설치되어 있는 점이 다르다.
가이드 뱅크는, 도 27에 나타내는 바와 같이, 페이퍼 컨트롤러 본체의 상층에, 플라스틱판이 더 설치되고, 해당 플라스틱판의 일부가 노출면 방향으로 돌출한 리브(rib) 모양의 뱅크 가이드(bank guide)로 되어 있다.
이 뱅크 가이드는, 위 시트면 상을 스캐너의 선단(도면에서는 하단)에서 슬라이드(시트면을 따라 병행 이동)시켰을 때, 해당 스캐너를 잡은 오퍼레이터가 슬라이드 방향에 대하여 약간 거북하게 느낄 정도의 높이인 것이 바람직하며, 의도적으로 넘어가서 슬라이드를 계속할 수도 있다.
이러한 뱅크 가이드를 설치함으로써, 뱅크 가이드와 페이퍼 컨트롤러 본체 상의 아이콘 영역의 위치 관계를 어느 정도 기억해 두면, 오퍼레이터는 직접 눈으로 확인하는 것에 의존하지 않고도 스캐너를 의도하는 아이콘 영역 상에 배치시키는 것이 가능하게 된다. 예를 들면, 도 25에서는, 4각 모양의 뱅크 가이드에 둘러싸인 영역에 최대 4개의 아이콘 영역(예를 들면 도 25의 좌란 중단에는 「URL」, 「링크」, 「모든 URL」, 「모든 링크」)을 설치하고 있는데, 스캐너를 각각 좌상, 우상, 좌하, 우하의 방향으로 이동할 수 없게 될 때까지(가이드 뱅크의 4모서리까지) 슬라이드시킴으로써, 유저(오퍼레이터)는 주위의 페이퍼 컨트롤러의 인쇄면을 주시하지 않더라도, 각각의 아이콘 영역 상에서 정확하게 스캐너를 정지시켜 각각의 코드치를 독취할 수 있다.
한편, 가이드(guide)부는, 카드 자체를 엠보싱(embossing) 가공 등으로 함으로써, 카드 자체에 돌기를 설치해도 된다. 또한, 가이드는, 도 28에 나타내는 바와 같이, 플라스틱의 별체로 구성하고, 카드만을 가이드에 대하여 교체할 수 있도록 해도 된다.
도 29 및 도 30은, 이 페이퍼 컨트롤러의 뱅크 가이드에 둘러싸인 영역에 도트 패턴과 함께 점자의 돌기를 설치한 것이다. 이와 같이 점자와 도트 패턴을 동일한 영역에 설치함으로써, 시각 장애가 있는 유저(오퍼레이터)가 스캐너를 사용할 때에도 정상적인 사람과 동일한 입력 효율을 유지할 수 있다.
특히, 도 30에서는, 매체(예를 들면 종이나 합성 수지판)의 소정의 4각 영역의 상방에 도트 패턴이 인쇄되고, 하방에 점자가 설치되어 있으며, 그 4각 영역이 벽부(뱅크)에 의해 둘러싸여 있기 때문에, 눈이 불편한 유저라도 스캐너의 선단이 뱅크를 넘어 다른 영역을 스캔하는 것을 감각적으로 파악할 수 있도록 되어 있다.
한편, 본 실시예에 있어서는, 도트 패턴이 인쇄되어 있는 영역과 점자가 인쇄되어 있는 영역을 따로 설치했는데, 본 발명은 이에 국한하지 않고, 도트 패턴과 점자를 동일한 영역에 중첩 인쇄하더라도 무방한 것은 물론이다.
<마우스 패드>
도 33~도 39는, 본 발명의 일 실시 형태인 마우스 패드에 대하여 설명한 도면이다.
도 33은, 매체로서의 마우스 패드의 일면(매체면) 상에 인쇄된 도트 패턴을 스캐너(SCN)가 독취함으로써, 퍼스널 컴퓨터의 여러 가지 오퍼레이션을 수행하는, 마우스 패드 시스템을 나타내는 설명도이다.
이 마우스 패드는, 전술한 페이퍼 컨트롤러, 페이퍼 키보드와 마찬가지로, 시트 형상의 종이 또는 합성 수지로 형성되어 있고, 그 상면에는, 도트 패턴을 포함하는 인쇄면이 구성되어 있으며, 또한 그 인쇄면 상에는 투명한 보호 시트가 적층된 래미네이트 구조로 되어 있다. 한편, 이들 보호 시트는 반드시 필수적인 것은 아니고, 인쇄면이 노출된 것이어도 무방함은 물론이다.
인쇄면은, 도 34(a)에 나타내는 바와 같이, 내주(內周) 영역과 환 형상의 외주 영역으로 구성되어 있다.
내주 영역에는, 좌표치와 코드 A가 도트 패턴으로서 인쇄되어 있다. 또한, 외주 영역에는, 좌표치와 코드 B가 도트 패턴으로서 인쇄되어 있다. 해당 마우스 패드를 좌표 입력에 사용하는 경우에는, 원형 내의 모든 영역을 사용하여 타블렛과 같이 좌표 입력이 가능하게 된다.
한편, 동 도(b)는, 외주 영역에 알파벳의 코드치를 등록한 화상 영역을 설치한다.
또한, 이들 마우스 패드는 반드시 원형일 필요는 없고, 동 도(c) 및 (d)에 나타내는 바와 같이 4각형 모양이라도 무방하다.
도 35는, 환 형상의 외주 영역에 퍼스널 컴퓨터의 입력 지시 영역을 각각 배치한 것으로서, 이 각 입력 지시 영역에는, 각각 컴퓨터 오퍼레이션을 위한 코드치가 도트 패턴화되어 인쇄되고, 마우스 패드의 기능과 전술한 페이퍼 컨트롤러의 기능을 겸하고 있다.
동 도에 있어서, 각 기능 영역(동 도에서 동그라미가 붙은 숫자로 나타낸 영역)에 있어서 기능은 이하와 같다. 본 상세한 설명에서는, 동그라미가 붙은 숫자를 괄호 숫자로서 기재한다.
(1) 범위 선택
*아이콘(기능 영역)을 터치(touch)하여, 내부 프레임 내의 스캐너의 동작으로 커서를 이동하고, 시작점이 정해지면, 릴리스(release)하고, 한 번 더 터치하여 커서를 이동하고 종점을 정하여 릴리스하면, 그 사이의 텍스트가 블루(blue) 색상으로 표시되고 액티브(active)하게 된다.
(2) 복사
아이콘(기능 영역)을 터치하면, 범위 선택된 텍스트를 메모리에 저장한다. 메모리 리스트에는, 방금 복사한 텍스트가 선두에 리스트된다.
(3) 잘라내기
아이콘(기능 영역)을 터치하면, 범위 선택된 텍스트를 삭제하고, 그 텍스트를 메모리에 저장한다. 메모리 리스트에는, 방금 잘라내기한 텍스트가 선두에 리스트된다.
(4) 삽입
커서가 입력 모드로 되어 있지 않은 등의 경우, 아이콘(기능 영역)을 터치하여, 커서키 "→←ㆍ↑↓"를 사용하여 커서를 이동시키거나, 내부 프레임 내의 스캐너의 동작으로 커서를 이동하고, 릴리스함으로써, 삽입 위치를 정한다.
(5) 붙이기
아이콘(기능 영역)을 터치하면, 입력 모드로 되어 있는 커서의 위치로부터, 메모리에 격납되어 액티브하게 되어 있는 텍스트가 삽입된다.
(6) 소거
아이콘(기능 영역)을 터치하면, 직전에 범위 선택된 텍스트를 소거한다. 직전에 범위 선택되어 있지 않으면, 입력 모드로 되어 있는 커서의 위치로부터 뒤의 텍스트를 1문자 소거한다. 2초 이상 길게 누르면, 릴리스할 때까지 연속하여 문자가 소거된다.
(7) 백 스페이스(Back Space)
아이콘(기능 영역)을 터치하면, 입력 모드로 되어 있는 커서의 위치 전(前)의 텍스트를 1문자 소거한다. 2초 이상 길게 누르면, 릴리스할 때까지 연속하여 문자가 소거된다.
(8) 행 바꾸기
아이콘(기능 영역)을 터치하면, 행을 바꾸어 입력 모드로 되어 있는 커서의 위치가 행 바꾸기한 선두로 이동한다.
(9) 해제
아이콘(기능 영역)을 터치하면, (1), (4), (15)의 아이콘(기능 영역)을 클릭한 후, 아무런 조작을 하고 있지 않은 경우, 그 모드를 해제하여, 대기 상태가 된다.
(10) UNDO
아이콘(기능 영역)을 터치하면, 직전에 수행된 오퍼레이션이 해제되고, 그 전의 상태로 되돌아간다. 여러번 반복할 수 있다.
(11) 커서→
(12) 커서←
(13) 커서↑
(14) 커서↓
아이콘(기능 영역)을 터치하면, 입력 모드로 되어 있는 커서의 위치를 그 방향으로 1문자 이동시킨다. 2초 이상 길게 누르면, 연속하여 커서의 위치를 그 방향으로 이동시킨다. 만일, 풀다운 메뉴(pulldown menu)가 표시되어 있는 경우는, (13), (14)의 아이콘(기능 영역)을 터치하면, 표시된 항목이 액티브하게 되어 있는 항목을 상ㆍ하로 이동시킨다.
(15) 메모리 표시
아이콘을 클릭하면, 범위 선택하여 복사, 또는 잘라내기한 텍스트의 리스트가, 새로운 순서로 위로부터 표시된다. (11), (12)의 아이콘(기능 영역)을 터치하여 액티브하게 되어 있는 항목을 상ㆍ하로 이동할 수 있다. 액티브하게 한 항목을 '(6) 소거'로 소거하지 않는 한, 모든 텍스트는 보존된다.
(16) ENTER
커서의 위치를 소정의 위치에 이동시키고, 그 위치에 인스트럭션(instruction)이 있는 경우, 아이콘(기능 영역)을 터치하면, 그 인스트럭션(instruction)이 실행된다. 히라가나·가타카나 변환, 한자 변환 등의 결정(決定)도 할 수 있다. 일반적인 ENTER 키와 동일한 기능을 가진다.
도 36(a)~(d) 및 도 37(a)~(b)는, 이와 같이 마우스 패드를 사용한 스캐너의 동작에 의해, 인터넷의 브라우저 프로그램인 웹 페이지의 스크롤오퍼레이션을 나타내고 있다.
도 38(a)는 입체 마우스 패드의 평면도, 동 도(b)는 그 단면도이다.
상기 마우스 패드는, 환 형상의 홈을 설치하고, 영역의 차이를 파지(把持)한 오퍼레이터가 스캐너를 통해서 체감할 수 있도록 되어 있다.
이러한 홈은 도 38에 나타낸 환 형상의 것 이외에, 도 39에 나타내는 방사 형상의 것이어도 무방하다.
<그 외의 페이퍼 컨트롤러>
도 40은, 이 입력 독취 수단을 설치한 새로운 키보드를 제안하는 것이다.
키보드의 배치에 대해서는, 「H」 「더블」 「Y」 및 「변환」 「Enter」를 중심으로 부채꼴 모양으로 각 키톱의 화상이 배치되어 있고, 각 키톱의 화상은 부채꼴 모양으로 중심 방향에 각 키톱 화상이 직선 형상으로 정렬되지 않도록 각각 어긋난 위치에 배치되어 있다.
그리고, 각 키톱 화상은, 「H」 「더블」 「Y」 및 「변환」 「Enter」를 중심으로, 내측에 모음( 「A」 「I」 「U」 「E」 「O」), 외측에 자음( 「K」 「S」 「T」 「N」 「M」 「Y」 「R」 「W」)이 배치되어 있다.
이들 키톱 화상 상에는, 도 9(b)에 나타낸 바와 같은 코드치와 XY 좌표가 동일한 포맷 속에 등록된 도트 패턴이 중첩 인쇄되어 있다.
이 XY 좌표는, 아이콘 마다 독립하여 XY 좌표가 정의되어 있어도 되고, 매체면 전체에 걸쳐 XY 좌표가 정의되어 있어도 된다.
이 키보드를 사용하면, 스캐너(SCN)에 의한 매체면의 터치&릴리스에서 문자 입력을 수행할 수 있다. 예를 들면, 「카사(우산)」라고 입력하고 싶은 경우, 먼저, 「K」의 키톱 화상 부분을 스캐너로 독취하도록 한다. 그리고 그대로 스캐너(SCN)를 「A」→「S」→「A」의 순서로 페이퍼 키보드 상을 트래이스한다(접동시킨다). 이와 같은 키톱 간의 동작은, 매체 상에 중첩 인쇄된 도트 패턴의 좌표치의 변화에 의해 인식시킬 수 있다. 그 후, 마지막인 「A」의 키톱 화상으로부터 스캐너를 릴리스(위로 올림)한다. 퍼스널 컴퓨터의 중앙 처리 장치(CPU)는 인식 프로그램에 의해, 로마자 입력의 「KASA」의 입력과, 릴리스 동작에 의해 「변환 명령」인 것을 인식하여, 퍼스널 컴퓨터 등의 응용 프로그램(일본어 입력 프로그램)에 전달한다. 이에 의해, 디스플레이 장치 상의 커서 위치에는 한자로 「傘」이라고 표시된다. 또한, 입력한 문자를 일본어로 변환하고 싶은 경우에는 「변환」을 스캐너로 독취하도록 해도 된다.
또한, 「톡쿄(특허)」라고 입력하고 싶은 경우에는[도 42(1)~(5) 참조], 먼저 「T」의 키톱 화상 부분을 스캐너로 판독하도록 하고, 그대로 슬라이드하여 「O」→「K」→「더블」→「Y」→「O」로 슬라이드시키고, 마지막인 「O」의 키톱 화상으로부터 스캐너를 릴리스(위로 올림) 하거나, 다시 「변환」으로 슬라이드한다. 여기에서, 「더블」은 그 앞의 문자를 2회 연속하여 입력하는 경우에 스캐너에서 독취하는 영역이다.
퍼스널 컴퓨터의 중앙 처리 장치(CPU)는 인식 프로그램에 의해, 로마자 입력의 「TOK(더블) YO」의 입력과, 릴리스 동작, 또는 그에 연속되는 「변환」의 독취에 의해 「변환 명령」인 것을 인식하여, 퍼스널 컴퓨터 등의 응용 프로그램(일본어 입력 프로그램)에 전달한다. 이에 의해, 디스플레이 장치 상의 커서 위치에는 한자로 「特許」라고 표시된다.
도 41은, 일본어의 변환에 대한 규칙의 일람이지만, 이것에 국한되지 않아도 된다.
도 43은, 음성 독취의 보조 장치로서의 용도를 나타낸 것이다.
동 도는, 음성에 의한 일본어 입력을 보조하는 시스템을 나타내고 있다. 유저(오퍼레이터)가, 마이크를 통해서 발성을 수행하면, 퍼스널 컴퓨터의 중앙 처리 장치(CPU)는, 마이크로부터 입력된 음성 정보를 분석하고, 변환 후보를 디스플레이 장치로 표시하게 되어 있다. 여기에서는 유저(오퍼레이터)가 「이시」라고 발성한 경우를 나타내고 있다. 디스플레이 장치에는 「이시」의 발성에 대응한 일본어 변환 후보로서 「1. 의사(意思)」, 「2. 돌(石)」, 「3. 의지(意志)」, 「4. 의사(醫師)」, 「5. 유지(遺志)」가 표시되어 있다.
여기에서, 유저(오퍼레이터)는 디스플레이 장치에 표시된 후보로부터 번호를 선택하고, 페이퍼 컨트롤러(페이퍼 키보드)의 그 번호의 아이콘 영역(예를 들면 「2」)을 스캐너로 스캔한다. 이들 번호의 아이콘 영역에는 각각의 번호가 코드화된 도트 패턴이 인쇄되어 있고, 상기 스캐너의 오퍼레이션에 의해, 코드화된 번호가 퍼스널 컴퓨터에 입력된다. 퍼스널 컴퓨터의 중앙 처리 장치(CPU)는, 입력된 코드로부터 입력 후보에 관련된 번호를 독취하고, 상기 번호에 대응하는 변환 문자(예를 들면 「돌(石)」을 응용 프로그램에 전달한다.
도 44부터 56은 적외선 리모콘의 입력 수단으로서 페이퍼 키보드를 사용한 예이다.
이들은, 스캐너를 리모콘과 일체화한 것으로서, 도 44의 (a)는 리모콘의 선단에 스캐너가 설치된 구조, 도 44의 (b)는 리모콘의 조작 패널과는 반대측의 면에 스캐너가 설치된 구조를 나타내고 있다.
유저(오퍼레이터)는, 리모콘의 스캐너를 사용하여 신문 등의 라디오ㆍ텔레비젼 난(欄)을 주사(走査)하도록 되어 있다. 신문의 텔레비젼 난은, 채널과 방송국이 XY 방향으로 표시되어 있고, 프로그램명과 출연자나 내용이 문자 정보로 인쇄되어 있다. 이들 라디오ㆍ텔레비젼 난에는 시청ㆍ녹화 예약코드가 도트 패턴으로서 인쇄되어 있고, 그 도트 패턴을 스캐너로 스캔함으로써, 프로그램마다 부여된 예약 코드를 리모콘으로 읽어들여, 셋톱박스(STB) 또는 텔레비젼 본체의 적외선 수광부를 향하여 송신하도록 되어 있다.
도 45는, 크래들(받침대)에 스캐너를 재치할 수 있는 구조의 리모콘으로서, 크래들 내에는 스캐너로부터의 독취 신호를 분석하여 적외선 신호를 생성하는 중앙 처리 장치(CPU)와 전원(BAT) 등이 내장되어 있다.
도 46은, 도 45의 스캐너(SCN)와 크래들을 사용하여 CS 방송이나 인터넷 방송용의 셋톱박스에 대하여 프로그램 예약ㆍ녹화하는 경우의 설명도이다.
한편, 스캐너(SCN)와 크래들과의 접속은 도 45 및 46에 나타낸 유선 이외에, 무선으로 통신을 수행하도록 해도 된다.
도 47은, 도 45나 도 46에 나타낸 리모콘에 사용되는 페이퍼 컨트롤러의 일례, 도 48은 셋톱박스를 제어 대상으로 한 리모콘에 사용되는 페이퍼 컨트롤러의 일례이다.
도 49~도 56은, 도 47에 나타낸 페이퍼 컨트롤러의 각 기능 영역(도트 패턴이 인쇄된 영역, 아이콘)의 코드치가 의미하는 텔레비젼(TV) 또는 셋톱박스의 실행 명령을 대응지은 것이다.
예를 들면, 도 47의 표지에 인쇄된 「전원」의 영역을 스캐너로 독취하면, 해당 영역에 인쇄된 도트 패턴을 독취하여, 코드치로 변환되고, 전원 투입 신호가 텔레비젼 또는 셋톱박스에 대하여 송신된다.
도 57은, 본 실시 형태의 페이퍼 컨트롤러를, 호텔 내의 객실에 설치된 셋톱박스에 대한 제어를 수행하는 매체로서 실현한 것이다.
이 페이퍼 컨트롤러 상에는, 영어, 중국어, 한국어, 일본어 각각에 대하여 심볼이 인쇄되어 있고, 각 심볼 상에는 도트 패턴이 인쇄되어 있다. 그리고 각각의 심볼이 의미하는 동작을 셋톱박스가 수행하도록, 제어 신호가 무선 또는 광 통신으로서 리모콘으로부터 출력되도록 되어 있다.
도 58 및 59는, 음악 또는 동영상 플레이어의 제어를 수행하는 경우의 페이퍼 컨트롤러(페이퍼 키보드)의 일례이다. 음악ㆍ동영상 플레이어에 대해서는 상세한 설명은 생략하는데, 이들 음악ㆍ동영상 플레이어의 오퍼레이션에 있어서도 스캐너(SCN)와 이들 페이퍼 컨트롤러(페이퍼 키보드)를 사용하여 영상이나 음성의 녹화, 재생이 가능하다. 이들 페이퍼 컨트롤러(페이퍼 키보드)의 각 명령 영역에도 도트 패턴이 입력되어 있다. 또한, 도 59에 나타내는 바와 같이, 문자 입력이 가능한 페이퍼 컨트롤러(페이퍼 키보드)를 준비해도 된다.
도 60~도 67은, 도 58 및 59에 나타낸 페이퍼 컨트롤러의 각 기능 영역(도트 패턴이 인쇄된 영역, 아이콘)의 코드치가 의미하는 음악ㆍ동영상 플레이어의 실행 명령을 대응지은 것이다.
도 68~도 70은, 매체면으로서, 화이트 보드를 사용한 경우이고, 이 화이트 보드 상에도 도트 패턴이 인쇄되어 있다. 이 화이트 보드 상의 도트 패턴은 좌표치를 의미하는 도트 코드(도 9 참조)가 인쇄되어 있는 것으로 한다.
도 70에 나타내는 바와 같이, 좌표치를 의미하는 도트 패턴이 인쇄된 화이트 보드에 대하여, 프로젝터에 의해 소정의 화상이 투영 표시된다. 프로젝터는 도시하지 않은 퍼스널 컴퓨터에 접속되어 있고, 이 퍼스널 컴퓨터에 접속된 본 발명의 스캐너(도 1 참조)를 사용하여 화이트 보드의 임의의 위치를 조작하면, 그 위치의 도트 패턴이 스캐너(SCN)에 읽혀 퍼스널 컴퓨터 내에서 좌표치로 변환된다. 퍼스널 컴퓨터 내의 하드 디스크 장치 내에는, 좌표치와 명령 또는 어드레스 등이 대응된 인덱스 테이블(도 24 참조)을 참조하고, 이에 대응하는 어드레스(address)에 규정된 정보 표시, 명령 실행을 수행하도록 되어 있다.
이 화이트 보드에서는, 도 69에 나타내는 바와 같이, 화이트 보드의 표면에 점착제 층이 설치되고, 여기에 일면에 도트 패턴을 인쇄한 투명 시트가 그 도트 패턴을 점착제층 쪽으로 하여 붙여져 있다.
따라서, 도트 패턴 자체는 투명 시트로 보호되어 있기 때문에, 스캐너의 선단이 접촉하거나 화이트 보드용의 펜 끝이 접촉하더라도 도트 패턴 자체가 열화하지는 않는다.
도 70의 예에서는, 화이트 보드 상에서 아이콘이 표시된 영역 상의 도트 패턴을 스캐너로 독취하면, 그 도트 패턴이 퍼스널 컴퓨터 상에서 좌표치로 변환되고, 해당 좌표치에 대응하여 미리 등록되어 있는 응용 프로그램이 기동하도록 되어 있다.
또한, 도 68에 나타내는 바와 같이, 화이트 보드의 좌측에 리모콘의 화상이 투영되고, 우측에는 리모콘으로 제어되는 동영상이 재생되도록 되어 있어도 무방하다.
이 경우, 리모콘의 각 버튼의 투영 화상에 대응한 곳을 스캐너로 독취하면, 그 좌표치가 퍼스널 컴퓨터에 읽혀 상기 좌표치에 대응하는 동작, 예를 들면 동영상의 재생, 빨리 감기, 되감기, 일시정지 등이 이루어지고, 투영 동영상(화상)을 제어할 수 있도록 되어 있다.
도 71은, 화이트 보드 대신에, 보드를 반투명의 아크릴 보드(스크린 보드)로 한 예로서, 배후에서 리어 프로젝터에 의해 퍼스널 컴퓨터의 데스크톱 화면이나 동영상(화상)을 투영하도록 되어 있다.
이 스크린 보드에서는, 아크릴 보드의 리어 프로젝터측에 점착제층을 개재하여 적외선 차단 필터 시트가 붙여져 있고, 그 반대측의 면에는, 점착제층을 개재하여 투명 시트가 붙여져 있다. 그리고 투명 시트의 점착제층측에는 좌표치를 의미하는 도트 패턴이 인쇄되어 있다.
이와 같이, 스크린 보드의 리어 프로젝터측에 적외선 차단 필터 시트가 붙여져 있음으로써, 리어 프로젝터로부터의 조사광 중 적외선 성분이 차단되기 때문에, 스캐너측에는 리어 프로젝터로부터의 적외선 성분의 노이즈 광이 도달할 수 없다. 그 때문에, 도트 패턴의 독취 정밀도를 높게 유지할 수 있다.
도 71에 있어서, 스캐너에 의해 브라우저 프로그램의 아이콘 부분이 촬영된 경우에는, 이 좌표치가 퍼스널 컴퓨터의 중앙 처리 장치(CPU)에 의해, 좌표와 처리 명령이 쌍으로 된 대응 테이블(도시 생략)을 참조하여, 상기 브라우저 프로그램의 아이콘의 배치 위치임이 인식되어, 해당 좌표에 대응하는 처리 명령(여기에서는 브라우저 프로그램의 기동)이 실행된다.
도 73은, 이상에 설명한 페이퍼 키보드를 유저(오퍼레이터) 자신이 작성하기 위하여, 화면 상에 페이퍼 키보드의 이미지 정보를 편집하고, 예를 들면 일부 영역에 마스크를 잘라 마스크를 형성하고, 해당 마스크 상에 도트 패턴의 코드를 배치하여 자유로운 배치로 유저(오퍼레이터) 자신이 사용할 수 있는 페이퍼 키보드를 작성하기 위한 일례이다.
화면 상의 어플리케이션에서 기능 아이콘을 자기가 삭제, 추가, 배치를 자유롭게 할 수 있도록 프로그램을 준비하고, 그 화면의 이미지를 도트 패턴과 함께 인쇄하거나, 또는, 도트 패턴이 인쇄된 용지에 인쇄함으로써, 워드 프로세서, 표 계산 소프트웨어 등의 응용 프로그램 기능의 실행 명령을 모두 자기 전용으로 커스터마이즈(customize)하여 인쇄한 페이퍼 키보드에 의해 실현할 수 있다.
이에 의해, 화면 상의 기능 버튼의 배치를 적게 할 수 있어, 워드 프로세서나 표 계산, 응용 프로그램의 화면 인터페이스를 극히 간단한 것으로 할 수 있다.
도 74 및 75는, 본 실시 형태에서 이상에 설명한 도트 패턴 독취 장치와, 인덱스 테이블, 서버 관리 테이블 등을 응용한 하나의 실시 형태를 기술 소개로 하여 배포 자료 형식으로 한 것이다.
이 배포 자료(도 74 및 75)에 나타내는 바와 같이, 본 기술은 Grid Onput(상표명)으로서 실현하는 것이 가능하다.
도 74 및 도 75는, GAM(Grid Application Manager, 이 GAM는 퍼스널 컴퓨터의 하드 디스크 장치 내에 인스톨된 응용 프로그램의 명칭임)으로서, 하드웨어로서는 퍼스널 컴퓨터(PC)로 스캐너를 사용하는 경우의 예를 나타낸 것이다.
동 도에 있어서, (1)~(7)까지는 실제의 운용예를 나타낸 것이다. 즉 도 74의 (1)에 나타내는 바와 같이, 유저는 CD-ROM, 또는 인터넷의 배신 서버에 액세스하여 다운로드한 인스톨 프로그램을 퍼스널 컴퓨터(PC) 상에서 실행하고, OS(오퍼레이팅 시스템) 상에 GAM과 드라이버 프로그램을 상주 프로그램으로서 등록한다. 또한, 이 때 GAM에 번들(bundle)된 응용 프로그램이나 화상, 동영상 등의 컨텐츠 데이터도 하드 디스크 장치(HD) 내에 인스톨한다.
다음에, USB 단자에 스캐너가 접속되면, 상기 상주 상태의 드라이버 프로그램이 이를 인식한다.
다음에, 스캐너에 의해 태그 표면이 독취되면, 그 촬영 화상(도트 패턴)이 USB 케이블을 개재하여 퍼스널 컴퓨터(PC)에 읽히고, 비디오 메모리(VRAM)에 전개된다. 중앙 처리 장치(CPU)에 읽힌 GAM는, 전술한 알고리즘(GRID1 또는 GRID2)에 따라서 상기 촬영 화상(도트 패턴)으로부터 코드(코드 번호)에 복호한다.
여기에서 스캐너에 따라서는 처음으로 태그를 스캔했을 때에는, 퍼스널 컴퓨터(PC)의 디스플레이 장치(DISP)에는, 해당 태그에 대응한 개인 정보의 입력을 독촉하는 화면이 표시되고, 이 표시 화면에 따라서, 유저는 이름, 어드레스, 크레디트 카드 번호 등의 개인 정보를 등록한다. 이와 같이 하여 입력된 개인 정보는, 전술한 도 24에 나타낸 관리 서버 테이블에 등록되고, 이후의 인증에 사용된다.
즉, 그 다음은 퍼스널 컴퓨터(PC)를 기동할 때, 스캐너로 태그를 스캔함으로써, 관리 서버에서의 인증이 이루어지고, 이 인증이 완료되면, GAM가 기동하도록 된다.
다음에, 도트 패턴이 인쇄된 종이 매체나 페이퍼 컨트롤러(페이퍼 키보드)가 스캐너로 주사(독취)됨으로써, 도트 패턴이 촬영되어 촬영 화상 데이터가 퍼스널 컴퓨터에 입력되어 상기와 마찬가지로 32비트의 수자열로 이루어지는 도트 코드(코드 번호)가 복호된다.
이 도트 코드(코드 번호)를 토대로, GAM의 도트 코드 관리 테이블(인덱스 테이블)이 참조된다.
여기에서, 인덱스 테이블에 이미 해당 도트 코드(코드 번호)가 등록되어 있으면, 그 퍼스널 컴퓨터(PC) 내에 이미 인스톨된 컨텐츠 데이터라는 것이 인식되고, 그 컨텐츠 데이터가 독출(讀出)되어 재생된다. 이 컨텐츠 데이터가 동영상이나 화상이면, 그에 대응한 동영상 재생 응용 프로그램이나 화상 표시 프로그램에 의해, 무비나 화상이 디스플레이 장치(DISP)에 표시된다.
또한, 인덱스 테이블의 도트 코드(코드 번호)에 인터넷 상의 어드레스(URL)가 등록되어 있는 경우에는, 열람 프로그램(마이크로소프트사의 인터넷 익스플로러 등)이 기동하여 상기 어드레스에 대한 액세스가 이루어진다.
그런데, 도 74의 (5)에 나타내는 바와 같이, 도트 패턴을 독취한 결과의 도트 코드(코드 번호)가 로컬(퍼스널 컴퓨터 내)의 도트 코드 관리 테이블(인덱스 테이블)에 등록되어 있지 않을 때에는, 인터넷 상의 도트 코드 관리 서버를 참조하도록 되어 있다. 여기에서, 도트 코드 관리 서버의 관리 서버 테이블에 도트 코드(코드 번호)가 등록되어 있으면 그 도트 코드(코드 번호)에 대한 인스트럭션(명령)에 따라서, 지정된 Web 서버로부터 (1) 컨텐츠의 다운로드, 구체적으로는 서버 A로부터의 컨텐츠의 다운로드, (2) 동영상의 스트리밍 배신, 구체적으로는 스트리밍 배신 서버로서의 서버 B로부터의 데이터 배신, (3) Web의 열람, 구체적으로는 서버 C의 어드레스(URL)로 지정된 Web 파일의 다운로드가 자동적으로 개시되도록 되어 있다.
다음에 컨텐츠 데이터가 퍼스널 컴퓨터(PC)에 다운로드되었을 때에는, 그 컨텐츠 데이터와 함께, 그 컨텐츠 데이터를 기동하기 위한 도트 코드 관리 테이블(인덱스 테이블)의 추가 데이터(코드 번호와 어드레스가 쌍으로 된 데이터)도 다운로드되고, 이후는 퍼스널 컴퓨터 내의 도트 코드 관리 테이블(인덱스 테이블)에서 관리되도록 되어 있다.
따라서, 그 다음은 상기와 동일한 코드 번호가 독취된 경우, 다시 인터넷 상의 서버 A, B 또는 C에 액세스하지는 않고, 새롭게 추가된 데이터를 포함하는 도트 코드 관리 테이블(인덱스 테이블)을 토대로, 퍼스널 컴퓨터의 하드 디스크 장치(HD) 내에 다운로드된 컨텐츠 데이터가 재생되게 된다.
도 76 및 도 77은, 페이퍼 컨트롤러를 레스토랑 등의 음식점의 오더 시스템에 이용한 예를 설명한 것이다.
동 도에 나타내는 바와 같이, 레스토랑의 각 테이블에는, 메뉴 항목마다 다른 코드 번호의 도트 패턴이 인쇄된 메뉴가 놓여 있고, 테이블의 일단(一端)에는 디스플레이 장치(DISP)를 구비한 컴퓨터 단말이 설치된다.
스캐너에는, 블루투스(Bluetooth) 등의 근거리 무선 통신 시스템이 들어 있고, 컴퓨터 단말과의 사이에서, 메뉴로부터 독취한 코드 번호와 개수 정보를 송신할 수 있도록 되어 있다.
스캐너로부터 독취된 메뉴 항목에 대응하는 코드 번호와 개수 정보는, 상기 컴퓨터 단말에 송신된다. 컴퓨터 단말 내의 중앙 처리 장치(CPU)는, 이 메뉴 항목의 코드 번호와 개수 정보에 테이블 번호를 부가한 오더 신호를 생성하고, 오더 서버로 송신한다.
오더 서버에서는, 해당 오더 신호로부터 테이블 번호와 메뉴 항목의 코드 번호와 개수 정보를 추출하여, 주방에 대하여 오더를 설정한다. 구체적으로는 주방에 표시되는 디스플레이 장치에 대하여, 테이블 번호와 코드 번호에 대응한 메뉴 항목과 그 개수를 표시하여, 주방 담당자가 조리 준비에 착수할 수 있도록 되어 있다.
한편, 오더 신호 생성시에, 테이블 번호는 컴퓨터 단말 내에서 부가하는 경우로 설명했는데, 미리 컴퓨터 단말의 스탠드 표면 또는 테이블 표면에 테이블 번호를 의미하는 도트 패턴이 인쇄된 씰(seal) 등이 붙여져 있고, 테이블 상에 스캐너를 배포할 때, 스캐너로 상기 씰의 표면을 독취함으로써, 테이블 번호와 컴퓨터 단말과의 관련짓기가 이루어진다.
따라서, 테이블 상에 복수 개의 스캐너를 배포하여 복수인으로부터의 오더를 동시에 받아들일 수 있도록 해도 된다.
도 84는, XY 좌표치를 마우스 패드로서 사용한 페이퍼 키보드의 일례이다.
도 84(a)는, 페이퍼 키보드의 일부에 마우스 패드 영역을 설치한 것이다.
본 실시예에서는, 키톱 화상에 인쇄된 도트 패턴에는 코드치만이 등록되어 있고, 마우스 패드 영역에 인쇄된 도트 패턴에는 코드치와 XY 좌표치가 등록되어 있다. 유저가 마우스 패드 영역에서 스캐너를 상방향으로 슬라이드시키면, 화면이 상방향으로 스크롤된다. 마찬가지로, 스캐너를 하방향으로 슬라이드시키면, 화면이 하방향으로 스크롤된다. 우방향, 좌방향에 대해서도 마찬가지이다.
도 84(b)는, 페이퍼 키보드 전체를 마우스 패드 영역으로 하여 사용하는 것이다.
본 실시예에서는, 모든 키톱 화상에, 키톱의 내용에 대응한 코드치와 좌표치의 양 쪽이 등록되어 있다. 유저가 페이퍼 키보드 상의 임의의 위치에서 스캐너를 2회 이상 태핑하고, 그로부터 스캐너를 상방향으로 슬라이드시키면, 화면이 상방향으로 스크롤된다. 마찬가지로 스캐너를 2회 이상 태핑한 후에 스캐너를 하방향으로 슬라이드시키면, 화면이 하방향으로 스크롤된다. 우방향, 좌방향에 대해서도 마찬가지이다.
도 85에서는, 투영 보드 상에 형성된 도트 패턴은, 좌표치와 코드치가 하나의 도트 패턴의 포맷 속에 정의되어 있고, 보드 상에는 소정의 매트릭스 구획이 형성되어 있고, 동일한 매트릭스 구획 내에서는, 좌표치의 변화에 관계없이 동일한 코드치가 부여된다.
본 실시예는, 아이콘 화상은, 1개 또는 복수의 매트릭스 구획에 걸쳐서 배치되어 있고, 상기 아이콘 화상의 도트 패턴이 독취 수단으로 독취됨으로써, 해당 아이콘 화상에 대응한 영상의 제어 또는 프로그램의 기동이 지시되는 것을 특징으로 한다.
도 86은, 화이트 보드의 각 매트릭스에 있어서 도트 패턴의 코드치와 XY 좌표치와의 관계를 나타내고 있다.
도 86(a)은, 본 도트 패턴의 C0~C31까지의 32비트로 정의되는 값을 표에 나타낸 것이다. 동 도에 나타내는 바와 같이 C0~C7가 Y 좌표, C8~C15가 X 좌표, C16~C29가 코드치, C30~C31가 패리티를 각각 의미하고 있다.
이들 수치는, (b)에 나타내는 격자 영역에 배치되고, 구체적인 도트 패턴을 나타낸 것이 (c)이다.
도 87은, 퍼스널 컴퓨터의 하드 디스크 장치(HD) 내에 설치된 코드치ㆍ코맨드 대응 테이블에 대하여 나타낸 것이다. 예를 들면, 스캐너로 독취된 도트 패턴에 대응한 도트 코드가 11 또는 12인 경우에는, 영상의 재생을 정지시킨다. 또한, 도트 코드가 13인 경우에는, 재생을 일시 정지시킨다.
도 88~도 90은, 데스크톱 화면을 캡쳐(capture)하여 인쇄함으로써, 데스크톱 화면의 아이콘이 인쇄된 페이퍼 키보드를 작성하는 기술에 대하여 설명하는 도면이다.
본 실시예에 있어서는, 키보드(KBD)의 「프린트 스크린」버튼(prt sc)이 눌러지는 것 등에 의해 데스크톱 화면이 캡쳐되면, 지면에 도트 패턴과 함께 아이콘이 인쇄된, 페이퍼 키보드가 인쇄 매체로서 출력되는 프로그램이 준비되어 있다.
도 88(a)는, 디스플레이(표시 수단)의 데스크톱 화면을 나타낸 것이다. 예를 들면 데스크톱 화면에는, 워드 프로세서, 인터넷 및 표 계산의 아이콘 화상 및 시작 버튼이 표시되어 있다.
데스크톱 화면이 캡쳐되면, 퍼스널 컴퓨터의 하드 디스크 장치(HD)는, 데스크톱 화면 상의 어느 위치에 아이콘이 표시되어 있는지를 인식하여, 아이콘이 표시되어 있는 위치의 좌표치를 산출한다. 그리고, 데스크톱의 XY 좌표와 인쇄용지의 XY 좌표를 대응시키고, 아이콘에 대응한 도트 패턴을 생성한다. 이 도트 패턴에는, 화면 상의 좌표치를 의미하는 도트 패턴 및 아이콘의 기능을 의미하는 코드치가, 하나의 포맷에 포함되어 있다. 그리고, 데스크톱 화면의 이미지와, 생성한 도트 패턴과의 중첩 인쇄 처리를 수행한다. 도 88(b)는, 데스크톱 화면 및 도트 패턴이 인쇄된 페이퍼 키보드를 나타내는 도면이다.
도 89는, 코드치와 기동 프로그램과의 대응을 나타내는 테이블에 대하여 설명한 도면이다. 상술한 처리에 의해 도트 패턴이 생성되면, 하드 디스크 장치(HD) 내에, 도트 패턴의 코드치와 아이콘이 의미하는 기동 프로그램(아이콘의 기능)을 대응시킨 테이블이 생성된다. 예를 들면, 워드 프로세서를 나타내는 아이콘에 대응한 도트 패턴이 생성되고 코드치 0001이 할당되면, 코드치 0001와 기동 프로그램 Warpro.exe가 대응한 테이블이 생성된다. 인터넷, 표 계산을 나타내는 아이콘에 관해서도 마찬가지이다. 이와 같은 테이블이 작성됨으로써, 유저가, 예를 들면, 도 88(b)에 나타낸 페이퍼 키보드의 그래프의 도면을 스캐너에 의해 클릭하면, 표 계산 프로그램이 기동한다.
도 90은, 상술한 도트 패턴의 포맷에 대하여 나타낸 도면이다. 도트 패턴의 포맷에 대해서는, 전술한 것과 마찬가지로서 설명은 생략한다.
이와 같이, 미리 데스크톱 화면 상의 아이콘을 인쇄해 둠으로써, 아이콘의 지정이 용이하게 된다. 예를 들면, 이미 복수의 프로그램을 기동하는 등에 의해, 데스크톱 상의 아이콘이 화면에서 사라지는 경우라도, 인쇄된 페이퍼 키보드 상에서 스캐너에 의해 아이콘 화상을 클릭하면, 용이하게 프로그램을 가동할 수 있게 된다.
본 발명에 의하면, 용이한 조작으로 컴퓨터에 대하여 문자 등의 입력이나, 오퍼레이션을 수행할 수 있는 키보드, 마우스, 타블렛 등의 하드웨어 디바이스를 대신하는 새로운 입력 시스템, 즉, 페이퍼 아이콘, 페이퍼 컨트롤러, 페이퍼 키보드 및 마우스 패드를 실현하는 것이 가능하다.
또한, 본 발명은 퍼스널 컴퓨터나 텔레비젼, 음악 플레이어 등의 정보 처리 기기의 입력 시스템에 이용할 수 있다.
<도면 주요 부호의 설명>
1 : 도트 패턴 2 : 키 도트
3 : 정보 도트 4 : 기준 격자점 도트
5 : 가상 격자점 CPU : 중앙 처리 장치
MM : 메인 메모리 USB I/F : USB 인터페이스
HD : 하드 디스크 장치
DISP : 디스플레이 장치(표시 수단) KBD : 키보드
NW I/F : 네트워크 인터페이스 SCN : 스캐너

Claims (2)

  1. 표시 수단에 표시된 아이콘 화상을, 상기 아이콘 화상에 대응한 도트 패턴과 함께 지면에 인쇄하는 아이콘 화상의 인쇄 제어 시스템으로서,
    아이콘 화상을 화면상에서 레이아웃하여 표시하는 표시 수단과,
    상기 표시 수단에 레이아웃하여 표시된 아이콘 화상과, 좌표치, 코드치, 또는 좌표치와 코드치의 모두가 미리 정의된 도트패턴을 겹쳐서 배치하여 인쇄를 지시하는 제어 수단과,
    상기 제어 수단으로부터의 지시를 토대로 상기 표시수단에 레이아웃하여 표시된 상기 아이콘 화상에 겹쳐서 상기 도트 패턴을 소정의 매체면에 인쇄하는 인쇄 수단
    으로 이루어지는 아이콘 화상의 인쇄 제어 시스템.
  2. 표시 수단에 표시된 데스크톱 화면을 도트 패턴과 함께 지면에 인쇄하는 정보 처리 장치의 인쇄 방법으로서,
    상기 데스크톱 화면에 대응한 좌표치를 매핑하고,
    상기 데스크톱 화면을 인쇄할 때 화면 상의 좌표치를 의미하는 도트 패턴을 생성하며,
    상기 데스크톱 화면 상의 아이콘 화상을 포함하는 기능 화상 상에는 상기 좌표치와 함께 상기 기능을 의미하는 코드치를 하나의 포맷에 포함한 도트 패턴을 생성하고,
    상기 데스크톱 화면을 상기 도트 패턴과 함께 인쇄하는 인쇄 방법.
KR1020107015282A 2006-03-10 2007-03-12 정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템 KR101067360B1 (ko)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2006066751 2006-03-10
JPJP-P-2006-066751 2006-03-10
JPJP-P-2006-314650 2006-11-21
JP2006314650 2006-11-21
JPJP-P-2007-060495 2007-03-09
JP2007060495A JP4042065B1 (ja) 2006-03-10 2007-03-09 情報処理装置への入力処理システム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020087024235A Division KR101209087B1 (ko) 2006-03-10 2007-03-12 정보 처리 장치에 대한 입력 처리 시스템

Publications (2)

Publication Number Publication Date
KR20100083862A KR20100083862A (ko) 2010-07-22
KR101067360B1 true KR101067360B1 (ko) 2011-09-23

Family

ID=38509629

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020127027385A KR101304290B1 (ko) 2006-03-10 2007-03-12 오더 시스템
KR1020107015282A KR101067360B1 (ko) 2006-03-10 2007-03-12 정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템
KR1020127005344A KR101310115B1 (ko) 2006-03-10 2007-03-12 지에이엠 프로그램, 지에이엠 단말, 지에이엠 서버 및 지에이엠 시스템
KR1020087024235A KR101209087B1 (ko) 2006-03-10 2007-03-12 정보 처리 장치에 대한 입력 처리 시스템
KR1020137002536A KR101412653B1 (ko) 2006-03-10 2007-03-12 오더 시스템

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020127027385A KR101304290B1 (ko) 2006-03-10 2007-03-12 오더 시스템

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020127005344A KR101310115B1 (ko) 2006-03-10 2007-03-12 지에이엠 프로그램, 지에이엠 단말, 지에이엠 서버 및 지에이엠 시스템
KR1020087024235A KR101209087B1 (ko) 2006-03-10 2007-03-12 정보 처리 장치에 대한 입력 처리 시스템
KR1020137002536A KR101412653B1 (ko) 2006-03-10 2007-03-12 오더 시스템

Country Status (11)

Country Link
US (1) US20160320861A1 (ko)
EP (1) EP2026177A4 (ko)
JP (1) JP4042065B1 (ko)
KR (5) KR101304290B1 (ko)
CN (2) CN102902378A (ko)
AU (1) AU2007225655B2 (ko)
CA (2) CA2937958A1 (ko)
MY (1) MY152620A (ko)
RU (1) RU2012106761A (ko)
SG (3) SG155893A1 (ko)
WO (1) WO2007105819A1 (ko)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4203525B1 (ja) * 2007-06-13 2009-01-07 健治 吉田 ドットパターンを利用した機器の入力装置、制御対象機器の受信装置、端末装置およびペーパーコントローラ
CN101816186B (zh) * 2007-10-05 2013-05-22 吉田健治 能读取在媒体以及显示器上形成的点阵图形的遥控装置
US20110188071A1 (en) * 2007-12-12 2011-08-04 Kenji Yoshida Information input device, information processing device, information input system, information processing system, two-dimensional format information server, information input method, control program, and recording medium
JP4243641B1 (ja) * 2007-12-21 2009-03-25 健治 吉田 媒体およびディスプレイ上に形成されたドットパターンを読み取ることが可能なリモートコントロール装置
JP2009163554A (ja) * 2008-01-08 2009-07-23 Dainippon Printing Co Ltd 端末装置、それに用いられるプログラム及び情報処理システム
JP4385169B1 (ja) * 2008-11-25 2009-12-16 健治 吉田 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート
CN102099728A (zh) 2008-07-15 2011-06-15 株式会社Ip舍路信 裸眼立体画面显示系统、裸眼立体画面显示装置、游戏机、视差屏障薄片
JP2010164488A (ja) * 2009-01-16 2010-07-29 Zenrin Printex Co Ltd 入力装置
JP5319458B2 (ja) * 2009-08-26 2013-10-16 株式会社日立製作所 授業支援システム
JP5141701B2 (ja) * 2010-02-25 2013-02-13 株式会社ニコン プロジェクタ
CA2803889A1 (en) * 2010-06-25 2011-12-29 Polyvision Corporation Activation objects for interactive systems
JP4716453B1 (ja) 2010-07-13 2011-07-06 健治 吉田 プログラム、情報処理装置、情報処理システム
EP2410406A1 (en) * 2010-07-23 2012-01-25 Anoto AB Display with coding pattern
JP5768523B2 (ja) * 2011-06-20 2015-08-26 大日本印刷株式会社 情報処理システム及びプログラム
JP5754257B2 (ja) * 2011-06-20 2015-07-29 大日本印刷株式会社 情報処理システム及びプログラム
JP5954049B2 (ja) * 2012-08-24 2016-07-20 カシオ電子工業株式会社 データ処理装置及びプログラム
JP5544609B2 (ja) * 2012-10-29 2014-07-09 健治 吉田 手書き入出力システム
JP5848230B2 (ja) * 2012-11-12 2016-01-27 グリッドマーク株式会社 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート
KR20160095958A (ko) 2015-02-04 2016-08-12 켄지 요시다 렌즈 유닛
TW201720802A (zh) 2015-09-15 2017-06-16 艾森伯利生物科學公司 B型肝炎核心蛋白質調節劑
JP6197920B2 (ja) * 2016-06-08 2017-09-20 カシオ計算機株式会社 データ処理装置及びプログラム
US10987360B2 (en) 2016-09-15 2021-04-27 Assembly Biosciences, Inc. Hepatitis B core protein modulators
CN106354277A (zh) * 2016-09-21 2017-01-25 成都创慧科达科技有限公司 一种词组语句快速输入的方法及系统
KR20180041918A (ko) 2016-10-17 2018-04-25 에스프린팅솔루션 주식회사 화상형성장치 및 칼라 레지스트레이션 보정 방법
SG11201908012SA (en) 2017-03-02 2019-09-27 Assembly Biosciences Inc Cyclic sulfamide compounds and methods of using same
CN110612300B (zh) 2017-03-13 2023-10-20 组装生物科学股份有限公司 制备乙型肝炎核心蛋白调节剂的方法
AU201812812S (en) * 2017-11-24 2018-06-14 Dyson Technology Ltd Display screen with graphical user interface
CN108665764B (zh) * 2018-05-11 2020-06-23 亮风台(上海)信息科技有限公司 一种通过阅读设备进行阅读的方法与设备
CN108769967B (zh) * 2018-06-08 2021-11-12 苏州博联科技有限公司 基于蓝牙gap层的服务设备发现方法
CN112578967B (zh) * 2020-12-24 2022-04-15 深圳市联谛信息无障碍有限责任公司 图表信息读取方法及移动终端
CN114565070B (zh) * 2022-02-23 2023-11-10 Tcl通讯科技(成都)有限公司 一种标签绑定方法、装置及移动终端

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005100315A (ja) 2003-09-03 2005-04-14 Ricoh Co Ltd 紙文書情報操作システムおよび情報操作方法

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5853769B2 (ja) * 1978-05-04 1983-12-01 日本電信電話株式会社 磁気文字ブロツク
DK0670555T3 (da) * 1992-09-28 2000-09-18 Olympus Optical Co Registreringsmedium med prikkode og informationsregistreringssystem
JPH07282182A (ja) * 1994-04-12 1995-10-27 Olympus Optical Co Ltd コード読取装置
AUPQ439299A0 (en) * 1999-12-01 1999-12-23 Silverbrook Research Pty Ltd Interface system
US6832717B1 (en) * 1999-05-25 2004-12-21 Silverbrook Research Pty Ltd Computer system interface surface
BR0014156A (pt) * 1999-08-30 2002-05-14 Anoto Ab Bloco de anotações
US7128270B2 (en) * 1999-09-17 2006-10-31 Silverbrook Research Pty Ltd Scanning device for coded data
ATE529820T1 (de) * 1999-12-23 2011-11-15 Anoto Ab Informationsverwaltungssystem
US20030061188A1 (en) * 1999-12-23 2003-03-27 Linus Wiebe General information management system
US6992655B2 (en) * 2000-02-18 2006-01-31 Anoto Ab Input unit arrangement
JP4686048B2 (ja) * 2000-04-21 2011-05-18 パナソニック株式会社 画素演算装置
JP2002187382A (ja) * 2000-12-21 2002-07-02 Olympus Optical Co Ltd 新聞紙、情報再生システム、及び、ネットワークを介した有料放送番組の視聴申請受付方法
KR100404306B1 (ko) 2000-12-29 2003-11-01 주식회사 아이콘랩 코드화된 패턴 및 이의 코드 추출 방법
JP4233259B2 (ja) * 2002-02-08 2009-03-04 株式会社電通テック コード情報を用いた情報提供システム
JP2003256122A (ja) * 2002-02-28 2003-09-10 Kokuyo Co Ltd 書込対象物、手書き入力設備、用紙、ホワイトボード、ディスプレイ、透明シート
JP2003345484A (ja) * 2002-05-23 2003-12-05 Matsushita Electric Ind Co Ltd 情報処理装置およびそのプログラム
JP4301775B2 (ja) * 2002-07-18 2009-07-22 シャープ株式会社 2次元コード読み取り装置,2次元コード読み取り方法,2次元コード読み取りプログラム及び該プログラムの記録媒体
US7967217B2 (en) * 2002-09-26 2011-06-28 Kenji Yoshida Information reproduction/i/o method using dot pattern, information reproduction device, mobile information i/o device, and electronic toy
KR20030019443A (ko) * 2002-12-20 2003-03-06 실버브룩 리서치 피티와이 리미티드 데이터를 내장한 데이터 패키지 템플릿
WO2004084125A1 (ja) * 2003-03-17 2004-09-30 Kenji Yoshida ドットパターンを用いた情報入出力方法
US20040229195A1 (en) * 2003-03-18 2004-11-18 Leapfrog Enterprises, Inc. Scanning apparatus
JP4457569B2 (ja) * 2003-03-28 2010-04-28 株式会社日立製作所 地図情報処理システム
JP2005004574A (ja) 2003-06-13 2005-01-06 Dt Research Japan Kk バーコード方式により動作制御可能な情報処理機器、及びそれを用いたサービス提供システム
JP2005044103A (ja) * 2003-07-28 2005-02-17 Toshiba Corp 文書作成装置、文書作成方法およびプログラム
US7250938B2 (en) * 2004-01-06 2007-07-31 Lenovo (Singapore) Pte. Ltd. System and method for improved user input on personal computing devices
JP2005284103A (ja) * 2004-03-30 2005-10-13 Takara Co Ltd 音声ガイドシステム
JP2005332351A (ja) * 2004-05-20 2005-12-02 Takako Kawashima マーク用紙およびそのプログラム
JP3830956B1 (ja) * 2005-09-14 2006-10-11 健治 吉田 情報出力装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005100315A (ja) 2003-09-03 2005-04-14 Ricoh Co Ltd 紙文書情報操作システムおよび情報操作方法

Also Published As

Publication number Publication date
KR20100083862A (ko) 2010-07-22
CN102841681A (zh) 2012-12-26
KR20120123732A (ko) 2012-11-09
KR101412653B1 (ko) 2014-06-27
CA2646022A1 (en) 2007-09-20
MY152620A (en) 2014-10-31
KR20130028139A (ko) 2013-03-18
EP2026177A4 (en) 2013-03-06
SG155892A1 (en) 2009-10-29
KR101310115B1 (ko) 2013-09-23
AU2007225655A1 (en) 2007-09-20
KR20080102281A (ko) 2008-11-24
WO2007105819A1 (ja) 2007-09-20
AU2007225655B2 (en) 2013-03-14
EP2026177A1 (en) 2009-02-18
KR101209087B1 (ko) 2012-12-06
JP4042065B1 (ja) 2008-02-06
CA2937958A1 (en) 2007-09-20
SG155893A1 (en) 2009-10-29
US20160320861A1 (en) 2016-11-03
CN102902378A (zh) 2013-01-30
KR20120032042A (ko) 2012-04-04
JP2008152745A (ja) 2008-07-03
CA2646022C (en) 2016-08-09
SG155894A1 (en) 2009-10-29
KR101304290B1 (ko) 2013-09-11
RU2012106761A (ru) 2013-09-10

Similar Documents

Publication Publication Date Title
KR101067360B1 (ko) 정보 처리 장치의 인쇄 방법 및 아이콘 화상의 인쇄 제어 시스템
JP6030728B2 (ja) 制御プログラム、制御プログラムを実行する端末、記憶媒体およびサーバシステム
US20090091530A1 (en) System for input to information processing device
JP4042066B1 (ja) 情報処理装置への入力処理システム
AU2013206233B2 (en) Input processing system for information processing device
WO2012008504A1 (ja) ストリームドットを用いた情報出力装置、媒体、入力処理システムおよび入出力処理システム
JP2012022423A (ja) ストリームドットを用いた入力処理システム、入出力処理システムおよび印刷制御システム
AU2016210711A1 (en) Input processing system for information processing device
JP2012022400A (ja) ストリームドットを用いた情報入力補助シートおよび情報処理システム

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140917

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150918

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170918

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190320

Year of fee payment: 8