KR20130054116A - 투명디스플레이를 통해 페이퍼문서를 전자화하고 활용하는 방법 및 시스템. - Google Patents

투명디스플레이를 통해 페이퍼문서를 전자화하고 활용하는 방법 및 시스템. Download PDF

Info

Publication number
KR20130054116A
KR20130054116A KR1020120059704A KR20120059704A KR20130054116A KR 20130054116 A KR20130054116 A KR 20130054116A KR 1020120059704 A KR1020120059704 A KR 1020120059704A KR 20120059704 A KR20120059704 A KR 20120059704A KR 20130054116 A KR20130054116 A KR 20130054116A
Authority
KR
South Korea
Prior art keywords
layer
user
paper document
display
area
Prior art date
Application number
KR1020120059704A
Other languages
English (en)
Other versions
KR101495492B1 (ko
Inventor
정보연
Original Assignee
정보연
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 정보연 filed Critical 정보연
Priority to EP13796887.1A priority Critical patent/EP2857982A1/en
Priority to JP2015514893A priority patent/JP2015525396A/ja
Priority to PCT/KR2013/004201 priority patent/WO2013180407A1/ko
Priority to US14/404,516 priority patent/US20150296092A1/en
Priority to CN201380037697.3A priority patent/CN104471563A/zh
Publication of KR20130054116A publication Critical patent/KR20130054116A/ko
Application granted granted Critical
Publication of KR101495492B1 publication Critical patent/KR101495492B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00392—Other manual input means, e.g. digitisers or writing tablets
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Document Processing Apparatus (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 사용자 워크스테이션상에서, 또는 통신망에 연결된 하나 또는 다수의 서버들이나 데이터베이스 상에 위치한 페이퍼문서의 디지털사본을 사용자의 투명디스플레이상에 (저작권 보호를 위해)은폐하여 노출시킨 후, 페이퍼문서와 일치되어 겹치게 오버랩시켜서, 사용자가 투명디스플레이를 통해 보여지는 페이퍼문서를 보며 선택한 영역이 디지털사본에서 선택되어지도록하여 선택되어진 데이터에대해 특정모듈이 실행되도록 그 결과물을 디스플레이하는 것을 특징으로한다.

Description

투명디스플레이를 통해 페이퍼문서를 전자화하고 편집,활용하는 방법 및 시스템.{.}
본 발명은 컴퓨터 인터페이스에 관한 것으로서 종이-기반 정보를 전자 정보로 향상시키는 새로운 방법에 관한 것이다. 더욱 구체적으로, 본 발명은 투명디스플레이를 통해 보여지는 페이퍼문서에 특정영역을 설정하고, 특정 모듈(스크랩, 사전검색 등)과 작용케하여 사용자가 직접 물리적 책을 보며 편집하고 조작하며, 검색할 수 있도록 하기 위함이다.
최근 수년동안, 개인용 컴퓨터의 광범위한 사용 및 월드와이드웹에대한 수천만 사용자들의 보편화된 액세스로 인하여 '멀티미디어 출판'이 엄청나게 폭증하였다.
전자책이란, 지식과 정보의 컨텐츠를 종이매체를 이용하지 않고 디지털형태로 출간된 책(file)을 가리키는 것으로, 이와 같은 전자책은 전자책을 읽을 수도 있도록하는 프로그램이 탑재된 pc나 전용 휴대용 단말기 등을 통해 볼 수 있으며, 이와 같은 장치(device)를 통칭해 '전자책'이라고 칭하기도 한다. 즉, 넓은 의미에서 컨텐츠가 포함된 모든 소프트웨어, 하드웨어적인 미디어물 전체를 말할 수 있는 것이다.
하지만, 전자책 서비스가 폭증하여도 전자책은 그것이 가진 '내재적 한계'로 인하여 종이책 수요를 모두 흡수하지 못하는 것이 사실이며, 더 나아가 전자책이 아무리 발전하여도 종이책이 주는 친근함과 편안함을 극복할 수 없어서 '종이없는'세상이 되기는 힘들거라는 전망이 우세하다. 여기서 전자책이 가진 '내재적 한계'란, 전자책 단말기의 필수불가결한 문제점 때문이다. 예를 들어, 발광체로 인해 눈이 부시다는 점. 책을 보며 틈틈이 사고의 시간을 요하는 독서의 특징상 전력이 소모되는 점때문에 사고의 시간을 가지는 것이 부담스럽게 느껴질 수 있다는 점. 책을 이리저리 훑어보며 조망하기가 힘들다는 점 등이 바로 그것이다. 그리하여 전자책이 아무리 발전한다하여도 종이책을 대체할 수 없을거라는 전망이 우세하며,더구나 책 위에 필기 등을 하고, 책 위에 시선을 오래 고정하고 사고해야하는 '수험서'나 '교과서'등의 학술교재같은 경우는 더더욱 전자책으로의 대체가 어려울거란 전망이 있다.
요약하면, 사람들에게는 종이가 많은 장점을 제공한다. 종이는 휴대가능하고, 친숙하며 쉽게 배포될 수 있다. 종이는 쉽게 보여지고, 표시되거나 조작될 수 있으며, 표시를 위해 에너지원을 필요로 하지 않는다. 종이책의 친숙함, 유용함 및 가용성은 오늘날 전자문서로 재생산될 수 없다.
하지만, 수험서나 교과서 등의 학술교재같은 경우는, 종이책이 주는 친숙함과 가용성등으로인해 가장 전자책으로의 진화가 더디고 느린 분야이겠지만, 역으로, 가장 '전자적 요소를 활용한 편집과 이용'이 불가피한 분야이기도하다.
왜냐하면, 학술교재는 학습자가 꼼꼼히 읽고 이해하며, '자기것'으로 만들어야하는 대상이다보니, 학습자들은 교재내용들을 자신만이 알아볼 수 있는 표시들을 통하여 구분짓기도 하고, 많은 필기내용을 첨부하고 싶을 때, 포스트잇을 붙이기도하며, 더 나아가 교재를 직접 오리고 붙여서 오답노트를 만들기도 해야 하는데, 페이퍼문서의 한계상, 그런 일련의 과정은 굉장한 수고를 요하는 작업이었고,더 나아가 학습의 집중을 방해하는 요인이 되기도했다. 또한, 학술교재로 학습하는 학습자가 직접 학습을 수행하면서 모르는 단어나, 문장 등을 검색하기 위해 따로 물리적 전자사전을 소지해야하며, 일일이 단어를 입력하여 검색해야하는 불편이 있었다.
더 나아가, '학술교재'에 페이퍼문서를 국한시키지 않더라도, 일반인들이 흔히 보는 에세이나 일반문서의 경우에도 '마음에 드는 구절'이나 '기억하고 싶은 부분'들은 따로 표시를 해두고, 그것을 일목요연하게 정리한다거나, 자유롭게 스크랩하기는 사실상 매우 번거로운 것이었다.
페이퍼문서는 그 태생적 한계로 인해, 정보의 확장이나, 활용성에 제약을 받아왔다. 사용자(독자)는 페이퍼문서를 활용할 때 다양한 2차적 도구(단어검색을 위한 사전, 복사를 위한 스캐너, 필요한 정보를 배껴 적어야 할 노트 등)를 가지고 활용해야했기에, 물리적,시간적으로 많은 수고로움을 감수해야했고, 더욱이 학습자의 경우에는 각각의 페이퍼문서에서 추출한 내용들은 사용자가 자신만의 노트에 정리하는 과정은 굉장한 수고로움을 요하는 작업을 감수해야했다. 비단,이런 문제를 '학습자'에게 국한시키지 않더라도 책을 읽는 일반적인 독자들은 누구나 스캐너를 통해 문서의 일부를 복사하여 소지하기도 하는데, 그 과정이 번거롭기도 하였지만, 무엇보다 저작권문제로 인해, 개인적으로 암암리에 이런 과정들을 수행해야했으며, 이렇게 전자화된 파일을 타인과 인터넷을 통해 공유, 전달 시, 저작권 문제가 발생함으로써, 사용자나 공유자 모두에게 곤혹스러운 상황들이 많았던 것이 사실이다.
또한, '스캐너'는 그 비용이 비싼것을 차치하고라도 그가 차지하는 물리적인 무게감과 부피로 인해 휴대성이 떨어지고, 필요한 부분만 손쉽게 복사해내기에는 까다로운 절차를 겪어야했다.
따라서, 본 발명은 상기의 문제점들을 해결하기 위해 창출된 것으로, 종이책을 완전히 전자책으로 대체되는 것이 불가능하다는 전제하에, 또는, 전자책이 흡수하지 못하는 종이책의 범위안에서 투명한 디스플레이가 장착된 단말기를 이용하여 페이퍼문서를 쉽게 편집, 활용할 수 있도록하는데에 그 목적이 있다. 즉, 종이책을 보면서 사전검색,오려내기,나만의 노트 만들기 등을 문서를 스캔하거나 사진을 찍지 않아도 수행할 수 있도록하여, 그동안 종이책의 물리적 한계로 인해 제약을 받아왔던, 자유로운 편집과 활용을 가능하게 하고, 저작권 문제로 인해 페이퍼문서의 스캔이 제약받았던 문제에서 탈피하여, 페이퍼문서를 스크랩한 파일이 타인과 온라인을 통해 공유,전송될 때, 본 출원을 통해 공유되는 파일에 저작권 정보를 함유시켜 정당한 결제를 통해 공유할 수 있도록 함으로써 페이퍼문서를 스캔하여 공유함으로써 생기는 저작권 문제를 해결하고자 한다. 또한, 부가적으로 제공되는 어플리케이션 모듈을 통하여 페이퍼문서의 내용들을 가지고 특수한 교육적 목적으로 2차진화시켜서 효율적인 학습을 할 수 있도록 하고자한다.
상기 목적을 달성하기 위하여 본 발명은 사용자 워크스테이션상에서, 또는 통신망에 연결된 하나 또는 다수의 서버들상에 위치한 페이퍼문서의 디지털사본을 사용자의 투명디스플레이상에 (저작권 보호를 위해)은폐하여 노출시킨 후, 페이퍼문서와 일치되어 겹치게 오버랩시켜서, 사용자가 투명디스플레이를 통해 보여지는 페이퍼문서를 보며 선택한 영역이 디지털사본에서 선택되어지도록하여 선택되어진 데이터가 특정모듈과
이에, 본 출원은 투명디스플레이의 하부에 스캐너를 배치하지 않고도 사용자가 페이퍼문서를 보며 원하는 영역에대해 '스크랩''복사''사전기능'등을 실행할 수 있게함으로써, 스캐너를 비치함으로써 발생하는 전력소모와 시간적 기다림,고비용의 부담, 소음의 발생 등의 문제에서 탈피하여, 사용자에게 페이퍼문서를 간편하게 검색,활용할 수 있도록하였다.
이는 페이퍼문서를 활용하는 모든 사용자에게 자유로운 문서의 편집과 활용을 가능케하고, 저작권문제를 해소하면서 공유와 전달을 가능케하는 효과를 가져온다.
도1은 본 발명의 주요 구성요소들을 도시한다.
도2는 페이퍼문서(즉, 하드카피)문서의 식별기호를 이용하여 판별하는 방법을 도시한다.
도3은 페이퍼문서의 페이지어레이를 이용하여 페이지를 식별하는 방법을 도시한다.
도4는 페이지마다 식별기호가 있을 경우의 식별방법을 도시한다.
도5는 디스플레이의 내부 인터페이스로써, 사용자에의해 이동가능한 특정기호를 투명디스플레이를 통해 보여지는 페이퍼문서의 약속된 영역에 오버랩시키는 방법을 도시한다.
도6은 식별단서 중 '스캐닝이미지의 일부'가 노출된 반투명레이어를 사용자가 페이퍼문서와 일치되게 위치시키는 방법을 도시한다.
도7은 식별단서 중 '서식'이 노출된 반투명레이어를 사용자가 페이퍼문서와 일치되게 위치시키는 방법을 도시한다.
도8은 사용자가 투명디스플레이 상에 페이퍼문서의 '모서리'를 지정하면 이를 기준으로 레이어가 위치되는 방법을 도시한다.
도9는 사용자가 투명디스플레이 상에 페이퍼문서의 '테두리'를 지정하면 이를 기준으로 레이어가 위치되는 방법을 도시한다.
도10은 플레인 스캐너가 구비된 투명디스플레이가 페이퍼문서의 임의의 영역을 스캔하면 해당 digialdentity가 선택되는 방법을 도시한다.
도11은 투명디스플레이 내부의 인터페이스로써 디스플레이 상에 고정된 특정기호를 페이퍼문서의 약속된 영역과 일치되도록 조정한 후, 움직임감지신호명령을 하면 이후 디스플레이의 움직임을 측정하여 레이어가 자동으로 이동되는 방법을 도시한다.
도12는 투명디스플레이의 뒷면(페이퍼문서와 밀착되는 부분)에 움직임을 감지하는 센서가 있는 모습을 도시한다.
도13은 레이어가 자동으로 위치되지 않을 경우, 사용자에의해 레이어가 위치조정될 수 있도록 제어부가 '화살표'라는 안내도구를 제공하는 모습을 도시한다.
도14는 식별단서의 노출범위를 결정할 때, 디스플레이의 크기에 따라 결정되는 방법을 도시한다.
도15는 식별단서의 노출범위를 결정할 때, 디스플레이의 회전신호에 따라 노출범위가 달라지는 방법을 도시한다.
도16은 투명디스플레이 상에서 선택영역을 지정한 후, 모듈실행결과가 레이어 상에 적층구조로 표시되는 모습을 도시한다.
도17,18은 투명디스플레이 상에서 선택영역을 지정한 후, 모듈실행결과과 레이어 이외의 영역에서 표시되는 모습을 도시한다.
도19는 투명디스플레이 상에서 사용자가 임의로 손가락으로 그리듯 지정한 선택영역에 해당하는 페이퍼문서가 캡쳐링되어 실시간으로 표시되는 모습을 도시한다.
본 발명의 광범위한 목적은 페이퍼문서를 스캔할 필요없이 쉽게 전자화하여 변경, 검색, 활용하기 쉽도록하기 위함이다.
본 발명은 사용자 워크스테이션상에, 또는 통신망에 연결된 하나 또는 다수의 서버들이나 데이터베이스에 위치한 페이퍼문서의 디지털사본을 사용자의 투명디스플레이상에 (저작권 보호를 위해)은폐하여 노출시킨 후, 페이퍼문서와 일치되어 겹치게 오버랩시켜서, 사용자가 투명디스플레이를 통해 보여지는 페이퍼문서를 보며 선택한 영역이 디지털사본에서 선택되어지도록하여 선택되어진 데이터가 특정모듈,로직,소프트웨어 프로그램과 작용하게하여 그 결과물을 디스플레이하는 것을 특징으로한다. 또한, 본 시스템은 기본적 기능성을 제공하는 이러한 기본 코어 위에서 매우 다양한 서비스와 어플리케이션을 구현할 수 있다.
이하 , 본 발명의 용어의 개념과 그 역할을 설명한다.
이하 본 발명의 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 본 발명을 설명함에 있어서, 관련된 공지 기능 혹은 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
또한, 본 발명은 그 특성상, 데이터의 위치(웹서버나 사용자 워크스테이션 등),수신하는 데이터의 종류, 레이어에 드러나는 데이터를 추출하는 방법과 노출범위에 따라 그 경우의 수가 셀 수 없이 많다. 그래서 그 모든 경우의 수에 대해 일일이 설명할 수 없는 점을 양해바라며, 가장 바람직한 실시예를 통해 대표적인 사항을 통해 간략하게 기재하고자하나, 위 '용어의 정의'를 참조한다면, 본 실시예가 본 출원의 목적을 실현하는 다양한 방식 중의 일부임을 알 수 있을거라 판단한다.
* 투명디스플레이
-본 출원상에서, 문서(또는 문서의 일부)의 표면 위에 놓여, 다양한 식별표시를 통해 레이어가 위치할 영역을 지정하고, 사용자가 선택한 영역의 좌표를 감지하여 웹서버나 사용자 워크스테이션에 송신하고 수신된 데이터를 디스플레이하는 역할을 한다. 이런 투명디스플레이는 특정 실시예에서 터치스크린을 포함하는데, 이런 터치스크린은 정보를 표시하는 픽셀과 정보를 입력받는 픽셀이 하나의 단위를 이루며 2차원적으로 배열되는 구조로 형성되는 특징이 있다.
본 출원에서 '투명디스플레이'라고 불리는 것은 제어부와 다른 메모리,하드 등이 있는 본체와 결합된 형태이거나, 투명디스플레이와 본체가 분리된 형태를 모두 포함는 단말기를 총칭하여 설명의 편의를 위해 '투명디스플레이'라고 명명하고자한다.
* 사용자 워크스테이션
-본 출원에서 '사용자 워크스테이션'은 구조적으로는 투명디스플레이를 구비한 단말기에 제어부와 메모리,전력공급장치등의 제반장치가 유,무선으로 연결된 구조체를 모두 포함하여 지칭한다. 이 '사용자 워크스테이션'은 물리적으로 제반장치와 디스플레이가 분리된 형태일 수 있고, 결합된 형태일 수도 있다. 또는, 디스플레이와 여타의 제반장치가 국부적으로 결합된 형태일 수도 있다.
또한, 일부 실시예에서, 통신인터페이스를 갖추고 네트워크를 통해 컴퓨터 및 모바일 스테이션(예컨대, 모바일 폰 또는 PDA)등과 같은 시스템의 다른 부분과 통신할 수도 있으며, 웹서버나 온라인상의 데이터 저장소와 연결되거나, 미리 데이터가 다운로드 받아진 다른 엔티티를 통해 데이터를 전송받을 수 있다.
또한, 사용자 워크스테이션은 시스템내의 어딘가에 위치하는 다른 기능성들에 따라서, 트랜스듀서, 일부 저장장치, 및 데이터 인터페이스 정도로 구성되어 극히 간단할 수도 있고, 더 많이 완비된 단말기의 형태일 수도 있다.
역할론적으로 보면, '사용자 워크스테이션'은 로컬 파일링 시스템 또는 데이터베이스 또는 웹서버로부터 페이퍼문서의 디지털사본인 digitaldentity를 선택,액세스하거나, 인증,보안 또는 지불을 실행할 수 있는 몇몇 액세스서비스를 실행시키거나,소정포맷으로의 문서의 변환 등과 같은 다른 서비스를 실행하는 역할을 한다. 또는 레이어 상에 식별단서를 노출해야 할 경우, 상기 디스플레이 크기 정보를 송신하여, 해당하는 식별단서를 검색,추출하는 역할을 하거나, 디스플레이가 레이어 상에 위치한 영역의 정보를 송신하여 해당 digitaldentity에서 식별단서를 추출하여 그 결과를 수신하는 역할을 포함하여 수행한다. 또한, 플레인 스캐너가 구비된 단말기일 경우, (문서의 일부가 스캔된) 스캔 이미지에 대해 웹서버나 데이터베이스,사용자 워크스테이션에서 동일한 (원본의)스캔 이미지를 검색하여 식별단서가 추출되도록 하는 역할 등을 포함하여 수행한다.
*book identity
-특정 페이퍼문서나 전자책과 같은 출판물의 고유한 정체성을 나타내는 말로써, 책의이름과 저자,에디션,출판사,발행인 등의 정보로써 상기 문서의 정체를 식별할 수 있다. 즉, 모든 출판물은 원시데이터를 기준으로 다양한 형태(디지털문서,페이퍼문서)로 구현되어 시중에 배포된다. 이때, 이런 기준이 되는 원시데이터의 정체가 바로 book identity 로써, 복수의 문서가 book identity가 동일하다는 뜻은 동일한 원시데이터로부터 복사/배포된 문서라는 뜻과 같다. 그리하여 동일한 book identity로 식별된 문서는 그 내용이나 형식, 구성에서 완벽히 일치한다.
이런 book identity를 식별하기 위한 가장 좋은 수단으로는 isbn넘버(도2-210)를 들 수 있는데, isbn넘버는 '국제표준도서기호'로써, 책에 부여되는 '국제적인 주민등록번호'와 같다고 보면 된다. 그러므로 고유한 값이 되어야하고, isbn이 같은 다른 책은 없다.
본 출원상에서는 상기 book identity를 식별하는 방법으로 isbn 넘버를 이용하기도 하지만, 다른 실시예를 통해 얼마든지 다른 수단을 통해 상기 book identity를 식별할 수 있을 것이다.
또한, 상기 식별된 book identity는 페이퍼문서로 구현되기도 하고, 디지털문서로 구현되기도 하는데, 이렇게 디지털문서로 구현된 것을 상기 식별된 book identity에 해당하는 digitaldentity라고 한다. 이런 digitaldentity에 해당하는 가장 대표적인 것이 '스캐닝이미지'이며, 사실상 대부분의 경우에 이 '스캐닝이미지'가 활용되지만, 경우에 따라 사용자의 데이터 사용 목적에 따라 레이어 상의 위치정보가 함유된 text data set, audio data set 등 다양한 형식과 포맷의 자료구조체가 포함된다. 예를 들어, 사용자가 단순히 '사전검색'기능만을 목적으로 한 경우에는 특정 페이퍼문서 상의 단어들 각각의 위치(좌표)가 함유된 text data set만으로도 얼마든지 상기 목적을 실현할 수 있을 것이다. 또는, 사용자가 영어책을 보며 특정 단어나 문장에 대한 원어민발음을 듣고자한다면, audio data set과 연결되도록 할 수도 있을 것이다. 그 외에도, 다른 심볼로 구성되는 기호(signature)를 통해서도 상기 목적을 실현할 수 있을 것이다.
*레이어
제작자나 사용자가 페이퍼문서를 보며 페이퍼문서의 원하는 영역에 부가데이터를 위치시키고, 타인의 부가데이터를 열람할 때, 개별부가데이터의 위치를 정확히 인식하여 원활한 데이터 공유가 가능토록 하기위한 '좌표인식도구'라고 볼 수 있다. 즉,사용자는 상기 레이어 상에 드러난 식별단서들을 참조하여 페이퍼문서와 일치되게 위치를 조정할 것이다. 이를 위해, 레이어는 페이퍼문서의 해당페이지와 동일한 크기여야 하는 전제조건이 있으며,사용자의 임의로 그 크기를 조절할 수 없는 특징이 있다.또한 레이어 상에 드러난 식별단서와 페이퍼문서를 참조하여 선택해야하므로 투명, 혹은 반투명의 특성을 지녀야한다. 이런 투명/반투명의 레이어는 차후, 레이어 상에 식별단서(스캐닝 이미지의 일부,서식 등)를 표시하거나 테두리를 표시하여 사용자가 이들을 참조하여 페이퍼문서와 일치되게 레이어의 위치를 조정할 수 있도록 해준다. 만일, 이와 같이 드러난 식별단서들을 참조하여 사용자가 임의로 레이어의 위치를 조정하지 않고, 자동으로 레이어의 위치가 선정되어 렌더링되는 경우도 있는데 (이는 하단의 설명을 참조하면 될 것이다.)
이럴 경우, 레이어는 별다른 식별 단서를 노출시키지 않아도 되며, 사용자가 굳이 레이어의 존재를 인지해야 할 필요가 없기에 완전히 투명한 상태여도 될 것이다. 또한, 이 레이어는 사용자 워크스테이션에서 로컬액세스되거나, 웹서버를 통해 다운,액세스 될 수 있다.
즉, 레이어는 본 출원에서 '좌표인식도구'로써의 기능을 하는 가상의 개념으로써, 경우에따라 레이어는 사용자에게 가시적으로 인식되기도 하고, 비가시적으로 인식되기도 하며, 인식조차 안될 수도 있다. 즉, 투명디스플레이 상의 터치지점의 좌표를 해석하는 '도구'가 되어주는 것이 바로 이 '레이어'이며, 그러기 위해 '레이어'는 페이퍼문서와 정확히 일치해야하는 것이다.
더 엄밀히 말하면, 레이어라는 것도 명확히 그 실체가 존재하는 물리적 물질이 아니므로, 이를 마치 한장의 페이퍼가 움직이듯 설명하는 것은 맞지 않을 것이다. 그러나, 설명의 편의를 위해, '레이어'라는 개념을 한장의 페이퍼가 투명디스플레이 내부에서 움직이듯 설명하는 것이니 오해가 없길 바란다.
요약하면, 레이어는 '투명디스플레이에서의 터치지점의 좌표'를 '레이어 상의 좌표'로 한단계 변형하여 digitaldentity와 작용하는 '좌표변형모듈'이라고 해석함이 가장 바람직할 것이다. 그러므로 여타의 다른 실시예에서 레이어가 사용자에게 인식되지 않는다하여도, 투명디스플레이 상의 사용자가 선택한 지점의 좌표(절대좌표)를 변형(혹은 불변형)하여 인식하고 digitaldentity의 상기 변형(혹은 불변형)된 좌표에대해 실행되는 것이라면 모두 이 '레이어'가 존재한다고 해석해야한다.
*식별단서
상기 투명/반투명 레이어 상에서 노출되는 단서들로써, 이 단서들은 페이퍼문서와 레이어가 정확히 오버랩되도록 위치를 조정할 때 그 단서가 된다. 이를 위해, 이들 단서들은 크게 두가지 종류로 나누어 볼 수 이다.
첫번째, 페이퍼문서의 해당 페이지의 '스캐닝 이미지의 일부'(도6-140)이다. 레이어 상에 페이퍼문서의 해당 페이지(한페이지,혹은 두페이지일 수 있음)의 스캐닝이미지를 일부 노출시키는 방법이다. 이때, 너무 많은 이미지가 레이어 상에 노출되게 되면 저작권의 침해 소지가 있기 때문에 스캐닝 이미지는 저작권을 침해하지 않는 범위내에서 노출될 필요가 있다. 이때, '스캐닝이미지의 일부'는 스캐닝이미지 원본에서 글자나 그림 부분만 추출하여 투명/반투명레이어 상에 노출시킬 수도 있고, 이미지의 일부를 떼어내어 투명/반투명 레이어 상에 노출시킬 수도 있으며, 스캐닝이미지 전체에서 일부를 잘라낸 형태를 노출시킬 수도 있을 것이다. 그러나 이렇게 스캐닝이미지를 제공할 때, 한가지 고려해야할 사항이 있는데, 그것은 '디스플레이의 크기가 페이퍼문서보다 작을 경우'이다.
이때는 제작자가 일방적으로 노출범위를 결정하여 디스플레이의 크기에 상관없이 제공하는 것은 문제가 있다. 왜냐하면, 제작자에의해 일방적으로 결정된 노출영역이 디스플레이 상에 식별되지 않는 구간이 발생할 수 있기 때문이다. 즉, 페이퍼문서의 특정 부분에 상기 투명디스플레이를 올려서 레이어를 일치시키고자 할때, 레이어 상에 상기 특정부분에 해당하는 식별단서가 없을 수도 있다는 뜻이다. 이런 현상을 방지하기 위하여 단말기의 디스플레이 크기에 맞게끔 식별단서의 노출범위가 결정되야할 필요가 있다. (이에대한 상세한 설명은 하단의 '디스플레이 크기가 페이퍼문서보다 작을 때 식별단서의 노출방법'을 통해 확인할 수 있을것이다.)
두번째, 페이퍼문서의 '레이아웃'이다. 이 '레이아웃'이라 함은, 글자의 모양,문장의 길이,폰트,줄 간격,이미지의 위치와 크기, 등, 페이퍼문서의 내용 이외에 단어와 이미지 등의 위치를 가늠할 수 있는 모든 식별단서를 가리킨다. 이런 레이아웃에는 글자나 문장의 위치를 나타내는 '가로줄'이 포함될 수 있다. 이 가로줄(도7-152)은 흔히 '밑줄'이라 부르는 형태로 식별되기도 하고, 사용자의 식별을 도와주기 위해 '밑줄'에 번호가 매겨진 형태도 가능하다. 즉, 줄마다 1,2,3,...이 새겨져서 첫째줄,둘째줄,...을 식별할 수 있다. 또는 글자나 문장,이미지의 위치를 나타내는 '박스'(도7-150)형태일 수도 있다. 글자나 이미지의 위치를 손쉽게 식별할 수 있어서 직관적으로 레이어의 위치를 조정할 수 있다는 장점이 있다. 마지막으로, 레이어의 바깥 '테두리(도9-170)'도 가능하다. 이는 단순히 페이퍼문서의 페이퍼외곽을 나타내는 테두리일 수도 있고, 본문내용의 외곽을 나타내는 테두리일 수도 있다.
*특정모듈
-일반적으로, 프로그램 모듈,혹은 로직은 특정작업을 수행하거나 특정 추상 데이터 유형을 구현하는 루틴, 프로그램, 컴포넌트, 데이터구조 및 기타 유형의 구조를 포함한다. 본 출원에서 쓰이는 '특정모듈'이라함은, 사용자가 페이퍼문서를 보며 레이어 상에 선택한 영역(좌표)과 동일한 영역(좌표)에 해당하는 digitaldentity가 선택되었을 때, 선택된 데이터에 대해 실행되는 로직,혹은 소프트웨어,어플리케이션 등을 포함한 개념이다.
본 출원상에서는 이런 특정모듈의 예로 선택한 영역에 해당하는 데이터를 변형없이 추출하는 '캡쳐'모듈, 상기 데이터를 특정 형식과 포맷으로 변형하여 표시하는 '복사'모듈, 제작자에 의해 미리 작업되어진 마크업(그래픽 소스)과 함께 표시하는 '스크랩모듈'을 들 수 있다. 이 모듈은 통신네트워크를 통해 연결되어있는 원격 처리 장치들에 의해 작업이 수행되는 분산 컴퓨팅환경에서 실시될 수도 있으며 분산 컴퓨팅 환경에서는 로컬 및 원격 컴퓨터 저장장치 둘 다에 모두, 혹은 국부적으로 위치할 수 있다.
또한, 상기 특정 모듈은 사용자의 시스템 상에 뚜렷한 기능성을 지닌 tool로써 제공되어지기도 하지만, 데이터 또는 문서의 속성정보에 의존하거나, 마크업 이나 컨텍스트 분석으로부터 유도되어져 실행되기도 한다.
또한, 특정 모듈이 실행되었음을 표시하는 특정 스탬프가 찍히도록하여, 차후, 사용자 또는 서버 관리자,또는 특정인 의해 특정스탬프가 찍힌 데이터들을 관계설정(프로그래밍)하여 사용자에게 제공할 수 있을 것이다.
본 출원서에서는 본 출원의 목적에 충실하기 위해 모듈의 종류로 대표적인 몇 가지 사항만 기재하나, 사실상 본 출원의 궁극적 목적은 이러한 모듈의 기능성을 제공하는 기본코어 위에서 매우 다양한 서비스와 애플리케이션을 구현하는 것에 있다.
*페이퍼문서의 book identity를 인식시키는 방법
-사용자가 페이퍼문서(200)를 선택한 후, 해당 문서의 고유정보를 식별할 수 있도록 임의의 사용자 인터페이스(키보드, 마우스, 터치 등) 또는 임의의 판독수단(바코드 판독기..)를 이용하여 페이퍼문서의 식별기호(도2-210)( 책이름, 고유번호-isbn넘버,edition정보 등)를 입력한다. 그러면 단말기는 식별된 데이터가 사용자의 워크스테이션에 있는지를 검색하고, 없을 경우, 웹서버나 데이터베이스를 통해 다운로드받거나, 검색하여 준비시키는 역할을 한다.
*페이퍼문서의 선택 페이지를 인식시키는 방법
-위 과정의 종료 후, 디스플레이 상에 드러난 인터페이스인 페이지 어레이 버튼(도3-110)을 이용하여 사용자가 선택한 페이퍼문서의 페이지번호(페이퍼문서)와 동일한 페이지번호(도3-120)을 입력한다.
*페이퍼문서의 페이지에 고유식별기호가 존재할 경우 인식방법
-본 발명이 상용화되었을 경우, 본 발명을 좀 더 쉽고 편리하게 활용하기 위하여 페이퍼문서의 페이지마다 식별기호(마크업)가 인쇄되어 나올 수 있으며, 이럴 경우, 사용자 인터페이스나 식별수단(도4-230)(바코드인식기 등)을 통하여 편리하게 식별시킬 수 있다
* 페이퍼문서의 (제작자와 미리 약속된)특정영역을 스캔하여, book identity를 단말기에 식별시키는 방법.
-제작자와 사전에 약속된 영역(도10-300)을 스캔하여 전송하면, 스캔 이미지와 겹쳐지는 원본을 서칭하여 book identity를 식별하는 방법이 있다.예를 들어.'오른쪽페이지의 페이지상단모서리'를 스캔하는 약속이 전제되어있다면, 사용자가 약속된 영역을 스캔하여 전송하면 웹서버나 데이터저장소,또는 사용자 워크스테이션에서 수신된 데이터와 일치하는 스캐닝이미지(디지털 사본)을 검색하여 book identity를 찾아낼 수 있다.
또는 투명디스플레이 상에 미리 고정된 폐구간에 페이퍼문서의 페이지번호가 오도록 위치조정하여 스캔하는 방법 등이 있을 수 있다. 이런 일련의 방법을 위한 전제조건은 상기 사용자 워크스테이션 상에 스캐닝 엘리먼트가 있어야한다는 것이다. 이런 스캐닝 엘리먼트는 투명디스플레이에 내장되어, 투명디스플레이의 밑에 깔린 페이퍼문서에 빛을 분사하여 여기서 반사된 빛을 읽어들이는 원리로 구현되는데, 그 대표적인 예는 2차원적 면적을 한번에 발광하고 수광하는 플레인 스캐너,스캔헤더가 라인형태로 구현되어 투명디스플레이의 내부에서 이동하며 투명디스플레이의 아래에 깔린 페이퍼문서를 스캔하는 형태를 들 수 있다.
또는 스캐닝 엘리먼트가 투명디스플레이와 물리적으로 분리된 형태로, 상기 투명디스플레이와 유,무선으로 연결되어 데이터를 전송함으로써 실현될 수 있다. 쉽게말해, 페이퍼문서의 약속된 영역을 스캔한 이미지를 전송하여 웹서버나 데이터저장소,또는 사용자 워크스테이션에서 (페이퍼문서를 스캔한)해당영역과 동일한 이미지를 가진 전체크기의 스캐닝 이미지를 찾아냄으로써 book identity를 식별하는 방법인 것이다.
* 사용자의 조작으로 레이어와 페이퍼문서를 일치시키는 방법.
- 투명디스플레이 상에 레이어의 위치가 일방적으로 지정될 경우, 사용자는 노출된 식별단서에 맞춰 페이퍼문서를 이동시킴으로써 일치시킬 수 있을 것이다.
-사용자가 레이어의 위치를 지정할 경우, 페이퍼문서 위에 투명디스플레이를 올린 채, 투명디스플레이를 통해 보여지는 페이퍼문서의 테두리(도9-170)나 모서리(도8-160)등을 투명디스플레이상(100)에 표시하여 레이어가 위치할 장소를 지정할 수 있다.
- 레이어에 식별단서가 노출되고 레이어가 이동가능할 경우, 식별단서를 참조하여 레이어가 페이퍼문서와 일치되도록 레이어의 위치를 조정할 수 있을 것이다.
*식별단서를 노출시키는 방법.
일부의 경우,페이퍼문서의 book identity를 단말기에 식별시키고, 레이어 상에 노출될 식별단서의 노출범위가 미리 결정되어진 데이터가 수신되는 방식을 쓸 경우, 디스플레이의 크기가 페이퍼문서보다 작을 경우에는 사용자가 페이퍼문서의 특정부분에 디스플레이를 위치시키고 레이어를 아무리 이동해도 식별단서가 노출되지 않을 수도 있다. 즉,식별단서가 디스플레이의 범위를 벗어나버리는 경우가 발생하는 것이다.이를 위해,디스플레이가 페이퍼문서보다 작을 경우에는, 레이어 상에 노출될 식별단서가 디스플레이의 크기를 고려하여 제공되어져야 한다.
이를 위해, 대략 3가지 방식의 식별단서 제공방법이 있다.
첫째, 사용자가 페이퍼문서의 book identity정보를 단말기에 식별시킬 때, 디스플레이 크기 정보가 함께 전송되도록 하여 전송된 디스플레이 크기에 해당하는 (제작자에의해 노출범위가 미리 정해져 작업되어진)식별단서를 제공받는 방법이 있다. 이때, 제작자가 디스플레이의 크기에 해당하는 노출범위를 미리 선정하는 기준은 도면14에서와 같이, 디스플레이가 페이퍼문서의 어디에 위치해도 식별단서가 노출되도록 도면에서 보이는 바와 같이 최소한의 영역(도14-190)이 선정되면 된다. (이는 최소한의 영역이므로 물론, 이보다 더 많은 범위가 노출되어도 저작권문제를 피할수만 있다면 얼마든지 가능할 것이다.)이때 최소한의 영역을 선정하는 기준은 명확히 '수학적 공식'으로 도출할 수가 없다. 왜냐하면 제작자가 고려해야할 사항( 저작권문제와 사용자의 편의성)을 고려해서 최소한의 영역만 포함되게 재량껏 설정해놓으면 되는것이지, 분명한 기준이 있는 것은 아니기 때문이다. 하지만, 대략적인 이해를 돕기위해 (도면14)을 참고해서 설명하자면, 페이퍼문서의 페이지의 크기를 디스플레이의 크기(가로m*세로n)로 나누었을때, 보기의 (도면14의 190)에서처럼, 최소한의 영역이 드러나게 설정해두면 된다. 또한, 디스플레이를 회전시켜 사용할 수도 있기때문에, 이를 위해,(도면15)과같이 전체크기의 페이지를 (가로n*세로m)으로 나누어져 노출될 최소한의 영역(도15-191)이 정해진 편집된 디지털사본 또한 준비해두어야한다.(이 편집된 디지털사본은 차후,사용자 단말기의 '디스플레이 회전'신호에의해 각각 렌더링될 것이다.)
두번째, 웹서버,데이터저장소나 사용자 워크스테이션에서 선택할 때, 디스플레이 크기 정보에 상관없이 book identity에 해당하는 스캐닝 이미지 사본을 선택한 후, 디스플레이 크기 정보에 해당하는 '추출 모듈'이 작용하도록 하는 방법이 있다. 이때의 추출 모듈은 미리 제작자에의해 도출되어진 공식으로써, 첫번째 방법과 노출범위의 결정방법이 동일하므로 생략한다. 이때의 '추출모듈'은 사용자 디스플레이 크기 정보를 전송받은 웹서버,데이터베이스,사용자 워크스테이션 상에서 원격제어될 수도 있다.
위의 두가지 방법은 추출이 미리 제작자에 의해 이루어져서 하나의 파일형태로 존재하느냐, 아니냐의 과정상의 차이일 뿐임을 염두해 두어야 한다.
세번째, 아무런 식별단서가 노출되지 않은 반투명레이어를 사용자가 이동시키면 이동이 종료되고 정지한 지점의 레이어상 위치(디스플레이가 레이어에서 위치한 지점)를 식별하여, (디스플레이가 레이어에서 위치한 지점의) 좌표 내부의 데이터 일부를 추출하여 사용자 단말기의 레이어에 전송하는 방법이 있다. 이 방법은, 단말기의 디스플레이크기에 해당하는 노출영역이 제작자에의해 미리 결정되어진 것이 아니고, 사용자가 레이어에서 아무렇게나 선택한 영역을 단말기가 감지하여(단말기가 레이어의 움직임을 감지하여) 레이어 상에 선택한 영역에 해당하는 데이터를 실시간으로 전송해주는 방법인 것이다. 즉, 디스플레이가 레이어 상에서 좌표 a~b까지에 위치했다고 치자. 그러면 좌표a~b 에 해당하는 데이터가 digitaldentity에서 일부 추출되어 상기 레이어 상에 노출될 것이다. 그러면 사용자는 노출된 상기 단서들을 참고하여 페이퍼문서와 일치시킬 수 있을 것이다. 이 방법은, 언제나 일정한 범위의 단서(예컨대,디스플레이의 1/2이 항상 식별단서로 채워지게 된다)가 제공됨으로써 사용자가 좀 더 쉽게 레이어와 페이퍼문서를 일치시킬 수 있다는 장점이 있다.
*사용자가 기존에 이미 배포된 문서(digitaldentity가 존재하는 페이퍼문서,혹은 모니터상에 렌더링된 전자문서)의 레이아웃(글자크기,줄간격 등)을 변경하여 페이퍼문서를 생성했을 때, 레이어와 상기 변경된 페이퍼문서를 일치시키는 방법.
-일부 실시예에서, 사용자는 기존에 제작자에의해 이미 특정 레이아웃의 형태로 인쇄되어진, 혹은 렌더링된 문서의 레이아웃(글자크기,줄간격,글자모양 등)을 변형하여 인쇄하기도 한다. 이때,원본 (배포되어진)문서의 내용은 변형하지 않은채, 레이아웃만 편집하여 페이퍼문서를 생성하였을 경우, 사용자는 상기 원본문서의 식별자(예;isbn넘버를 인식시키거나, 변경된 페이퍼문서의 전부,혹은 일부를 스캔함으로써 인덱싱에 필요한 소스를 제공할 수 있다)를 단말기에 식별시켜서 상기 원본문서의 digitaldentity를 찾아낸 후, 레이어 상에 나타난 식별단서(예;스캐닝이미지의 일부)를 사용자가 인위적으로 조작(글자크기를 줄이고,줄간격을 맞추고....등등)하여 그 레이아웃에 관한 설정을 바꿈으로써 레이어와 변형된 페이퍼문서를 일치시킬 수 있다.
또는, '변형된 페이퍼문서'의 전부,혹은 일부를 스캐닝한 데이터소스를 통해 digitaldentity에서의 변형정도을 추정할 수 있다. 즉, '변형된 페이퍼문서'의 일부,혹은 전부를 스캐닝한 데이터를 데이터저장소,웹서버,혹은 워크스테이션에 전송하여 데이터의 분석과 검색프로세스를 통해 해당 digitaldentity를 찾아내는 방법이다. 이렇게 알아낸 digitaldentity는 상기 데이터분석을 통해 추론된 설정양식으로 변형되어 사용자에게 제공됨으로써, 레이어와 '변형된 페이퍼문서'를 일치시킬 수 있게된다.
*레이어가 이동시에만 식별단서가 노출되도록하여 페이퍼문서와 일치시키는 방법
-레이어 상에 페이퍼문서의 내용이 식별단서로써 많은 부분이 드러나게 되면 '저작권침해'문제가 발생할 수 있다. 그러나 그렇다고해서 식별단서의 노출량이 너무 적으면 사용자가 참조할 만한 단서들이 적어서 어려움을 겪는 딜레마가 있다.그래서, 저작권을 침해하지 않는 범위에서 식별단서를 최대한 많이 노출시키는 방법으로 '레이어의 이동시에만 식별단서를 노출하는 방법'이 있다.
즉, 사용자에의해 레이어가 이동할때에만 스캐닝이미지의 전부 혹은 일부인 식별단서가 노출되도록 하고, 이동하지 않을 때에는 식별단서를 노출하지 않는것이다.이는, 레이어가 이동하는 상태에서는 사용자가 제대로 식별단서(스캐닝이미지의 전부 혹은 일부)를 제대로 읽고 이해하기가 어려운 점을 활용한 것이다.
*식별단서가 노출되지 않은 레이어와 페이퍼문서를 일치시키는 방법
-디스플레이 내부의 인터페이스로써 특정기호(예; 박스형태,별표, 등)를 약속된 영역(디스플레이를 통해 보여지는 페이퍼문서 상의 약속된 영역)에 위치시킴으로써, 레이어가 자동으로 위치되는 방법이 있다. 자세히 말하자면, 디스플레이 내부에 인터페이스로써, 박스형태가 있다고 치자. 이 작은 박스형태의 폐구간(도5-160)은 사용자의 터치에 따라 움직인다. 이 박스를 미리 약속된 영역에 오버랩시키는 것이다. 가령, 페이퍼문서의 '페이지번호'(도5-161)위에 박스를 가져다놓기로 약속이 되어 있다면, 사용자는 디스플레이를 통해 보여지는 페이퍼문서를 보며 페이퍼문서 상의 페이지번호 위에 이 박스를 올려놓게 될 것이다. 그러면 단말기는 박스가 있는 위치를 감지하여 digitaldentity(스캐닝이미지)의 페이지번호가 이 박스에 오도록 레이어의 위치를 조정하는 방법이다. 이 방법을 쓸 경우에는, 사용자는 레이어를 인지하지 못해도 상관없으며, 레이어 상에 별다른 식별단서를 노출시키지 않아도 된다. 또한, '약속된 영역'이라는 것은 '페이지번호'가 적힌 영역일 수도 있고'본문의 첫시작점'이 될 수도 있으며, 그외 경우에따라,다양한 약속영역이 생길 수 있음은 쉽게 알 수 있을 것이다.
*움직임 감지 엘리먼트가 구비된 디스플레이에서 레이어와 페이퍼문서를 일치시키는 방법.
움직임 감지 엘리먼트가 구비된 디스플레이라면, 디스플레이의 내부 인터페이스로써 존재하는 '고정된' 특정 표시에 페이퍼문서의 약속된 영역이 오도록 위치를 조정한 후, 움직임이 개시된다는 신호를 사용자가 단말기에 보내면,디스플레이 내부의 움직임감지엘리먼트가 이 움직임의 거리와 방향,속도를 인지하여 이와 동일한 거리와 방향대로 레이어가 움직이도록 설정하는 것이다. 이때, 디스플레이의 내부 인터페이스로써 존재하는 특정 표시(도11-170)는 고정되어서 사용자에의해 조정될 수 없는 특징이 있음을 주의해야한다.
즉, 이는 출발점을 지정해놓고 책위에서 디스플레이가 움직인만큼 출발점이 지정된 (디스플레이 내부의 고정된 특정표시)레이어가 이동한다고 생각하면 쉽게 이해가 갈 것이다. 또한, 이때 주의할 점은 움직임감지엘리먼트가 감지한 방향과 움직임의 속도,이동량에 대해 동일한 량의 레이어 이동이 있어야 한다는 점이다.
이때, 움직임감지엘리먼트는 다양한 형태로 구현될 수 있는데, 그 중 몇가지만 예를 들고자한다.
첫번째, 미세(granuel)/표면 텍스쳐 센서.
페이퍼문서 상의 표면의 변형을 검출하기 위해 2개의 병렬 미세/표면 텍스쳐 센서를 포함한다. 이러한 종류의 입력 센서의 일반적인 사용은 점자 텍스트를 캡쳐하는 것이다. 병렬 표면 텍스쳐 센서는 상기 병렬 센서에 의해 이동된 상대적인 속도/거리로부터 센서의 각도도 판정할 수 있다.
두번째, 제스쳐(모션기반).
스캐닝 헤드하에서 통과하는 데이터를 관찰함으로써, 모션 센서에서의 변화를 모니터링함으로써, 또는 기계적 모션- 감지 수단에 의해 제스쳐를 검출할 수 있다.
세번째, 광학 데이터의 관찰.
광학 엘리먼트 하에서 지나가는 표면 또는 데이터를 관찰함으로써, 광학 컴퓨터 마우스가 하는 것과 매우 동일한 방식으로, 상대적인 모션을 연산할 수 있다. 이렇게 상대적인 동작을 분석함으로써 상기 단말기는 유저가 상기 투명디스플레이로 어떠한 제스쳐를 하는지 판정할 수 있다. 일부 실시예에서, 광학 시스템은 또한 페이퍼문서의 표면상의 패턴을 관찰함으로써 상대적인 모션을 검출할 수도 있다. 또는, 페이퍼문서의 표면상의 절대위치 코드를 체크함으로써 절대 위치를 검출할 수 있다.
네번째, 자이로/가속도계 모션 센서
속도나 방향의 변화를 감지하기 위한 가속도계와 같은 가속도 센서를 구비하면 그에의해 제어 제스쳐를 판정할 수 있다. 또는, 모션 및 제스쳐를 검출하기 위해 자이로스코프(특히,칩 링-레이저 자이로스코프는 이러한 작업에 적합하다)를 사용할 수 있다.
다섯번째, 기계(볼포인트, 롤러 등)장치.
광학적으로 인코딩되는 잉크 펜의 볼포인트와 유사한 롤링 엘리먼트나 볼을 구비할 수 있다. 볼이 페이퍼 표면을 따라 이동하면서, 광학 센서는 광학적으로 인코딩된 엘리먼트의 모션을 검출한다.
일부 실시예에서, 상대적인 모션을 기록하기 위하여 볼포인트 전체에 전기적으로 대전된 잉크의 흐름을 측정한다. 상기 볼에 흐르는 잉크에는 이러한 프로브에의해 검출되는 전하가 주어진다. 볼포인트 하우징에 내장된 전류-감지 프로브는 볼 상의 잉크의 흐름을 검출한다. 복수의 프로브가 있다면, 잉크 흐름의 방향은 그 결과의 볼의 모션, 및 그에 따른 표면을 지나는 실질적인 모션이 추측될 수 있다. 이 전기적으로 대전된 잉크 기술은 범용목적의 입력기록 디바이스로서 역할을 할 수 있고, 여기서 유저는 종래 잉크로 기록하고, 반면에 모션이 기입되고 기록될 수 있다. 수신기에서 흘러나오는 대전된 잉크만 센서에 의해 감지되도록 볼이 자신의 하우징에서 드러나는 경계 또는 그 근방의 가드링이 상기 대전된 잉크를 방전시키는데에 사용될 수 있다. 또는,획득된 스캔 영상의 옵티컬 플로우(optical flow)또는 모션 플로우(motion flow)를 이용할 수도 있다.
*플레인 스캐너가 구비된 투명디스플레이에서 레이어와 페이퍼문서를 일치시키는 방법.
본 출원상에서 '플레인 스캐너'라 함은 디스플레이의 내부에 '스캐닝부'를 두고 스캔대상객체 위에서 디스플레이를 오버랩하여 스캔 대상 객체를 향해 빛을 분사하고 반사된 빛을 읽는 원리를 차용하는 단말기를 뜻한다.
본 출원의 이해를 돕기 위해 대략적인 설명을 하자면, 디스플레이의 내부의 레이어 층에서 하나의 레이어에 광원체와 수광체를 평면상에 다수 배치하여 2차원적 면적을 동시에 스캔하는 형태도 있고,그 외에 디스플레이 사이에 물리적 공간을 두어 스캔라인헤더가 지나가게 하는 방법도 있다. 그러나 이들은 단순히 스캔부를 구성하는 엘리먼트의 차이일 뿐, 디스플레이의 내부에 스캐닝부가 있고 스캔 대상 객체 위에서 스캔 대상 객체를 위에서 눌러서 스캔 대상 객체를 향해 빛을 분사하고 반사되는 빛을 받아들인다는 원리에서는 큰 변화가 없다고 할 수 있으며 상기 두가지 방식 이외에도 여타의 다른 방법으로 2차원적 면적인 스캔대상객체 위에서 스캔을 실행하는 스캐너를 본 출원상에서는 '플레인 스캐너'라 칭한다.
플레인 스캐너가 구비된 디스플레이에서 디스플레이를 페이퍼문서 위에 올리고 페이퍼문서의 일정 영역을 스캔하면, 스캔 완료된 이미지가 웹서버나 사용자 워크스테이션으로 전송되어 동일한 이미지를 일부분으로 가지고있는 원본의 이미지를 찾아낼 수 있을 것이다. 그런 후, 상기 스캔된 이미지와 선택된 원본의 이미지에서 동일한 부분이 중첩되도록 레이어가 위치되도록 한다. 그 후, 움직임 감지 엘리먼트가 구비되어 있다면 디스플레이의 이동을 감지하여 레이어를 동일한 방향과 동일한 속도로 이동시키면 된다.
또는, 사용자에의해 상기 디스플레이의 위치를 이동할 때마다 스캔을 실행하도록 하여, 레이어의 위치를 자동으로 조정하도록 할 수 있다.(이는 광학센서로 움직임을 감지하여 레이어를 위치시키는 원리와 동일하다)
*투명디스플레이를 통해 페이퍼문서의 특정영역을 선택, 활용하는 방법.
-상기 과정 종료 후, 투명디스플레이를 통해 보여지는 페이퍼문서를 보며,특정영역(도16)을 선택하면, 웹서버나 데이터베이스 혹은 사용자 워크스테이션에 연결된 모듈이 상기 선택된 데이터에대해 실행되게된다. 그 후,상기 실행결과가 선택영역의 주변에 표시(도16-101)된다.
이때, 사용자가 특정영역을 선택하기 앞서, 특정모듈모드로 전환하면, 사용자가 지정한 폐구간에대해 자동으로 특정모듈이 실행되는 방법도 가능하다. 또는 사용자가 페이퍼문서를 보며 선택한 페이퍼 상에 인쇄된 특정 심볼,혹은 digitaldentity상에 미리 보이지 않도록 숨겨진 마크업이 특정 모듈의 제어커맨드로 해석되도록 하여 자동으로 특정 모듈(예컨대, 금융결제 내지는 특정 어플리케이션)이 실행되도록 설정해놓을 수도 있을 것이다. 이런 마크업은 사용자, 문서의 창작자 또는 출판자, 또는 다른 누군가에의해 제공될 수 있고, 일부 소스로부터 직접 액세스되거나 혹은 일부 서비스에 의해 생성될 수 있다.
아울러 '특정모듈'의 종류에따라 추출대상이 되는 데이터(digitaldentity)의 종류가 달라지는 것 또한 가능하다. 예를 들어, 선택영역에대해 '사전검색'기능(영한,한영,일한,....등등)을 수행할 시에는, 디지털사본의 종류가 '스캐닝이미지'가 아닌 text data set으로도 가능할 것이다.(이때, text data set은,스캐닝이미지에서 문자인식(ocr)프로세스를 거쳐 생성된 자료구조체로써, 각각의 단어,혹은 문장들이 레이어,혹은 전체크기의 페이퍼문서 상에서 차지하는 위치정보를 반드시 함유해야한다.) 이런 자료구조체는 다양한 형식의 포맷으로 구현되어질 수 있다. 또한, 일부실시예에서, 음성 data set일 수도 있으며, 다른 심볼로 구성된 기호로 데이터를 변환시켜서 사용할 수 있다.
*선택영역에 대해 특정 모듈이 실행될 때, 기록되는 필드
-특정모듈이 실행된 선택영역에 해당하는 데이터는 여분의 필드와 함께,혹은 여분의 필드만 데이터베이스,사용자 워크스테이션,혹은 웹서버에 전송될 수 있다. 이렇게 특정의 몇 개의 필드로 구성된 개체들은 DBMS에 의해 미리 설정해놓은 관계설정모형,또는 시스템 어플리케이션에 의해 다른 개체와 개체관계 혹은 속성관계를 형성하여 사용자에게 더 많은 자료를 제공할 수 있다.
추가되는 필드로는,
첫번째, 상기 선택영역이 속한 digitaldentity의 식별자정보이다.
두번째, 인기페이퍼 형식에대한 지식이다. 이는 페이퍼문서의 인기도에 관련된 (및, 이들 문서내에서의 세부 영역에 대한) 통계적 데이터-예컨대, 다른 유저의 모듈 실행 횟수, 출판사 또는 다른 소스에의해 제공된 발행부수 등-가 사용되어, 그러한 문서에 더 놓은 우선순위를 부여하고(예컨대, 브러우저-기반 문의 또는 웹검색에 대한 )digitaldentity의 우선순위도 올려준다.
세번째, 선택영역,혹은 선택영역이 포함된 digitaldentity의 레이아웃에 관한 정보이다. 예컨대, digitaldentity와 관련하여 어디에서 줄이 끊기고, 어디서 페이지가 끊기는지, 어떤 폰트가 사용되었는지, 보통과 다른 대문자가 있는지 등에 대한 정보를 포함한다. 또는 이미지, 텍스트 박스, 표, 및 광고 등과 같은 페이지 상의 다른 항목과의 근접성에 대한 정보도 포함될 수 있다.
네번째, 의미론적 정보이다. 이는 일부 실시예에서, 소스 마크업으로 부터 주로 추론될 수 있거나, 특정 단어나 문장,심볼 등의 데이터로부터 추론될 수 있다. 이런 의미론적 정보는 상기 사용자가 선택한 영역에 해당하는 내용과 의미론적으로 유사한 문서를 검색할 수 있는 단서가 되거나, 특정 단어나 문장이 프로그램 코드를 포함하고 있다면, 그 프로그램을 실행하는 제어커맨드로 활용될 수 있을 것이다.
다섯번째, 선택영역이 digitaldentity에서 차지하는 위치이다.
이는 차후, 특정 모듈이 실행된 선택영역의 원본을 찾아내어, 원본에서 선택영역이 차지하는 위치를 가늠할 수 있도록 해주어, 정보를 맥락성있게 이해하는데 도움을 준다.
여섯번째, 특정모듈의 정체를 식별할 수 있는 '스탬프'이다.
이는 사용자가 선택한 영역에대해 어떤 모듈을 실행했는지를 나타내는 필드로써, 이는 차후, 사용자가 특정 페이퍼문서에서 동일한 모듈을 실행한 데이터만 정렬하여 볼 수 있도록 해준다. 예컨대, 사용자가 영어원서를 보며 모르는 단어에는 파란줄을 그어 놓았다고치자. 차후, 사용자는 모르는 단어를 뜻하는 파란줄을 실행함으로써 자동으로 파란줄을 뜻하는 스탬프가 찍힌 여타의 데이터도 검색할 수 있을 것이다.
일곱번째, 선택영역,혹은 선택영역이 포함된 digitaldentity의 저작권정보이다. 이는 차후, 사용자가 해당 문서의 동일 저자가 출판한 다른 저작물도 검색할 수 있도록 해주거나, 열람을 위한 결제 등을 포함한 다양한 기능성을 제공할 수 있다.
이외에도, 특정모듈을 실행한 선택영역,혹은 그가 속한 digitaldentity에대해 많은 수의 필드가 추가되어 다양한 기능성을 제공할 수 있을 것이다.
그러나, 사실은 사용자에게 유효한 다양한 기능성을 제공하기 위해서는 위에서 제시한 여분의 필드 이외에, DBMS에서 제공하는 개체관계와 속성관계에대한 설정이 중요한 역할을 하지만, 본 출원의 목적에 비추어보아, 그 논의의 범위가 지나치게 넓어질 수 있으므로, 그에대한 상세한 설명은 생략한다.
*모듈실행 결과를 디스플레이하는 방법
- 모듈실행결과를 상기 투명디스플레이상에서 디스플레이하는 방법 이외에, 상기 모듈작업을 위한 공간 이외의 영역을 디스플레이하기 위한 공간으로 활용할 수 있다. 즉, 사용자가 투명디스플레이로 페이퍼문서를 보면서 모듈실행한 결과물을 상기 페이퍼문서가 비치는 이외의 영역에서 디스플레이할 수 있다. 예를 들어, 도면17,18에서 보듯이, 투명디스플레이를 통해 페이퍼문서가 비치는 영역이외의 영역에서 상기 모듈실행의 결과물(도17-102,도18-107)을 디스플레이할 수 있다.
일부 실시예에서, 투명디스플레이를 통해 비쳐진 페이퍼문서를 보며 선택영역을 지정하여 캡쳐 모듈을 실행하는 방법에 있어서, 사용자가 선택영역을 지정할 때 직관적으로 '손가락으로 그리듯'지정하는 방법이 있다. 이때, 손가락(혹은, 터치펜 등 다양한 수단으로 스크린에 표시할 수 있다)으로 디스플레이를 그리듯 터치하면 미리 설정된 특정 굵기모드(다양한 터치 인식모드가 가능하다)로 디스플레이상의 터치를 인식하여 해당하는 스캐닝이미지가 실시간으로 손가락이 지나간 공간(도19에서 107-4)을 채우도록 설정할 수 있다. 이런 방법은, 마치 페이퍼문서 위에 놓여진 뿌연 유리를 손가락으로 닦아내어 손가락이 지나간 자리에 해당하는 문서가 또렷이 보이는 느낌을 사용자에게 주게되어, 좀 더 직관적인 인터페이스를 구현할 수 있게된다.
100;투명디스플레이
200;페이퍼문서

Claims (39)

  1. 페이퍼문서 위에 투명디스플레이를 위치시켜, 페이퍼문서를 보며 투명디스플레이 상에 선택한 영역이 해당 디지털사본(digitaldentity)에서 선택되어 지도록 하는 방법에 있어서, 상기 방법은 사용자의 워크스테이션이나 데이터 저장소,또는 웹서버를 연결하는 통신망에서 사용되기 위해,
    (가)페이퍼문서의 book identity를 단말기에 식별시키는 단계;
    (나)투명디스플레이를 상기 페이퍼문서(혹은 그 일부) 위에 오버랩한 상태로 상기 디스플레이의 그래픽 인터페이스인 레이어와 페이퍼문서가 일치되도록 위치를 조정하는 단계;
    (다)상기 투명디스플레이를 통해 보여지는 페이퍼문서(또는 문서의 일부)를 보며 상기 레이어 상에 선택한 특정영역에 해당하는 디지털사본(digitaldentity)에 대해 특정모듈이 실행되는 단계;
    (라)상기 실행결과가 표시되는 단계;를 포함하는 페이퍼문서를 전자화하는 방법.
  2. 제1항에 있어서, (가)에서,
    임의의 사용자 인터페이스(키보드, 마우스,스캐너,터치스크린..)나 임의의 판독수단(바코드 판독기..등)에 의하여 페이퍼문서의 book identity를 단말기에 식별시키는 단계를 포함하는 방법.
  3. 제2항에 있어서, 임의의 사용자 인터페이스인 페이지 어레이 버튼을 이용하여 페이지를 식별시키는 단계를 포함하는 방법.
  4. 제1항에 있어서, (가)에서;
    스캐닝, 이미징 능력을 갖는 스캐닝 엘리먼트가 단말기에 구비될 경우, 소스문서를 고유하게 식별하기 위해 필요한 충분한 정보가 캡쳐링된 때에 캡쳐링된 데이터를 전송하여 하나 또는 복수의 웹서버,데이터 베이스,혹은 사용자워크스테이션에서 일치하는 디지털사본(digitaldentity)을 검색,선택하는 단계를 포함하는 방법
  5. 제 4항에 있어서,
    소스문서를 고유하게 식별하기 위해 필요한 정보가 캡쳐링되는 방법으로, 제작자(서버관리자)와 사용자 간에 사전에 합의된 약속된 페이퍼문서의 특정영역을 사용자가 캡쳐링하여 하나 또는 복수의 웹서버,데이터 베이스,사용자 워크스테이션에서 디지털사본(digitaldentity)을 검색,선택하는 단계를 포함하는 방법.
  6. 제4항 내지 5항 중 어느 하나의 항에 있어서,
    상기 페이퍼문서가 사용자에 의해 레이아웃 설정이 변경된 수정본일 경우, 상기 수정본의 전체,혹은 일부를 스캐닝한 이미지에서 레이아웃 설정 정보를 추론하여, digitaldentity, 레이어의 크기, 혹은 식별단서를 상기 설정에 맞도록 변경하여 제공하는 단계를 포함하는 방법.
  7. 제 4항 내지 5항 중 어느 하나의 항에 있어서,
    상기 스캐닝 엘리먼트가 투명디스플레이의 내부에 구비된 플레인 스캐너의 형태일 경우, 상기 투명디스플레이 상에서 캡쳐링된 이미지가 페이퍼문서 상에서 차지하는 위치정보를 기억하여 수신된 디지털사본(스캐닝이미지)과 상기 캡쳐링된 이미지가 중첩되도록 자동으로 레이어의 위치가 조정되는 단계를 포함하는 방법.
  8. 제 1항에 있어서, (나)에서,
    사용자가 임의로 움직일 수 없는 레이어(투명디스플레이)상에 노출된 (움직일 수 없는)특정기호와 페이퍼문서의 약속된 영역이 일치하도록 조정한 후, 사용자의 움직임 감지 명령 신호에 의해 디스플레이 내부의 움직임 감지 엘리먼트가 디스플레이의 움직임을 감지하여 단말기의 움직임과 같은 방향과 속도로 레이어를 이동시켜 페이퍼문서와 레이어를 일치시키는 단계를 포함하는 방법.
  9. 제 4항, 5항,내지 8항 중 하나의 항에 있어서,
    digitaldentity로써 렌더링된 스캐닝이미지와 투명디스플레이 상에서 페이퍼문서를 스캐닝한 이미지의 중첩되는 부분이 일치하지 않을 경우, 움직임 감지 엘리먼트에의해 스캐닝시점으로부터 상기 디스플레이가 움직인 거리와 방향을 측정하여 이동거리와 방향을 나타내는 식별표시(예;화살표)를 제시하여 사용자가 이를 단서로 레이어의 위치를 조정하는 단계를 포함하는 방법.
  10. 제7항~9항에서, 움직임을 감지하는 방법으로,
    미세/표면 텍스쳐 센서를 활용하는 방법, 제스쳐를 검출하는 방법, 광학 데이터를 관찰하는 방법, 자이로/가속도계 모션 센서를 활용하는 방법, 기계장치(볼포인트,롤러 등)를 활용하는 방법 중 하나 이상을 활용하는 것을 특징으로 하는 방법.
  11. 제 1항에 있어서, (나)에서;
    제어부가 일방적으로 상기 디스플레이 상에 레이어의 위치를 지정해주면 사용자가 페이퍼문서를 움직여서 레이어와 일치되도록 위치를 조정하는 단계를 포함하는 방법.
  12. 제 1항에 있어서, (나)에서;
    상기 투명디스플레이의 인터페이스 상에 특정기호(폐구간, 하이라이트 등)를 투명디스플레이를 통해 보이는 페이퍼문서 상에 약속된 영역에 위치시키면 자동으로 스캐닝이미지(digitaldentity) 상에 약속된 영역이 상기 특정기호와 일치되도록 레이어의 위치가 조정되는 단계를 포함하는 방법.
  13. 제1항에 있어서, (나)에서
    투명, 혹은 반투명의 특성을 지닌 레이어에 드러난 식별단서를 참조하여 상기 페이퍼문서와 일치되도록 레이어를 이동시키는 단계를 포함하는 방법.
  14. 제1항에 있어서, (나)에서
    페이퍼문서가 사용자에 의해 레이아웃이 변형된 수정본일 경우, 사용자가 레이어 상에 드러난 digitaldentity에 대한 식별단서를 조작하여 레이어와 페이퍼문서를 일치시키는 단계를 포함하는 방법.

  15. 제 13항에서 '식별단서'는;
    스캐닝이미지의 일부를 포함하는 방법.
  16. 제13항에서,'식별단서'는
    페이퍼문서의 내용 이외에, 내용의 위치와 형태를 식별할 수 있는 단서를 가리키는 '레이아웃'을 포함하는 방법.
  17. 제13항에서,
    식별단서를 노출시키는 방법으로,상기 디스플레이 크기가 웹서버,데이터베이스,혹은 사용자 워크스테이션에 전송되고, 상기 전송된 정보에 해당하는, (제작자에 의해 미리 식별단서의 노출영역이 정해진) 식별단서가 레이어 상에 렌더링되는 단계를 포함하는 방법.
  18. 제13항에서,
    식별단서를 노출시키는 방법에 있어서,웹서버,데이터 베이스, 혹은 사용자 워크스테이션에 디스플레이 크기 정보가 송신되어 디스플레이 크기에 해당하는 미리 설정된 기준(범위나 용량,혹은 노출영역)에 의해 데이터 추출 모듈이 실행되어 그 결과가 렌더링되는 단계를 포함하는 방법.
  19. 제 17항 내지 18항에서,
    가로,세로의 크기가 ( m*n)의 크기인 디스플레이가 회전하여 (n*m)로 변경되면, 사용자의 회전명령에 의해, 혹은 단말기의 제어에 의해, 변경된 디스플레이 크기에 관한 정보가 송신되는 단계를 포함하는 방법.
  20. 제13항에서,
    식별단서를 노출시키는 방법에 있어서,
    상기 디스플레이에 의해 상기 레이어가 드러난 영역(디스플레이가 레이어를 비추는 영역)을 감지하여 동일한 영역에 해당하는 디지털사본(digitaldentity)을 특정기준에 의해 레이어가 움직일때마다 실시간으로 추출하여 렌더링시키는 단계를 포함하는 방법.
  21. 제1항에 있어서, (나)에서;
    사전 협의된 디스플레이의 특정 모서리와 페이퍼문서의 모서리를 일치시켜서 페이퍼문서와 디스플레이 상에 (고정된)레이어를 일치시키는 단계를 포함하는 방법.
  22. 제 1항에 있어서, (나)에서;
    투명 디스플레이 상에 드러난 투명/반투명/불투명한 레이어의 테두리와 페이퍼문서의 테두리를 일치시켜서 페이퍼문서와 레이어를 일치시키는 단계를 포함하는 방법.
  23. 제 13항에 있어서,
    사용자의 조작에 의해 레이어가 이동할 때에만, 레이어상에 식별단서가 노출되도록 하는 단계를 포함하는 방법.
  24. 제1항에 있어서 (다)에서,
    사용자에의해 선택영역 확정 후,특정 모듈실행명령을 지시 하는 단계를 포함하는 방법.
  25. 제1항에 있어서 (다)에서,
    특정모듈실행 모드일 때, 사용자에 의해 선택영역으로 확정된 영역에 대해 자동으로 상기 지정된 모듈이 실행되는 단계를 포함하는 방법.
  26. 제1항에 있어서 (다)에서,
    digitaldentity 상에 제작자를 포함한 특정인에 의해 제작된 보이지않는,또는 보이는 마크업(예;심볼)이 심겨져 있어서, 사용자가 이를 선택할 경우, 제어 커맨드로 해석되어 자동으로 특정 모듈이 실행되는 단계를 포함하는 방법.
  27. 제 1항에 있어서 (다)에서
    특정모듈 실행 시, 선택영역 혹은 선택영역이 포함된 digitaldentity에 대해 여분의 필드가 추가되어 기록되는 단계를 포함하는 방법.
  28. 제 1항에 있어서, (다)에서
    특정모듈 실행 시, 메모리에 저장된 빌링(billing), 가입, 및/또는 디바이스 식별자 정보 중 하나를 활용하는 단계를 포함하는 방법.
  29. 제 1항에 있어서, (다)에서
    digitaldentity 의 포맷으로 스캐닝 이미지, 텍스트,텍스트 오프셋 및/또는 특정 심볼로 구성되는 기호 중 하나 이상인 것을 특징으로 하는 방법.
  30. 제1항에 있어서 (다)에서
    특정모듈이 캡쳐,복사,스크랩 모듈 중 하나일 때, 저작권보호를 위해 특정 용량,범위,혹은 시간 이상에 대해 실행할 수 없도록 제한하는 단계를 포함하는 방법.
  31. 제1항에 있어서 (라)에서,
    상기 특정모듈작용 결과가 상기 레이어에 적층구조로 디스플레이되는 단계.

  32. 제 1항에 있어서, (라)에서,
    상기 레이어 이외의 영역에서 상기 특정모듈작용 결과가 디스플레이되는 단계.
  33. 제 1항에서,
    투명디스플레이에서 투명성을 띈 부분의 크기와 위치를 사용자가 임의로 조정할 수 있도록 하고 투명성을 띈 부분에 레이어가 위치하여 페이퍼문서와 레이어를 일치시키는 단계를 포함하는 방법.
  34. 제1항에 있어서, (다)에서,
    상기 특정 모듈이 캡쳐모듈일 때, 사용자가 디스플레이의 레이어 상에 지정하는 터치를 특정 굵기와 모양으로 인식하여 디스플레이 상에 표시되는 굵기와 모양에 해당하는 스캐닝이미지가 실시간으로 추출되어 상기 표시되는 영역을 채우는 단계를 포함하는 방법.
  35. 제 1항에 있어서,
    상기 사용자 시스템은 하나 또는 복수의 서버를 포함하는 통신망에 연결되어 있으며, 상기 수행방법이 하나 혹은 복수의 웹서버,데이터베이스,혹은 사용자 워크스테이션 상에서 진행되거나, 각각에 국부적으로 위치하여 진행되는 것을 포함하는 방법.
  36. 사용자 단말기의 인터페이스나 식별수단을 통해 페이퍼문서의 종류와 페이지(book identity)를 식별시키면, 하나 또는 복수의 웹서버,데이터베이스,혹은 사용자 워크스테이션 상의 디지털사본(digitaldentity)이 선택되어 레이어 상에 지정한 좌표값에 해당하는 데이터에대해 특정모듈이 실행되는 것을 특징으로 하는 사용자 시스템.
  37. 제 36항에 따른 방법을 수행하기 위한 수단을 포함하는 사용자 시스템.
  38. 제 36항에 따른 방법을 수행하기 위한 컴퓨터 판독가능 명령어들이 기록된 컴퓨터 판독가능 기록매체.
  39. 제36항에서, 사용자가 페이퍼문서와 레이어를 일치시킬 때, 레이어의 위치가 식별될 수 있도록 제공되는 일러스트레이션(그래픽) 소스.

KR1020120059704A 2011-11-14 2012-06-04 투명디스플레이를 통해 페이퍼문서를 전자화하고 활용하는 방법 및 시스템. KR101495492B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
EP13796887.1A EP2857982A1 (en) 2012-06-01 2013-05-13 Method for digitizing paper documents by using transparent display or device having air gesture function and beam screen function and system therefor
JP2015514893A JP2015525396A (ja) 2012-06-01 2013-05-13 透明ディスプレイ、またはエアージェスチャーとビームスクリーン機能が備えられた端末を活用してペーパー文書を電子化する方法及びそれによるシステム
PCT/KR2013/004201 WO2013180407A1 (ko) 2012-06-01 2013-05-13 투명디스플레이,또는 에어제스쳐와 빔스크린 기능이 구비된 단말기를 활용하여 페이퍼문서를 전자화하는 방법 및 그에 따른 시스템
US14/404,516 US20150296092A1 (en) 2012-06-01 2013-05-13 Method for digitizing paper documents by using transparent display or device having air gesture function and beam screen function and system therefor
CN201380037697.3A CN104471563A (zh) 2012-06-01 2013-05-13 利用透明显示器,或者具备手势感应和束射屏功能的终端,纸质文本的电子化的方法及其系统

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR1020110118318 2011-11-14
KR20110118318 2011-11-14
KR1020110144324 2011-12-28
KR20110144324 2011-12-28

Publications (2)

Publication Number Publication Date
KR20130054116A true KR20130054116A (ko) 2013-05-24
KR101495492B1 KR101495492B1 (ko) 2015-03-02

Family

ID=48663196

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120059704A KR101495492B1 (ko) 2011-11-14 2012-06-04 투명디스플레이를 통해 페이퍼문서를 전자화하고 활용하는 방법 및 시스템.

Country Status (1)

Country Link
KR (1) KR101495492B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150146200A (ko) * 2014-06-23 2015-12-31 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR101684626B1 (ko) * 2015-10-16 2016-12-08 (주)디지엔터테인먼트 색칠하기 용지의 그림을 영상으로 표시하는 방법
CN107181882A (zh) * 2016-03-09 2017-09-19 富士施乐实业发展（中国）有限公司 扫描终端及其扫描方法
CN107430683A (zh) * 2016-03-31 2017-12-01 深圳市柔宇科技有限公司 信息关联方法、电子书签及信息关联系统
KR102162528B1 (ko) * 2020-03-09 2020-10-07 (주)쇼우테크 기록물 db 구축 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020063994A (ko) * 2001-01-31 2002-08-07 강병주 통신망을 이용한 전자명함 관리 시스템 및 그 방법
JP4537403B2 (ja) * 2004-08-04 2010-09-01 株式会社日立製作所 画像処理装置
KR101533850B1 (ko) * 2009-01-20 2015-07-06 엘지전자 주식회사 전자 종이를 가진 이동 통신 단말기 및 이에 적용된 제어방법

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150146200A (ko) * 2014-06-23 2015-12-31 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR101684626B1 (ko) * 2015-10-16 2016-12-08 (주)디지엔터테인먼트 색칠하기 용지의 그림을 영상으로 표시하는 방법
CN107181882A (zh) * 2016-03-09 2017-09-19 富士施乐实业发展（中国）有限公司 扫描终端及其扫描方法
CN107430683A (zh) * 2016-03-31 2017-12-01 深圳市柔宇科技有限公司 信息关联方法、电子书签及信息关联系统
EP3438871A4 (en) * 2016-03-31 2019-10-09 Shenzhen Royole Technologies Co. Ltd. INFORMATION ASSOCIATION METHOD, ELECTRONIC SIGNET AND INFORMATION ASSOCIATION SYSTEM
CN107430683B (zh) * 2016-03-31 2021-09-14 深圳市柔宇科技股份有限公司 信息关联方法、电子书签及信息关联系统
KR102162528B1 (ko) * 2020-03-09 2020-10-07 (주)쇼우테크 기록물 db 구축 방법

Also Published As

Publication number Publication date
KR101495492B1 (ko) 2015-03-02

Similar Documents

Publication Publication Date Title
US8427344B2 (en) System and method for recalling media
CN103492997B (zh) 用于操作电子书中的用户注释的系统和方法
Arai et al. PaperLink: a technique for hyperlinking from real paper to electronic content
US8265382B2 (en) Electronic annotation of documents with preexisting content
US9058067B2 (en) Digital bookclip
US20040193697A1 (en) Accessing a remotely-stored data set and associating notes with that data set
Steimle Pen-and-paper user interfaces: Integrating printed and digital documents
Liao et al. FACT: fine-grained cross-media interaction with documents via a portable hybrid paper-laptop interface
JP2015525396A (ja) 透明ディスプレイ、またはエアージェスチャーとビームスクリーン機能が備えられた端末を活用してペーパー文書を電子化する方法及びそれによるシステム
US20130033461A1 (en) System for notetaking with source document referencing
US20110252316A1 (en) Translating text on a surface computing device
WO2011136766A1 (en) System and method for automatically providing a graphical layout based on an example graphic layout
JP5813792B2 (ja) システムおよびデータ提供方法並びに電子機器
KR20130054116A (ko) 투명디스플레이를 통해 페이퍼문서를 전자화하고 활용하는 방법 및 시스템.
Hincapié-Ramos et al. cAR: Contact augmented reality with transparent-display mobile devices
US20130033460A1 (en) Method of notetaking using optically imaging pen with source document referencing
Liu et al. Paperui
Qian et al. Dually noted: layout-aware annotations with smartphone augmented reality
Margetis et al. Enhancing education through natural interaction with physical paper
Wu et al. Turning a page on the digital annotation of physical books
KR20130135523A (ko) 투명디스플레이를 통해 페이퍼문서를 전자화하고 편집,활용하는 방법 및 시스템.
US20130033429A1 (en) Method of notetaking with source document referencing
Karatzas et al. Human-Document Interaction Systems--A New Frontier for Document Image Analysis
Steimle et al. Survey of pen-and-paper computing
KR102618144B1 (ko) 멀티 레이어 구조에서 사용자와의 상호작용 구현을 위한 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20130715

Effective date: 20140523

S901 Examination by remand of revocation
E902 Notification of reason for refusal
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee