KR20230069259A - 입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템 - Google Patents

입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템 Download PDF

Info

Publication number
KR20230069259A
KR20230069259A KR1020237015672A KR20237015672A KR20230069259A KR 20230069259 A KR20230069259 A KR 20230069259A KR 1020237015672 A KR1020237015672 A KR 1020237015672A KR 20237015672 A KR20237015672 A KR 20237015672A KR 20230069259 A KR20230069259 A KR 20230069259A
Authority
KR
South Korea
Prior art keywords
display
area
character string
virtual area
curve
Prior art date
Application number
KR1020237015672A
Other languages
English (en)
Other versions
KR102584175B1 (ko
Inventor
마사토 히라이
츠토무 마츠바라
다카시 야마우치
Original Assignee
미쓰비시덴키 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 미쓰비시덴키 가부시키가이샤 filed Critical 미쓰비시덴키 가부시키가이샤
Publication of KR20230069259A publication Critical patent/KR20230069259A/ko
Application granted granted Critical
Publication of KR102584175B1 publication Critical patent/KR102584175B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G06F3/1462—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay with means for detecting differences between the image stored in the host and the images displayed on the remote displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/203—Drawing of straight lines or curves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0442—Handling or displaying different aspect ratios, or changing the aspect ratio
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/08—Cursor circuits
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/24—Generation of individual character patterns
    • G09G5/26—Generation of individual character patterns for modifying the character dimensions, e.g. double width, double height
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

입력 표시 제어 장치(26)에 있어서, 표시 제어부(263)가, 디스플레이(28)의 표시 영역(DA)의 주위에 제 1 가상 영역(VA1)을 설정하고, 디스플레이(28)의 표시 영역(DA) 중, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해, 통신 상대측의 단말(2)과 공유하는 표시 정보를 표시시키지 않는 일부의 표시 영역을, 제 2 가상 영역(VA2)으로서 설정하고, 디스플레이(28)의 표시 영역(DA1)의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 영역(DA1)으로부터 문자열의 일부가 돌출한다고 판정한 경우에, 제 1 가상 영역(VA1), 제 2 가상 영역(VA2) 또는 제 2 가상 영역(VA2)에 걸친 제 1 가상 영역(VA1) 중 어느 하나에 곡선을 연장하고, 연장한 곡선에 따라 문자열의 일부를, 제 1 가상 영역(VA1), 제 2 가상 영역(VA2) 또는 제 2 가상 영역(VA2)에 걸친 제 1 가상 영역(VA1)의 어느 하나에 배치한 표시 정보를 생성한다.

Description

입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템
본 개시는, 입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템에 관한 것이다.
디스플레이의 표시 영역 상에 지정한 임의의 형상에 따라 문자열을 표시시키는 기술로서, 예를 들면, 특허문헌 1에 기재되는 것이 있다. 특허문헌 1에 기재된 입력 표시 제어 장치는, 디스플레이의 표시 영역 상을 덧쓴 궤적을 나타내는 곡선에 따라 문자열을 표시하기 위한 표시 정보를 생성하고, 생성한 표시 정보에 따라 디스플레이에 문자열을 표시한다.
또, 단말간에 통신을 행하고, 양쪽의 단말에 있어서 동일한 표시 정보를 표시하는, 이른바, 미러링 표시를 행하는 시스템이 이용되고 있다. 미러링 표시는, 송신측의 단말이 수신측의 단말에 표시 정보를 송신하고, 수신측의 단말이 송신측의 단말로부터 수신한 표시 정보를 표시한다.
[특허문헌 1] 특허 제 6641530호 공보
미러링 표시를 행하는 단말의 디스플레이의 어스펙트비(화면의 종횡비)가 서로 다른 경우, 양 단말에 동일한 표시 정보를 공유할 수 없다. 예를 들면, 한쪽의 단말은, 표시 영역 내에 문자열 전체가 표시되는데 비해, 다른 쪽의 단말에서는, 표시 영역으로부터 문자열의 일부가 돌출하여 문자열의 전체를 시인할 수 없는 경우가 있다. 이 때문에, 미러링 표시를 행하는 단말끼리는, 서로의 디스플레이가 동일한 어스펙트비로 변환되는 경우가 많다.
서로 다른 어스펙트비를 동일한 어스펙트비로 맞추는 경우, 디스플레이의 어스펙트비에 따라서는, 통신 상대측의 단말과 공유하는 표시 정보를 표시하는 영역과는 별도로, 당해 표시 정보가 표시되지 않고, 검은 띠 화상 등이 표시되는 부분적인 영역이 설정된다. 이하, 통신 상대측의 단말과 공유하는 표시 정보가 표시되지 않는 부분적인 표시 영역을 「어스펙트비 조정용 표시 영역」이라고 기재한다.
또, 미러링 표시를 행하는 단말로서, 특허문헌 1에 기재된 입력 표시 제어 장치에 의해 표시 제어되는 단말을 사용할 수 있다. 특허문헌 1에 기재된 입력 표시 제어 장치는, 표시 대상의 문자열의 일부가 디스플레이의 표시 영역으로부터 돌출하는 경우, 표시 영역의 주위에 설정한 가상 영역에 문자열의 일부를 가상적으로 배치한 표시 정보를 생성한다. 이 표시 정보는, 문자열의 전체를 표시하기 위한 표시 정보이다.
그러나, 상술한 어스펙트비 조정용 표시 영역은, 디스플레이의 화면 내의 표시 영역이다. 이 때문에, 특허문헌 1에 기재된 입력 표시 제어 장치는, 표시 대상의 문자열의 일부가 어스펙트비 조정용 표시 영역에 돌출하는 경우에, 어스펙트비 조정용 표시 영역에 돌출한 일부를 포함하는 문자열의 전체를 표시하기 위한 표시 정보를 생성할 수 없다는 과제가 있었다.
상기 표시 정보는, 디스플레이의 표시 영역에 있어서의 어스펙트비 조정용 표시 영역 이외의 영역에 문자열의 전체를 표시하기 위해서 필요한 정보이다. 예를 들면, 상기 입력 표시 제어 장치는, 상기 표시 정보에 따라, 문자열의 전체를 어스펙트비 조정용 표시 영역 이외의 표시 영역에 이동시키는 처리, 문자열을 구성하는 문자의 사이즈를 작게 하는 처리, 문자열을 개행(改行)하는 처리 등을 행한다.
본 개시는 상기 과제를 해결하는 것이며, 통신 상대측의 단말과 어스펙트비를 맞추기 위해 표시 정보를 표시시키지 않는 일부의 표시 영역에 표시 대상의 문자열의 일부가 돌출하는 경우에도, 표시 대상의 문자열의 전체를 표시하기 위한 표시 정보를 생성할 수 있는 입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템을 얻는 것을 목적으로 한다.
본 개시에 따른 입력 표시 제어 장치는, 곡선을 나타내는 곡선 정보를 취득하는 곡선 정보 취득부와, 문자열을 취득하는 문자열 취득부와, 곡선 정보가 나타내는 곡선에 따라 문자열을 표시하기 위한 표시 정보를 생성하는 표시 제어부를 구비하고, 표시 제어부는, 디스플레이의 표시 영역의 주위에 제 1 가상 영역을 설정하고, 디스플레이의 표시 영역 중, 통신 상대측의 단말과 어스펙트비를 맞추기 위해, 통신 상대측의 단말과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 영역을, 제 2 가상 영역으로서 설정하고, 디스플레이의 표시 영역의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 영역으로부터 당해 문자열의 일부가 돌출한다고 판정한 경우, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 곡선을 연장하고, 연장한 곡선에 따라 문자열의 일부를, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성하는 것을 특징으로 한다.
본 개시에 의하면, 표시 제어부가, 디스플레이의 표시 영역의 주위에 제 1 가상 영역을 설정하고, 디스플레이의 표시 영역 중, 통신 상대측의 단말과 어스펙트비를 맞추기 위해, 통신 상대측의 단말과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 표시 영역을, 제 2 가상 영역으로서 설정한다. 그리고, 표시 제어부는, 디스플레이의 표시 영역의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 영역으로부터 당해 문자열의 일부가 돌출한다고 판정한 경우, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 곡선을 연장하고, 연장한 곡선에 따라 문자열의 일부를, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성한다. 이것에 의해, 본 개시에 따른 입력 표시 제어 장치는, 표시 대상의 문자열의 일부가, 통신 상대측의 단말과 어스펙트비를 맞추기 위해 표시 정보를 표시시키지 않는 일부의 표시 영역에 돌출하는 경우에도, 표시 대상의 문자열 전체를 표시하기 위한 표시 정보를 생성할 수 있다.
도 1은 실시의 형태 1에 따른 입력 표시 시스템의 구성을 나타내는 블럭도이다.
도 2는 실시의 형태 1에 따른 입력 표시 제어 장치를 구비하는 단말의 구성을 나타내는 블럭도이다.
도 3은 실시의 형태 1에 있어서의 문자열 인식부의 구성을 나타내는 블럭도이다.
도 4는 실시의 형태 1에 따른 입력 표시 제어 장치의 구성을 나타내는 블럭도이다.
도 5는 실시의 형태 1에 따른 입력 표시 제어 방법을 나타내는 흐름도이다.
도 6은 실시의 형태 1에 있어서의 제 2 가상 영역의 설정 방법을 나타내는 흐름도이다.
도 7(a)는, 실시의 형태 1에 따른 입력 표시 시스템이 구비하는 단말이 스마트폰인 경우의 화면예를 나타내는 화면도이며, 도 7(b)는, 실시의 형태 1에 따른 입력 표시 시스템이 구비하는 단말이 태블릿 단말인 경우의 화면예를 나타내는 화면도이며, 도 7(c)는, 스마트폰의 화면의 어스펙트비를 4:3으로 설정했을 때의 화면예를 나타내는 화면도이며, 도 7(d)는, 태블릿 단말의 화면의 어스펙트비를 16:9로 설정했을 때의 화면예를 나타내는 화면도이다.
도 8(a) 내지 도 8(d)는, 제 2 가상 영역의 표시예를 나타내는 화면도이다.
도 9(a)는, 디스플레이의 표시 영역과 제 2 가상 영역을 흑선 프레임으로 구별한 화면을 나타내는 화면도이며, 도 9(b)는, 디스플레이의 표시 영역과 제 2 가상 영역을 파선 프레임으로 구별한 화면을 나타내는 화면예이다.
도 10은 문자열의 일부를 디스플레이의 표시 영역에 표시시킬 수 없는 예를 나타내는 화면예이다.
도 11은 실시의 형태 1에 따른 입력 표시 제어 장치의 기능을 실현하는 하드웨어 구성을 나타내는 블럭도이다.
도 12는 실시의 형태 1에 따른 입력 표시 제어 장치의 기능을 실현하는 소프트웨어를 실행하는 하드웨어 구성을 나타내는 블럭도이다.
도 13(a) 및 도 13(b)는, 스마트폰과 태블릿 단말의 화면의 어스펙트비를 1:1로 설정했을 때의 화면예를 나타내는 화면도이다.
도 14(a) 및 도 14(b)는, 스마트폰과 태블릿 단말의 화면의 어스펙트비를, 양자의 어스펙트비로부터 산출한 비율로 설정했을 때의 화면예를 나타내는 화면도이다.
도 15(a) 내지 도 15(c)는, 서로 다른 어스펙트비를 갖는 3대의 단말의 화면예를 나타내는 화면도이다.
도 16(a) 내지 도 16(c)는, 3대의 단말의 화면의 어스펙트비를 16:9로 설정했을 때의 화면예를 나타내는 화면도이다.
도 17(a) 내지 도 17(c)는, 3대의 단말의 화면의 어스펙트비를 7:3으로 설정했을 때의 화면예를 나타내는 화면도이다.
도 18(a) 내지 도 18(c)는, 3대의 단말의 화면의 어스펙트비를 4:3으로 설정했을 때의 화면예를 나타내는 화면도이다.
도 19(a) 내지 도 19(c)는, 3대의 단말의 화면의 어스펙트비를 1:1로 설정했을 때의 화면예를 나타내는 화면도이다.
도 20(a) 내지 도 20(c)는, 3대의 단말의 화면의 어스펙트비를, 3대의 어스펙트비로부터 산출한 비율로 설정했을 때의 화면예를 나타내는 화면도이다.
도 21은 실시의 형태 2에 따른 입력 표시 제어 방법을 나타내는 흐름도이다.
도 22는 일부가 가상 영역에 배치된 문자열을 이동시켜, 문자열의 전체를 디스플레이의 표시 영역에 표시시켰을 때의 화면예를 나타내는 설명도이다.
도 23은 일부가 가상 영역에 배치된 문자열을 개행시켜, 문자열의 전체를 디스플레이의 표시 영역에 표시시켰을 때의 화면예를 나타내는 설명도이다.
(실시의 형태 1)
도 1은, 실시의 형태 1에 따른 입력 표시 시스템(1)의 구성을 나타내는 블럭도이다. 도 1에 나타내는 입력 표시 시스템(1)은, 단말(2)간에 통신에 의해 서로의 디스플레이에 있어서 동일한 표시 정보를 공유하는 시스템이다. 입력 표시 시스템(1)에 있어서, 송신측의 단말(2)은, 디스플레이에 표시한 내용을 나타내는 표시 정보를, 수신측의 단말(2)에 송신하고, 수신측의 단말(2)이, 송신측의 단말(2)로부터 수신한 상기 표시 정보에 따라, 송신측의 단말(2)과 동일한 내용을 디스플레이에 표시하는, 이른바 미러링 표시가 행해진다. 도 1에 있어서, 2대의 단말(2)간에 통신하는 경우를 나타냈지만, 입력 표시 시스템(1)은, 3대 이상의 단말(2)에서 서로의 표시 정보를 공유해도 좋다.
단말(2)은, 예를 들면, 스마트폰, 태블릿 단말 또는 PC(Personal Computer)이다. 입력 표시 시스템(1)에 있어서, 한쪽의 단말(2)이 스마트폰이며, 다른 쪽의 단말(2)이 태블릿 단말인 경우, 디스플레이의 어스펙트비는, 서로 다른 것으로 된다. 이 경우, 한쪽의 단말(2)은, 디스플레이의 표시 영역 내에 문자열 전체가 표시되는데 비해, 다른 쪽의 단말(2)에서는, 디스플레이의 표시 영역으로부터 문자열의 일부가 돌출하여 문자열 전체를 시인할 수 없는 경우가 있다. 이 때문에, 단말(2)끼리는, 서로의 디스플레이가 동일한 어스펙트비로 변환된다.
또, 단말(2)은, 실시의 형태 1에 따른 입력 표시 제어 장치를 구비하고, 당해 입력 표시 제어 장치는, 포인팅 디바이스를 이용한 선을 그리는 조작(덧쓰는 조작)을 접수하고, 접수한 조작에 의해 지정된 곡선에 따라 문자열을 디스플레이의 표시 영역에 표시시킨다. 포인팅 디바이스로서는, 예를 들면, 터치 패널을 상정하고 있다. 다만, 이것은 일례이며, 포인팅 디바이스에는, 조이스틱, 포인팅스틱, 터치패드, 스타일러스, 데이터 글러브, 트랙볼, 펜 태블릿, 마우스, 라이트펜 또는 조이패드를 이용할 수 있다.
단말(2)은, 어스펙트비가 큰 디스플레이를 작은 어스펙트비에 맞출 때에, 어스펙트비 조정용 표시 영역이 표시 영역으로 설정된다. 어스펙트비 조정용 표시 영역은, 디스플레이의 표시 영역 중, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보를 표시하는 영역과는 별도로 설정되어, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보를 표시하지 않는 영역이다. 특허문헌 1에 기재된 종래의 입력 표시 제어 장치는, 디스플레이의 표시 영역을 포함하는 평면 중, 표시 영역 이외의 모든 영역을 가상 영역이라 가정하고, 표시 대상의 문자열의 일부가 가상 영역에 돌출하는 경우, 문자열의 일부를 가상 영역에 가상적으로 배치한 표시 정보를 생성한다.
이것에 비해, 어스펙트비 조정용 표시 영역은, 디스플레이의 표시 영역의 일부이다. 종래의 입력 표시 제어 장치의 알고리즘에서는, 가상 영역을 디스플레이의 표시 영역의 주위에 설정하므로, 어스펙트비 조정용 표시 영역에 검은 띠 화상 등을 표시하지 않는 경우에는, 일부가 어스펙트비 조정용 표시 영역에 배치된 문자열의 표시 정보만이 생성되어 버린다. 이 표시 정보에 따르면, 디스플레이는, 어스펙트비 조정용 표시 영역에 문자열의 일부를 표시하게 된다.
그래서, 단말(2)이 구비하는 입력 표시 제어 장치는, 디스플레이의 표시 영역의 주위에 제 1 가상 영역을 설정하고, 디스플레이의 표시 영역 중, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보를 표시시키지 않는 어스펙트비 조정용 표시 영역을, 제 2 가상 영역으로서 설정한다. 그리고, 단말(2)이 구비하는 입력 표시 제어 장치는, 디스플레이의 표시 영역의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 영역으로부터 당해 문자열의 일부가 돌출한다고/비어져 나온다고 판정한 경우, 곡선을 연장하고, 연장한 곡선에 따라 문자열의 일부를, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성한다. 이것에 의해, 표시 대상의 문자열의 일부가 어스펙트비 조정용 표시 영역에 돌출하는 경우에도, 표시 대상의 문자열 전체를 표시하기 위한 표시 정보를 생성할 수 있다.
도 2는, 입력 표시 제어 장치(26)를 구비하는 단말(2)의 구성을 나타내는 블럭도이다. 도 1에 나타낸 입력 표시 시스템(1)이 구비하는 단말(2)은, 모두 도 2에 나타내는 구성 요소를 갖고 있다. 단말(2)은, 조작 접수부(21), 문자 관리 데이터베이스(22)(이하, 문자 관리 DB(22)라고 기재함), 문자 관리부(23), 궤적 판별부(24), 문자열 인식부(25), 입력 표시 제어 장치(26), 문자열 일시 보존부(27), 디스플레이(28) 및 통신부(29)를 구비한다.
조작 접수부(21)는, 사용자의 조작으로서 선을 덧쓰는 조작(1)을 접수하여, 접수한 조작의 내용을 궤적 판별부(24)에 출력한다. 조작 접수부(21)는, 예를 들면, 포인팅 디바이스를 이용한 조작(1)을 접수한다. 문자 관리 DB(22)는, 문자 종류, 문자 사이즈, 문자 높이 및 문자폭의 대응 관계를 나타내는 문자 속성표 정보가 등록된 데이터베이스이다. 문자 관리부(23)에는, 디스플레이(28)에 표시하는 문자의 문자 사이즈가 사전에 설정되어 있다. 문자 관리부(23)는, 문자 관리 DB(22)에 등록된 문자 속성표 정보를 참조하는 것에 의해, 사전에 설정된 문자 사이즈에 대응하는 문자 높이를 나타내는 문자 속성 정보를, 궤적 판별부(24)에 출력하고, 사전에 설정된 문자 사이즈에 대응하는 문자 높이 및 문자폭을 나타내는 문자 속성 정보를, 입력 표시 제어 장치(26)에 출력한다.
궤적 판별부(24)는, 조작 접수부(21)에 의해 접수된 조작에 의해 디스플레이(28)의 표시 영역 상에 입력된 선의 궤적을 판별한다. 예를 들면, 궤적 판별부(24)는, 사용자의 조작에 의해 입력된 선을 구성하는 점군의 시계열 데이터를, 포인팅 디바이스로부터 취득한다. 궤적 판별부(24)는, 포인팅 디바이스로부터 취득한 점군의 시계열 데이터에 근거하여, 사용자의 조작에 의해 입력된 선의 궤적을 나타내는 곡선의 길이 및 형상을 나타내는 곡선 정보를 생성하고, 생성한 곡선 정보를 입력 표시 제어 장치(26)에 출력한다. 곡선에는, 직선 또는 구부러진 선도 포함된다. 즉, 궤적 판별부(24)가 판별하는 곡선에는, 디스플레이(28)의 표시 영역 상의 점군의 시계열 데이터를 이용하여 산출 가능한 여러가지 형상의 선이 포함된다.
또, 궤적 판별부(24)는, 궤적을 나타내는 곡선을 화상화한 곡선 화상을 생성한다. 곡선 화상은, 예를 들면, 궤적을 나타내는 곡선을 굵은 선으로 나타낸 화상이다. 또, 곡선 화상의 선폭은, 문자 관리부(23)로부터 출력된 문자 속성 정보가 나타내는 문자 높이에 대응하고 있다. 입력 표시 제어 장치(26)에 출력되는 곡선 정보는, 당해 곡선 화상을 포함하는 정보이다.
문자열 인식부(25)는, 음성(2)을 입력하여 인식 처리를 행하고, 음성(2)의 인식 결과를 나타내는 문자열을, 표시 대상의 문자열로서 입력 표시 제어 장치(26)에 출력한다. 도 3은, 문자열 인식부(25)의 구성을 나타내는 블럭도이다. 문자열 인식부(25)는, 도 3에 도시하는 바와 같이, 음성 검출부(251), 음성 인식부(252), 및 음성 인식 사전 데이터베이스(253)(이하, 음성 인식 사전 DB(253)라고 기재함)를 구비한다.
음성 검출부(251)는, 사용자의 음성(2)을 검출하고, 검출한 음성(2)을 음성 인식부(252)에 출력한다. 음성 인식 사전 DB(253)는, 예를 들면, 인간의 발성 단위인 음소의 음향 특징이 기술된 음향 모델과, 음성 인식하는 단어가 기술된 인식 사전이 등록되어 있다. 음성 인식부(252)는, 음성 검출부(251)에 의해 검출된 음성(2)을 인식하는 음성 인식 엔진을 갖는다.
음성 인식부(252)는, 음성 검출부(251)에 의해 검출된 음성(2)을 분석하고, 음성(2)의 음향 특징을 산출하여, 음성 인식 사전 DB(253)에 등록되어 있는 인식 사전에 기술된 단어 중에서, 산출한 음향 특징에 가장 가까운 음향 특징을 갖는 단어를 탐색한다. 음성 인식부(252)는, 탐색한 단어를 나타내는 문자열을, 음성의 인식 결과를 나타내는 문자열로서, 입력 표시 제어 장치(26)에 출력한다.
도 3에 나타낸 문자열 인식부(25)는, 음성 인식부(252) 및 음성 인식 사전 DB(253)를 구비하고 있다. 다만, 이것은 일례이며, 문자열 인식부(25)는, 음성 인식부(252) 및 음성 인식 사전 DB(253) 대신에, 데이터 송수신부를 구비하는 문자열 인식부(25)여도 좋다. 데이터 송수신부는, 인터넷 등의 통신 회선을 거쳐, 도시하지 않는 음성 인식 서버와의 사이에 데이터를 송수신하는 것이 가능한 통신 기기이며, 예를 들면, 통신부(29)여도 좋다. 데이터 송수신부는, 음성 검출부(251)에 의해 검출된 음성(2)을 나타내는 데이터를, 음성 인식 서버에 송신한다. 음성 인식 서버는, 음성을 인식하는 음성 인식 엔진을 구비하고 있고, 데이터 송수신부로부터 송신된 음성(2)을 나타내는 데이터를 수신하면, 수신한 데이터가 나타내는 음성(2)을 인식하고, 음성(2)의 인식 결과를 나타내는 문자열을, 데이터 송수신부에 송신한다. 데이터 송수신부는, 음성 인식 서버로부터 수신한 음성 인식 결과를 나타내는 문자열을, 입력 표시 제어 장치(26)에 출력한다.
문자열 인식부(25)는, 음성 인식에 의해 문자열을 취득할 뿐만 아니라, 소프트웨어의 키보드 또는 하드웨어의 키보드에 의한 문자열의 입력을 접수하고, 입력을 접수한 문자열을 입력 표시 제어 장치(26)에 출력해도 좋다.
입력 표시 제어 장치(26)는, 디스플레이(28)의 표시 영역의 주위에 제 1 가상 영역을 설정하고, 디스플레이(28)의 표시 영역 내에 제 2 가상 영역을 설정한다. 입력 표시 제어 장치(26)는, 디스플레이(28)의 표시 영역의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 영역으로부터 당해 문자열의 일부가 돌출한다고 판정한 경우에, 곡선을 연장하고, 연장한 곡선에 따라 문자열의 일부를, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성한다.
문자열 일시 보존부(27)는, 문자열 취득부(262)에 의해 취득된 문자열을 나타내는 데이터를, 일시적으로 보존한다. 예를 들면, 문자열을 나타내는 데이터는, 궤적 판별부(24)로부터 곡선 정보가 출력될 때까지 문자열 일시 보존부(27)에 보존된다. 디스플레이(28)는, 입력 표시 제어 장치(26)에 의해 생성된 표시 정보에 따라 정보를 표시한다.
통신부(29)는, 통신 상대측의 단말(2)과의 사이에 통신을 행한다. 예를 들면, 통신부(29)는, 자신을 탑재하는 단말(2)이 구비하는 디스플레이(28)의 어스펙트비를 통신 상대측의 단말(2)에 송신하고, 통신 상대측의 단말(2)이 구비하는 디스플레이(28)의 어스펙트비를 수신한다. 통신부(29)에 의해 수신된 통신 상대측의 단말(2)이 구비하는 디스플레이(28)의 어스펙트비는, 입력 표시 제어 장치(26)에 출력된다. 입력 표시 제어 장치(26)는, 단말(2)간의 어스펙트비를 비교한 결과, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해 디스플레이(28)의 표시 영역을 좁게 조정하는 경우, 표시 영역을 좁게 하는 조정분의 영역을, 제 2 가상 영역으로 한다. 통신부(29)는, 입력 표시 제어 장치(26)에 의해 생성된 표시 정보를 통신 상대측의 단말(2)에 송신한다. 입력 표시 제어 장치(26)는, 통신 상대측의 단말(2)로부터 수신한 표시 정보에 따라, 통신 상대측의 단말(2)의 표시 내용을 디스플레이(28)의 표시 영역에 표시시킨다.
도 4는, 입력 표시 제어 장치(26)의 구성을 나타내는 블럭도이다. 입력 표시 제어 장치(26)는, 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)를 구비하고 있다. 곡선 정보 취득부(261)는, 궤적 판별부(24)에 의해 생성된 곡선 정보를 취득한다.
예를 들면, 곡선 정보 취득부(261)는, 궤적 판별부(24)로부터 곡선 정보를 취득하고, 취득한 곡선 정보를 표시 제어부(263)에 출력한다. 문자열 취득부(262)는, 문자열 인식부(25)에 의해 인식된 문자열을 취득한다. 예를 들면, 문자열 취득부(262)는, 음성 인식부(252)로부터 음성 인식 결과의 문자열을 취득하면, 취득한 문자열을 표시 제어부(263)에 출력한다.
표시 제어부(263)는, 곡선 정보가 나타내는 곡선에 따라 문자열을 표시하기 위한 표시 정보를 생성한다. 또, 표시 제어부(263)는, 디스플레이(28)의 표시 영역의 주위에 제 1 가상 영역을 설정한다. 제 1 가상 영역은, 디스플레이의 표시 영역의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에, 표시 대상의 문자열의 일부가 제 1 가상 영역에 돌출한다고 판정된 경우에, 문자열이 돌출한 일부가 가상적으로 배치되는 영역이다. 예를 들면, 표시 제어부(263)는, 곡선 정보가 나타내는 곡선 중, 제 1 가상 영역으로 연장한 부분의 길이 및 형상에 근거하여, 제 1 가상 영역에 있어서 문자열의 일부를 배치하는 가상적인 위치를 산출하고, 산출한 위치에 문자열을 가상적으로 배치한 표시 정보를 생성한다.
또, 표시 제어부(263)는, 디스플레이(28)의 표시 영역 중, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 영역, 즉, 어스펙트비 조정용 표시 영역을, 제 2 가상 영역으로서 설정한다. 제 2 가상 영역은, 디스플레이(28)의 표시 영역의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 대상의 문자열의 일부가 제 2 가상 영역에 돌출한다고 판정된 경우에, 상기 문자열이 돌출한 일부가 가상적으로 배치되는 영역이다. 예를 들면, 표시 제어부(263)는, 곡선 정보가 나타내는 곡선 중, 제 2 가상 영역으로 연장한 부분의 길이 및 형상, 또는, 제 2 가상 영역에 걸친 제 1 가상 영역으로 연장한 부분의 길이 및 형상에 근거하여, 제 2 가상 영역, 또는, 제 2 가상 영역에 걸친 제 1 가상 영역에 문자열을 배치하는 가상적인 위치를 산출하고, 산출한 위치에 문자열을 가상적으로 배치한 표시 정보를 생성한다.
「문자열의 일부를 가상적으로 배치한다」란, 예를 들면, 디스플레이(28)의 표시 영역(화면)에 있어서의 2차원 좌표계를, 제 1 가상 영역 및 제 2 가상 영역을 포함하는 평면으로 확장한 것을 상정하여, 상정한 2차원 좌표계에 있어서의 제 1 가상 영역 또는 제 2 가상 영역의 위치에 문자열의 일부를 배치하는 것을 의미한다. 「문자열의 일부의 가상적인 위치」는, 전술한 2차원 좌표계의 제 1 가상 영역 또는 제 2 가상 영역에 있어서의 곡선의 연장 부분의 2차원 좌표 위치이다.
또한, 표시 제어부(263)는, 디스플레이(28)에 있어서 문자열을 곡선 화상 위에 겹쳐 표시시킨 후, 곡선 화상의 표시를 소거하기 위한 표시 정보를 생성하고, 생성한 표시 정보에 따라, 디스플레이(28)에 있어서의 곡선 화상을 소거시킨다. 표시 제어부(263)는, 도 4에 도시하는 바와 같이, 길이 비교부(2631), 형상 결정부(2632), 곡선 연장부(2633), 표시 처리부(2634) 및 가상 영역 설정부(2635)를 구비한다.
길이 비교부(2631), 곡선 정보 취득부(261)에 의해 취득된 곡선 정보가 나타내는 곡선의 길이와, 문자열 취득부(262)에 의해 취득된 문자열의 길이를 비교하고, 곡선의 길이와 문자열의 길이를 비교한 결과를, 형상 결정부(2632) 및 곡선 연장부(2633)에 출력한다.
형상 결정부(2632)는, 길이 비교부(2631)로부터 출력된 비교 결과가, 곡선의 길이가 문자열의 길이보다 짧은 것을 나타내고 있는 경우, 곡선 정보가 나타내는 곡선의 형상에 근거하여, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 가상적으로 연장하는 곡선의 연장 부분의 형상을 결정한다. 예를 들면, 형상 결정부(2632)는, 형상이 다른 복수의 곡선의 패턴을 기억하고 있고, 복수의 곡선의 패턴의 각 형상과, 곡선 정보가 나타내는 곡선의 형상을 대조하여, 복수의 곡선의 패턴 중에서, 곡선 정보가 나타내는 곡선의 형상을 선택한다. 형상 결정부(2632)는, 선택한 곡선의 형상에 근거하여, 곡선의 연장 부분의 형상을 결정하고, 형상을 결정한 연장 부분을 나타내는 정보를, 곡선 연장부(2633)에 출력한다.
곡선 연장부(2633)는, 길이 비교부(2631)로부터 출력된 비교 결과가, 곡선의 길이가 문자열의 길이보다 짧은 것을 나타내고 있는 경우, 형상 결정부(2632)에 의해 형상이 결정된 연장 부분을, 곡선 정보가 나타내는 곡선의 종단부에 부가한다. 예를 들면, 곡선의 종단부는, 사용자의 조작에 의해 얻어진 곡선을 구성하는 점군의 시계열 데이터 중, 시계열에서 가장 새로운 점이다.
표시 처리부(2634)는, 곡선 정보가 나타내는 곡선에 따라 표시 대상의 문자열을 디스플레이(28)에 표시하기 위한 표시 정보를 생성하고, 생성한 표시 정보에 따라 디스플레이(28)에 문자열을 표시시킨다. 표시 처리부(2634)에 의해 생성되는 표시 정보는, 예를 들면, 문자열 취득부(262)에 의해 취득된 문자열을, 곡선 정보 취득부(261)에 의해 취득된 곡선 정보에 포함되는 곡선 화상 위에 겹쳐 표시하기 위한 정보이다.
또, 표시 처리부(2634)는, 길이 비교부(2631)로부터 출력된 비교 결과가, 곡선의 길이가 문자열의 길이보다 짧은 것을 나타내는 경우, 곡선 화상 위에 겹쳐 표시될 수 없는 문자열의 일부를, 곡선 연장부(2633)에 의해 곡선에 부가된 연장 부분을 따라, 디스플레이(28)에 표시하기 위한 표시 정보를 생성한다. 표시 처리부(2634)는, 생성한 표시 정보에 따라, 디스플레이(28)에 문자열의 일부를 표시시킨다. 또한, 표시 처리부(2634)는, 디스플레이(28)에 문자열을 표시시킨 후, 곡선 화상을 소거하기 위한 표시 정보를 생성하고, 생성한 표시 정보에 따라 디스플레이(28)의 표시 영역으로부터 곡선 화상을 소거시킨다.
표시 처리부(2634)는, 제 1 가상 영역 또는 제 2 가상 영역에 일부가 배치된 문자열의 선택을 접수한다. 표시 처리부(2634)는, 예를 들면, 제 1 가상 영역 또는 제 2 가상 영역에 일부가 배치된 문자열에 포함되는 문자 중, 디스플레이(28)의 표시 영역에 표시되고 있는 문자에 대한 사용자의 접촉 시간, 즉 터치 패널에 있어서의 터치 시간이 임계값보다 긴 경우, 당해 문자열의 선택을 접수한다. 임계값은, 표시 처리부(2634)의 내부 메모리에 저장된 것이라도 좋고, 외부로부터 주어지는 것 이라도 좋다.
표시 처리부(2634)는, 선택을 접수한 문자열에 포함되어 있는 문자의 윤곽에, 문자와는 다른 색의 선을 부가한다. 그리고, 표시 처리부(2634)는, 선택을 접수한 문자열의 이동을 접수한다. 예를 들면, 표시 처리부(2634)는, 선택을 접수한 문자열의 전체를, 디스플레이(28)의 표시 영역에 배치하기 위한 이동이 접수되면, 문자열의 전체를 디스플레이(28)의 표시 영역에 표시하기 위한 표시 정보를 생성한다. 또, 표시 처리부(2634)는, 선택을 접수한 문자열의 전체를, 디스플레이(28)의 표시 영역의 외측에 내보내는 이동이 접수되면, 당해 문자열을 파기한다.
가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역의 주위에 제 1 가상 영역을 설정하고, 또한, 디스플레이(28)의 표시 영역 중, 어스펙트비 조정용 표시 영역을, 제 2 가상 영역으로서 설정한다. 예를 들면, 가상 영역 설정부(2635)는, 디스플레이(28)의 어스펙트비를, 통신부(29)에 의해 통신 상대측의 단말(2)로부터 수신된 어스펙트비에 맞추는 경우, 어스펙트비를 변경한 후의 표시 영역의 면적이 가장 커지도록, 표시 영역의 세로 치수 또는 가로 치수를 변경한다.
디스플레이(28)의 어스펙트비를 변경하기 위해서 디스플레이(28)의 표시 영역의 세로 치수를 작게 한 경우, 어스펙트비 조정용 표시 영역의 위치는, 표시 영역의 세로 방향의 양단부의 위치 또는 세로 방향의 한쪽 단부의 위치로 결정된다. 어스펙트비 조정용 표시 영역의 크기는, 원래의 표시 영역으로부터, 세로 치수를 작게 한 표시 영역을 제외한 나머지 영역의 크기로 된다. 또, 디스플레이(28)의 표시 영역의 가로 치수를 작게 한 경우, 어스펙트비 조정용 표시 영역의 위치는, 표시 영역의 가로 방향의 양단부의 위치 또는 가로 방향의 한쪽 단부의 위치로 결정된다. 어스펙트비 조정용 표시 영역의 크기는, 원래의 표시 영역으로부터, 가로 치수를 작게 한 표시 영역을 제외한 나머지 영역의 크기로 된다. 가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역에 있어서의 어스펙트비 조정용 표시 영역의 위치와 크기를 결정하고, 위치와 크기를 결정한 어스펙트비 조정용 표시 영역을 제 2 가상 영역으로 설정한다.
가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역의 주위에 설정한 제 1 가상 영역을 나타내는 정보와, 디스플레이(28)의 표시 영역 내에 있어서의 제 2 가상 영역을 나타내는 정보를, 표시 처리부(2634)에 출력한다. 예를 들면, 가상 영역 설정부(2635)는, 디스플레이(28)의 어스펙트비를, 미리 설정되어 있던 어스펙트비로 변경하는 것에 의해, 제 2 가상 영역을 설정해도 좋다.
또, 가상 영역 설정부(2635)는, 디스플레이(28)의 어스펙트비와 통신 상대측의 어스펙트비로부터 산출한 새로운 어스펙트비에 맞추는 것에 의해, 제 2 가상 영역을 설정해도 좋다.
또한, 단말(2)간에, 호스트측의 단말(2)과 게스트측의 단말(2)이 설정되어 있는 경우, 가상 영역 설정부(2635)는, 게스트측의 단말(2)의 디스플레이(28)를, 호스트측의 단말(2)의 어스펙트비에 맞추는 것에 의해, 제 2 가상 영역을 설정해도 좋다.
도 5는, 실시의 형태 1에 따른 입력 표시 제어 방법을 나타내는 흐름도이며, 입력 표시 제어 장치(26)의 동작을 나타내고 있다. 곡선 정보 취득부(261)는, 궤적 판별부(24)로부터 출력된 곡선 정보를 취득한다(스텝 ST1). 곡선 정보 취득부(261)는, 취득한 곡선 정보를, 길이 비교부(2631), 형상 결정부(2632) 및 곡선 연장부(2633)에 출력한다. 문자열 취득부(262)는, 문자열 인식부(25)로부터 출력된 문자열 정보를 취득한다(스텝 ST2). 문자열 취득부(262)는, 취득한 문자열 정보를, 길이 비교부(2631) 및 표시 처리부(2634)에 출력한다.
가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역의 주위를, 제 1 가상 영역으로 설정한다(스텝 ST3). 예를 들면, 가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역(화면)에 있어서의 2차원 좌표계를, 당해 표시 영역의 외측의 평면까지 확장한 것을 상정하고, 표시 영역의 외측의 영역을 제 1 가상 영역으로 설정한다. 가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역(화면) 중, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보를 표시시키지 않는 영역을, 제 2 가상 영역으로 설정한다(스텝 ST4).
표시 처리부(2634)는, 곡선이 디스플레이(28)의 표시 영역의 끝에 도달해 있는지 여부를 판정한다(스텝 ST5). 예를 들면, 표시 처리부(2634)는, 곡선 정보가 나타내는 곡선의 단부가 디스플레이(28)의 표시 영역과 제 1 가상 영역의 경계선 상에 존재하는지 여부, 또는, 곡선 정보가 나타내는 곡선의 단부가 디스플레이(28)의 표시 영역과 제 2 가상 영역의 경계선 상에 존재하는지 여부에 근거하여, 곡선이 디스플레이(28)의 표시 영역의 끝에 도달해 있는지 여부를 판정한다.
곡선이 디스플레이(28)의 표시 영역의 끝에 도달해 있다고 판정된 경우(스텝 ST5；YES), 길이 비교부(2631)는, 곡선 정보가 나타내는 곡선의 길이가, 문자열의 길이보다 짧은지 여부를 판정한다(스텝 ST6). 예를 들면, 길이 비교부(2631)는, 곡선 정보가 나타내는 곡선의 길이를 산출하고, 산출한 곡선의 길이와 문자열의 길이를 비교한다. 길이 비교부(2631)는, 산출한 곡선의 길이와 문자열의 길이를 비교한 결과에 근거하여, 곡선의 길이가, 문자열의 길이보다 짧은지 여부를 판정한다.
계속해서, 곡선 연장부(2633)는, 곡선의 길이가 문자열의 길이보다 짧은 경우(스텝 ST6；YES), 형상 결정부(2632)에 의해 형상이 결정된 연장 부분을, 곡선 정보가 나타내는 곡선의 종단에 부가하는 것에 의해, 곡선을 연장한다(스텝 ST7).
표시 처리부(2634)는, 곡선 연장부(2633)에 의해 연장된 곡선에 따라, 문자열의 일부를, 제 1 가상 영역, 제 2 가상 영역 또는 제 2 가상 영역에 걸친 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성한다(스텝 ST8).
또, 곡선이 디스플레이(28)의 표시 영역의 끝에 도달하지 않은 경우(스텝 ST5；NO), 또는, 곡선의 길이가 문자열의 길이 이상인 경우(스텝 ST6；NO), 표시 처리부(2634)는, 곡선 정보가 나타내는 곡선에 따라 문자열의 전체를 표시 영역에 배치한 표시 정보를 생성한다(스텝 ST9).
도 6은, 제 2 가상 영역의 설정 방법을 나타내는 흐름도이며, 가상 영역 설정부(2635) 및 표시 처리부(2634)의 동작을 나타내고 있다. 가상 영역 설정부(2635)는, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해, 표시 영역의 일부를 제 2 가상 영역으로서 설정한다(스텝 ST1a). 예를 들면, 가상 영역 설정부(2635)는, 디스플레이(28)의 표시 영역 중, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해, 어스펙트비 조정용 표시 영역의 위치 및 크기를 결정하고, 위치 및 크기를 결정한 어스펙트비 조정용 표시 영역을 제 2 가상 영역으로 설정한다.
도 7(a)는, 단말(2)이 스마트폰인 경우의 화면예를 나타내는 화면도이다. 도 7(a)에 나타내는 단말(2)에 있어서, 화면(28A)의 어스펙트비는 16:9이다. 도 7(b)는, 단말(2)이 태블릿 단말인 경우의 화면예를 나타내는 화면도이다. 도 7(b)에 나타내는 단말(2)에 있어서, 화면(28B)의 어스펙트비는 4:3이다. 도 7(a) 및 도 7(b)에 있어서, 화면(28A)은 표시 영역 DA이다. 가상 영역 설정부(2635)는, 표시 영역 DA의 주위의 영역을, 제 1 가상 영역 VA1로 설정한다.
도 7(c)는, 스마트폰의 화면의 어스펙트비를 4:3으로 설정했을 때의 화면예를 나타내는 화면도이다. 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비(16:9)를, 화면(28B)의 어스펙트비(4:3)에 맞추기 위해, 도 7(a)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 이것에 의해, 표시 영역 DA에는, 제 2 가상 영역 VA2와 표시 영역 DA1이 설정된다.
도 7(d)는, 태블릿 단말의 화면의 어스펙트비를 16:9로 설정했을 때의 화면예를 나타내는 화면도이다. 가상 영역 설정부(2635)는, 화면(28B)의 어스펙트비(4:3)를, 화면(28A)의 어스펙트비(16:9)에 맞추기 위해, 도 7(b)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 이것에 의해, 표시 영역 DA에는, 제 2 가상 영역 VA2와 표시 영역 DA1이 설정된다.
다음에, 표시 처리부(2634)는, 디스플레이(28)의 표시 영역에 있어서, 제 2 가상 영역을 그 이외의 영역과 구별하여 표시하기 위한 표시 정보를 생성한다(스텝 ST2a). 도 8(a) 내지 도 8(d)는, 제 2 가상 영역의 표시예를 나타내는 화면도이다. 표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 대해서 검은 띠 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 디스플레이(28)는, 생성한 표시 정보에 따라, 도 8(a)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 검은 띠 화상을 표시한다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만 표시 정보가 표시되는 것을 파악할 수 있다.
표시 처리부(2634)는, 조작 접수부(21)에 의해 디스플레이(28)의 화면을 확대, 축소 또는 스크롤하는 조작이 접수되면, 제 2 가상 영역 VA2는 그대로 하고 표시 영역 DA1만을, 상기 조작에 따라 확대, 축소 또는 스크롤시키는 표시 정보를 생성한다. 디스플레이(28)는, 생성된 표시 정보에 따라, 표시 영역 DA1을, 확대, 축소 또는 스크롤시킨다.
표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 회색 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 표시 처리부(2634)에 의해 생성된 표시 정보에 따라, 디스플레이(28)는, 도 8(b)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 회색 화상을 중첩하여 표시한다. 또, 표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 회색 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 생성한 표시 정보에 따라, 디스플레이(28)는, 도 8(b)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 회색 화상을 중첩하여 표시한다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만 표시 정보가 표시되는 것을 파악할 수 있다.
또, 표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 도트 패턴 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 표시 처리부(2634)에 의해 생성된 표시 정보에 따라, 디스플레이(28)는, 도 8(c)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 도트 패턴 화상을 중첩하여 표시한다. 표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 도트 패턴 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 생성한 표시 정보에 따라, 디스플레이(28)는, 도 8(c)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 도트 패턴 화상을 중첩하여 표시한다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만 표시 정보가 표시되는 것을 파악할 수 있다.
표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 줄무늬 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 표시 처리부(2634)에 의해 생성된 표시 정보에 따라, 디스플레이(28)는, 도 8(d)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 줄무늬 화상을 중첩하여 표시한다. 표시 처리부(2634)는, 예를 들면, 제 2 가상 영역 VA2에 줄무늬 화상을 중첩하여 표시하기 위한 표시 정보를 생성한다. 생성한 표시 정보에 따라, 디스플레이(28)는, 도 8(d)에 도시하는 바와 같이, 제 2 가상 영역 VA2에 줄무늬 화상을 중첩하여 표시한다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만 표시 정보가 표시되는 것을 파악할 수 있다.
도 9(a)는, 디스플레이(28)의 표시 영역 DA1과 제 2 가상 영역 VA2를 흑선 프레임(30)으로 구별한 화면을 나타내는 화면도이다. 표시 처리부(2634)는, 예를 들면, 표시 영역 DA1을 흑선 프레임(30)으로 둘러싸서 표시하기 위한 표시 정보를 생성한다. 표시 처리부(2634)에 의해 생성된 표시 정보에 따라, 디스플레이(28)는, 도 9(a)에 도시하는 바와 같이, 흑선 프레임(30)으로 둘러싸인 표시 영역 DA1을 표시한다. 제 2 가상 영역 VA2는, 흑선 프레임(30)에 의해 표시 영역 DA1과 구별된다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만 표시 정보가 표시되는 것을 파악할 수 있다.
도 9(b)는, 디스플레이(28)의 표시 영역 DA1과 제 2 가상 영역 VA2를 파선 프레임(31)으로 구별한 화면을 나타내는 화면예이다. 표시 처리부(2634)는, 예를 들면, 표시 영역 DA1을 파선 프레임(31)으로 둘러싸서 표시하기 위한 표시 정보를 생성한다. 표시 처리부(2634)에 의해 생성된 표시 정보에 따라, 디스플레이(28)는, 도 9(b)에 도시하는 바와 같이, 파선 프레임(31)으로 둘러싸인 표시 영역 DA1을 표시한다. 제 2 가상 영역 VA2는, 파선 프레임(31)에 의해 표시 영역 DA1과 구별된다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만 표시 정보가 표시되는 것을 파악할 수 있다.
도 10은, 문자열의 일부를 디스플레이(28)의 표시 영역 DA1에 표시시킬 수 없는 예를 나타내는 화면예이다. 사용자가 디스플레이(28)의 화면 상에 설치된 터치면을 도 10에 있어서의 오른쪽 방향에 덧썼을 때, 곡선 정보가 나타내는 곡선 C1의 우단은, 디스플레이(28)의 표시 영역 DA1의 우단에 위치하게 된다. 그러나, 곡선 C1에 따라 표시 영역 DA1에 표시해야 할 문자열 M1의 길이와 곡선 C1의 길이를 비교하면, 곡선 C1의 길이는, 문자열 M1의 길이보다 짧다. 이 때문에, 문자열 M1인 「123456」 중, 「4」의 일부와 「5」 및 「6」은, 표시 영역 DA1로부터 돌출하여 표시되지 않는다.
표시 처리부(2634)는, 문자열 M1의 일부를 표시 영역 DA1에 표시시킬 수 없는 경우, 곡선 C1에 연장 곡선 C1a를 부가하는 것에 의해 제 1 가상 영역 VA1까지 연장하고, 연장 곡선 C1a에 따라 미표시의 문자열 「456」을 가상적으로 제 1 가상 영역 VA1에 배치한 표시 정보를 생성한다. 이 표시 정보를 이용하는 것에 의해, 디스플레이(28)는, 미표시의 문자열 「456」을 포함하는 문자열 M1의 전체를 표시 영역 DA1에 표시할 수 있다.
또, 도 10에 있어서, 사용자가 디스플레이(28)의 화면 상에 설치된 터치면을 도 10에 있어서의 위쪽 방향에 덧썼을 때에, 곡선 정보가 나타내는 곡선 C2의 우단은, 디스플레이(28)의 표시 영역 DA1의 상단에 위치하게 된다. 그러나, 곡선 C2에 따라 표시 영역 DA1에 표시해야 할 문자열 M2의 길이와 곡선 C2의 길이를 비교하면, 곡선 C2의 길이는, 문자열 M2의 길이보다 짧다. 이 때문에, 문자열 M2인 「ABCDE」 중, 「C」의 일부와 「D」 및 「E」는, 표시 영역 DA1로부터 돌출하여 표시되지 않는다.
표시 처리부(2634)는, 문자열 M2의 일부를 표시 영역 DA1에 표시시킬 수 없는 경우, 곡선 C2에 연장 곡선 C2a를 부가하는 것에 의해 제 2 가상 영역 VA2까지 연장하고, 연장 곡선 C2a에 따라 미표시의 문자열 「CDE」를 가상적으로 제 2 가상 영역 VA2에 배치한 표시 정보를 생성한다. 이 표시 정보를 이용하는 것에 의해, 디스플레이(28)는, 미표시의 문자열 「CDE」를 포함하는 문자열 M2의 전체를, 표시 영역 DA1에 표시할 수 있다.
도 10에 있어서, 사용자가 디스플레이(28)의 화면 상에 설치된 터치면을 도 10에 있어서의 아래쪽 방향에 덧썼을 때, 곡선 정보가 나타내는 곡선 C3의 우단은, 디스플레이(28)의 표시 영역 DA1의 하단에 위치하게 된다. 그러나, 곡선 C3에 따라 표시 영역 DA1에 표시해야 할 문자열 M3의 길이와 곡선 C3의 길이를 비교하면, 곡선 C3의 길이는, 문자열 M3의 길이보다 짧다. 이 때문에, 문자열 M3인 「3.141592653」 중, 「592653」은, 표시 영역 DA1로부터 돌출하여 표시되지 않는다.
표시 처리부(2634)는, 문자열 M3의 일부를 표시 영역 DA1에 표시시킬 수 없는 경우, 곡선 C3에 연장 곡선 C3a를 부가하는 것으로, 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1까지 연장하고, 연장 곡선 C3a에 따라 미표시의 문자열 「592653」을 가상적으로 제 2 가상 영역 VA2 및 제 1 가상 영역 VA1에 배치한 표시 정보를 생성한다. 이 표시 정보를 이용하는 것에 의해, 디스플레이(28)는, 미표시의 문자열 「592653」을 포함하는 문자열 M3의 전체를, 표시 영역 DA1에 표시할 수 있다.
도 11은, 입력 표시 제어 장치(26)의 기능을 실현하는 하드웨어 구성을 나타내는 블럭도이다. 도 11에 있어서, 처리 회로(103)는, 입력 인터페이스(100)를 거쳐, 조작 접수부(21), 궤적 판별부(24) 및 문자열 인식부(25)로부터, 데이터를 취득한다. 처리 회로(103)는, 출력 인터페이스(101)를 거쳐, 디스플레이(28)에 표시 정보를 출력한다. 처리 회로(103)는, 통신부(29)에 의해 통신 상대측의 단말(2)과의 사이에 송수신된 데이터를, 통신 인터페이스(102)를 거쳐 입출력한다.
도 12는, 입력 표시 제어 장치(26)의 기능을 실현하는 소프트웨어를 실행하는 하드웨어 구성을 나타내는 블럭도이다. 도 12에 있어서, 프로세서(104)는, 입력 인터페이스(100)를 거쳐, 조작 접수부(21), 궤적 판별부(24) 및 문자열 인식부(25)로부터, 데이터를 취득한다. 프로세서(104)는, 출력 인터페이스(101)를 거쳐, 디스플레이(28)에 표시 정보를 출력한다. 프로세서(104)는, 통신부(29)에 의해 통신 상대측의 단말(2)과의 사이에 송수신된 데이터를, 통신 인터페이스(102)를 거쳐 입출력한다.
입력 표시 제어 장치(26)가 구비하는 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)의 기능은, 처리 회로에 의해 실현된다. 즉, 입력 표시 제어 장치(26)는, 도 5에 나타낸 스텝 ST1로부터 스텝 ST9까지의 각 처리를 실행하는 처리 회로를 구비한다. 처리 회로는, 전용 하드웨어여도 좋고, 메모리에 기억된 프로그램을 실행하는 CPU(Central Processing Unit)라도 좋다.
처리 회로가 도 11에 나타내는 전용 하드웨어의 처리 회로(103)인 경우, 처리 회로(103)는, 예를 들면, 단일 회로, 복합 회로, 프로그램화된 프로세서, 병렬 프로그램화한 프로세서, ASIC(Application Specific Integrated Circuit), FPGA(Field-Programmable Gate Array), 또는 이것들을 조합한 것이 해당한다. 입력 표시 제어 장치(26)가 구비하는 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)의 기능은, 다른 처리 회로로 실현되어도 좋고, 이러한 기능을 합쳐 1개의 처리 회로로 실현되어도 좋다.
처리 회로가 도 12에 나타내는 프로세서(104)인 경우, 입력 표시 제어 장치(26)가 구비하는 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)의 기능은, 소프트웨어, 펌웨어 또는 소프트웨어와 펌웨어의 조합에 의해 실현된다. 또, 소프트웨어 또는 펌웨어는, 프로그램으로서 기술되어 메모리(105)에 기억된다.
프로세서(104)는, 메모리(105)에 기억된 프로그램을 판독하여 실행하는 것에 의해, 입력 표시 제어 장치(26)가 구비하는 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)의 기능을 실현한다. 예를 들면, 입력 표시 제어 장치(26)는, 프로세서(104)에 의해 실행될 때, 도 5에 나타내는 흐름도에 있어서의 스텝 ST1로부터 스텝 ST9의 처리가 결과적으로 실행되는 프로그램을 기억하기 위한 메모리(105)를 구비한다. 이러한 프로그램은, 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)의 순서 또는 방법을, 컴퓨터에 실행시킨다. 메모리(105)는, 컴퓨터를, 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)로서 기능시키기 위한 프로그램이 기억된 컴퓨터 판독 가능한 기억 매체여도 좋다.
메모리(105)는, 예를 들면, RAM(Random Access Memory), ROM(Read Only Memory), 플래시 메모리, EPROM(Erasable Programmable Read Only Memory), EEPROM(Electrically-EPROM) 등의 비휘발성 또는 휘발성의 반도체 메모리, 자기 디스크, 플렉서블 디스크, 광디스크, 콤팩트 디스크, 미니 디스크, DVD 등이 해당한다.
입력 표시 제어 장치(26)가 구비하는 곡선 정보 취득부(261), 문자열 취득부(262) 및 표시 제어부(263)의 기능의 일부는, 전용 하드웨어에 의해 실현되고, 나머지의 일부는, 소프트웨어 또는 펌웨어에 의해 실현되어도 좋다. 예를 들면, 곡선 정보 취득부(261) 및 문자열 취득부(262)는, 전용의 하드웨어인 처리 회로(103)에 의해 기능이 실현되고, 표시 제어부(263)는, 프로세서(104)가 메모리(105)에 기억된 프로그램을 판독하여 실행하는 것에 의해 기능이 실현된다. 이와 같이, 처리 회로는, 하드웨어, 소프트웨어, 펌웨어 또는 이러한 조합에 의해, 상기 기능을 실현할 수 있다.
가상 영역 설정부(2635)에 의한 제 1 가상 영역 VA1과 제 2 가상 영역 VA2의 설정의 구체적인 예에 대해 설명한다.
도 13(a)는, 단말(2)이 스마트폰인 경우의 화면예를 나타내는 화면도이다. 도 13(a)에 나타내는 단말(2)에 있어서, 화면(28A)의 어스펙트비는 16:9이다. 도 13(b)는, 단말(2)이 태블릿 단말인 경우의 화면예를 나타내는 화면도이다. 도 13(b)에 나타내는 단말(2)에 있어서, 화면(28B)의 어스펙트비는 4:3이다. 도 13(a) 및 도 13(b)에 있어서, 가상 영역 설정부(2635)는, 어스펙트비를, 미리 설정된 어스펙트비(1:1)에 맞춘다. 예를 들면, 도 13(a)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비(16:9)를, 미리 설정된 어스펙트비(1:1)에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 도 13(b)에 나타내는 태블릿 단말의 가상 영역 설정부(2635)는, 화면(28B)의 어스펙트비(4:3)를, 미리 설정된 어스펙트비(1:1)에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다.
도 14(a)는, 단말(2)이 스마트폰인 경우의 화면예를 나타내는 화면도이다. 도 14(a)에 나타내는 단말(2)에 있어서, 화면(28A)의 어스펙트비는, 16:9이다. 도 14(b)는, 단말(2)이 태블릿 단말인 경우의 화면예를 나타내는 화면도이다. 화면(28B)의 어스펙트비는, 4:3이다. 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비와 화면(28B)의 어스펙트비로부터 산출한 새로운 어스펙트비로 하는 것에 의해 제 2 가상 영역을 설정해도 좋다. 예를 들면, 가상 영역 설정부(2635)는, 스마트폰의 어스펙트비와 태블릿 단말의 어스펙트비에 있어서의, 세로 비율끼리 가산한 값을 새로운 세로 비율로 하고, 가로 비율끼리 가산한 값을 새로운 가로 비율로 한 어스펙트비를 산출한다.
화면(28A)의 어스펙트비는 16:9이며, 화면(28B)의 어스펙트비는 4:3이므로, 새로운 어스펙트비로서, 20(=16＋4):12(=9＋3)가 산출된다. 도 14(a)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비 16:9를 새로운 어스펙트비 20:12에 맞추는 것에 의해 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 도 14(b)에 나타내는 태블릿 단말의 가상 영역 설정부(2635)는, 화면(28B)의 어스펙트비 4:3을 새로운 어스펙트비 20:12에 맞추는 것에 의해 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다.
또, 어스펙트비에 있어서의 세로 비율끼리 가산한 값을 세로 비율로 하고, 가로 비율끼리 가산한 값을 가로 비율로 하는 경우 외에, 예를 들면, 세로 비율끼리 곱셈하여 평방근을 취한 값을 세로 비율로 하고, 가로 비율끼리 곱셈하여 평방근을 취한 값을 가로 비율로 해도 좋다. 또, 표시 영역 DA1이 가장 커지는 어스펙트비로 조정해도 좋다.
도 15(a) 내지 도 15(c)는, 서로 다른 어스펙트비를 갖는 3대의 단말(2)의 화면예를 나타내는 화면도이다. 도 15(a)는, 단말(2)이 스마트폰인 경우의 화면예를 나타내는 화면도이다. 도 15(a)에 나타내는 단말(2)에 있어서, 화면(28A)의 어스펙트비는 16:9이다. 도 15(b)는, 단말(2)이 태블릿 단말인 경우의 화면예를 나타내는 화면도이다. 도 15(b)에 나타내는 단말(2)에 있어서, 화면(28B)의 어스펙트비는 4:3이다. 도 15(c)는, 단말(2)이 스마트폰인 경우의 화면예를 나타내는 화면도이다. 도 15(c)에 나타내는 단말(2)에 있어서, 화면(28C)의 어스펙트비는 7:3이다. 도 15(a), 도 15(b) 및 도 15(c)에 있어서, 화면(28A), 화면(28B) 및 화면(28C)은, 표시 영역 DA이다. 가상 영역 설정부(2635)는, 표시 영역 DA의 주위의 영역을, 제 1 가상 영역 VA1로 설정한다.
도 16(a) 내지 도 16(c)는, 3대의 단말(2)의 화면의 어스펙트비를 16:9로 설정했을 때의 화면예를 나타내는 화면도이다. 도 16(a)에 나타내는 스마트폰이 구비하는 통신부(29)는, 화면(28A)의 어스펙트비(16:9)를 나타내는 정보를, 도 16(b)에 나타내는 태블릿 단말과 도 16(c)에 나타내는 스마트폰에 송신한다. 도 16(b)에 나타내는 태블릿 단말에 탑재된 가상 영역 설정부(2635)는, 화면(28B)의 어스펙트비 4:3을, 화면(28A)의 어스펙트비(16:9)에 맞추기 위해, 도 15(b)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 마찬가지로, 도 16(c)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28C)의 어스펙트비 7:3을, 화면(28A)의 어스펙트비(16:9)에 맞추기 위해, 도 15(c)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 이것에 의해, 표시 영역 DA에는, 제 2 가상 영역 VA2와 표시 영역 DA1이 설정된다.
도 17(a) 내지 도 17(c)는, 3대의 단말(2)의 화면의 어스펙트비를 7:3으로 설정했을 때의 화면예를 나타내는 화면도이다. 도 17(c)에 나타내는 스마트폰이 구비하는 통신부(29)는, 화면(28C)의 어스펙트비(7:3)를 나타내는 정보를, 도 17(a)에 나타내는 스마트폰과 도 17(b)에 나타내는 태블릿 단말에 송신한다. 도 17(a)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비 16:9를, 화면(28C)의 어스펙트비(7:3)에 맞추기 위해, 도 15(a)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 마찬가지로, 도 17(b)에 나타내는 태블릿 단말에 탑재된 가상 영역 설정부(2635)는 화면(28B)의 어스펙트비 4:3을, 화면(28C)의 어스펙트비(7:3)에 맞추기 위해, 도 15(b)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 이것에 의해, 표시 영역 DA에는, 제 2 가상 영역 VA2와 표시 영역 DA1이 설정된다.
도 18(a) 내지 도 18(c)는, 3대의 단말(2)의 화면의 어스펙트비를 4:3으로 설정했을 때의 화면예를 나타내는 화면도이다. 도 18(b)에 나타내는 태블릿 단말이 구비하는 통신부(29)는, 화면(28B)의 어스펙트비(4:3)를 나타내는 정보를, 도 18(a)에 나타내는 스마트폰 및 도 18(c)에 나타내는 태블릿 단말에 송신한다. 도 18(a)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비 16:9를, 화면(28B)의 어스펙트비(4:3)에 맞추기 위해, 도 15(a)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 마찬가지로, 도 18(c)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28C)의 어스펙트비 7:3을, 화면(28B)의 어스펙트비(4:3)에 맞추기 위해, 도 15(c)에 나타낸 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 이것에 의해, 표시 영역 DA에는, 제 2 가상 영역 VA2와 표시 영역 DA1이 설정된다.
도 19(a) 내지 도 19(c)는, 3대의 단말(2)의 화면의 어스펙트비를 1:1로 설정했을 때의 화면예를 나타내는 화면도이다. 가상 영역 설정부(2635)는, 어스펙트비를, 미리 설정된 어스펙트비(1:1)에 맞춘다. 예를 들면, 도 19(a)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비(16:9)를, 미리 설정된 어스펙트비(1:1)에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 도 19(b)에 나타내는 태블릿 단말의 가상 영역 설정부(2635)는, 화면(28B)의 어스펙트비(4:3)를, 미리 설정된 어스펙트비(1:1)에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 마찬가지로, 도 19(c)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28C)의 어스펙트비(7:3)를, 미리 설정된 어스펙트비(1:1)에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다.
도 20(a) 내지 도 20(c)는, 3대의 단말(2)의 화면의 어스펙트비를, 3대의 어스펙트비로부터 산출한 비율로 설정했을 때의 화면예를 나타내는 화면도이다. 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비와 화면(28B)의 어스펙트비와 화면(28C)의 어스펙트비로부터 산출한 새로운 어스펙트비로 하는 것에 의해, 제 2 가상 영역을 설정해도 좋다. 예를 들면, 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비와 화면(28B)의 어스펙트비와 화면(28C)의 어스펙트비에 있어서의, 세로 비율끼리 가산한 값을 새로운 세로 비율로 하고, 가로 비율끼리 가산한 값을 새로운 가로 비율로 한 어스펙트비를 산출한다.
화면(28A)의 어스펙트비는 16:9이며, 화면(28B)의 어스펙트비는 4:3이며, 화면(28C)의 어스펙트비는 7:3이므로, 새로운 어스펙트비로서 27(=16＋4＋7):15(=9＋3＋3)가 산출된다. 도 20(a)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28A)의 어스펙트비 16:9를, 새로운 어스펙트비 27:15에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 도 20(b)에 나타내는 태블릿 단말의 가상 영역 설정부(2635)는, 화면(28B)의 어스펙트비 4:3을, 새로운 어스펙트비 27:15에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다. 도 20(c)에 나타내는 스마트폰에 탑재된 가상 영역 설정부(2635)는, 화면(28C)의 어스펙트비 7:3을, 새로운 어스펙트비 27:15에 맞추기 위해, 표시 영역 DA에 제 2 가상 영역 VA2를 설정한다.
또, 도 20(a), 도 20(b) 및 도 20(c)에 있어서도, 어스펙트비에 있어서의 세로 비율끼리 가산한 값을 세로 비율로 하고, 가로 비율끼리 가산한 값을 가로 비율로 하는 경우 외에, 예를 들면, 세로 비율끼리 곱셈하여 평방근을 취한 값을 세로 비율로 하고, 가로 비율끼리 곱셈하여 평방근을 취한 값을 가로 비율로 해도 좋다. 또, 표시 영역 DA1이 가장 커지는 어스펙트비로 조정해도 좋다.
이상과 같이, 실시의 형태 1에 따른 입력 표시 제어 장치(26)에 있어서, 표시 제어부(263)가, 디스플레이(28)의 표시 영역 DA의 주위에 제 1 가상 영역 VA1을 설정하고, 디스플레이(28)의 표시 영역 DA 중, 통신 상대측의 단말(2)과 어스펙트비를 맞추기 위해, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 표시 영역을, 제 2 가상 영역 VA2로서 설정한다. 그리고, 표시 제어부(263)는, 디스플레이(28)의 표시 영역 DA1의 끝에 도달한 곡선의 길이가 문자열의 길이보다 짧기 때문에 표시 영역 DA1로부터 당해 문자열의 일부가 돌출한다고 판정한 경우에, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 곡선을 연장하고, 연장한 곡선에 따라 문자열의 일부를, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 가상적으로 배치한 표시 정보를 생성한다. 이것에 의해, 입력 표시 제어 장치(26)는, 표시 대상의 문자열의 일부가 어스펙트비 조정용 표시 영역에 돌출하는 경우에도, 표시 대상의 문자열의 전체를 표시하기 위한 표시 정보를 생성할 수 있다.
실시의 형태 1에 따른 입력 표시 제어 장치(26)에 있어서, 표시 제어부(263)는, 디스플레이(28)의 표시 영역에 있어서, 제 2 가상 영역 VA2를, 제 2 가상 영역 Va2 이외의 영역 DA1과는 구별하여 표시시킨다. 이것에 의해, 사용자는, 디스플레이(28)의 표시 영역 DA 중, 영역 DA1에만, 통신 상대측의 단말(2)과의 사이에 공유하는 표시 정보가 표시되는 것을 파악할 수 있다.
(실시의 형태 2)
실시의 형태 2에 따른 입력 표시 시스템에 있어서, 표시 제어부가, 일부가 가상 영역에 배치된 문자열의 전체를 표시 영역에 표시시키기 위한 표시 정보를 생성하는 것이다. 실시의 형태 2에 따른 입력 표시 시스템 및 입력 표시 제어 장치는, 실시의 형태 1에서 나타낸 입력 표시 시스템(1) 및 입력 표시 제어 장치(26)와 동일한 구성을 가지므로, 구성 요소의 설명은 도 2 및 도 4를 참조하는 것으로 한다.
도 21은, 실시의 형태 2에 따른 입력 표시 제어 방법을 나타내는 흐름도이다. 도 21에 있어서, 스텝 ST1로부터 스텝 ST9까지의 처리는 도 5와 마찬가지이므로, 설명을 생략한다. 표시 처리부(2634)는, 연장한 곡선에 따라 일부가 가상 영역에 배치된 문자열을 표시 영역 DA1에 표시하기 위한 표시 정보를 생성한다(스텝 ST10). 표시 처리부(2634)는, 생성한 표시 정보를 디스플레이(28)에 출력한다. 디스플레이(28)는, 표시 처리부(2634)에 의해 생성된 표시 정보에 따라, 문자열의 전체를 표시 영역 DA1에 표시한다(스텝 ST11).
도 22는, 일부가 제 2 가상 영역 VA2에 배치된 문자열 M4를 이동시켜, 문자열 M4의 전체를 디스플레이(28)의 표시 영역 DA1에 표시시켰을 때의 화면예를 나타내는 설명도이다. 도 22에 있어서, 문자열 M4는, 표시 영역 DA1의 상단에 도달한 곡선 C보다 길기 때문에, 곡선 C에 따라 배치하면 일부가 제 2 가상 영역 VA2에 돌출한다. 이 때문에, 표시 제어부(263)는, 곡선 C를 제 2 가상 영역 VA2로 연장하고, 연장한 곡선 C에 따라 문자열 M4의 일부를 제 2 가상 영역 VA2에 배치한 표시 정보를 생성한다.
표시 제어부(263)는, 조작 접수부(21)에 의해 문자열 M4를 A1 방향으로 이동시키는 조작이 접수된 경우에, 상기 표시 정보를 이용하여, 문자열 M4의 전체를 표시 영역 DA1에 표시시키는 표시 정보를 생성한다. 디스플레이(28)는, 표시 제어부(263)에 의해 생성된 상기 표시 정보에 따라, 도 22에 도시하는 바와 같이, 문자열 M4의 전체를 표시 영역 DA1에 표시시킨다.
도 23은, 일부가 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1에 배치된 문자열 M5를 개행시켜, 문자열 M5의 전체를, 디스플레이(28)의 표시 영역 DA1에 표시시켰을 때의 화면예를 나타내는 설명도이다. 문자열 M5는, 표시 영역 DA1의 상단에 도달한 곡선 C보다 길기 때문에, 곡선 C에 따라 배치하면, 일부가 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1에 돌출한다. 이 때문에, 표시 제어부(263)는, 곡선 C에 연장분 C1을 부가하는 것에 의해, 곡선 C를 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1로 연장하고, 연장한 곡선 C에 따라 문자열 M5의 일부를, 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1에 배치한 표시 정보를 생성한다. 이것에 의해, 문자열 M4의 전체를, 디스플레이(28)의 표시 영역 DA1에 표시시킬 수 있다.
상기 표시 정보를 이용하여, 표시 제어부(263)는, 연장분 C1을 자동 개행시킨 곡선 C2에 따라, 문자열 M5 중, 문자열 「CDEF」를 배치하고, 문자열 「CDEF」 중, 제 2 가상 영역 VA2에 돌출하는 문자 「F」를, 곡선 C2 중, 제 2 가상 영역 VA2에 돌출하는 곡선 부분 C3를 더 개행시켜, 개행 후의 곡선 부분 C4에 따라 문자 「F」를 배치하는 표시 정보를 생성한다. 디스플레이(28)는, 표시 제어부(263)에 의해 생성된 상기 표시 정보에 따라, 도 23에 도시하는 바와 같이, 문자열 M5의 전체를, 표시 영역 DA1에 표시시킨다. 이것에 의해, 문자열 M5의 전체를, 자동적으로 디스플레이(28)의 표시 영역 DA1에 표시시킬 수 있다.
또, 표시 제어부(263)는, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 일부가 배치된 문자열에 포함되는 문자의 사이즈를 작게 하는 것에 의해, 곡선의 길이 이하로 한 문자열을 표시 영역 DA1에 표시하기 위한 표시 정보를 생성해도 좋다.
예를 들면, 표시 제어부(263)는, 상기 가상 영역으로 연장된 곡선에 따라 일부가 가상 영역에 배치된 문자열의 표시 정보를 생성하면, 이 표시 정보를, 문자열의 길이가 표시 영역 DA1에 배치된 곡선의 길이 이하로 되도록, 당해 문자열에 포함되는 문자의 사이즈를 작게 한 표시 정보로 변환한다. 사이즈를 작게 하는 문자는, 문자열에 포함되는 모든 문자여도 좋고, 일부의 문자여도 좋다.
표시 제어부(263)는, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 일부가 배치된 문자열을, 당해 문자열과 동일한 의미를 갖고 또한 당해 문자열보다 길이를 짧게 변환하는 것에 의해, 변환한 문자열을 표시 영역 DA1에 표시하기 위한 표시 정보를 생성한다.
예를 들면, 표시 제어부(263)는, 상기 가상 영역으로 연장된 곡선에 따라 일부가 가상 영역에 배치된 문자열 「3.141592653」의 표시 정보를 생성하면, 이 표시 정보를, 당해 문자열과 동일한 의미를 갖고 또한 당해 문자열보다 길이가 짧은 문자열 「π3.14」로 변환한 표시 정보로 변환한다. 또, 문자열의 전체를 변환해도 좋고, 문자열의 일부를 변환해도 좋다.
이상과 같이, 실시의 형태 2에 따른 입력 표시 제어 장치(26)에 있어서, 표시 제어부(263)는, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 일부가 배치된 문자열의 선택을 접수하고, 선택이 접수된 문자열을 이동시키는 조작이 접수된 경우, 문자열을 이동하는 것에 의해, 문자열의 전체를 표시 영역 DA1에 표시하기 위한 표시 정보를 생성한다. 생성된 표시 정보를 이용하는 것으로, 곡선보다 문자열이 긴 경우에도, 디스플레이(28)의 표시 영역 DA1에 문자열의 전체를 표시시킬 수 있다.
실시의 형태 2에 따른 입력 표시 제어 장치(26)에 있어서, 표시 제어부(263)는, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 일부가 배치된 문자열을 개행하는 것에 의해, 문자열의 전체를 표시 영역 DA1에 표시하기 위한 표시 정보를 생성한다. 생성된 표시 정보를 이용하는 것에 의해, 곡선보다 문자열이 긴 경우에도, 문자열의 전체를, 디스플레이(28)의 표시 영역 DA1에 자동적으로 표시시킬 수 있다.
실시의 형태 2에 따른 입력 표시 제어 장치(26)에 있어서, 표시 제어부(263)는, 제 1 가상 영역 VA1, 제 2 가상 영역 VA2 또는 제 2 가상 영역 VA2에 걸친 제 1 가상 영역 VA1 중 어느 하나에 일부가 배치된 문자열에 포함되는 문자의 사이즈를 작게 하는 것에 의해, 곡선의 길이 이하로 한 문자열을 표시 영역 DA1에 표시하기 위한 표시 정보를 생성한다. 생성된 표시 정보를 이용하는 것으로, 곡선보다 문자열이 긴 경우에도, 문자열의 전체를, 디스플레이(28)의 표시 영역 DA1에 자동적으로 표시시킬 수 있다.
또, 각 실시의 형태의 조합 또는 실시의 형태의 각각의 임의의 구성 요소의 변형 또는 실시의 형태의 각각에 있어 임의의 구성 요소의 생략이 가능하다.
본 개시에 따른 입력 표시 제어 장치는, 예를 들면, 디스플레이에 문자열을 표시시키는 단말에 이용 가능하다.
1 : 입력 표시 시스템 2 : 단말
21 : 조작 접수부 22 : 문자 관리 데이터베이스(DB)
23 : 문자 관리부 24 : 궤적 판별부
25 : 문자열 인식부 26 : 입력 표시 제어 장치
27 : 문자열 일시 보존부 28 : 디스플레이
28A, 28B, 28C : 화면 29 : 통신부
30 : 흑선 프레임 31 : 파선 프레임
100 : 입력 인터페이스 101 : 출력 인터페이스
102 : 통신 인터페이스 103 : 처리 회로
104 : 프로세서 105 : 메모리
251 : 음성 검출부 252 : 음성 인식부
253 : 음성 인식 사전 데이터베이스(DB)
261 : 곡선 정보 취득부
262 : 문자열 취득부 263 : 표시 제어부
2631 : 길이 비교부 2632 : 형상 결정부
2633 : 곡선 연장부 2634 : 표시 처리부
2635 : 가상 영역 설정부

Claims (8)

  1. 곡선을 나타내는 곡선 정보를 취득하는 곡선 정보 취득부와,
    문자열을 취득하는 문자열 취득부와,
    상기 곡선 정보가 나타내는 상기 곡선에 따라 상기 문자열을 표시하기 위한 표시 정보를 생성하는 표시 제어부를 구비하고,
    상기 표시 제어부는,
    디스플레이의 표시 영역의 주위에 제 1 가상 영역을 설정하고,
    상기 디스플레이의 상기 표시 영역 중, 통신 상대측의 단말과 어스펙트비를 맞추기 위해, 상기 통신 상대측의 단말과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 영역을, 제 2 가상 영역으로서 설정하고,
    상기 디스플레이의 상기 표시 영역의 끝에 도달한 상기 곡선의 길이가 상기 문자열의 길이보다 짧기 때문에 상기 표시 영역으로부터 당해 문자열의 일부가 돌출한다고 판정한 경우, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 상기 곡선을 연장하고,
    연장한 상기 곡선에 따라 상기 문자열의 일부를, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성하는 것
    을 특징으로 하는 입력 표시 제어 장치.
  2. 제1항에 있어서,
    상기 표시 제어부는, 상기 디스플레이의 상기 표시 영역에 있어서, 상기 제 2 가상 영역을 당해 제 2 가상 영역 이외의 영역과는 구별하여 표시시키는 것을 특징으로 하는 입력 표시 제어 장치.
  3. 제1항에 있어서,
    상기 표시 제어부는, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 일부가 배치된 상기 문자열의 선택을 접수하고, 선택이 접수된 상기 문자열을 이동시키는 조작이 접수된 경우, 상기 문자열을 이동하는 것에 의해 상기 문자열의 전체를 상기 표시 영역에 있어서의 상기 제 2 가상 영역 이외의 영역에 표시하기 위한 표시 정보를 생성하는 것을 특징으로 하는 입력 표시 제어 장치.
  4. 제1항에 있어서,
    상기 표시 제어부는, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 일부가 배치된 상기 문자열을 개행하는 것에 의해 상기 문자열의 전체를 상기 표시 영역에 있어서의 상기 제 2 가상 영역 이외의 영역에 표시하기 위한 표시 정보를 생성하는 것을 특징으로 하는 입력 표시 제어 장치.
  5. 제1항에 있어서,
    상기 표시 제어부는, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 일부가 배치된 상기 문자열에 포함되는 문자의 사이즈를 작게 하는 것에 의해 상기 곡선의 길이 이하로 한 상기 문자열을 상기 표시 영역에 있어서의 상기 제 2 가상 영역 이외의 영역에 표시하기 위한 표시 정보를 생성하는 것을 특징으로 하는 입력 표시 제어 장치.
  6. 제1항에 있어서,
    상기 표시 제어부는, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 일부가 배치된 상기 문자열을, 당해 문자열과 동일한 의미를 갖고 또한 당해 문자열보다 길이를 짧게 변환하는 것에 의해, 변환한 상기 문자열을 상기 표시 영역에 있어서의 상기 제 2 가상 영역 이외의 영역에 표시하기 위한 표시 정보를 생성하는 것을 특징으로 하는 입력 표시 제어 장치.
  7. 곡선 정보 취득부가, 곡선을 나타내는 곡선 정보를 취득하는 스텝과,
    문자열 취득부가, 문자열을 취득하는 스텝과,
    표시 제어부가, 상기 곡선 정보가 나타내는 상기 곡선에 따라 상기 문자열을 표시하기 위한 표시 정보를 생성하는 스텝을 구비하고,
    상기 표시 제어부는,
    디스플레이의 표시 영역의 주위에 제 1 가상 영역을 설정하고,
    상기 디스플레이의 상기 표시 영역 중, 통신 상대측의 단말과 어스펙트비를 맞추기 위해, 상기 통신 상대측의 단말과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 영역을, 제 2 가상 영역으로서 설정하고,
    상기 디스플레이의 상기 표시 영역의 끝에 도달한 상기 곡선의 길이가 상기 문자열의 길이보다 짧기 때문에 상기 표시 영역으로부터 당해 문자열의 일부가 돌출한다고 판정한 경우, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 상기 곡선을 연장하고,
    연장한 상기 곡선에 따라 상기 문자열의 일부를, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성하는 것
    을 특징으로 하는 입력 표시 제어 방법.
  8. 단말간에 통신에 의해 서로의 디스플레이에서 동일한 표시 정보를 공유하는 입력 표시 시스템으로서,
    선을 그리는 조작을 접수하는 조작 접수부와,
    상기 조작 접수부에 의해 접수된 조작에 의해 그려진 선의 궤적을 판별하는 궤적 판별부와,
    표시 대상의 문자열을 인식하는 문자열 인식부와,
    통신 상대측의 단말과 통신하는 통신부와,
    상기 궤적 판별부에 의해 판별된 궤적을 표시하는 곡선을 나타내는 곡선 정보 또는 상기 통신부에 의해 상기 통신 상대측의 단말로부터 수신된 곡선 정보를 취득하는 곡선 정보 취득부와,
    상기 문자열 인식부에 의해 인식된 상기 문자열 또는 상기 통신부에 의해 상기 통신 상대측의 단말로부터 수신된 상기 문자열을 취득하는 문자열 취득부와,
    곡선 정보가 나타내는 상기 곡선에 따라 상기 문자열을 표시하기 위한 표시 정보를 생성하는 표시 제어부를 구비하고,
    상기 표시 제어부는,
    상기 디스플레이의 표시 영역의 주위에 제 1 가상 영역을 설정하고,
    상기 디스플레이의 상기 표시 영역 중, 상기 통신 상대측의 단말과 어스펙트비를 맞추기 위해, 상기 통신 상대측의 단말과의 사이에 공유하는 표시 정보를 표시시키지 않는 일부의 영역을, 제 2 가상 영역으로서 설정하고,
    상기 디스플레이의 상기 표시 영역의 끝에 도달한 상기 곡선의 길이가 상기 문자열의 길이보다 짧기 때문에 상기 표시 영역으로부터 당해 문자열의 일부가 돌출한다고 판정한 경우, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 상기 곡선을 연장하고,
    연장한 상기 곡선에 따라 상기 문자열의 일부를, 상기 제 1 가상 영역, 상기 제 2 가상 영역 또는 상기 제 2 가상 영역에 걸친 상기 제 1 가상 영역 중 어느 하나에 가상적으로 배치한 표시 정보를 생성하는 것
    을 특징으로 하는 입력 표시 시스템.
KR1020237015672A 2020-11-19 2020-11-19 입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템 KR102584175B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/043229 WO2022107281A1 (ja) 2020-11-19 2020-11-19 入力表示制御装置、入力表示制御方法および入力表示システム

Publications (2)

Publication Number Publication Date
KR20230069259A true KR20230069259A (ko) 2023-05-18
KR102584175B1 KR102584175B1 (ko) 2023-09-27

Family

ID=79193224

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020237015672A KR102584175B1 (ko) 2020-11-19 2020-11-19 입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템

Country Status (6)

Country Link
US (1) US20230229380A1 (ko)
EP (1) EP4235384A4 (ko)
JP (1) JP6987302B1 (ko)
KR (1) KR102584175B1 (ko)
CN (1) CN116472515A (ko)
WO (1) WO2022107281A1 (ko)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008210143A (ja) * 2007-02-26 2008-09-11 Sony Corp 画像処理システム、情報処理装置、画像処理方法、及びプログラム
KR20140140957A (ko) * 2013-05-30 2014-12-10 삼성전자주식회사 화면 데이터의 미러링 방법, 저장 매체 및 전자 장치
JP6641530B1 (ja) * 2018-12-07 2020-02-05 三菱電機株式会社 入力表示制御装置、入力表示制御方法及び入力表示システム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS59219420A (ja) 1983-05-27 1984-12-10 High Frequency Heattreat Co Ltd 線材通電加熱装置における線材真円率低下防止方法
JP2012073984A (ja) * 2010-09-30 2012-04-12 Toshiba Tec Corp 情報処理端末およびプログラム
JP5756156B2 (ja) * 2013-09-26 2015-07-29 株式会社オプティム 画面共有端末、画面共有方法、画面共有端末用プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008210143A (ja) * 2007-02-26 2008-09-11 Sony Corp 画像処理システム、情報処理装置、画像処理方法、及びプログラム
KR20140140957A (ko) * 2013-05-30 2014-12-10 삼성전자주식회사 화면 데이터의 미러링 방법, 저장 매체 및 전자 장치
JP6641530B1 (ja) * 2018-12-07 2020-02-05 三菱電機株式会社 入力表示制御装置、入力表示制御方法及び入力表示システム

Also Published As

Publication number Publication date
EP4235384A4 (en) 2023-12-06
WO2022107281A1 (ja) 2022-05-27
EP4235384A1 (en) 2023-08-30
JP6987302B1 (ja) 2021-12-22
US20230229380A1 (en) 2023-07-20
KR102584175B1 (ko) 2023-09-27
JPWO2022107281A1 (ko) 2022-05-27
CN116472515A (zh) 2023-07-21

Similar Documents

Publication Publication Date Title
US7633512B2 (en) Information processing apparatus, information processing method and program
US20100066691A1 (en) Input apparatus and computer readable recording medium recorded with image processing program
EP2704057A2 (en) Gesture recognition apparatus, control method thereof, display instrument, and computer readable medium
KR101623213B1 (ko) 펜 입력 장치 및 방법
CN108369637B (zh) 用于美化数字墨水的系统和方法
KR20140002007A (ko) 정보 처리 장치, 정보 처리 방법 및 기록 매체
CN114365075B (zh) 用于选择图形对象的方法和对应装置
CN107133615B (zh) 信息处理设备和信息处理方法
JP6355823B2 (ja) 入力表示制御装置、入力表示制御方法及び入力表示システム
US10031667B2 (en) Terminal device, display control method, and non-transitory computer-readable recording medium
KR20140089915A (ko) 필기 문자 조정 방법 및 장치
US11393230B2 (en) Input display control device, input display control method, and input display system
US10684772B2 (en) Document viewing apparatus and program
US20230334223A1 (en) Font customization based on stroke properties
KR20230069259A (ko) 입력 표시 제어 장치, 입력 표시 제어 방법 및 입력 표시 시스템
KR20170100541A (ko) 프로그램, 정보기억매체 및 인식장치
KR20190069023A (ko) 손 인식 기반 비접촉식 입력 인터페이스 제공 방법 및 장치
US20210264681A1 (en) Input display control device, input display control method, and input display system
RU2175143C1 (ru) Способ дистанционного управления
JP2019079545A (ja) 表示制御装置、入力表示システム、表示制御方法及びプログラム
JP7459151B2 (ja) 情報処理装置、情報処理システム、情報処理方法、及びプログラム
JP6370162B2 (ja) 情報処理装置、情報処理方法、プログラム
CN115793893B (zh) 触摸书写笔迹生成方法、装置、电子设备及存储介质
US20230061557A1 (en) Electronic device and program
US20230012060A1 (en) Storage Medium Storing Editing Program and Information Processing Apparatus

Legal Events

Date Code Title Description
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant