JP2011034204A - コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 - Google Patents
コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 Download PDFInfo
- Publication number
- JP2011034204A JP2011034204A JP2009177902A JP2009177902A JP2011034204A JP 2011034204 A JP2011034204 A JP 2011034204A JP 2009177902 A JP2009177902 A JP 2009177902A JP 2009177902 A JP2009177902 A JP 2009177902A JP 2011034204 A JP2011034204 A JP 2011034204A
- Authority
- JP
- Japan
- Prior art keywords
- directed line
- elements
- line segment
- reading
- reading order
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/148—Segmentation of character regions
- G06V30/153—Segmentation of character regions using recognition of characters or words
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/41—Analysis of document content
- G06V30/414—Extracting the geometrical structure, e.g. layout tree; Block segmentation, e.g. bounding boxes for graphics or text
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
- Document Processing Apparatus (AREA)
Abstract
【解決手段】読み上げ順序を視覚化するための視覚化装置は、読み上げ対象となる文字列を有する複数の要素の各々について、文字列の書字方向に基づいて、文字列が画面に表示される領域である要素領域を表示位置とし、かつ書字方向を示す有向線分を生成する有向線分生成部と、読み上げの順序で、生成した各要素の有向線分を記憶する記憶手段と、読み上げの順序に従って、各要素に対し生成された有向線分を連結し、画面に表示されている構造化文書に重ねて表示するオーバレイ描画部とを含む。
【選択図】図2
Description
(A2)有向線分aの要素領域と有向線分bの要素領域とが一定の距離以上離れている。
W1 = dw2 + dh2
(B2)対応する2つの要素領域が水平方向又は垂直方向に整列している2つの有向線分の組を優先して合成する。この際Kv>Khとして、水平方向に連続している要素を優先する。
W2 = Kvx dl + Kh x dt
W3 = c.area – (a.area + b.area)
(B4)対応する2つの要素領域の和集合がより小さい2つの有向線分の組を優先して合成する。
W4 = a.aera + b.area
Claims (16)
- プロセッサと記憶手段とを備えたコンピュータ・システムにおいて実行される、画面読み上げアプリケーションによる前記コンピュータ・システムの画面に表示された構造化文書内の要素の読み上げの順序を視覚化するための視覚化プログラムであって、前記視覚化プログラムは、前記コンピュータ・システムに、
前記プロセッサが、前記アプリケーションによる読み上げの対象となる文字列を有する複数の前記要素の各々について、前記要素の前記文字列の書字方向に基づいて、前記要素の前記文字列が前記画面に表示される領域である要素領域を表示位置とし、かつ前記書字方向を示す有向線分を生成するステップと、
前記プロセッサが、前記アプリケーションによる前記要素の読み上げの順序で、生成した各要素の有向線分を前記記憶手段に格納するステップと、
前記プロセッサが、前記アプリケーションによる前記要素の読み上げの順序に従って、前記記憶手段から前記各要素に対応する前記有向線分を読み出して連結し、前記画面に表示されている前記構造化文書に重ねて表示するステップと
を実行させる視覚化プログラム。 - 前記要素の前記文字列の書字方向は、前記構造化文書内において指定された言語設定に関する言語情報及び書字方向を示す書字方向情報の少なくとも一方に基づいて決定される、請求項1に記載の視覚化プログラム。
- 前記要素領域が矩形の形状を有しかつ前記書字方向が横書きの場合は、前記要素領域が一定以上の高さを有することを条件に、または前記要素領域が矩形の形状を有しかつ前記書字方向が縦書きの場合は、前記要素領域が一定以上の幅を有することを条件に、前記要素に対応する前記有向線分は、前記書字方向を示しかつ前記要素領域の対角方向に延びる線分として生成される、請求項1に記載の視覚化プログラム。
- 前記書字方向が横書きかつ前記要素領域が矩形の形状を有することを条件として、前記要素領域が一定未満の高さを有する場合は、前記要素に対応する前記有向線分は、前記書字方向を示しかつ前記要素領域の水平方向に延びる線分として生成され、及び前記書字方向が横書きかつ前記要素領域が矩形の形状を有することを条件として、前記要素領域が一定以上の高さを有する場合は、前記要素に対応する前記有向線分は、前記書字方向を示しかつ前記要素領域の対角方向に延びる線分として生成される、請求項1に記載の視覚化プログラム。
- 前記視覚化プログラムは、前記コンピュータ・システムに、前記プロセッサが、前記コンピュータ・システムの入力手段を介してユーザから、前記有向線分の表示の抽象度を示す抽象化パラメータを取得するステップと、前記プロセッサが、前記記憶手段に格納される前記有向線分の数が前記抽象化パラメータにより示される抽象度に相当する数になるまで又は前記記憶手段に合成可能な前記有向線分が存在しなくなるまで、前記要素の読み上げの順序において隣り合う2つの要素の組に対応する2つの前記有向線分の組を前記記憶手段から読み出して合成するステップと、前記プロセッサが、前記記憶手段に格納される前記有向線分を、前記合成の結果で更新するステップとを更に実行させる、請求項1に記載の視覚化プログラム。
- 前記2つの有向線分の組の合成は、対応する2つの前記要素領域を包含する最小の領域に対して前記有向線分を生成することによりなされる、請求項5に記載の視覚化プログラム。
- 前記2つの有向線分の組の合成は、対応する2つの前記要素領域を包含する最小の領域が、前記対応する2つの要素領域の和集合により近い前記2つの有向線分の組を優先して行われる、請求項6に記載の視覚化プログラム。
- 前記2つの有向線分の組の合成は、前記有向線分の向き及び大きさが類似する前記2つの有向線分の組を優先して行われる、請求項5に記載の視覚化プログラム。
- 前記2つの有向線分の組の合成は、対応する2つの前記要素領域の和集合がより小さい前記2つの有向線分の組を優先して行われる、請求項5に記載の視覚化プログラム。
- 前記2つの有向線分の組の合成は、対応する2つの前記要素領域が水平方向又は垂直方向に整列している前記2つの有向線分の組を優先して行われる、請求項5に記載の視覚化プログラム。
- 前記合成するステップは、前記プロセッサが、前記要素の読み上げの順序において隣り合う前記2つの要素の組であって、各要素の前記書字方向の水平成分が左から右へ向かう場合において、読み上げ順番が後の前記要素の前記要素領域が、読み上げの順番が先の前記要素の前記要素領域の左側または上側に位置する前記2つの要素の組、または各要素の前記書字方向の水平成分が右から左へ向かう場合において、読み上げ順番が後の前記要素の前記要素領域が、読み上げの順番が先の前記要素の前記要素領域の右側または上側に位置する前記2つの要素の組について、該2つの要素の組に対応する2つの前記有向線分の組の合成を禁止するステップを含む、請求項5に記載の視覚化プログラム。
- 前記合成するステップは、前記プロセッサが、前記要素の読み上げの順序において隣り合う前記2つの要素の組であって、読み上げの順番が先の前記要素の表示位置と、読み上げ順番が後の前記要素の表示位置とが一定の距離以上離れている前記要素の組について、該2つの要素の組に対応する2つの前記有向線分の組の合成を禁止するステップを含む、請求項5に記載の視覚化プログラム。
- 合成を禁止された前記2つの有向線分の組は、前記構造化文書に重ねて表示される際に、合成を禁止されなかった他の前記有向線分と区別がつくような態様で表示される、請求項11又は12に記載の視覚化プログラム。
- 前記有向線分の連結は、ベジエ曲線を利用して行われる、請求項1に記載の視覚化プログラム。
- プロセッサと記憶手段とを備えたコンピュータ・システムにおいて実行される、画面読み上げアプリケーションによる前記コンピュータ・システムの画面に表示された構造化文書内の要素の読み上げの順序を視覚化するための視覚化方法であって、
前記プロセッサが、前記アプリケーションによる読み上げの対象となる文字列を有する複数の前記要素の各々について、前記要素の前記文字列の書字方向に基づいて、前記要素の前記文字列が前記画面に表示される領域である要素領域を表示位置とし、かつ前記書字方向を示す有向線分を生成するステップと、
前記プロセッサが、前記アプリケーションによる前記要素の読み上げの順序で、生成した各要素の有向線分を前記記憶手段に格納するステップと、
前記プロセッサが、前記アプリケーションによる前記各要素の読み上げの順序に従って、前記各要素に対し生成された前記有向線分を前記記憶手段から読み出して連結し、前記画面に表示されている前記構造化文書に重ねて表示するステップと
を含む視覚化方法。 - 画面読み上げアプリケーションによるコンピュータ・システムの画面に表示された構造化文書内の要素の読み上げの順序を視覚化するための視覚装置であって、
前記アプリケーションによる読み上げの対象となる文字列を有する複数の前記要素の各々について、前記要素の前記文字列の書字方向に基づいて、前記要素の前記文字列が前記画面に表示される領域である要素領域を表示位置とし、かつ前記書字方向を示す有向線分を生成する有向線分生成部と、
前記アプリケーションによる前記要素の読み上げの順序で、生成した各要素の有向線分を記憶する記憶手段と、
前記アプリケーションによる前記各要素の読み上げの順序に従って、前記各要素に対し生成された前記有向線分を前記記憶手段から読み出して連結し、前記画面に表示されている前記構造化文書に重ねて表示するオーバレイ描画部と
を含む視覚化装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009177902A JP5005005B2 (ja) | 2009-07-30 | 2009-07-30 | コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 |
US12/844,462 US8340424B2 (en) | 2009-07-30 | 2010-07-27 | Visualization program, visualization method and visualization apparatus for visualizing reading order of content |
US13/677,395 US8588526B2 (en) | 2009-07-30 | 2012-11-15 | Visualization program, visualization method and visualization apparatus for visualizing reading order of content |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009177902A JP5005005B2 (ja) | 2009-07-30 | 2009-07-30 | コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011034204A true JP2011034204A (ja) | 2011-02-17 |
JP5005005B2 JP5005005B2 (ja) | 2012-08-22 |
Family
ID=43527072
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009177902A Active JP5005005B2 (ja) | 2009-07-30 | 2009-07-30 | コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 |
Country Status (2)
Country | Link |
---|---|
US (2) | US8340424B2 (ja) |
JP (1) | JP5005005B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016139760A1 (ja) * | 2015-03-03 | 2016-09-09 | 富士通株式会社 | 表示装置、表示方法、および表示プログラム |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101441619A (zh) * | 2007-11-22 | 2009-05-27 | 国际商业机器公司 | 改进阅读BiDi文档时的用户体验的方法和装置 |
JP5005005B2 (ja) * | 2009-07-30 | 2012-08-22 | インターナショナル・ビジネス・マシーンズ・コーポレーション | コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 |
JP5812702B2 (ja) * | 2011-06-08 | 2015-11-17 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 文字の読み順を決定するための読み順決定装置、方法及びプログラム |
US10203865B2 (en) * | 2014-08-25 | 2019-02-12 | International Business Machines Corporation | Document content reordering for assistive technologies by connecting traced paths through the content |
US10452231B2 (en) * | 2015-06-26 | 2019-10-22 | International Business Machines Corporation | Usability improvements for visual interfaces |
US10394421B2 (en) | 2015-06-26 | 2019-08-27 | International Business Machines Corporation | Screen reader improvements |
US11367296B2 (en) * | 2020-07-13 | 2022-06-21 | NextVPU (Shanghai) Co., Ltd. | Layout analysis |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07192084A (ja) * | 1993-05-12 | 1995-07-28 | Ricoh Co Ltd | 文書画像処理方法 |
JPH1021330A (ja) * | 1996-07-03 | 1998-01-23 | Fuji Xerox Co Ltd | 文書画像処理方式 |
JPH11250041A (ja) * | 1998-02-27 | 1999-09-17 | Toshiba Corp | 文書処理装置および文書処理方法 |
JP2001101164A (ja) * | 1999-09-29 | 2001-04-13 | Toshiba Corp | 文書画像処理装置及び文書画像処理方法 |
JP2001109612A (ja) * | 1999-10-06 | 2001-04-20 | Internatl Business Mach Corp <Ibm> | 音声読み上げ範囲の指定方法および装置 |
JP2007102715A (ja) * | 2005-10-07 | 2007-04-19 | Ricoh Co Ltd | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2007256529A (ja) * | 2006-03-22 | 2007-10-04 | Ricoh Co Ltd | 文書画像表示装置、情報処理装置、文書画像表示方法、情報処理方法、文書画像表示プログラム、記録媒体及びデータ構造 |
JP2008077171A (ja) * | 2006-09-19 | 2008-04-03 | Ricoh Co Ltd | データ配信装置、データ表示装置、データ配信方法、データ表示方法、データ配信プログラム、データ表示プログラム、および該プログラムを記録した記録媒体 |
JP2008171356A (ja) * | 2007-01-15 | 2008-07-24 | Ricoh Co Ltd | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラムおよび記録媒体 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005010992A (ja) | 2003-06-18 | 2005-01-13 | Kddi Corp | 合成音声によるウェブページの説明および広告の方法及びサーバ |
JP4232679B2 (ja) * | 2004-04-15 | 2009-03-04 | 富士ゼロックス株式会社 | 画像形成装置およびプログラム |
JP2006171544A (ja) | 2004-12-17 | 2006-06-29 | Nippon Telegr & Teleph Corp <Ntt> | 音声ブラウザ装置、音声ブラウザ方法およびプログラム |
JP5005005B2 (ja) * | 2009-07-30 | 2012-08-22 | インターナショナル・ビジネス・マシーンズ・コーポレーション | コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 |
-
2009
- 2009-07-30 JP JP2009177902A patent/JP5005005B2/ja active Active
-
2010
- 2010-07-27 US US12/844,462 patent/US8340424B2/en active Active
-
2012
- 2012-11-15 US US13/677,395 patent/US8588526B2/en not_active Expired - Fee Related
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07192084A (ja) * | 1993-05-12 | 1995-07-28 | Ricoh Co Ltd | 文書画像処理方法 |
JPH1021330A (ja) * | 1996-07-03 | 1998-01-23 | Fuji Xerox Co Ltd | 文書画像処理方式 |
JPH11250041A (ja) * | 1998-02-27 | 1999-09-17 | Toshiba Corp | 文書処理装置および文書処理方法 |
JP2001101164A (ja) * | 1999-09-29 | 2001-04-13 | Toshiba Corp | 文書画像処理装置及び文書画像処理方法 |
JP2001109612A (ja) * | 1999-10-06 | 2001-04-20 | Internatl Business Mach Corp <Ibm> | 音声読み上げ範囲の指定方法および装置 |
JP2007102715A (ja) * | 2005-10-07 | 2007-04-19 | Ricoh Co Ltd | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2007256529A (ja) * | 2006-03-22 | 2007-10-04 | Ricoh Co Ltd | 文書画像表示装置、情報処理装置、文書画像表示方法、情報処理方法、文書画像表示プログラム、記録媒体及びデータ構造 |
JP2008077171A (ja) * | 2006-09-19 | 2008-04-03 | Ricoh Co Ltd | データ配信装置、データ表示装置、データ配信方法、データ表示方法、データ配信プログラム、データ表示プログラム、および該プログラムを記録した記録媒体 |
JP2008171356A (ja) * | 2007-01-15 | 2008-07-24 | Ricoh Co Ltd | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラムおよび記録媒体 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016139760A1 (ja) * | 2015-03-03 | 2016-09-09 | 富士通株式会社 | 表示装置、表示方法、および表示プログラム |
JPWO2016139760A1 (ja) * | 2015-03-03 | 2017-08-03 | 富士通株式会社 | 表示装置、表示方法、および表示プログラム |
Also Published As
Publication number | Publication date |
---|---|
US8588526B2 (en) | 2013-11-19 |
US8340424B2 (en) | 2012-12-25 |
US20130071027A1 (en) | 2013-03-21 |
US20110026827A1 (en) | 2011-02-03 |
JP5005005B2 (ja) | 2012-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5005005B2 (ja) | コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置 | |
TWI578220B (zh) | 網頁瀏覽器中之網頁應用程式及次要裝置之模擬技術、網頁應用程式開發工具以及使用其等之方法 | |
AU2010332171B2 (en) | Method for sequenced document annotations | |
KR101472844B1 (ko) | 적응적 문서 디스플레이 장치 및 방법 | |
KR101809457B1 (ko) | 웹 문서의 편집을 지원하는 클라이언트 단말 장치 및 그 동작 방법 | |
US7996780B1 (en) | Block visualization | |
JP2008097215A (ja) | データ処理装置 | |
EP1768034A1 (en) | Document processing device and document processing method | |
EP1744255A1 (en) | Document processing device and document processing method | |
JP6126679B2 (ja) | リンクの湾曲のインタラクティブコントロール | |
CN103049430A (zh) | 一种基于idf格式文件的页面显示方法 | |
CN105739962B (zh) | 基于html的表格单元格编辑器控件扩展方法和系统 | |
KR101546359B1 (ko) | 웹 브라우저 호환성 및 폰트 유지를 위한 웹 페이지 생성방법 및 시스템 | |
KR101781558B1 (ko) | 사용자 액션 기반의 웹 문서 렌더링 처리 장치 및 방법 | |
WO2006051974A1 (ja) | 文書処理装置および文書処理方法 | |
JP2009237759A (ja) | 表示制御装置、表示制御方法、及び、表示制御プログラム | |
JP4798579B2 (ja) | 部品カタログ生成システム、部品カタログ生成方法、プログラムおよび記録媒体 | |
JPWO2006137564A1 (ja) | 文書処理装置 | |
JP4720695B2 (ja) | コンテンツ提供方法 | |
JP4719743B2 (ja) | グラフ処理装置 | |
JP5466197B2 (ja) | 文書生成支援方法、文書生成支援装置および文書生成支援プログラム | |
JP3506087B2 (ja) | スタイル及びデータ構造同時作成装置 | |
JP2011048453A (ja) | 情報処理装置、コンピュータプログラムおよび電子ファイル | |
JP5244370B2 (ja) | 画面デザイン仕様書作成方法、画面デザイン仕様書作成プログラム、および、画面デザイン仕様書作成装置 | |
CN115454428A (zh) | 基于浏览器的用户操作界面标记展示方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110715 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110726 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111017 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120424 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120522 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150601 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5005005 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |