RU2383928C2 - Согласование цифрового информационного потока с системой восприятия человека - Google Patents

Согласование цифрового информационного потока с системой восприятия человека Download PDF

Info

Publication number
RU2383928C2
RU2383928C2 RU2005121438/09A RU2005121438A RU2383928C2 RU 2383928 C2 RU2383928 C2 RU 2383928C2 RU 2005121438/09 A RU2005121438/09 A RU 2005121438/09A RU 2005121438 A RU2005121438 A RU 2005121438A RU 2383928 C2 RU2383928 C2 RU 2383928C2
Authority
RU
Russia
Prior art keywords
digital information
peripheral
mode
information
human perception
Prior art date
Application number
RU2005121438/09A
Other languages
English (en)
Other versions
RU2005121438A (ru
Inventor
Уильям ХИЛЛ (US)
Уильям ХИЛЛ
Грегори К. ХИТЧКОК (US)
Грегори К. ХИТЧКОК
Кевин ЛАРСОН (US)
Кевин ЛАРСОН
Original Assignee
Майкрософт Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Майкрософт Корпорейшн filed Critical Майкрософт Корпорейшн
Publication of RU2005121438A publication Critical patent/RU2005121438A/ru
Application granted granted Critical
Publication of RU2383928C2 publication Critical patent/RU2383928C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

Изобретение относится к области согласования потока цифровой информации с системой восприятия человека. Техническим результатом является увеличение пропускной способности, доступной для сортировки информации в системе восприятия человека. В различных осуществлениях усиливается поддержка множества мониторов (многомониторная), чтобы пользоваться преимуществами работы с многочисленными окнами и определять местоположения окон для разделения элементов различных задач в информационные плоскости (которые базируются на понятии "сортировки и фокуса"). Сортировка наблюдает за потоком входящей информации и определяет природу этой информации. Базируясь на природе информации и принципах восприятия человека, фокус (или дефокус) отображает информацию там, где эта информация видна наилучшим образом. 6 н. и 26 з.п. ф-лы, 10 ил.

Description

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Изобретение относится к системам восприятия человека, более конкретно к согласованию потока цифровой информации с системой восприятия человека.
УРОВЕНЬ ТЕХНИКИ
Способ, которым информация исходит из компьютерных экранов сегодня, не соответствует способу, согласно которому устроена система восприятия человека для управления информационным потоком. Поток плохо отображается в систему восприятия человека. Используя аналогию с "шиной", люди имеют 64-битную систему восприятия, но компьютерный дисплей имеет только 8-битный диапазон.
Компьютеры появились как инструменты и игрушки, созданные компьютерными фанатами, для компьютерных фанатов. Для огромного большинства людей не было необходимости понимать их или даже вовсе взаимодействовать с ними. Числа или данные передавались в подразделение обработки данных, и вы ждали, когда вы получите распечатку обратно. Компьютерам не нужно было быть понятными для обыкновенных пользователей.
Это все изменяется с появлением персонального компьютера (PC). Чтобы компьютеры PC стали приемлемыми, PC должен быть сделан намного более доступным.
Люди некоторое время обсуждают то, как PC изменяется из инструмента, используемого для создания данных, в систему для потребления информации. Компьютеры все еще используются, чтобы создавать информацию в форме документов, электронной почты, электронных таблиц и баз данных, например. Но рост сети Интернет сделал компьютер окном в мир, из которого информация либо перетекает к пользователю, либо является каналом, который используется, чтобы выходить наружу и искать ее.
Люди разговаривают о компьютере как о "информационном портале". Для многих Интернет заменил газеты, журналы и TV как место, куда идти за новостями. Этот процесс будет продолжаться, так как информационные каналы становятся лучше, так как дисплеи улучшаются в качестве, и электронные журналы и газеты становятся так же приятны для чтения на экране, как и на бумаге.
Однако во всем этом разговоре о компьютере как информационном портале упускается один важный и фундаментальный факт. Вопреки всем достижениям в пользовательском интерфейсе, он не соответствует системе восприятия человека. Этот интерфейс фокусирует всю информацию, которую люди обрабатывают, в один канал, который является довольно узким.
Вместо использования всех свойств восприятия человека, т.е. фовеального, парафовеального, периферического зрения и 360-градусного звука, информация насильно проводится через канал фовеального зрения высокого разрешения (но узкий), причем этот канал сейчас перегружен. Все, что происходит в фовеальном зрении, является высоко приоритетным прерыванием. Визуальная, прекогнитивная сортировка невозможна. Внимание должно уделяться всей информации, которая там появляется.
Фовеальное зрение - это зрение высокого разрешения, которое используется, чтобы фокусироваться на каком-либо объекте. Фовеа - это область сетчатки, которая имеет только около 0,2 мм в поперечнике и около 1,5 градуса визуальной дуги. Фовеа обеспечивает фовеальное зрение, которое является эллиптической областью лишь слегка меньше, чем расстояние длины рук от глаз. Объекты рассматриваются в этой области, которая также является областью, используемой людьми, чтобы придумывать инструменты, читать и писать.
Парафовеа - это область сетчатки, непосредственно окружающая фовеа. Это часть человеческого зрения меньшего разрешения, чья главная роль проявляется в том, чтобы служить для предоставления нацеливающей информации для определения местоположения следующей фиксации, т.е. длины и направления каждого последующего быстрого скачкообразного движения глаз. Таким образом, парафовеа еще играет роль в фовеальном зрении, эффективно его нацеливая. Представляя это другим способом, можно сказать, что фовеа и парафовеа вместе составляют систему зрения человека высокого разрешения. Разрешение в парафовеа постепенно ухудшается по мере того, как пользователь двигается дальше прочь из фовеа.
Фовеа/парафовеа определяет эллипс, который приблизительно равен 12 дюймов в высоту и 9 дюймов в ширину на "нормальном расстоянии чтения", которое составляет примерно от 2-22 дюймов.
Разрешение зрения является наивысшим в фовеа, затем начинает падать по мере того, как человек двигается дальше вовне в парафовеа. Это падение сначала является постепенным, но стремительно ускоряется, пока вовне, на краях периферийного зрения все, что может быть видимо, это движение.
Люди невероятно чувствительны к движению, особенно в периферии, используя периферийное зрение. Исследователи давно сообщают, что мужчины и женщины используют различные стратегии, чтобы осуществлять передвижение по миру. В широких понятиях, чтобы передвигаться, женщины используют наземные ориентиры, в то время как мужчины имеют тенденцию использовать более широкие точки опоры, такие как направление передвижения.
В двух исследованиях было установлено, что компьютерный дисплей со сверх широким полем видимости приносил выгоду как пользователям мужчинам, так и пользователям женщинам, и уменьшал различие, связанное с полом. Более того, чтобы достигать аналогичных результатов навигации в виртуальной среде, женщины брали более широкое поле просмотра, чем мужчины.
Без поворота головы люди могут видеть вокруг примерно на 208 градусов в периферии. Исследования наводят на мысль о том, как существующие компьютерные дисплеи развиваются по направлению к мужскому восприятию и недостаточно адекватно используют периферийное зрение. Таким образом, 208-градусное поле зрения недостаточно. Чтобы получить полное восприятие, человек должен быть способен поворачивать свою голову. Чтобы знать, когда повернуть голову и начать воспринимать, даже смотря вперед, используется звук.
Звук является ключевой частью системы восприятия человека. Обработка звука предоставляет дополнительный охват для тех областей, которые взгляд не может охватить. Звук охватывает все области вне зрения вверх и по направлению к задней стороне. Он также позволяет людям расширить восприятие вовне за пределы области зрения, особенно в областях, где либо рост, либо местность создают препятствия для линии видимости. До сего времени звук в компьютерах PC использовался главным образом, чтобы создавать зуммерные сигналы. Однако он имеет намного больший потенциал, когда анализируется роль, которую он играет в объединенном восприятии людей. Имеются некоторые аспекты звука, которые должны рассматриваться как часть согласования компьютерного вывода с входом восприятия человека. Натуральный звук это "объемный звук". Восприятие человека имеет "арену звука", которая простирается на 360 градусов. Звук имеет направление, которое показывает, где фокусировать взгляд. Например, "Для вас есть почта - здесь!" означает намного больше, чем "Для вас есть почта!". Звук из-за спины пользователя, особенно отчетливый звук, является высоко приоритетным прерыванием. Звук помогает пользователю расширять восприятие в те области, которые не могут быть видимы. В современном мире события на другой стороне земного шара могут оказывать влияние на способ ведения бизнеса.
При чтении книги сознательное внимание может полностью поглощаться в книге. Периферийное зрение, однако, все же сканирует свою область охвата для осуществления прерываний. Если что-либо двигается внутри поля зрения, это движение привлечет внимание и отвлечет пользователя от чтения.
Это является одной причиной, почему всплывающая реклама на web-страницах является настолько раздражающей - из-за отвлекающего аспекта. Это также является главной причиной, почему рекламодатели используют ее - чтобы отвлекать наблюдателя от другого содержания и к их сообщению. Всплывающие рекламные объявления раздражают, так как они появляются в области фокуса, а не периферии. По природе, при фокусировании на чем-либо объект фокуса остается более или менее устойчивым; главные прерывающие сигналы движения происходят в периферийном зрении. В противоположность, всплывающие web-рекламные объявления представляются в фокальной плоскости.
Разделение восприятия человека на фокальную плоскость, периферийное зрение и аудиовход важно в понимании того, как за последнюю пару десятилетий персональные компьютеры ухудшили систему информационной сортировки человека. Компьютерный экран, помещенный от глаз более или менее на расстоянии чтения, является устройством чисто "фокальной плоскости". С текущими экранными размерами он почти совсем не имеет входа для периферийного зрения. Все же компьютеры PC используются, чтобы разительно увеличивать количество данных, выходящих на наблюдателя. В сущности поток данных через систему восприятия человека увеличился при уменьшении ее пропускной способности.
Имеется необходимость в увеличении пропускной способности, доступной для сортировки информации в системе восприятия человека.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Последующее представляет собой упрощенное изложение изобретения, чтобы обеспечить базовое понимание некоторых аспектов этого изобретения. Это изложение не является широким обзором изобретения. Оно не предназначено идентифицировать ключевые/критические элементы этого изобретения или очертить объем этого изобретения. Его единственная цель состоит в том, чтобы представить некоторые понятия этого изобретения в упрощенной форме в качестве вводной части к более подробному описанию, которое представляется ниже.
Настоящее изобретение, здесь раскрываемое и заявляемое, в одном его аспекте содержит способ и систему для согласования потока цифровой информации с системой восприятия человека. В различных осуществлениях усиливается поддержка множества мониторов (многомониторная), чтобы пользоваться преимуществами работы с множеством окон и определения местоположения окон для разделения элементов разных задач в информационные плоскости (которые базируются на понятии "сортировки и фокуса"). Сортировка наблюдает за потоком входящей информации и определяет природу этой информации. Базируясь на природе информации и принципах восприятия человека, фокус (или дефокус) отображает информацию там, где эта информация видна наилучшим образом.
Для поддержки этого предоставляется система, которая согласовывает цифровую информацию с системой восприятия человека в соответствии с настоящим изобретением. Эта система включает в себя компонент сортировки, который наблюдает за потоком входящей цифровой информации и определяет одну или более характеристик этой информации. Базируясь на характеристиках цифровой информации и принципах восприятия человека в форме данных восприятия человека, компонент просмотра фокусирует или дефокусирует цифровую информацию на один или более дисплеев так, что цифровая информация представляется там, где она видна наилучшим образом. В различных осуществлениях усиливается поддержка множества мониторов ("многомониторная"), чтобы пользоваться преимуществами работы с множеством окон и определения местоположения окон для разделения элементов разных задач в информационные плоскости.
В другом аспекте этого классификатор автоматизирует аспекты этого изобретения.
Для достижения вышеупомянутых и связанных целей здесь описываются определенные иллюстративные аспекты этого изобретения в связи с последующим описанием и сопутствующими чертежами. Эти аспекты показывают, однако, несколько различных способов, посредством которых принципы этого изобретения могут применяться, и предполагается, что настоящее изобретение включает в себя все такие аспекты и их эквиваленты. Другие преимущества и новые признаки этого изобретения станут видны из последующего подробного описания изобретения при рассмотрении в связи с чертежами.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Фиг.1 показывает систему, которая согласовывает цифровую информацию с системой восприятия человека в соответствии с настоящим изобретением.
Фиг.2 показывает блок-схему последовательности операций одного способа для согласования цифрового информационного потока с системой восприятия человека в соответствии с настоящим изобретением.
Фиг.3 показывает диаграмму перспективы обзора, имеющей периферийную (или нефокусную) плоскость заднего плана с центрированной фокальной (или фокусной) плоскостью переднего плана в соответствии с настоящим изобретением.
Фиг.4 показывает диаграмму перспективы обзора, имеющей периферийную (или нефокусную) плоскость заднего плана с фокальной (или фокусной) плоскостью переднего плана, смещенной относительно центра по отношению к периферийной плоскости, в соответствии с настоящим изобретением.
Фиг.5 показывает офисное расположение системы для согласования цифрового информационного потока с системой восприятия человека, используя единственную стену, в соответствии с настоящим изобретением.
Фиг.6 показывает офисное расположение системы для согласования цифрового информационного потока с системой восприятия человека, используя многочисленные офисные стены, в соответствии с настоящим изобретением.
Фиг.7 показывает офисное расположение системы для согласования цифрового информационного потока с системой восприятия человека, используя многочисленные дисплеи, прикрепленные или встроенные в офисные стены в соответствии с настоящим изобретением.
Фиг.8 показывает блок-схему JIT пиксельной системы 800, которая приводит в действие многочисленные дисплеи и применяет классификатор в соответствии с настоящим изобретением.
Фиг.9 показывает блок-схему компьютера, выполненного с возможностью исполнения раскрываемой архитектуры.
Фиг.10 показывает схематическую блок-схему иллюстративной вычислительной среды в соответствии с настоящим изобретением.
ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ
Настоящее изобретение описывается со ссылкой на чертежи, причем всюду используются одинаковые ссылочные позиции, чтобы ссылаться на сходные элементы. В последующем описании в целях объяснения излагаются многочисленные конкретные детали, чтобы обеспечить полное понимание настоящего изобретения. Может являться очевидным, однако, что настоящее изобретение может использоваться на практике без этих конкретных деталей. В других случаях хорошо известные структуры и устройства показаны в форме блок-схемы, чтобы облегчить описание настоящего изобретения.
Как используется в этой заявке, термины "компонент" и "система" предназначены, чтобы указывать на относящуюся к компьютеру сущность, либо аппаратное обеспечение, комбинацию аппаратного обеспечения и программного обеспечения, программное обеспечение, либо программное обеспечение в исполнении. Например, компонент может являться, без ограничения, процессом, исполняющимся на некотором процессоре, процессором, объектом, исполняемым файлом, потоком исполнения, программой и/или компьютером. В качестве иллюстрации, как приложение, исполняющееся на сервере, так и сервер может являться компонентом. Один или более компонентов могут постоянно находиться внутри процесса и/или потока исполнения, и компонент может быть локализованным на одном компьютере и/или распределенным между двумя или более компьютерами.
Как здесь используется, термин "делать умозаключение" или "умозаключение" указывает в общем на процесс рассуждения или выполнения умозаключений относительно состояний системы, среды и/или пользователя из множества наблюдений как захваченных посредством событий и/или данных. Умозаключение может применяться, чтобы идентифицировать конкретный контекст или действие, или может генерировать распределение вероятности над состояниями, например. Умозаключение может являться вероятностным - то есть вычислением распределения вероятностей над интересующими состояниями, базируясь на рассмотрении данных и событий. Умозаключение может также указывать на технологии, применяемые для компоновки событий более высокого уровня из множества событий и/или данных. Такое умозаключение дает в результате конструкцию новых событий или действий на основе множества наблюдаемых событий и/или хранимых данных событий, являются ли или нет эти события коррелированными в небольшом временном интервале, и приходят ли эти события и данные из одного или нескольких источников событий и данных.
Ссылаясь теперь на фиг.1, иллюстрируется система 100, которая согласовывает цифровую информацию с системой восприятия человека в соответствии с настоящим изобретением. Система 100 включает в себя компонент 102 сортировки, который наблюдает за потоком входящей цифровой информации и определяет одну или более характеристик этой информации. Базируясь на этих характеристиках цифровой информации и принципах восприятия человека в форме данных восприятия человека, компонент 104 просмотра фокусирует или дефокусирует цифровую информацию на одном или более дисплеев так, что цифровая информация представляется там, где она просматривается наилучшим образом. В различных осуществлениях применяется поддержка множества мониторов ("многомониторная"), чтобы пользоваться преимуществами работы с множеством окон и определения местоположения окон для разделения элементов различных задач в информационных плоскостях.
Система 100 включает в себя аудиокомпонент 106, который обеспечивает вывод аудиосигналов в форме зуммерных сигналов, тональных сигналов, музыкальных и или голосовых сигналов, например, чтобы дополнять представление видеоинформации или в качестве отдельного вывода от видеоинформации.
Ссылаясь теперь на фиг.2, иллюстрируется блок-схема последовательности операций одной методологии для согласования цифрового информационного потока с системой восприятия человека в соответствии с настоящим изобретением. В то время, как в целях простоты объяснения, одна или более методологий, здесь показываемых, например, в форме блок-схемы последовательности операций, показываются и описываются как последовательности действий, следует понимать и принимать во внимание, что настоящее изобретение не ограничивается порядком действий, так как некоторые действия могут, в соответствии с настоящим изобретением, совершаться в другом порядке и/или одновременно с другими действиями, в отличие от того, что здесь показывается и описывается. Например, специалисты в данной области поймут и примут во внимание, что способ может альтернативно представляться как последовательность взаимосвязанных состояний или событий, таких как в диаграмме состояний. Более того, чтобы реализовывать методологию в соответствии с настоящим изобретением, могут требоваться не все показанные действия.
В 200 предоставляется видеосистема, которая поддерживает как фокусный (например, фовеальный и парафовеальный) режим, так и нефокусный (например, периферический) режим. Данные, такие как предупреждения электронной почты, тиккеры акций, данные трафика и так далее, могут отображаться в периферийной области. Дополнительно периферийная область может использоваться как место для размещения элементов для быстрого и легкого нахождения и переноса их обратно в фокальную область, чтобы с ними работать. Однако сам по себе размер недостаточен. Если человек намеревается осуществлять какое-либо чтение либо на периферийных, либо на фокусных дисплеях, то необходимо достаточное разрешение для возможности достаточно хорошо отображать шрифт для удовлетворения полным OSPREY (оптимизированное последовательное распознавание шаблонов) требованиям. OSPREY - это описание сложных взаимодействий между системой восприятия человека и шрифтом, когда он читается, и подробно описано в документе, составленном Вильямом Хиллом (William Hill), озаглавленном "THE MAGIC OF READING", датированном апрелем 1999, который целиком включается сюда по ссылке. Разрешения, требуемые для фокусного и нефокусного просмотра, различаются. В одном осуществлении для фокусных дисплеев предоставляется минимальное разрешение около 150 ppi. В другом осуществлении фокусных дисплеев предоставляется 200 ppi. Для управления нефокусными дисплеями могут использоваться намного более низкие разрешения (например, около 25 ppi).
В 202 предоставляется аудиосистема, которая выводит аудиосигналы в ответ на цифровую информацию и/или в ответ на события, генерируемые системой. Следует принять во внимание, что эта аудиосистема является необязательным аспектом настоящего изобретения. В 204 принимается цифровая информация. В 206 компонент сортировки выполняет сортировку цифровой информации, чтобы определить характеристики, которые показывают, должна ли эта информация фокусироваться или дефокусироваться, например. В 208 видеокомпонент приводится в действие, чтобы представлять цифровую информацию либо в фокусном, либо в нефокусном режиме, базируясь на упомянутых характеристиках. Затем процесс достигает этапа остановки.
Ссылаясь теперь на фиг.3, иллюстрируется диаграмма перспективы 300 обзора, имеющей периферийную (или нефокусную) плоскость 302 заднего плана с центрированной фокальной (или фокусной) плоскостью 304 переднего плана в соответствии с настоящим изобретением. Такая система может размещаться при использовании стандартных многомониторных возможностей осуществлений компьютера и графического адаптера. Периферийная плоскость 302 может обеспечиваться проекционной системой, управляемой одним графическим портом (или адаптером), который проектирует графику низкого разрешения изображений документа (например, DOC1 и DOC2) и воспроизводит наброски изображений (например, TN1 и TN2) вне окружности фокальной плоскости 304, которая согласовывает восприятие визуальной информации вне фовеальной/парафовеальной (или в периферийной) области системы восприятия человека. Эти наброски могут являться набросками исполняющихся приложений. Таким образом, один щелчок на наброске моментально открывает приложение в полноэкранном режиме на фокальной плоскости 304. При многомониторном режиме настенный дисплей может размещаться непосредственно над фокальной плоскостью 304.
Фокальная плоскость 304 может вмещать монитор, который представляет визуальную информацию внутри фовеальной/парафовеальной области наблюдателя человека. Таким образом, может иметься некоторое боковое расстояние между монитором фокальной плоскости 304 и монитором периферийной плоскости 302.
Система 300 может также иметь аудиокомпонент, представленный здесь двумя громкоговорителями 308. Следует принять во внимание, однако, что система восприятия человека наилучшим образом воспринимает звук в виде объемного звука. Таким образом, аудиокомпонент способен обеспечивать объемный звук для всех выходных сигналов.
Чтобы минимизировать информационную перегрузку, в фокальной плоскости 304 представляются только интересующие объекты. Таким образом, когда наблюдатель желает перенести DOC1 в фокальную плоскость 304, он или она может просто перетащить и бросить DOC1 туда, как это обеспечивается стандартными многомониторными программными и аппаратными возможностями. Аналогично, когда наблюдатель желает переместить DOC1 вовне фокальной плоскости 304, он просто перетаскивает и бросает DOC1 из фокальной плоскости 304 в периферийную плоскость 302.
Аудиосигналы могут конфигурироваться, чтобы сопровождать каждую операцию в качестве дополнительной обратной связи с системой восприятия наблюдателя. Так как аудиосистема может обеспечивать объемный звук, следует принять во внимание, что аудиосигнал может представляться пространственно, чтобы показывать наблюдателю, что действие с документом совершилось в определенном направлении. Например, когда DOC1 выбирается для перемещения из периферийной плоскости 302 в фокальную плоскость, из левого положения восприятия наблюдателя, может представляться соответствующий аудиосигнал, который воспринимается спереди и слева от наблюдателя, и возможно, выводя от более низкого зуммерного сигнала до более высокого зуммерного сигнала, который показывает перемещение DOC1 из нефокусной плоскости 302 в фокусную плоскость 304. Обратно, когда DOC1 перемещается назад в периферийную плоскость 302 из фокальной плоскости 304, может выводиться аудиосигнал, который воспринимается спереди и слева от наблюдателя с более высоким зуммерным сигналом (фокальная плоскость) до более низкого зуммерного сигнала (нефокусная плоскость). Аналогично при работе с объектами набросков (например, TN1) взаимодействие наблюдателя может сопровождаться аудиосигналом, который воспринимается спереди и направо вверх, тогда как взаимодействие с DOC2 будет иметь сопровождающий аудиосигнал, который воспринимается спереди и направо вниз от наблюдателя.
Может обеспечиваться автоматическое изменение размеров документа или объекта по мере того, как наблюдатель перемещает DOC1, например, между плоскостями (302 и 304). Аналогично может предоставляться возможность для объектов набросков. Когда набросок TN1 перемещается в фокальную плоскость 304, оно автоматически увеличивается согласно пользовательским параметрам для просмотра. Напротив, TN1 может автоматически уменьшаться при перемещении назад в периферийную плоскость 302. Дополнительно могут конструироваться звуки, которые сопровождают увеличение и/или уменьшение в размере по мере того, как документ или объект обрабатывается между плоскостями (302 и 304). Окрашивание и/или анимация также могут сопровождать взаимодействие способами, определяемыми пользователем.
Следует принять во внимание, что пользовательское взаимодействие также может сопровождаться не только аудиосигналами, но также анимированными графическими средствами. Таким образом, например, выбор DOC1 может давать результатом вспыхивающую границу вокруг DOC1 или делать вспыхивающим весь DOC1. Цветовые схемы также могут применяться как варианты выбора, выбираемые пользователем, вместе с аудиосигналами для вывода, когда происходит пользовательское взаимодействие с документами и объектами.
Следует дополнительно принять во внимание, что там, где существует техническая возможность, может применяться единичный монитор или дисплей так, что область с более высоким разрешением (т.е. фокальная плоскость) управляется при более высоком разрешении, чем периферийная плоскость 302, которая в таком случае является кольцевой областью вокруг фокальной плоскости, которая управляется на более низком разрешении, оба из которых согласуют обзор с системой восприятия человека.
Это также может обеспечиваться системой организации окон, которая предоставляет фокальное окно более высокого разрешения на переднем плане и периферийное окно более низкого разрешения на заднем плане для периферийной плоскости 302.
Ссылаясь теперь на фиг.4, иллюстрируется диаграмма перспективы 400 обзора, имеющей периферийную (или нефокусную) плоскость 302 заднего плана с фокальной (или фокусной) плоскостью 304 переднего плана, смещенной относительно центра по отношению к периферийной плоскости 302, в соответствии с настоящим изобретением. Такая система может размещаться, используя стандартные многомониторные возможности осуществлений компьютера и графического адаптера. Здесь наблюдатель может устанавливать фокальную плоскость 304 в любое местоположение по отношению к периферийной плоскости 302.
Другие признаки и осуществления, описанные по отношению к фиг.3, применяются к системе 400 по фиг.4.
Ссылаясь теперь на фиг.5, иллюстрируется офисное размещение 500 системы для согласования цифрового информационного потока с системой восприятия человека при использовании одной стены в соответствии с настоящим изобретением. В одном варианте осуществления наблюдатель сидит за рабочим столом, на котором находится дисплей 504, который функционирует как фокальная плоскость. Периферийная (или нефокусная) плоскость обеспечивается проекционной системой 506, которая проецирует на белую доску или экран 508, расположенную спереди наблюдателя (например, на фронтальной стене), подходящую для представления документов и/или объектов в соответствии с восприятием человека. Проектор 506 может являться 1024×768 LCD проектором, который проецирует на белую доску и находится на книжной полке (не показана) или другой платформе арматуры выше и позади наблюдателя. Проектор 506 может быть NEC GT950 от NEC Electronics, Inc., который предоставляет возможность коррекции трапецеидальных искажений, делая возможным проецирование изображения при нормальной высоте белой доски посредством проектора, установленного высоко на книжной полке, тем самым устраняя затенения, например, вызываемые головой наблюдателя.
Система 500 дополнительно включает в себя портативный компьютер 510, планшетный PC 512 и настольный компьютер 513, каждый из которых подсоединен к видеопереключателю 514, который переключает видеосигналы от любого из какого-либо вычислительного устройства (510, 512 или 513) на фокальный дисплей 504 или на периферийную проекцию на белую доску 508. Клавиатура и/или другие устройства 516 ввода могут подсоединяться к портативному (и/или настольному) компьютеру (компьютерам) для обеспечения взаимодействия с ними.
Вычислительные устройства (510, 512 и 513) могут использовать многомониторные возможности, предоставляемые со стандартными операционными системами (например, операционной системой марки WINDOWS XP от Microsoft Corporation) и графическими платами, или возможность вычислительного устройства (например, портативного компьютера 510) управлять своим дисплеем (например, LCD) и XGA сигналами из внешнего мониторного порта, чтобы управлять как дисплеем 504, так и проекционной системой 506. Фокусное устройство может являться IBM T221 плоскопанельным дисплеем от IBM Corporation с 3840×2400, 204 ppi в качестве первичного дисплея 504 фокальной плоскости. Фокальный дисплей может управляться, используя плату FireGL4 от ATI Technologies, Inc., в AGP (ускоренный графический порт) гнезде IBM двухпроцессорной башенной системы (не показана), которая также может вмещать вторую графическую плату в PCI (интерфейс периферийных компонентов) гнезде, чтобы управлять диаскопическим проектором.
Система 500 обеспечивает чтение документов в стандартном документном формате "US Letter", которое отображается с двухстраничным размахом, используя, например, текстовый процессор марки WORD от Microsoft Corporation. Страницы документа представляются в фактическом размере, и текст при 204 ppi с ClearType воспринимается так же удобочитаемым, как бумажный документ.
Второй вариант осуществления системы 500 использует ту же проекционную систему 506, которая управляется портативным компьютером Inspiron 8500 от Dell Corporation. Этот портативный компьютер включает в себя процессор 2,4 ГГц Pentium 4, 1 Gb памяти RAM и встроенную графическую плату nVidia GeForce 4 от NVIDIA Corporation с 64Mb видеопамяти RAM. Эта графическая плата является достаточно мощной, чтобы поддерживать полный многомониторный режим в упомянутой операционной системе, чтобы получать выходы из XGA гнезда как встроенного 147 ppi (1920×1200) экрана портативного компьютера, так и 1024×768 проектора.
Третий вариант осуществления использует применения планшетного PC 512 от Acer Corporation и управляет проекционной системой 506 из его стандартного порта графического вывода (например, XGA).
Блок 514 переключения дисплеев позволяет всем трем системам исполняться одновременно, переключая вывод из каждой на проектор 506 так, как требуется.
Система 500 также включает в себя аудиосистему 516, которая обеспечивает объемный звук в соответствии со многими стандартными системами объемного звука и для поддержки согласования потоков данных с требованиями системы восприятия человека.
Ссылаясь теперь на фиг.6, иллюстрируется офисное размещение 600 системы для согласования цифрового информационного потока с системой восприятия человека, используя многочисленные офисные стены в соответствии с настоящим изобретением. В этом осуществлении могут применяться многочисленные графические адаптеры, чтобы управлять проекционной системой 506 для представления периферийных плоскостей на многочисленных стенах. Например, фронтальная стена может иметь первую (или главную) нефокусную плоскость 602, на второй (или правой) стене может представляться вторая периферийная плоскость 604, на третьей (или задней) стене может представляться третья периферийная плоскость 606 и на четвертой (или левой) стене может представляться четвертая периферийная плоскость 608. Такое осуществление может обеспечиваться при использовании проекционной системы, которая применяет четыре канала (P1, P2, Р3 и Р4) информации компьютерной графики.
Как прежде, дисплей 504 может являться дисплеем фокальной плоскости, но в этом случае для всех периферийных плоскостей (602, 604, 606 и 608). Такое осуществление устанавливает более высокие требования пропускной способности на графические и вычислительные системы для управления всеми дисплеями (фокусными или нефокусными) с цифровой информацией, требуя подходящее оборудование, чтобы управляться с этим осуществлением.
В этом осуществлении на одной из периферийных плоскостей (например, плоскости 606) может воспроизводиться виртуальная книжная полка 610 так, что наблюдатель может поворачиваться и выбирать одну из многих книг или документов, там отображаемых. Такая книга или документ может затем перемещаться в другое вычислительное устройство (например, в планшетный PC) для воспроизведения или чтения в портретном формате в дисплее 504 фокальной плоскости. Следует принять во внимание, что портативный компьютер и планшетный PC обеспечивают другие устройства фокальной плоскости в дополнение к дисплею 504.
Для поддержки возможности увеличенной обработки графики, требуемой для управления каналами проектора, может предоставляться подсистема 612 обработки графики, чтобы справляться с требованиями увеличенной обработки графики. Подсистема 612 подсоединяется к переключателю 614, чтобы принимать, обрабатывать и передавать соответствующие видеосигналы из вычислительных устройств (510, 512 и 513) в каналы (Р1, Р2, Р3 и Р4) проекторов. Графическая подсистема 612 взаимодействует с операционными системами вычислительных устройств (510, 512 и 513), чтобы обеспечивать многомониторную функциональность.
Ссылаясь теперь на фиг.7, иллюстрируется офисное размещение 700 системы для согласования цифрового информационного потока с системой восприятия человека, используя многочисленные дисплеи, прикрепленные или вмонтированные в офисные стены, в соответствии с настоящим изобретением. Здесь стены существенно покрыты плоскопанельными мониторами (например, LCD или плазменными), которые управляются отдельно одной или более устойчивыми вычислительными системами.
Такие многочисленные дисплейные поверхности предоставляют новый подход к согласованию информационного потока с системой восприятия человека. Пользователь может иметь области полупостоянства там, где, например, может быть "повешено" изображение цифрового представления высокого разрешения Моны Лизы (Mona Lisa). Более того, такие изображения можно вращать и манипулировать ими многими различными способами. Как показано выше, пользователь может иметь виртуальную "книжную полку", которая выглядит как реальная книжная полка с полноразмерными корешками книг. Когда пользователь выбирает для чтения какую-либо книгу, он или она выполняет перетаскивание и бросание этой книги как операцию "вытащить с полки", которая загружает книгу в легкий планшетный PC для комфортного удерживания и чтения.
Дополнительно пользователь может иметь воспроизводимую "белую доску", на которой пользователь может писать, используя планшетный PC. Другие пользователи, которые посещают офис, могут использовать их собственные планшетные компьютеры PC, чтобы писать в этой совместно используемой области, подсоединяясь к системе либо проводным, либо беспроводным способом.
Система позволяет пользователю иметь области для вычислений и хранилища пространства для эффективного использования пространственной памяти, чтобы хранить данные, где они всегда видны и могут быть найдены. Таким же способом пользователь может также держать "кластеры" из приложений и соответствующих данных, причем приложение и данные имеют отношение к "проекту" или "задаче".
Однако требования пропускной способности для передачи таких больших объемов видеоданных в такой системе могут быть ограничивающими. В таком масштабе дисплеи требуют новые модели графики. Стандартно при управлении дисплеем графические вычисления обращаются в пиксельные данные через CPU компьютера. Затем эти пиксельные данные обрабатываются и передаются через кабель на дисплей для представления. Для поддержки описываемых поверхностей дисплеев по фиг.7 этому "традиционному" решению препятствует только объем пиксельных данных в таких сверхбольших дисплеях. Более того, традиционное решение даже с сегодняшними дисплеями имеет следствием пропускную способность, которая подвергает напряжению возможности стандартной беспроводной передачи. Однако белая доска может совместно использоваться обработкой и передачей только малых количеств данных из CPU на дисплей. Одно разрешающее ситуацию осуществление представляет собой обработку графических примитивов близко к CPU, как выполняется стандартно, но вычисление необработанных пиксельных данных выполняется близко к или в самом дисплее (также называемое "точно вовремя" (just-in-time, JIT) пиксели). В сущности GDI (интерфейс графических устройств) и/или ассоциированная электроника объединяются в виде кристалла (например, ASIC - специализированная интегральная схема), операционно встроенного в дисплей.
В одном сценарии, включающем в себя планшетный PC, пиксельные данные вычисляются только для его собственного портативного дисплея, и другие подсоединенные большие дисплеи управляются посредством передачи туда графических примитивов для локального пиксельного вычисления в дисплее. Это позволяет планшетному PC быть единичным хранилищем данных и приложений, что позволяет брать планшетный PC куда угодно и подсоединять к совместно используемой системе, но все еще позволяя подсоединение к большим дисплеям, когда они доступны, без обременения планшетного PC пиксельными вычислениями и передачей этого дисплеям. Более того, уменьшенная нагрузка, предоставляемая JIT пикселями, допускает беспроводную связь, которая не имеет огромной пропускной способности, которая обычно требуются для такого осуществления. Существенно уменьшенная нагрузка, связанная с передачей на дисплей только графических примитивов, может обрабатываться беспроводным образом.
Ссылаясь снова на фиг.7, система 700 обеспечивает JIT пиксели для периферийных дисплеев большой поверхности, первого периферийного дисплея 702 (видеодисплея 1), второго периферийного дисплея 704 (видеодисплея 2), третьего периферийного дисплея 706 (видеодисплея 3) и четвертого периферийного дисплея 708 (видеодисплея 4). Каждый дисплей (702, 704, 706 и 708) включает в себя расположенную на плате видеообрабатывающую подсистему (VPS), чтобы обрабатывать пиксельное вычисление локально для дисплея. Таким образом, первый дисплей 702 включает в себя первую VPS1 710, второй дисплей 704 включает в себя вторую VPS2 712, третий дисплей 706 включает в себя третью VPS3 714 и четвертый дисплей 708 включает в себя четвертую VPS4 716.
Портативный компьютер 718, планшетный PC 720 и настольный компьютер 721 могут обеспечивать устройство фокальной плоскости, также как и дисплей 504. Более того, так как применяется технология JIT пикселей, каждое из вычислительных устройств (718, 720 и 721, которые аналогичны соответствующим вычислительным устройствам 510, 512 и 513), может передавать видеосигналы беспроводным образом любому или всем дисплеям (702, 704, 706 и 708) либо напрямую, либо через беспроводной приемопередатчик 722. Передачи также могут осуществляться с помощью проводных средств, таких как через видеопереключатель 724, имеющий четыре выхода 726 (показаны неподсоединенными) к четырем различным дисплеям (702, 704, 706 и 708).
Видеосистема поддерживает согласование потока данных с системой восприятия человека. Дополнительно аудиосистема объемного звука, показанная с помощью четырех громкоговорителей 728, предоставляет направленный звук, который способствует согласованию аудиосигналов с системой восприятия человека.
Ссылаясь теперь на фиг.8, иллюстрируется блок-схема JIT пиксельной системы 800, которая управляет многочисленными дисплеями и применяет классификатор в соответствии с настоящим изобретением. Каждый из N дисплеев 802 (обозначаемых отображающее устройство1, …, отображающее устройствоN) включает в себя соответствующую VPS1, …, VPSN. Следует принять во внимание, что не должна применяться отдельная внутренняя VPS с каждым дисплеем 802, скорее, может применяться внешнее VPS устройство, которое поддерживает два дисплея. С подходящими соединениями высокой пропускной способности могут применяться другие такие осуществления с множественной поддержкой.
Вычислительное устройство 804 может управлять каждым из дисплеев через видео I/O (ввода/вывода) блок 806. Каждый из дисплеев 802 включает в себя видео I/O блок дисплея, который подсоединяется к видео I/O блоку 806 компьютера, чтобы принимать необработанные графические данные для локальной обработки и воспроизведения соответствующей локальной VPS. При использовании технологии JIT пикселей соединения с вычислительным устройством 804 теперь могут быть проводными или беспроводными.
Система 800 также включает в себя аудиосистему 808 для предоставления аудиосигналов одиночно или в комбинации с видеосигналами, чтобы обеспечивать согласование данных информационного потока с системой восприятия человека в соответствии с настоящим изобретением.
В этом конкретном варианте осуществления система 800 может применять классификатор 810. Данное изобретение может применять различные схемы, базирующиеся на искусственном интеллекте, для выполнения различных его аспектов. Например, процесс для определения того, какие документы или объекты должны отображаться в фокальной плоскости в сравнении с периферийной плоскостью, может обеспечиваться с помощью системы и процесса автоматического классификатора.
Классификатор - это функция, которая преобразует входной атрибутивный вектор х=(х1, х2, х3, х4, хn) в уверенность, что вход принадлежит некоторому классу, то есть f(x)=confidence(class) (f(x)=уверенность(класс)). Такая классификация может применять вероятностный и/или базирующийся на статистике анализ (например, разложение в величины полезности и затрат анализа), чтобы прогнозировать или делать умозаключение о действии, которое пользователь желает, чтобы автоматически выполнялось.
Векторная машина поддержки (support vector machine, SVM) является примером классификатора, который может применяться. SVM работает посредством нахождения гиперповерхности в пространстве возможных вводов, причем эта гиперповерхность пытается отделить запускающие критерии от незапускающих событий. Интуитивно это делает классификацию корректной для данных тестов, которые близки, но не идентичны данным тренировки. Другие направленные и ненаправленные модельные классификационные подходы включают в себя, например, наивный байесовский классификатор (naive Bayes), байесовские сети, деревья решений, нейронные сети, модели нечеткой логики и могут применяться вероятностные классификационные модели, предоставляющие различные образцы независимости. Классификация, как здесь используется, также включает в себя статистическую регрессию, которая используется, чтобы разрабатывать модели приоритетности.
Как будет легко принято во внимание из данной спецификации, данное изобретение может применять классификаторы, которые явно тренированы (например, через общие данные тренировки), также как и неявно тренированы (например, через наблюдение поведения пользователя, принятие внешней информации). Например, машины SVM конфигурируются с помощью стадии изучения или тренировки внутри конструктора классификатора и модуля выбора функций. Таким образом, классификатор (классификаторы) могут использоваться, чтобы автоматически выполнять некоторое количество функций, включая сюда, но не ограниченных определением согласно предопределенным критериям, следующие: базируясь на содержимом документа, когда и куда переместить документ или объект из плоскости или плоскость; базируясь на типе документа, когда и куда переместить документ или объект из плоскости или плоскость; базируясь на количестве периферийных дисплеев, куда переместить документ или объект; базируясь на пользовательской и исторической информации пользователя, куда переместить документ объекта; базируясь на приложении, куда переместить данные приложения в периферийной плоскости; базируясь на версии и/или временной метке документа, куда поместить документ в периферийной плоскости; и базируясь на сигналах аудиовхода, куда переместить документ в периферийной плоскости или между фокальной и периферийной плоскостями. Таким образом, можно принять во внимание, что имеются многочисленные признаки и операции, которые могут изучаться и поэтому автоматизироваться, используя классификатор 810.
Другие изучаемые и, соответственно, автоматизируемые операции могут базироваться на окрашивании и/или анимации, и использовании аудиосигналов, чтобы дополнительно согласовывать поток данных с системой восприятия человека. На боковых дисплеях могут использоваться другие цвета в отличие от фронтального и заднего дисплея, и т.д. Аудиосигналы могут использоваться в большей степени на боковых и заднем дисплеях, чем на фронтальном дисплее, чтобы прерывать систему человека на информацию на этих дисплеях. При условии, что система "знает" ориентацию дисплеев, система может тогда изучать и автоматизировать операции, соответственно.
Ссылаясь теперь на фиг.9, иллюстрируется блок-схема компьютера, выполненного с возможностью исполнения раскрываемой архитектуры. Чтобы предоставить дополнительный контекст для различных аспектов настоящего изобретения, фиг.9 и последующее обсуждение предназначаются для предоставления краткого, общего описания подходящей вычислительной среды 900, в которой могут реализовываться различные аспекты настоящего изобретения. В то время как это изобретение описывалось выше в общем контексте машиноисполнимых инструкций, которые могут исполняться на одном или более компьютерах, специалисты в данной области поймут, что это изобретение также может реализовываться в комбинации с другими программными модулями и/или как комбинация аппаратного обеспечения и программного обеспечения.
В общем программные модули включают в себя процедуры, программы, компоненты, структуры данных и т.д., которые выполняют конкретные задачи или реализуют конкретные абстрактные типы данных. Более того, специалисты в данной области примут во внимание, что способы изобретения могут использоваться на практике с другими конфигурациями компьютерных систем, включающими в себя однопроцессорные или многопроцессорные компьютерные системы, мини-компьютеры, большие компьютеры, также как персональные компьютеры, ручные вычислительные устройства, микропроцессорную или программируемую бытовую электронику, и подобное, каждое из которых может оперативно соединяться с одним или более ассоциированными устройствами.
Показанные аспекты этого изобретения могут также использоваться на практике в распределенных вычислительных средах, где определенные задачи выполняются удаленными обрабатывающими устройствами, которые связаны через сеть связи. В распределенной вычислительной среде программные модули могут располагаться как в локальных, так и в удаленных запоминающих хранящих устройствах.
Компьютер обычно включает в себя многообразие машиночитаемых носителей. Машиночитаемые носители могут быть любыми доступными носителями, к которым компьютер может осуществлять доступ и которые включают в себя как энергозависимые, так и энергонезависимые носители, съемные и несъемные носители. В качестве примера, и не ограничения, машиночитаемые носители могут содержать компьютерные запоминающие носители и носители передачи данных. Компьютерные запоминающие носители включают в себя как энергозависимые, так и энергонезависимые, съемные и несъемные носители, реализованные любым способом или технологией для хранения информации, такой как машиночитаемые инструкции, структуры данных, программные модули или другие данные. Компьютерные запоминающие носители включают в себя, но не ограничены этим, RAM, ROM, EEPROM, флэш-память или другую технологию памяти, CD-ROM, цифровой видеодиск (DVD) или другое оптическое дисковое хранилище, магнитные кассеты, магнитную ленту, магнитное дисковое хранилище, или другие магнитные хранящие устройства, или любой другой носитель, который может использоваться, чтобы хранить желаемую информацию, и к которому компьютер может осуществлять доступ.
Носители передачи данных обычно реализуют машиночитаемые инструкции, структуры данных, программные модули или другие данные в модулированном сигнале данных, таком как несущее колебание или другой транспортный механизм, и включают в себя любые носители доставки информации. Термин "модулированный сигнал данных" означает сигнал, который имеет одну или более своих характеристик установленными или измененными таким образом, чтобы кодировать информацию в сигнале. В качестве примера, и не ограничения, носители передачи данных включают в себя проводные носители, такие как проводная сеть или прямое проводное соединение, и беспроводные носители, такие как акустические, RF, инфракрасные и другие беспроводные носители. Комбинации любого из вышеперечисленного также должны включаться внутрь объема машиночитаемых носителей.
Со ссылкой снова на фиг.9 показывается иллюстративная среда 900 для реализации различных аспектов этого изобретения, которая включает в себя компьютер 902, причем компьютер 902 включает в себя обрабатывающее устройство 904, системную память 906 и системную шину 908. Системная шина 908 соединяет системные компоненты, включая, но не ограничиваясь этим, системную память 906 с обрабатывающим устройством 904. Обрабатывающее устройство 904 может быть любым из различных коммерчески доступных процессоров. В качестве обрабатывающего устройства 904 также могут применяться сдвоенные микропроцессорные и другие многопроцессорные архитектуры.
Системная шина 908 может быть любым из нескольких типов структуры шин, которая может дополнительно соединяться с шиной памяти (с или без контроллера памяти), периферийной шиной и локальной шиной, используя любую из многообразия коммерчески доступных архитектур шин. Системная память 906 включает в себя постоянное запоминающее устройство (ROM) 910 и оперативное запоминающее устройство (RAM) 912. Базовая система ввода/вывода (BIOS) хранится в энергонезависимой памяти 910, такой как ROM, EPROM, EEPROM, причем BIOS содержит базовые процедуры, которые помогают переносить информацию между элементами внутри компьютера 902, такую как в течение запуска. RAM 912 также может включать в себя высокоскоростное RAM, такое как статическое RAM для кэширования данных.
Компьютер 902 дополнительно включает в себя внутренний привод жесткого диска (HDD) 914 (например, EIDE, SATA), причем внутренний привод жесткого диска 914 также может конфигурироваться для внешнего использования в подходящем шасси (не показан), привод магнитного гибкого диска (FDD) 916, (например, чтобы читать из или записывать на съемную дискету 918) и привод 920 оптических дисков, (например, для чтения CD-ROM диска 922 или, чтобы читать из или записывать на другие оптические носители высокой емкости, такие как DVD). Привод 914 жесткого диска, привод 916 магнитного диска и привод 920 оптических дисков могут подсоединяться к системной шине 908 посредством интерфейса 924 привода жесткого диска, интерфейса 926 привода магнитного диска и интерфейса 928 оптического привода, соответственно. Интерфейс 924 для осуществлений внешнего привода включает в себя, по меньшей мере, одну или обе технологии интерфейсов: универсальной последовательной шины (USB) и IEEE 1394.
Приводы и их соответствующие машиночитаемые носители предоставляют энергонезависимое хранилище данных, структур данных, машиноисполнимых инструкций и так далее. Для компьютера 902 приводы и носители размещают хранилище любых данных в подходящем цифровом формате. Хотя вышеизложенное описание машиночитаемых носителей указывает на HDD, съемную магнитную дискету и съемные оптические носители, такие как CD или DVD, специалистам в данной области следует принять во внимание, что в иллюстративной операционной среде также могут использоваться другие типы носителей, которые читаемы компьютером, такие как zip-дисководы, магнитные кассеты, платы флэш-памяти, компакт-кассеты и подобное, и дополнительно, что любые такие носители могут содержать машиноисполнимые инструкции для выполнения способов настоящего изобретения.
Некоторое количество программных модулей может храниться в приводах и RAM 912, включая сюда операционную систему 930, одну или более прикладных программ 932, другие программные модули 934 и программные данные 936. Все или части операционной системы, приложений, модулей и/или данных также могут кэшироваться в RAM 912.
Следует принять во внимание, что настоящее изобретение может реализовываться с различными коммерчески доступными операционными системами или комбинациями операционных систем.
Пользователь может вводить команды и информацию в компьютер 902 через одно или более проводных/беспроводных устройств ввода, например клавиатуру 938 и указывающее устройство, такое как мышь 940. Другие устройства ввода (не показаны) могут включать в себя микрофон, IR удаленное управление, джойстик, игровую панель, пишущее перо, сенсорный экран или подобное. Эти и другие устройства ввода часто подсоединяются к обрабатывающему устройству 904 через интерфейс 942 устройств ввода, который соединен с системной шиной 908, но могут подсоединяться посредством других интерфейсов, таких как параллельный порт, IEEE 1394 последовательный порт, игровой порт, USB порт, IR интерфейс и т.д.
Монитор 944 или другой тип отображающего устройства также подсоединяется к системной шине 908 через некоторый интерфейс, такой как видеоадаптер 946. В дополнение к монитору 944 компьютер обычно включает в себя другие периферийные устройства вывода (не показаны), такие как громкоговорители, принтеры и т.д.
Компьютер 902 может работать в сетевой среде, используя логические связи, через проводные и/или беспроводные связи с одним или более удаленными компьютерами, такими как удаленный компьютер (компьютеры) 948. Удаленный компьютер (компьютеры) 948 может являться рабочей станцией, серверным компьютером, маршрутизатором, персональным компьютером, портативным компьютером, микропроцессорным развлекательным устройством, одноранговым устройством или другим общим сетевым узлом, и обычно включает в себя многие или все из элементов, описанных по отношению к компьютеру 902, хотя в целях краткости иллюстрировалось только запоминающее хранящее устройство 950. Описанные логические связи включают в себя возможность проводного/беспроводного подсоединения к локальной сети (LAN) 952 и/или более большим сетям, например глобальной сети (WAN) 954. Такие LAN и WAN сетевые среды являются обычным явлением в офисах и компаниях и обеспечивают компьютерные сети масштаба предприятия, такие как внутренние сети, которые могут подсоединяться к глобальной сети связи, например сети Интернет.
При использовании в LAN сетевой среде компьютер 902 подсоединяется к локальной сети 952 через интерфейс или адаптер 956 проводной и/или беспроводной сети связи. Адаптер 956 может обеспечивать проводную или беспроводную связь с LAN 952, которая также может включать в себя размещенный там пункт беспроводного доступа для связи с беспроводным адаптером 956. При использовании в WAN сетевой среде компьютер 902 может включать в себя модем 958, или подсоединяется к коммуникационному серверу в LAN, или имеет другое средство для установки связи через сеть WAN 954, такую как сеть Интернет. Модем 958, который может быть внутренним или внешним и проводным или беспроводным устройством, подсоединяется к системной шине 908 через интерфейс 942 последовательного порта. В сетевой среде программные модули, описанные по отношению к компьютеру 902 или его частям, могут храниться в удаленном запоминающем/хранящем устройстве 950. Будет принято во внимание, что показанные сетевые соединения являются иллюстративными и могут использоваться другие средства установки каналов связи между компьютерами.
Компьютер 902 выполнен с возможностью взаимодействия с любыми беспроводными устройствами или сущностями, оперативно размещаемыми в беспроводной связи, например принтером, сканером, настольным и/или портативным компьютером, портативным ассистентом данных, спутником связи, любой частью оборудования или местоположения, связанными с беспроводным образом обнаружимой меткой (например, киоском, газетным ларьком, комнатой отдыха), и телефоном. Это включает в себя, по меньшей мере, беспроводные технологии Wi-Fi и BluetoothTM. Таким образом, связь может являться предопределенной структурой, как, например, стандартной сетью, или просто специальной связью, по меньшей мере, между двумя устройствами.
Wi-Fi, или Wireless Fidelity (беспроводная связь), делает возможным подсоединение к сети Интернет с дивана в доме, с кровати в комнате гостиницы или из конференц-зала на работе без проводов. Wi-Fi - это беспроводная технология, подобная сотовому телефону, которая дает возможность таким устройствам, например, компьютерам, отправлять и принимать данные внутри помещений и снаружи; где угодно в пределах области базовой станции. Wi-Fi сети используют радиотехнологии, называемые IEEE 802.11 (a, b, g и т.д.), чтобы обеспечивать возможность защищенного, надежного, быстрого беспроводного соединения. Wi-Fi сеть может использоваться для соединения компьютеров друг с другом, с сетью Интернет и с проводными сетями (которые используют IEEE 802.3 или Ethernet). Wi-Fi сети работают в свободных от лицензии 2,4 и 5 ГГц радиодиапазонах, со скоростью данных 11 мегабит в секунду (802. 11b) или 54 мегабит в секунду (802. 11а) или с продуктами, которые содержат оба диапазона (сдвоенный диапазон), таким образом, эти сети могут обеспечивать производительность реального мира, аналогичную базовым 10ВаsеТ проводным Ethernet сетям, используемым во многих офисах.
Ссылаясь теперь на фиг.10, иллюстрируется схематическая блок-схема иллюстративной вычислительной среды 1000 в соответствии с настоящим изобретением. Система 1000 включает в себя одного или более клиента (клиентов) 1002. Клиент (клиенты) 1002 может являться аппаратным обеспечением и/или программным обеспечением (например, потоками, процессами, вычислительными устройствами). Клиент (клиенты) 1002 может содержать идентификационный файл (файлы) и/или соответствующую контекстуальную информацию посредством применения настоящего изобретения, например. Система 1000 также включает в себя один или более сервер (серверов) 1004. Сервер (серверы) 1004 может также являться аппаратным обеспечением и/или программным обеспечением (например, потоками, процессами, вычислительными устройствами). Серверы 1004 могут содержать потоки, чтобы выполнять преобразования посредством применения настоящего изобретения, например. Одна возможная связь между клиентом 1002 и сервером 1004 может быть в форме пакета данных, адаптированного, чтобы передаваться между двумя или более компьютерными процессами. Например, пакет данных может включать в себя идентификационный файл и/или соответствующую контекстуальную информацию. Система 1000 включает в себя инфраструктуру 1006 связи (например, глобальную сеть связи, такую как Интернет), которая может применяться для обеспечения связи между клиентом (клиентами) 1002 и сервером (серверами) 1004.
Связь может обеспечиваться посредством проводной (включая сюда оптическое волокно) и/или беспроводной технологии. Клиент (клиенты) 1002 оперативно подсоединяются к одному или более клиентскому хранилищу (хранилищам) 1008 данных, которое может применяться для хранения информации, локальной для клиента (клиентов) 1002 (например, идентификационного файла (файлов) и/или соответствующей контекстуальной информации). Аналогично сервер (серверы) 1004 оперативно подсоединяются к одному или более серверному хранилищу (хранилищам) 1010 данных, которое может применяться для хранения информации, локальной для серверов 1004.
То, что описывалось выше, включает в себя примеры настоящего изобретения. Конечно, невозможно описать каждую мыслимую комбинацию компонентов или методологий в целях описания настоящего изобретения, но обычный специалист в данной области техники может распознать, что возможны многие дополнительные комбинации и изменения настоящего изобретения. Соответственно предполагается, что настоящее изобретение охватывает все такие изменения, модификации и вариации, которые попадают внутрь сущности и объема прилагаемой формулы изобретения. Более того, относительно степени, в которой термин "включает в себя" используется либо в подробном описании, либо в формуле изобретения, предполагается, что такой термин является включающим, аналогично термину "содержащий", как "содержащий" толкуется, когда применяется как переходное слово в каком-либо пункте формулы изобретения.

Claims (32)

1. Система, которая обеспечивает согласование цифровой информации с системой восприятия человека, содержащая:
компонент сортировки, который определяет характеристику цифровой информации; и
компонент просмотра, который представляет цифровую информацию согласно этой характеристике, причем компонент просмотра представляет цифровую информацию в фокусном режиме на первом вычислительном устройстве и в периферийном режиме на втором вычислительном устройстве, при этом первое вычислительное устройство является планшетным персональным компьютером.
2. Система по п.1, причем компонент просмотра представляет цифровую информацию, по меньшей мере, в одном из: фокусном режиме и периферийном режиме.
3. Система по п.1, причем цифровая информация представляется в различных плоскостях просмотра.
4. Система по п.1, причем цифровая информация представляется в различных разрешениях просмотра.
5. Система по п.1, причем компонент сортировки определяет характеристику, базируясь на данных восприятия человека.
6. Система по п.1, дополнительно содержащая аудиокомпонент, который представляет аудиоинформацию согласно характеристике.
7. Система по п.1, причем цифровая информация доставляется компоненту просмотра согласно передаче "точно вовремя" видеоданных.
8. Машиночитаемый носитель, имеющий хранимые на нем машиноисполнимые инструкции для осуществления компонентов системы по п.1, которая обеспечивает согласование цифровой информации с системой восприятия человека.
9. Вычислительное устройство, содержащее:
по меньшей мере, один процессор для обработки цифровой информации и систему по п.1, которая обеспечивает согласование цифровой информации с системой восприятия человека.
10. Система, которая обеспечивает согласование цифровой информации с системой восприятия человека, содержащая:
компонент сортировки, который определяет характеристику цифровой информации и обрабатывает эту характеристику в соответствии с данными восприятия человека;
компонент просмотра, который представляет цифровую информацию, по меньшей мере, в одном из: фокусном режиме и нефокусном режиме - согласно упомянутой характеристике, причем компонент просмотра представляет цифровую информацию в фокусном режиме на первом вычислительном устройстве и в периферийном режиме на втором вычислительном устройстве, при этом первое вычислительное устройство является планшетным персональным компьютером; и аудиокомпонент, который выводит аудиоинформацию согласно упомянутой характеристике.
11. Система по п.10, причем цифровая информация представляется в различных плоскостях просмотра и при различных разрешениях просмотра.
12. Система по п.10, причем цифровая информация доставляется компоненту просмотра согласно передаче "точно вовремя" видеоданных.
13. Система по п.10, дополнительно содержащая классификатор, который применяет вероятностный и/или статистический анализ, чтобы прогнозировать или делать умозаключение о действии, которое пользователь желает, чтобы автоматически выполнялось.
14. Машиночитаемый носитель, имеющий машиноисполнимые инструкции для выполнения способа согласования цифровой информации с системой восприятия человека, содержащий:
определение характеристики цифровой информации и представление цифровой информации согласно этой характеристике для согласования с системой восприятия человека, причем цифровая информация представляется в фокусном режиме на первом вычислительном устройстве и в периферийном режиме на втором вычислительном устройстве, при этом первое вычислительное устройство является планшетным персональным компьютером.
15. Носитель по п.14, причем способ дополнительно содержит представление цифровой информации, по меньшей мере, в одном из:
фокусном режиме и периферийном режиме.
16. Носитель по п.14, причем цифровая информация представляется в различных плоскостях просмотра.
17. Носитель по п.14, причем способ дополнительно содержит представление цифровой информации при различных разрешениях просмотра.
18. Носитель по п.14, причем способ дополнительно содержит определение характеристики, базируясь на данных восприятия человека.
19. Носитель по п.14, причем способ дополнительно содержит представление аудиоинформации согласно упомянутой характеристике.
20. Носитель по п.14, причем способ дополнительно содержит доставку цифровой информации согласно передаче "точно вовремя" видеоданных.
21. Носитель по п.14, причем способ дополнительно содержит классификатор, который применяет вероятностный и/или статистический анализ, чтобы прогнозировать или делать умозаключение о действии, которое пользователь желает, чтобы автоматически выполнялось.
22. Носитель по п.14, причем способ дополнительно содержит представление периферийной плоскости в соответствии с множеством отображающих устройств.
23. Носитель по п.22, причем данные периферийной плоскости передаются беспроводным образом.
24. Носитель по п.14, причем способ дополнительно содержит обработку графических данных, локальных для периферийного дисплея.
25. Носитель по п.14, причем способ дополнительно содержит обработку аудиосигналов, по меньшей мере, одного из отдельных от видеосигналов и в комбинации с видеосигналами.
26. Способ согласования цифровой информации с системой восприятия человека, содержащий:
определение характеристики цифровой информации и
представление цифровой информации, по меньшей мере, в одном из:
фокусном режиме и периферийном режиме - согласно упомянутой характеристике для согласования с системой восприятия человека, причем цифровая информация представляется в фокусном режиме на первом вычислительном устройстве и в периферийном режиме на втором вычислительном устройстве, при этом первое вычислительное устройство является планшетным персональным компьютером.
27. Способ по п.26, дополнительно содержащий представление цифровой информации в одной плоскости, которая обеспечивает как фокусный режим, так и периферийный режим.
28. Способ по п.26, дополнительно содержащий представление периферийной информации периферийного режима в многочисленных периферийных плоскостях, размещенных вокруг вычислительного устройства, которое управляет этими периферийными плоскостями.
29. Способ по п.26, причем фокусный режим представляется на портативном компьютере.
30. Способ по п.26, дополнительно содержащий предоставление виртуальной книжной полки, которая обеспечивает чтение виртуальной книги.
31. Способ по п.26, дополнительно содержащий предоставление "точно вовремя" пикселей согласно многочисленным периферийным плоскостям, размещенным по помещению.
32. Способ по п.26, дополнительно содержащий предоставление аудиосигнала в ответ на перемещение документа или объекта между фокальной плоскостью и периферийной плоскостью.
RU2005121438/09A 2004-07-08 2005-07-07 Согласование цифрового информационного потока с системой восприятия человека RU2383928C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/886,879 2004-07-08
US10/886,879 US7173619B2 (en) 2004-07-08 2004-07-08 Matching digital information flow to a human perception system

Publications (2)

Publication Number Publication Date
RU2005121438A RU2005121438A (ru) 2007-01-20
RU2383928C2 true RU2383928C2 (ru) 2010-03-10

Family

ID=35134652

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2005121438/09A RU2383928C2 (ru) 2004-07-08 2005-07-07 Согласование цифрового информационного потока с системой восприятия человека

Country Status (10)

Country Link
US (2) US7173619B2 (ru)
EP (1) EP1615202B1 (ru)
JP (1) JP4979901B2 (ru)
KR (1) KR101150115B1 (ru)
CN (1) CN1719399B (ru)
AU (1) AU2005202774B2 (ru)
BR (1) BRPI0502581A (ru)
CA (1) CA2511448C (ru)
MX (1) MXPA05007454A (ru)
RU (1) RU2383928C2 (ru)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8359546B2 (en) * 1997-09-11 2013-01-22 Harold Lee Peterson System, method and computer-readable medium for online marketing and visual presentations of software programs
US7073158B2 (en) * 2002-05-17 2006-07-04 Pixel Velocity, Inc. Automated system for designing and developing field programmable gate arrays
US7554521B1 (en) * 2004-04-15 2009-06-30 Apple Inc. User interface control for changing a parameter
FI20040667A (fi) * 2004-05-11 2005-11-12 Ritva Laijoki-Puska Menetelmä ja järjestely virtuaalimaiseman esittämiseksi
US7661065B2 (en) * 2005-05-24 2010-02-09 Microsoft Corporation Systems and methods that facilitate improved display of electronic documents
JP4933129B2 (ja) * 2006-04-04 2012-05-16 クラリオン株式会社 情報端末および簡略−詳細情報の表示方法
US20080036864A1 (en) * 2006-08-09 2008-02-14 Mccubbrey David System and method for capturing and transmitting image data streams
US20080151049A1 (en) * 2006-12-14 2008-06-26 Mccubbrey David L Gaming surveillance system and method of extracting metadata from multiple synchronized cameras
US8587661B2 (en) * 2007-02-21 2013-11-19 Pixel Velocity, Inc. Scalable system for wide area surveillance
US7889175B2 (en) * 2007-06-28 2011-02-15 Panasonic Corporation Touchpad-enabled remote controller and user interaction methods
US20090086023A1 (en) * 2007-07-18 2009-04-02 Mccubbrey David L Sensor system including a configuration of the sensor as a virtual sensor device
ITRM20080144A1 (it) * 2008-03-17 2009-09-18 Link Formazione S R L Sportello virtuale interattivo.
KR20100030968A (ko) * 2008-09-11 2010-03-19 엘지전자 주식회사 단말기 및 그의 메뉴 디스플레이 방법
US9086780B2 (en) * 2008-10-03 2015-07-21 Digital Delivery Networks, Inc. System, method and computer-readable medium for visual presentation of aspect of software programs
KR20100064177A (ko) * 2008-12-04 2010-06-14 삼성전자주식회사 전자장치 및 그의 디스플레이방법
US20100141552A1 (en) * 2008-12-04 2010-06-10 Andrew Rodney Ferlitsch Methods and Systems for Imaging Device and Display Interaction
US20120154256A1 (en) * 2010-08-06 2012-06-21 Brett Loring Grover Visual Display System
US9032042B2 (en) * 2011-06-27 2015-05-12 Microsoft Technology Licensing, Llc Audio presentation of condensed spatial contextual information
US8958569B2 (en) 2011-12-17 2015-02-17 Microsoft Technology Licensing, Llc Selective spatial audio communication
EP3276455A4 (en) 2015-03-27 2018-03-21 Fujitsu Limited Display method, program, and display control device
KR20240046291A (ko) 2017-03-22 2024-04-08 매직 립, 인코포레이티드 디스플레이 시스템들을 위한 깊이 기반 포비티드 렌더링
CN112136094A (zh) * 2018-03-16 2020-12-25 奇跃公司 用于显示系统的基于深度的凹式渲染
US11592813B2 (en) * 2018-12-17 2023-02-28 Robert Bosch Gmbh Method and controller for the situational transmission of surroundings information of a vehicle

Family Cites Families (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4028725A (en) * 1976-04-21 1977-06-07 Grumman Aerospace Corporation High-resolution vision system
US4479784A (en) * 1981-03-03 1984-10-30 The Singer Company Eye line-of-sight responsive wide angle visual system
JP3245655B2 (ja) * 1990-03-05 2002-01-15 インキサイト ソフトウェア インコーポレイテッド 作業スペースの表示処理方法
US5320534A (en) * 1990-11-05 1994-06-14 The United States Of America As Represented By The Secretary Of The Air Force Helmet mounted area of interest (HMAoI) for the display for advanced research and training (DART)
US5274363A (en) * 1991-02-01 1993-12-28 Ibm Interactive display system
US5348477A (en) * 1992-04-10 1994-09-20 Cae Electronics Ltd. High definition television head mounted display unit
US5310349A (en) * 1992-04-30 1994-05-10 Jostens Learning Corporation Instructional management system
JP2868389B2 (ja) * 1993-06-14 1999-03-10 株式会社エイ・ティ・アール通信システム研究所 画像表示装置
JP2896291B2 (ja) * 1993-06-14 1999-05-31 株式会社エイ・ティ・アール通信システム研究所 画像表示装置
JPH0824358B2 (ja) * 1993-08-16 1996-03-06 工業技術院長 画像ディスプレー装置
US5499330A (en) * 1993-09-17 1996-03-12 Digital Equipment Corp. Document display system for organizing and displaying documents as screen objects organized along strand paths
JP3697276B2 (ja) * 1993-10-27 2005-09-21 ゼロックス コーポレイション 画像ディスプレイ方法及び画像ディスプレイ装置並びに画像スケーリング方法
JP3143558B2 (ja) * 1994-02-02 2001-03-07 キヤノン株式会社 画像表示方法および装置
US5682486A (en) * 1995-03-14 1997-10-28 International Business Machines Corporation Video display and control of multiple graphical interfaces
US5790794A (en) * 1995-08-11 1998-08-04 Symbios, Inc. Video storage unit architecture
US6112201A (en) * 1995-08-29 2000-08-29 Oracle Corporation Virtual bookshelf
US5678015A (en) * 1995-09-01 1997-10-14 Silicon Graphics, Inc. Four-dimensional graphical user interface
US5838318A (en) * 1995-11-10 1998-11-17 Intel Corporation Method and apparatus for automatically and intelligently arranging windows on a display device
US5754809A (en) * 1995-12-12 1998-05-19 Dell U.S.A., L.P. Perspective windowing technique for computer graphical user interface
GB2310988B (en) * 1996-03-08 2000-11-08 Ibm Graphical user interface
US5880733A (en) * 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
US6043818A (en) * 1996-04-30 2000-03-28 Sony Corporation Background image with a continuously rotating and functional 3D icon
US5920315A (en) * 1996-07-17 1999-07-06 International Business Machines Corporation Multi-pane window with recoiling workspaces
US5838326A (en) * 1996-09-26 1998-11-17 Xerox Corporation System for moving document objects in a 3-D workspace
US6011872A (en) * 1996-11-08 2000-01-04 Sharp Laboratories Of America, Inc. Method of generalized content-scalable shape representation and coding
US6252989B1 (en) * 1997-01-07 2001-06-26 Board Of The Regents, The University Of Texas System Foveated image coding system and method for image bandwidth reduction
US6104359A (en) * 1997-01-24 2000-08-15 Microsoft Corporation Allocating display information
US5923307A (en) * 1997-01-27 1999-07-13 Microsoft Corporation Logical monitor configuration in a multiple monitor environment
US6018340A (en) * 1997-01-27 2000-01-25 Microsoft Corporation Robust display management in a multiple monitor environment
US6198483B1 (en) * 1997-01-30 2001-03-06 Ken Launais Motion user interface
US5949430A (en) * 1997-05-20 1999-09-07 Microsoft Corporation Peripheral lenses for simulating peripheral vision on a display device
US6232974B1 (en) * 1997-07-30 2001-05-15 Microsoft Corporation Decision-theoretic regulation for allocating computational resources among components of multimedia content to improve fidelity
USH1812H (en) * 1997-10-24 1999-11-02 Sun Microsystems, Inc. Method for encoding bounding boxes of drawing primitives to be rendered for multi-resolution supersampled frame buffers
US6308187B1 (en) * 1998-02-09 2001-10-23 International Business Machines Corporation Computer system and method for abstracting and accessing a chronologically-arranged collection of information
US6044178A (en) * 1998-03-10 2000-03-28 Seiko Epson Corporation LCD projector resolution translation
US6647119B1 (en) * 1998-06-29 2003-11-11 Microsoft Corporation Spacialization of audio with visual cues
US6160553A (en) * 1998-09-14 2000-12-12 Microsoft Corporation Methods, apparatus and data structures for providing a user interface, which exploits spatial memory in three-dimensions, to objects and in which object occlusion is avoided
US6243093B1 (en) * 1998-09-14 2001-06-05 Microsoft Corporation Methods, apparatus and data structures for providing a user interface, which exploits spatial memory in three-dimensions, to objects and which visually groups matching objects
US6490011B1 (en) * 1998-12-18 2002-12-03 Caterpillar Inc Display device convertible between a cave configuration and a wall configuration
US6549218B1 (en) * 1999-03-31 2003-04-15 Microsoft Corporation Dynamic effects for computer display windows
US6665985B1 (en) * 1999-09-09 2003-12-23 Thinc Virtual reality theater
US7134095B1 (en) * 1999-10-20 2006-11-07 Gateway, Inc. Simulated three-dimensional navigational menu system
US6714214B1 (en) * 1999-12-07 2004-03-30 Microsoft Corporation System method and user interface for active reading of electronic content
US6806892B1 (en) * 1999-12-20 2004-10-19 International Business Machines Corporation Layer viewport for enhanced viewing in layered drawings
US6938069B1 (en) * 2000-03-18 2005-08-30 Computing Services Support Solutions Electronic meeting center
US6714215B1 (en) * 2000-05-19 2004-03-30 Microsoft Corporation System and method for displaying media interactively on a video display device
US7010483B2 (en) * 2000-06-02 2006-03-07 Canon Kabushiki Kaisha Speech processing system
US6791530B2 (en) * 2000-08-29 2004-09-14 Mitsubishi Electric Research Laboratories, Inc. Circular graphical user interfaces
US7068813B2 (en) * 2001-03-28 2006-06-27 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
US6803912B1 (en) * 2001-08-02 2004-10-12 Mark Resources, Llc Real time three-dimensional multiple display imaging system
US20030067476A1 (en) * 2001-10-04 2003-04-10 Eastman Kodak Company Method and system for displaying an image
US7146313B2 (en) 2001-12-14 2006-12-05 Microsoft Corporation Techniques for measurement of perceptual audio quality
US7146573B2 (en) * 2002-01-28 2006-12-05 International Business Machines Corporation Automatic window representation adjustment
JP4465142B2 (ja) * 2002-01-30 2010-05-19 富士通株式会社 ウィンドウ表示制御プログラム、ウィンドウ表示制御方法およびウィンドウ表示制御装置
US6943811B2 (en) * 2002-03-22 2005-09-13 David J. Matthews Apparatus and method of managing data objects
US7129981B2 (en) * 2002-06-27 2006-10-31 International Business Machines Corporation Rendering system and method for images having differing foveal area and peripheral view area resolutions
JP3760903B2 (ja) * 2002-08-22 2006-03-29 セイコーエプソン株式会社 画像表示装置
US7176943B2 (en) 2002-10-08 2007-02-13 Microsoft Corporation Intelligent windows bumping method and system
US7913183B2 (en) 2002-10-08 2011-03-22 Microsoft Corporation System and method for managing software applications in a graphical user interface
US20040066407A1 (en) 2002-10-08 2004-04-08 Microsoft Corporation Intelligent windows movement and resizing
JP4005904B2 (ja) * 2002-11-27 2007-11-14 松下電器産業株式会社 表示装置、及び表示方法
US6890077B2 (en) * 2002-11-27 2005-05-10 The Boeing Company Method and apparatus for high resolution video image display
JP3962322B2 (ja) * 2002-12-26 2007-08-22 松下電器産業株式会社 携帯電子機器
US8230359B2 (en) * 2003-02-25 2012-07-24 Microsoft Corporation System and method that facilitates computer desktop use via scaling of displayed objects with shifts to the periphery
US7872635B2 (en) * 2003-05-15 2011-01-18 Optimetrics, Inc. Foveated display eye-tracking system and method
JP4038689B2 (ja) * 2004-01-21 2008-01-30 ソニー株式会社 表示制御装置および方法、記録媒体、並びにプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CRUZ-NEIRA и др. Surround-screen projection-based virtual reality: the design and implementation of the CAVE, с.135-142, ISBN:0-89791-601-8, опубл. 1993, http://www.cs.utah.edu/~thompson/vissim-seminar/on-line/CruzNeiraSig93.pdf. RENAMBOT и др. (доклад, 2000) (http://www.cs.vu.nl/~renambot/vr/html/talk.htm. "Man Multi-Agent Interaction in VR: a Case Study with RoboCup". *

Also Published As

Publication number Publication date
US7173619B2 (en) 2007-02-06
EP1615202A3 (en) 2009-09-02
CN1719399A (zh) 2006-01-11
US7548239B2 (en) 2009-06-16
US20060007242A1 (en) 2006-01-12
JP2006072323A (ja) 2006-03-16
KR101150115B1 (ko) 2012-06-08
KR20060049938A (ko) 2006-05-19
RU2005121438A (ru) 2007-01-20
EP1615202B1 (en) 2018-10-03
MXPA05007454A (es) 2006-02-22
AU2005202774B2 (en) 2010-06-10
CN1719399B (zh) 2010-04-21
CA2511448C (en) 2013-11-26
CA2511448A1 (en) 2006-01-08
US20060290714A1 (en) 2006-12-28
EP1615202A2 (en) 2006-01-11
JP4979901B2 (ja) 2012-07-18
AU2005202774A1 (en) 2006-02-02
BRPI0502581A (pt) 2006-02-21

Similar Documents

Publication Publication Date Title
RU2383928C2 (ru) Согласование цифрового информационного потока с системой восприятия человека
US11803055B2 (en) Sedentary virtual reality method and systems
US10031712B2 (en) System and method for display mirroring
Ni et al. A survey of large high-resolution display technologies, techniques, and applications
US8421824B2 (en) Hand image feedback
US6917348B2 (en) Video display mode for dual displays
US9009595B2 (en) User manipulation of video feed to computer screen regions
Ashdown et al. Escritoire: A personal projected display
CN106796495A (zh) 合并的切换和窗口放置
JP2009086083A (ja) 画像表示装置及び画像表示システム
EP2461256A2 (en) Method and apparatus for providing an electronic book service in a mobile device
JP2021166356A (ja) 出力装置、出力システム、フォーマット情報変更方法、プログラム、コントローラー
JP4109012B2 (ja) 解像度混合ディスプレイ
US5812125A (en) Method and apparatus for selectively generating display images
US20210224525A1 (en) Hybrid display system with multiple types of display devices
JP2006259007A (ja) 情報提示装置および情報提示方法
Koch et al. Read the Fine Print: Assessing the User Experience of Reading in High Resolution Virtual Reality
CN118055092A (zh) 交互方法、作品发布方法、装置、设备和存储介质
JP4645390B2 (ja) 遠隔操作システム
Wellershoff Multimedia communication systems

Legal Events

Date Code Title Description
PC41 Official registration of the transfer of exclusive right

Effective date: 20150526

MM4A The patent is invalid due to non-payment of fees

Effective date: 20180708