RU2483461C2 - Система и способ управления программируемым мультимедийным контроллером - Google Patents

Система и способ управления программируемым мультимедийным контроллером Download PDF

Info

Publication number
RU2483461C2
RU2483461C2 RU2008127910/07A RU2008127910A RU2483461C2 RU 2483461 C2 RU2483461 C2 RU 2483461C2 RU 2008127910/07 A RU2008127910/07 A RU 2008127910/07A RU 2008127910 A RU2008127910 A RU 2008127910A RU 2483461 C2 RU2483461 C2 RU 2483461C2
Authority
RU
Russia
Prior art keywords
video
audio
signals
multimedia controller
personal computer
Prior art date
Application number
RU2008127910/07A
Other languages
English (en)
Other versions
RU2008127910A (ru
Inventor
Роберт П. МАДОННА
Майкл Е. НУНАН
Сигмар К. ЭСКХОЛЬЦ
Джеймс Ф. АЛЛЕН
Питер Х. КОРСИНИ
Original Assignee
Савант Системс Ллс
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Савант Системс Ллс filed Critical Савант Системс Ллс
Publication of RU2008127910A publication Critical patent/RU2008127910A/ru
Application granted granted Critical
Publication of RU2483461C2 publication Critical patent/RU2483461C2/ru

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4112Peripherals receiving signals from specially adapted client devices having fewer capabilities than the client, e.g. thin client having less processing power or no tuning capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438Window management, e.g. event handling following interaction with the user interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/285Generic home appliances, e.g. refrigerators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Abstract

Изобретение относится к взаимодействию устройств и управлению ими и, в частности, к программируемому мультимедиа-контроллеру для коммутации и управления аудио- и видеоустройствами, устройствами обработки данных, обеспечения безопасности и др. Техническим результатом является обеспечение широких возможностей по настройке, позволяющих конфигурировать и управлять системой пользователю. Указанный технический результат достигается тем, что программируемый мультимедиа-контроллер, включающий в себя аудио- и видеокоммутаторы, осуществляет управление аудио- и видеоустройствами, телефонными устройствами, устройствами обработки данных, обеспечения безопасности, на основе моторов, на основе реле и/или электронными устройствами других типов. Модули контроллера принимают и выдают аудио- и видеосодержание во множестве аналоговых и цифровых форматов, что позволяет соединять систему с широким диапазоном устройств. Для обеспечения системы мощностями по обработке и выполнения прикладных программ могут применяться функционально связанные универсальные персональные компьютеры малого форм-фактора. В качестве средства управления программируемым мультимедиа-контроллером может использоваться персональный DVD-проигрыватель или другое устройство, способное выводить данные на экран и генерировать выходной аудиосигнал в результате выбора пользователем одного из нескольких предлагаемых вариантов. 3 н. и 27 з.п. ф-лы, 21 ил.

Description

Область техники, к которой относится изобретение
Настоящее изобретение в основном относится к взаимодействию устройств и управлению ими и, более конкретно, к программируемому мультимедиа-контроллеру, обеспечивающему коммутацию и управление аудио- и видеоустройствами, телефонными устройствами, устройствами обработки данных, обеспечения безопасности, на основе моторов, на основе реле и/или электронными устройствами других типов.
Уровень техники
Быстрый рост объема предложения потребительских электронных устройств на рынке обусловлен падением стоимости электронной аппаратуры и появлением новых носителей информации. С одной стороны, такое развитие дает пользователям новые возможности при одновременном снижении стоимости; с другой стороны, оно порождает новые проблемы с точки зрения взаимосвязи, совместимости и управления.
Например, в прошлом пользователь имел возможность построить домашнюю стереосистему, "связав" ее компоненты минимальным числом соединений. Такие соединения в общем случае представляли собой аналоговые кабели или простые провода. При этом стереосистемы имели невысокие возможности по совместной работе с другими устройствами; кроме того, управление ими было примитивным и ограничивалось аналоговыми регуляторами и кнопками на лицевой панели модуля. Современные аудиокомпоненты поддерживают обработку многоканального объемного звука и множество форматов обмена аналоговыми и видеосигналами по различным типам соединений. Появилась возможность взаимного соединения множества устройств, но при этом возникло много проблем совместимости новых и конкурирующих форматов подключений. Для многих устройств взаимодействие и взаимное управление реализуется с большими трудностями. Например, задача записи аудиосигнала с аналогового проигрывателя на цифровой МР3-проигрыватель, которая достаточно проста при абстрактном рассмотрении, на практике в общем случае означает необходимость определенных действий по подключению кабелей и конфигурированию.
В то же время управление электронными устройствами стало намного более сложным, и пользователь имеет дело с множеством различных устройств дистанционного управления и типов интерфейсов, каждый из которых в общем случае уникален для каждого конкретного электронного устройства. Например, пользователю, желающему посмотреть фильм на DVD с приглушенным светом и выключенным телефонным звонком, скорее всего, придется воспользоваться тремя пультами дистанционного управления: от DVD-проигрывателя, от телевизора и от аудио/видеоресивера, а также, возможно, контроллером устройств, таким как контроллер освещения Х10™, и органами управления телефона.
Подобные затруднения возникают не только в области приложений аудио/видео, но и во многих других областях, связанных с управлением устройствами. Например, пользователю может потребоваться организовать взаимодействие домашней системы безопасности, системы полива и системы освещения таким образом, что в отсутствие пользователя будет активизироваться определенная схема работы безопасности/полива/освещения. В обычном случае пользователю, желающему получить такую систему, придется выполнить определенные действия с отдельными интерфейсами управления, в каждом из которых реализована отдельная, как правило, сложная схема управления.
Еще более очевидные трудности со взаимодействием наблюдаются в коммерческих предприятиях, где обычно имеется большое количество электронных устройств. Магазины, рестораны, студии звукозаписи, киностудии и другие общественные места коммерческого характера, где требуется управление и коммутация аудио-, видеоустройств и широкого диапазона устройств других типов, сталкиваются с серьезными проблемами совместимости и управления. Многие существующие решения оказываются чрезмерно дорогими, негибкими и трудно конфигурируемыми; как следствие, даже небольшие изменения в конфигурации системы требуют участия разработчика программного обеспечения или другого профессионального программиста.
Кроме того, многие домашние и коммерческие пользователи реализуют возможности своих электронных устройств в недостаточной степени, поскольку применяют лишь минимальное число соединений и управляют устройствами лишь самым элементарным образом. Таким образом, существует необходимость в создании интегрированного устройства, реализующего управление и взаимное соединение аудио- и видеоустройств, телефонных устройств, устройств обработки данных, обеспечения безопасности, на основе моторов, на основе реле и/или других типов электронных устройств. Такая система может обеспечивать создание конвергентного решения за счет связи электронных устройств функционально совместимым способом, т.е. построение интегрированного решения. Помимо этого, такая система должна иметь широкие возможности по настройке, позволяющие конфигурировать и управлять системой пользователю, не имеющему серьезных навыков в области разработки программного обеспечения.
Раскрытие изобретения
В настоящем изобретении в основном описывается интегрированный программируемый мультимедиа-контроллер, обеспечивающий коммутацию и управление аудио- и видеоустройствами, телефонными устройствами, устройствами обработки данных, обеспечения безопасности, устройствами с приводом от двигателя, на основе реле и/или электронными устройствами других типов. В ее составе имеются аудиокоммутатор и видеокоммутатор, которые связаны с микроконтроллером и подсистемой обработки. Аудиокоммутатор и видеокоммутатор также связаны с модулями ввода и вывода звука и видео. Эти модули принимают и выдают сигналы в множестве аналоговых и цифровых форматов и, таким образом, позволяют соединять систему с широким диапазоном устройств. Для коммутации в системе входящие аудио- и видеосигналы преобразуются в общие цифровые форматы.
При поступлении управляющей команды от микроконтроллера и подсистемы обработки аудио- и видеокоммутаторы направляют цифровые сигналы в соединения с модулями вывода. Перед выводом сигналов модулями вывода эти цифровые сигналы преобразуются в необходимые выходные форматы. Коммутация между входами и выходами может выполняться изолированно, т.е. конкретный вход будет соединяться с конкретным выходом, или по всему модулю, т.е с выбранного модуля на другой модуль будут подаваться сигналы с группы входов.
Помимо аудио- и видеоустройств, программируемый мультимедиа-контроллер может соединяться с широким разнообразием других внешних устройств посредством проводных соединений, таких как RS232 и Ethernet, и/или беспроводных соединений, таких как инфракрасное соединение, радиочастотное соединение, соединение Bluetooth, ZigBee или другое подходящее соединение. За счет этого обеспечивается поддержка управления телефонными устройствами, устройствами обеспечения безопасности, с приводом от двигателя, на основе реле и/или электронными устройствами других типов.
В одном варианте осуществления подсистема обработки программируемого мультимедиа-контроллера включает в себя один или несколько компьютеров. Компьютеры могут представлять собой универсальные персональные компьютеры малого форм-фактора, функционально связанные с программируемым мультимедиа-контроллером посредством соединительной платы. При этом универсальные компьютеры подходящей формы и размера, имеющиеся в широкой продаже, могут быть встроены в корпус программируемого мультимедиа-контроллера и использоваться в составе системы в качестве мощностей по обработке; на них также могут выполняться прикладные программы. В другом варианте осуществления могут использоваться компьютеры, устанавливаемые в стойки, или другие автономные компьютеры, подключаемые к домашнему мультимедиа-контроллеру не через соединительную плату, а по сетевому соединению. В любом из этих вариантов осуществления на компьютерах может быть сконфигурировано распределение нагрузки и/или избыточность.
В другом варианте осуществления управлять программируемым мультимедиа-контроллером может мультимедиа-проигрыватель, например DVD-проигрыватель или другое устройство, обеспечивающее отображение данных и генерацию выходного сигнала согласно выбору варианта пользователем, как частью встроенной управляющей техники. При выборе пунктов меню или других объектов мультимедиа-проигрыватель внедряет информацию управления в выходной сигнал. Например, если мультимедиа-проигрывателем является DVD-проигрыватель, пользователь может выбирать пункты меню DVD, при этом в аудиосигнал, генерируемый DVD-проигрывателем, внедряется предопределенная информация, соответствующая выбору. Внедренная информация управления передается программируемому мультимедиа-контроллеру по радиоканалу или проводному соединению, далее эта информация декодируется и на ее основе генерируются команды управления, используемые системой. В одном варианте осуществления методика внедрения управляющей информации представляет собой методику управления с заимствованием бита, т.е. для хранения внедренной информации управления используется наименьший значащий бит каждого слова цифрового аудиосигнала. В другом варианте осуществления методика внедрения управляющей информации представляет собой методику управления с тональным сигналом, т.е. в ответ на выбор варианта пользователем устройство управления генерирует тональный аудиосигнал, который декодируется программируемым мультимедиа-контроллером, который, в свою очередь, генерирует определенную команду управления.
В еще одном варианте осуществления программируемый мультимедиа-контроллер реализует функцию наложения видеоизображений, которая позволяет выводить динамическое видеоизображение, неподвижные кадры и/или текст поверх изображения в любом требуемом месте экрана. Такие накладываемые изображения могут содержать компьютерную графику, генерируемую подсистемой обработки, для визуальной демонстрации информации различных типов пользователю. Область экрана может сдвигаться по одному кадру, что позволяет, например, создавать "движущееся" наложенное изображение или другой специальный эффект. В одном варианте осуществления настоящего изобретения подсистема обработки изменяет цвета, связанные с пикселями в определенной области видеокадра, на предопределенный цвет. Затем видеомикшер распознает появление пикселей предопределенного цвета и подставляет в каждый пиксель, содержащий такой цвет, данные, поступающие от подсистемы обработки. Таким способом, на каждый кадр видеосигнала могут накладываться данные из другого источника. Такая методика может быть легко расширена путем использования нескольких предопределенных цветов, что позволяет выполнять многократное независимое наложение видеоизображений.
В еще одном варианте осуществления программируемый мультимедиа-контроллер может быть связан с дополнительными программируемыми мультимедиа-контроллерами через порт расширения, позволяющий легко масштабировать систему при необходимости дополнительных соединений.
Краткое описание фигур чертежей
Далее приводится более подробное описание изобретения со ссылками на прилагаемые чертежи, при этом сходные числовые ссылки указывают на идентичные или функционально подобные элементы. На чертежах:
на фиг.1 представлена блок-схема программируемого мультимедиа-контроллера, соединенного с множеством устройств, согласно примерному варианту осуществления настоящего изобретения;
на фиг.2 приведена блок-схема аппаратной архитектуры аппаратных средств высокого уровня в системе на фиг.1;
на фиг.3 приведена блок-схема аудиокоммутатора, связанного со множеством модулей ввода и вывода, согласно примерному варианту осуществления настоящего изобретения;
на фиг.4 приведена блок-схема примерного модуля ввода цифрового аудиосигнала;
на фиг.5 приведена блок-схема примерного модуля ввода аналогового аудиосигнала;
на фиг.6 приведена блок-схема примерного модуля ввода цифрового видеосигнала с мультимедиа-интерфейсом высокой четкости (High-Definition Multimedia Interface, HDMI);
на фиг.7 приведена блок-схема примерного порта внешнего аудио/видеосигнала;
на фиг.8 приведена блок-схема примерного модуля вывода цифрового аудиосигнала;
на фиг.9 приведена блок-схема примерного модуля вывода аналогового аудиосигнала;
на фиг.10 приведена блок-схема примерного модуля вывода цифрового видеосигнала с HDMI;
на фиг.11 приведена блок-схема примерного видеокоммутатора, соединенного со множеством модулей ввода и вывода, согласно примерному варианту осуществления настоящего изобретения;
на фиг.12 приведена блок-схема примерного модуля ввода аналогового видеосигнала
на фиг.13 приведена блок-схема примерного комбинированного модуля ввода аналогового и цифрового видеосигнала;
на фиг.14 приведена блок-схема примерной подсистемы обработки согласно примерному варианту осуществления настоящего изобретения;
на фиг.15 показано множество портов подключения на примерном универсальном персональном компьютере малого форм-фактора в трехмерном виде;
на фиг.16 показана часть передней панели программируемого мультимедиа-контроллера, изготовленного в соответствии с примерным вариантом осуществления настоящего изобретения, с двумя универсальными персональными компьютерами малого форм-фактора, вставленными в отсеки;
на фиг.17а приведена блок-схема модулей управления, соединенных с программируемым мультимедиа-контроллером согласно примерному варианту осуществления настоящего изобретения;
на фиг.17b приведена блок-схема примерной методики внедрения управляющей информации на основе управления с заимствованием бита;
на фиг.18 приведена блок-схема примерной схемы взаимосвязи и расширения аудиосистемы;
на фиг.19 приведена блок-схема примерной схемы взаимосвязи и расширения видеосистемы;
на фиг.20 приведена блок-схема с двумя программируемыми мультимедиа-контроллерами, используемыми в примерном приложении, в данном случае в приложении профессиональной аудиозаписи и микширования.
Осуществление изобретения
На фиг.1 приведена блок-схема программируемого мультимедиа-контроллера 100, соединенного со множеством устройств, согласно примерному варианту осуществления настоящего изобретения. Термин "программируемый мультимедиа-контроллер" следует широко понимать как устройство, имеющее функцию управления, коммутации потоков данных и/или взаимодействия с широким кругом различных электронных устройств, таких как аудио- и видеоустройства, телефонные устройства, устройства обработки данных, обеспечения безопасности, на основе моторов, на основе реле и/или другие типы электронных устройств. При взаимодействии с этими устройствами программируемый мультимедиа-контроллер может осуществлять функции интегрированного решения для управления мультимедиа-функциями.
В примерном варианте осуществления программируемый мультимедиа-контроллер 100 связан с широким диапазоном аудио/видеокомпонентов, таких как проигрыватель 105 компакт-дисков (CD), проигрыватель 110 цифровых универсальных дисков (DVD), аудио/видеоресивер 115, телевизор 120, персональный мультимедиа-проигрыватель 125, колонки 122, микрофон 123 и/или видеокамера 124. Программируемый мультимедиа-контроллер может также быть соединен с телефонным оборудованием, таким как телефонная сеть 130 и телефонные трубки 132. Телефонная сеть 130 может представлять собой телефонную сеть общего пользования (publicly switched telephone network, PSTN), цифровую сеть комплексного обслуживания (Integrated Services Digital Network, ISDN) или другую систему связи.
Кроме того, программируемый мультимедиа-контроллер может взаимодействовать с разнообразными системами 135 освещения и/или домашней автоматизации. Эти устройства могут работать по протоколу Х10, разработанному pico Electronics, протоколу INSTEON™, разработанному SmartHome, Inc, стандарту CEBus, контролируемому Промышленным советом CEBus, или другому известному протоколу домашней автоматизации или управления. Аналогичным образом, контроллер может быть связан с устройствами 137 на основе моторов и/или реле, которые могут включать в себя, например, систему отопления, вентиляции и кондиционирования воздуха (heating, ventilation and air conditioning, HVAC), дренажную систему, систему автоматического затенения или жалюзи, электронный дверной замок и другие типы устройств.
Мультимедиа-контроллер подключается к компьютерной сети, такой как Интернет 140. Кроме того, он может быть соединен с персональным компьютером (personal computer, PC) 145, системой 150 видеоигр, домашнего оборудования 165 записи и другими устройствами. Далее, может быть предусмотрен один или несколько пультов 170 дистанционного управления, предназначенных для управления функциями контроллера и/или управления устройствами, связанными с контроллером. Такие пульты дистанционного управления могут связываться с контроллером по проводному сетевому соединению, инфракрасному соединению, радиочастотному каналу, каналу Bluetooth™, каналу ZigBee™ или другому подходящему каналу передачи данных.
В дополнение к обеспечению взаимодействия с широким кругом устройств, программируемый мультимедиа-контроллер может комбинировать, синтезировать и обрабатывать другими способами различные типы данных и за счет этого поддерживать реализацию интегрированного мультимедийного решения для пользователя. Более подробное описание реализуемых различных новых функций и возможностей содержится в документе с последовательным номером 11/314,112, имеющем название ПРОГРАММИРУЕМЫЙ МУЛЬТИМЕДИА-КОНТРОЛЛЕР С ПРОГРАММИРУЕМЫМИ ФУНКЦИЯМИ, автор Роберт П. Мадонна и др., включенном в настоящий документ посредством ссылок.
В целях облегчения вышеописанных процессов соединения и обработки программируемый мультимедиа-контроллер 100 может иметь модульную конструкцию. Например, в одном варианте осуществления программируемый мультимедиа-контроллер 100 имеет в своем составе двенадцать отдельных модулей ввода и вывода, каждый из которых имеет набор портов подключения. Модули ввода и вывода вставляются в разъемы или модульные отсеки программируемого мультимедиа-контроллера 100. Модули соединяются с общей платой, которая обеспечивает подключение к остальной части системы. Применение модульной конструкции позволяет пользователю выбирать конкретные модули по своим потребностям, и система может быть адаптирована к конкретной сфере применения. Кроме того, может быть снижена стоимость начальной покупки за счет того, что пользователь может купить систему в базовой конфигурации с ограниченными возможностями и затем расширять систему путем покупки дополнительных модулей. Ниже описывается несколько примеров модулей со ссылками на фиг.4-10, 12 и 13. Из описания видно, что может использоваться множество разнообразных дополнительных модулей, и, соответственно, данное описание может относиться и к другим возможным конфигурациям. Кроме того, из описания видно, что могут использоваться несколько программируемых мультимедиа-контроллеров, которые после соединения образуют большую систему; таким образом, модульное решение реализуется на уровне контроллеров. Подробные сведения относительно такой взаимосвязи и расширения приводятся далее со ссылками на фиг.18 и 19.
На фиг.2 приведена блок-схема аппаратной архитектуры высокого уровня программируемого мультимедиа-контроллера. Представленные различные компоненты могут размещаться на "системной плате" контроллера или на нескольких платах, связанных с основной платой (не показаны). Микроконтроллер 210 управляет функционированием системы в целом. В примерном варианте осуществления микроконтроллер представляет собой 32-битный микроконтроллер модели MCF5234, поставляемый Freescale Semiconductor Inc. Микроконтроллер 210 соединен с аудиокоммутатором 215 и видеокоммутатором 220 по шине 218. Аудиокоммутатор 215 и видеокоммутатор 220 предпочтительно представляют собой матричные коммутаторы, обеспечивающие одновременную коммутацию множества соединений. С другой стороны, может использоваться множество других типов коммутаторов, обеспечивающих коммутацию цифровых сигналов, например коммутаторы TDM (Time Division Multiplexing, мультиплексирование по времени). Более подробное описание этих коммутаторов приведено далее со ссылками на фиг.3 и фиг.11.
Общая плата 235 соединяет коммутаторы и другие устройства с разнообразными модулями ввода и вывода, такими как модули 600 ввода цифрового видео с HDMI, модули 1000 вывода видео с HDMI, модули 400 ввода цифрового звука и модули 900 вывода цифрового звука. Общая плата 235 также подключается к Ethernet-коммутатору 230, который выполняет коммутацию сигналов Ethernet 10BaseT, 100BaseT или Gigabit Ethernet. Ethernet-коммутатор 230 соединяет Ethernet-порты 232 и подсистему 240 обработки с микроконтроллером 210. В одном варианте осуществления подсистема 240 обработки включает в себя множество универсальных персональных компьютеров малого форм-фактора, которые обеспечивают функционирование с избыточностью и/или распределением нагрузки. В некоторых вариантах осуществления подсистема 240 обработки может содержать одно или несколько устройств хранения, внешних по отношению к персональным компьютерам и предназначенных для расширения емкости устройств хранения, например для хранения цифрового мультимедиа-контента. Более подробное описание различных вариантов осуществления подсистемы 240 обработки данных приведено далее со ссылками на фиг.14-16.
Далее, используется набор USB-портов 242 (Universal Serial Bus, универсальная последовательная шина), подключаемых к USB-концентратору 243 для соединения с подсистемой 240 обработки. Кроме того, к USB-концентратору 243 может быть подключен интерфейс 225 карт памяти. Этот интерфейс поддерживает один или несколько распространенных форматов карт памяти, например карты CompactFlash™, карты Memory Stick™, карты Secure Digital™ (SD) и другие форматы. Для коммутации USB-соединений между различными обрабатывающими компонентами, присутствие которых возможно в системе, используется USB-коммутатор 244. Аналогичным образом используется набор портов 246 IEEE 1394 (FireWire™), подключаемых к концентратору 247 IEEE 1394 и к коммутатору 248 IEEE 1394.
Далее, микроконтроллер 210 соединяется со схемой 250 распределения последовательного интерфейса периферии (Serial Peripheral Interface, SPI) и схемы связи интегральных микросхем (Inter-lntegrated Circuit, pc), которая реализует последовательный интерфейс передачи данных для устройств с относительно низкой скоростью передачи данных. Контроллер 250 SPI/I2C подключается к разъему общей платы 235 и, таким образом, передает команды управления от микроконтроллера 210 на модули и другие устройства в программируемом мультимедиа-контроллере 100. Другие соединения контроллера 250 SPI/I2C предназначены для подключения таких устройств, как контроллер 251 вентилятора, температурный датчик 252 и схема 253 управления питанием, которые контролируют тепловые характеристики системы и предотвращают перегревание.
Далее, микроконтроллер 210 соединяется с интерфейсом 260 передачи данных по инфракрасному каналу (Infra-Red, IR), интерфейсом 265 RS232 и радиочастотным интерфейсом 267, обеспечивающими связь с внешними устройствами. Такая взаимосвязь позволяет программируемому мультимедиа-контроллеру 100 управлять внешними устройствами. Кроме того, эти интерфейсы могут принимать сигналы управления, которые влияют на работу непосредственно программируемого мультимедиа-контроллера. Очевидно, что для связи мультимедиа-контроллера с другими устройствами могут использоваться различные интерфейсы, в том числе WI-FI, Bluetooth™, ZigBee™ и другие проводные и беспроводные интерфейсы. Более подробное описание таких интерфейсов приведено ниже со ссылками на фиг.17а и фиг.17b.
Далее, для подключения одной или нескольких систем видеоигр, видеокамер, компьютеров, караоке-устройств или других устройств применяется дополнительный порт 700 аудио/видеосигналов. Для соединения с телефонной сетью общего пользования или с частной сетью, а также телефонными трубками применяется телефонный интерфейс 270. Далее, используется интерфейс 275 управления устройствами, предназначенный для взаимодействия с аппаратурой освещения, домашней автоматизации и устройствами на основе моторов и/или реле. Как более подробно описано ниже, предусматривается порт 280 расширения, предназначенный для соединения нескольких программируемых мультимедиа-контроллеров с целью формирования расширенной системы. Наконец, дисплей 1150 передней панели позволяет отображать информацию о состоянии, конфигурацию и/или другую информацию для пользователя. В одном варианте осуществления на панель могут выводиться видеоданные, поступающие от любого входного источника, связанного с системой, что позволяет выводить видеосодержание на дисплей для предварительного просмотра. В другом варианте осуществления дисплей 1150 передней панели имеет сенсорный экран, и пользователь может указывать варианты выбора путем выбора значков на экране.
Маршруты коммутации аудиосигналов
На фиг.3 приведена блок-схема аудиокоммутатора 215, связанного с множеством модулей ввода и вывода в примерном варианте осуществления программируемого мультимедиа-контроллера 100. Аудиокоммутатор 215 предпочтительно представляет собой полевую программируемую вентильную матрицу (Field Programmable Gate Array, FPGA), такую как полевая программируемая вентильная матрица VIRTEX-II Pro, модель XC2VPS-6FF672C производства Xilinx, Inc. В альтернативном варианте аудиокоммутатор 215 может представлять собой другую интегральную схему, доступную в продаже и обеспечивающую одновременную коммутацию множества сигналов. Аудиокоммутатор 215 имеет конфигурацию, позволяющую принимать множество входных сигналов от входных модулей и коммутировать эти входные сигналы на множество выходов, связанных с модулями вывода и/или другими устройствами. Коммутация между входами и выходами может выполняться изолированно, т.е. между конкретным входом и конкретным выходом, или по всему модулю, т.е. сигналы с группы входов от выбранного модуля будут подаваться на группу выходов, связанных с другим модулем.
Перед подачей в аудиокоммутатор 215 аудиосигналы преобразуются в общие форматы аудиосигналов. Общий формат позволяет коммутировать любой вход с любым выходом. Например, все аудиосигналы могут преобразовываться в распространенный формат S/PDIF (Sony/Philips Digital Interconnect Format, формат цифровых соединений Sony/Philips). В альтернативном варианте все аудиосигналы могут преобразовываться в формат Inter-IC Sound (I2C). Специалисту в данной области техники будет ясно, что может использоваться широкое разнообразие других форматов, и, соответственно, настоящее описание следует рассматривать как пример. Аналогичным образом, могут использоваться различные комбинации нескольких предопределенных форматов аудиосигналов. В примерном варианте осуществления настоящего изобретения аудиосигналы с импульсно-кодовой модуляцией (pulse code modulated, PCM) передаются в форме сигналов I2S, в то время как аудиосигналы с кодированием (отличные от PCM) передаются в форме сигналов SPDIF. Конфигурация аудиокоммутатора 215 позволяет коммутировать оба эти формата сигналов с применением отдельных маршрутов 216 I2S и маршрутов 218 SPDIF.
В одном варианте осуществления сигналы I2S могут использоваться для транспортировки аудиосигналов нестандартных форматов с применением методики пустых кадров. Модули ввода могут подавать аудиосигналы на один или несколько асинхронных преобразователей частоты дискретизации, такие как преобразователи Cirrus Logic модели CS8421, которые поддерживают вставку пустых кадров между аудиокадрами или избыточную дискретизацию поступающих аудиоданных. За счет этого сигналы с нестандартной скоростью потока данных могут преобразовываться для приведения к предопределенной скорости потока данных, например 192000 выборок в секунду. Одновременно с аудиоданными на модули вывода может коммутироваться независимый тактовый сигнал, указывающий на то, какие кадры содержат непосредственно аудиоданные, а какие являются пустыми. В модулях вывода тактовый сигнал используется для отделения аудиоданных от пустых кадров и воспроизведения аудиосодержания с правильной скоростью. Таким образом, аудиокоммутатор 215 может поддерживать обработку различных нестандартных скоростей потоков аудиоданных при минимальной потребности в дополнительных схемах.
Согласно примерному варианту осуществления, аудиокоммутатор 215 связан с несколькими входными модулями, такими как модуль 400 ввода цифрового аудиосигнала, модуль 500 ввода аналогового аудиосигнала, модуль 600 ввода цифрового видеосигнала с высококачественным мультимедиа-интерфейсом (HDMI) и порт 700 видеоигр. Аналогичным образом, аудиокоммутатор 215 связан с несколькими модулям вывода, такими как модуль 800 вывода аналогового аудиосигнала, модуль 900 вывода цифрового аудиосигнала и модуль 1000 вывода цифрового видеосигнала с HDMI 1000. Подробное описание этих модулей приводится далее со ссылками на фиг.4-10. Кроме того, с коммутатором связан модуль 380 беспроводного ввода/вывода аудиосигнала. В одном варианте осуществления модуль 380 беспроводного ввода/вывода аудиосигнала имеет множество радиочастотных приемопередатчиков, работающих в диапазоне ISM 2.4 ГГц, множество типов которых имеется на рынке. Такие приемопередатчики могут передавать и принимать аудиопотоки скоростью до 1.54 МБит/с на каждом беспроводном канале передачи данных и, таким образом, позволяют обеспечить взаимосвязь с удаленными аудиоустройствами, в которых используются потоки данных аудиосодержания высокого качества. Модуль 380 беспроводного ввода/вывода аудиосигнала может также использоваться для передачи и приема информации управления, что более подробно описано далее со ссылками на фиг.17а и 17b.
Дополнительная взаимосвязь аудиоканалов с подсистемой 240 обработки реализуется посредством одного или нескольких соединений IEEE 1394 и соответствующих схем. Функциональность физического сетевого уровня базируется на паре кабельных приемопередатчиков/арбитров 320, 321 IEEE 1394 физического уровня, таких как приемопередатчик/арбитр модели TSB41AB1 производства Texas Instruments Inc. Далее данные передаются на аудиоконтроллеры 330, 331 FireWire, например контроллеры Oxford Semiconductor Inc. модели OXFW971. Выходные сигналы аудиоконтроллеров 330, 331 FireWire могут подаваться на приемопередатчики S/PDIF (не показаны), такие как приемопередатчики АТК Inc. модели АК4117, для преобразования в сигналы S/PDIF, или на преобразователи 340, 341 частоты дискретизации, такие как асинхронные преобразователи частоты дискретизации модели CS8421 производства Cirrus Logic Inc.
Далее, с аудиокоммутатором 215 связан один или несколько модулей 310, 315 декодирования видео. В модулях 310, 315 декодирования видео могут использоваться специализированные схемы декодирования, позволяющие снять нагрузку, обусловленную задачами декодирования видео, с подсистемы 240 обработки и, таким образом, повысить производительность системы.
Кроме того, согласно примерному варианту осуществления, аудиокоммутатор 215 соединен с телефонным интерфейсом 350. Такой интерфейс включает в себя схемы подключения удаленной АТС (Foreign eXchange Office, FXO) и удаленного абонента (Foreign eXchange Subscriber, FXS) для подключения к телефонной сети общего пользования (ТфОП). Этот интерфейс может также содержать схему для прямого подключения телефонных трубок к системе.
Все модули связаны с системными часами, функционирующими на основе встроенной схемы 360 формирователя тактовых импульсов. Эта схема с кристаллическим осциллятором 370 (XTAL) генерирует локальный тактовый сигнал, обеспечивающий синхронную работу функций коммутации в системе.
На фиг.4 приведена блок-схема примерного модуля 400 ввода цифрового аудиосигнала. Цифровой аудиосигнал принимается модулем через цифровые соединения 410 RCA, поддерживающие передачу сигналов S/PDIF, оптические соединения 420, поддерживающие TOSLINK™ (зарегистрированная торговая марка корпорации Toshiba), и соединения 430 XLR, обычно используемые в профессиональных аудиоприложениях и поддерживающие стандарт цифровых аудиосигналов AES/EBU (Audio Engineering Society/European Broadcasting Union, общество разработки аудио/Европейский союз вещания). Каждое соединение может принимать сигналы с частотами дискретизации 32 кГц, 44.1 кГц, 88,2 кГц, 96 кГц, 176 кГц, 192 кГц или другими частотами. Далее, аудиосигналы могут иметь тип РСМ (импульсно-кодовая модуляция) или отличный от РСМ. Такая гибкость позволяет обеспечивать поддержку общих схем кодирования, таких как Dolby Digital, DTS, MPEG, THX и других форматов. В одном варианте осуществления поступающие цифровые аудиосигналы вначале преобразуются в уровни транзисторно-транзисторной логики (Transistor-Transistor Logic, TTL) схемой преобразователя уровней (не показана). В другом варианте сигналы могут преобразовываться в уровни логики низковольтных дифференциальных сигналов (Low Voltage Differential Signaling, LVDS).
Восемь приемников S/PDIF, таких как приемники цифровых аудиосигналов Cirrus Logic модели CS8415, могут принимать аудиосигналы и выводить их на выходы S/PDIF. Аналогичным образом, 8 типовых преобразователей 450 частоты дискретизации, таких как асинхронные преобразователи частоты дискретизации модели CS8421 производства Cirrus Logic Inc., могут выводить аудиоданные на выходы I2S, соединенные с аудиокоммутатором 215.
На фиг.5 приведена блок-схема примерного модуля 500 ввода аналогового аудиосигнала. В примерном варианте осуществления аналоговый аудиосигнал принимается через разъемы 510 RCA.
В альтернативном варианте аудиосигнал может приниматься через разъемы XLR, поддерживающие формат XLR, в настоящее время распространенный в профессиональных аудиокабельных соединениях. Аналоговые аудиосигналы проходят через один или несколько операционных усилителей 520 для нормализации, после этого они подаются на многоканальные аналого-цифровые преобразователи 530, такие как 8-канальный аналого-цифровой преобразователь модели CS5368 производства Cirrus Logic Inc. Многоканальные аналого-цифровые преобразователи 530 осуществляют дискретизацию аналоговых аудиосигналов и передают последовательные потоки данных I2S в аудиокоммутатор 215.
На фиг.6 приведена блок-схема примерного модуля 600 ввода цифрового видеосигнала с высококачественным мультимедиа-интерфейсом (HDMI). На данном этапе рассматриваются вопросы работы этого модуля с аудиосигналами, работа с видеосигналами подробно описывается далее. Модуль 600 ввода цифрового видеосигнала с HMDI реализует один или несколько интерфейсов цифровых аудио/видеосигналов, в примерном варианте осуществления рассматриваются четыре цифровых интерфейса 610, 620, 630, 640, которые принимают многоканальный цифровой аудиосигнал и высококачественный видеосигнал через один разъем. Таким образом, HDMI сокращает потребность в кабелях и может с преимуществом использоваться в устройствах-приставках, DVD-проигрывателях, аудио/видеоресиверах, цифровых телевизорах и других устройствах. Сигналы HDMI принимаются и декомпрессируются приемниками 615, 625, 635, 645 HDMI, например приемниками HDMI модели Sil9031 производства Silicon Image Inc. В примерном варианте осуществления приемники HDMI выводят сигнал S/PDIF в аудиокоммутатор 215, а также соединяются с преобразователями 617, 627, 637, 647 частоты дискретизации, которые выводят дополнительные потоки I2S в аудиокоммутатор 215.
На фиг.7 приведена блок-схема примерного порта 700 видеоигр. Порт может иметь соединения, расположенные на передней панели программируемого мультимедиа-контроллера 100, позволяющие легко подключать и отключать системы видеоигр, такие как Xbox™, Playstation™ или другие популярные системы. На данном этапе рассматриваются вопросы работы этого модуля с аудиосигналами, работа с видеосигналами подробно описывается далее. Порт 700 видеоигр имеет разъем 740 HDMI, связанный с приемником 750 HD3VD, который подает сигнал S/PDIF, а также сигналы I2S, на аудиокоммутатор 215. Далее, порт 700 видеоигр имеет разъемы 770 RCA для приема аналоговых аудиосигналов. Аналоговый аудиосигнал преобразуется в цифровой аудиосигнал аналого-цифровым преобразователем 780. Поток цифрового аудиосигнала, такой как поток S/PDIF, может также приниматься через разъем 790 RCA и передаваться на аудиокоммутатор 215.
На фиг.8 приведена блок-схема образцового модуля 800 вывода цифрового аудиосигнала. В одном варианте осуществления модуль 800 вывода цифрового аудиосигнала принимает от аудиокоммутатора 215 входной сигнал S/PDIF, а также входные сигналы I2S. Такие входные сигналы направляются в схемы 840 буферизации и затем на плату 850 цифровой обработки аудиосигналов (digital signal processing, DSP), например плату модели DAE-7 производства Momentum Data Systems или другую плату DSP. Плата 850 DSP включает в себя процессор VLIW, который обеспечивает вычислительную мощность, необходимую для декодирования форматов аудиосигналов объемного звука и выполнения обработки звукового поля. Выходной сигнал с аудиоплаты 850 DSP в формате I2S передается на передатчик 860 цифрового аудиосигнала. Передатчик предпочтительно поддерживает различные популярные стандарты цифровых аудиосигналов, такие как S/PDIF и AES/EBU. В одном варианте осуществления передатчик 860 цифрового аудиосигнала представляет собой передатчик модели АК 4101 производства АКМ Semiconductor Inc и поддерживает восемь каналов цифрового аудиосигнала. Выводы передатчика 860 цифрового аудиосигнала связаны с комбинацией цифровых соединений 870 RCA, поддерживающих передачу сигналов S/PDIF, цифровое оптическое соединение 880 TOSLINK™ и соединение 890 XLR, поддерживающее AES/EBU.
На фиг.9 приведена блок-схема примерного модуля 900 вывода аналогового аудиосигнала. Согласно примерному варианту осуществления, модуль 900 вывода аналогового аудиосигнала принимает входной сигнал S/PDIF от аудиокоммутатора 215, а также входные сигналы I2S. Эти входные сигналы направляются в схемы 940 буферизации, а затем - на аудиоплату 950 DSP. Аудиоплата 950 DSP может представлять собой, например, плату модели DAE-7 производства Momentum Data Systems. Набор выходов аудиоплаты 950 DSP соединяется с линиями S/PDIF для обратной передачи в аудиокоммутатор 215. Например, декодированные аудиосигналы могут передаваться обратно в коммутатор, откуда они направляются в другой модуль вывода аудиосигнала для вывода. Другие выводы аудиоплаты 950 DSP соединяются с цифроаналоговыми стереопреобразователями 960, которые обеспечивают вывод аналоговых сигналов на устройства. В одном варианте осуществления эти выходы представляют собой выходы типа RCA с аналоговыми разъемами RCA. Модуль 900 вывода аналогового аудиосигнала может быть сконфигурирован программным образом для обеспечения поддержки различных схем объемного звука. Например, аналоговые выводы могут быть сконфигурированы как две отдельные зоны объемного звука 7.1. Другие конфигурации могут быть следующими: две отдельных зоны объемного звука 5.1 и четыре зоны стереозвука, одна зона объемного звука 7.1 и четыре зоны стереозвука, восемь зон стереозвука и др. Зонирование в значительной степени может обеспечиваться программным конфигурированием, поэтому систему можно легко повторно конфигурировать согласно изменяющимся требованиям пользователя.
На фиг.10 приведена блок-схема примерного модуля 1000 вывода видеосигнала с HMDI. На данном этапе рассматриваются вопросы работы этого модуля с аудиосигналами, работа с видеосигналами подробно описывается далее. Вход S/PDIF и множество входов I2S связаны с передатчиками 1010, 1015 HDMI, которые выводят комбинированные сигналы многоканального аудио и цифрового видео высокой четкости на порты 1020, 1025 HDMI. Таким образом, создается аудио/видеосоединение с совместимыми внешними устройствами по одному кабелю.
Маршруты коммутации видеосигналов
На фиг.11 приведена блок-схема видеокоммутатора 220, соединенного с множеством модулей ввода и вывода, в соответствии с примерным вариантом осуществления настоящего изобретения. Видеокоммутатор 220 обеспечивает коммутацию цифрового видеосигнала в цветовом пространстве красный/зеленый/синий (Red/Green/Blue, RGB) и/или яркость, цветность: синий, цветность: красный (Luminance, Chroma: Blue, Chroma: Red, YCbCr), предпочтительно без зависимости от разрешения. Конфигурация такого коммутатора обеспечивает прием множества входных сигналов от входных модулей видеосигналов и коммутацию этих входов на множество выходов, связанных с модулями вывода видеосигналов и/или другими компонентами. Коммутация между входами и выходами может выполняться изолированно, т.е. конкретный вход будет соединяться с конкретным выходом, или по всему модулю, т.е. сигналы с группы линий от выбранного модуля будут коммутироваться на несколько линий другого модуля.
Перед передачей на видеокоммутатор 220 видеосигнал предпочтительно преобразуется в общий формат видеосигналов. Общий формат позволяет коммутировать любой вход на любой выход. Например, перед подачей на коммутатор все видеосигналы могут преобразовываться в формат последовательного цифрового видеосигнала или в формат параллельного цифрового видеосигнала. В одном варианте осуществления последовательные цифровые видеосигналы могут представлять собой сигналы последовательного цифрового интерфейса (Serial Digital Interface, SDI). В другом варианте видеокоммутатор 220 может быть сконфигурирован для коммутации комбинации различных форматов видеосигналов. В примерном варианте осуществления на видеокоммутаторе сконфигурирована коммутация последовательных цифровых видеосигналов по маршрутам 1110 коммутации последовательного сигнала и коммутация параллельных видеосигналов по маршрутам 1120 коммутации параллельного сигнала. Видеоданные могут быть стандартной четкости (standard definition, SD) (480i@30,480p@60 и т.д.), высокой четкости (high definition, HD) (720p@60,1080i@60 и т.д.) или нестандартными (например, VGA, SVGA, XVGA и т.д.), при этом в поток видеоданных может быть внедрена информация с пустыми кадрами или кадрами синхронизации. Пиксельная синхронизация может независимо коммутироваться на модуль вывода для целей полного восстановления как стандартных, так и и нестандартных видеосигналов.
Согласно примерному варианту осуществления, видеокоммутатор 220 связан с несколькими модулями ввода, такими как модуль 600 ввода цифрового видеосигнала с HDMI, модуль 1200 ввода аналогового видеосигнала, модуль 1300 ввода комбинированного аналогового и цифрового видеосигнала. Далее, видеокоммутатор 220 связан с подсистемой 240 обработки данных. В примерном варианте осуществления подсистема 240 обработки данных выдает сигналы цифрового интерфейса визуализации (Digital Visual Interface, DVI), формат RGB, обычно используемый в компьютерных мониторах, например плоскопанельных мониторах на жидких кристаллах (Liquid Crystal Displays, LCDs). Сигналы DVI могут преобразовываться приемниками 1130, 1135 DVI в сигналы YCbCr до поступления в видеокоммутатор 220 или могут быть направлены в коммутатор в формате DVI. Подсистема 240 обработки данных может также выдавать сжатый видеосигнал, например видеосигнал в кодировке MPEG (Moving Picture Experts Group, формат группы экспертов по движущимся изображениям), по одному или нескольким подключениям Ethernet. Очевидно, что помимо MPEG могут использоваться другие стандарты кодирования, и, соответственно, настоящее описание следует рассматривать только как пример. В примерном варианте осуществления коммутация сжатых видеоданных, поступающих от подсистемы 240 обработки, выполняется коммутатором 230 Ethernet.
Видеокоммутатор 220 в сочетании с коммутатором 230 Ethernet обеспечивают передачу видеопотоков на модули 1000 вывода, а также на переднюю панель 1150. Модули вывода 1000 принимают последовательные цифровые видеосигналы от видеокоммутатора 230 или сжатые видеосигналы от коммутатора 230 Ethernet и преобразуют эти сигналы в форматы, совместимые с видеодисплеями и другим оборудованием, например в формат HDMI. Аналогичным образом, экран 1150 передней панели принимает различные форматы видеосигналов и преобразует эти сигналы по мере необходимости для их отображения на экране 1160 LCD-монитора.
На фиг.6 был показан модуль 600 цифрового видеосигнала с HDMI, где происходит прием цифровых видеосигналов от внешних устройств через множество разъемов 610, 620, 630, 640 HDMI. Сигналы HDMI передаются на приемники 615, 625, 635, 645 HDMI, которые выводят последовательные цифровые видеосигналы на видеокоммутатор 220.
На фиг.12 приведена блок-схема примерного модуля 1200 ввода аналогового видеосигнала. Модуль 1200 ввода аналогового видеосигнала в примерном варианте осуществления имеет 4 банка видеовходов 1210, 1220, 1230, 1240, каждый из которых состоит из 3-х разъемов RCA и разъема S-видео. Разъемы RCA могут принимать композитные или компонентные видеосигналы с четкостью SD или HD. Видеосигналы передаются в многоформатные декодеры видеосигналов и аналого-цифровые преобразователи 1215, 1225, 1235, 1245, такие как преобразователи модели AD7403 производства Analog Devices Inc. Многоформатные декодеры видеосигналов и аналого-цифровые преобразователи 1215, 1225, 1235, 1245 поддерживают различные распространенные видеосигналы, такие как 525i, 625i, 525p, 625p, 720p, 1080i, 1250i и др. Выходные сигналы этих устройств в формате последовательных цифровых видеосигналов передаются на матричный видеокоммутатор 220 для коммутации на другие модули.
На фиг.13 приведена блок-схема примерного комбинированного модуля 1300 ввода аналогового и цифрового видеосигнала. Комбинированный модуль целесообразно применять в малых системах, поскольку он позволяет пользователю получить аналоговые и цифровые соединения с применением небольшого числа модулей. Например, система базового уровня может быть создана при наличии только комбинированного модуля 1300 ввода аналогового и цифрового видеосигнала и модуля 1000 вывода видеосигнала. Наличие лишь указанных двух модулей уже обеспечивает наличие достаточных функций коммутации видеосигналов в системе. Согласно примерному варианту осуществления, комбинированный модуль 1300 ввода аналогового и цифрового видеосигнала имеет разъемы HDMI 1310, 1320, соединенные с приемниками 1315, 1325 HDMI, которые подают последовательные цифровые видеосигналы на видеокоммутатор 220. Кроме того, имеется несколько наборов входов 1330, 1340 аналогового видеосигнала, каждый из которых имеет 3 разъема RCA и разъем S-видео, позволяющие принимать видеосигнал по композитному соединению, компонентному соединению и соединению S-video. Аналогично описанному ранее модулю 600 ввода цифрового видеосигнала с HDMI, эти сигналы передаются на многоформатные декодеры видеосигналов и аналого-цифровые преобразователи 1350, 1360, преобразователи модели AD7403 производства Analog Devices Inc., и преобразуются в последовательные цифровые видеосигналы для передачи на видеокоммутатор 220.
Возвращаясь к фиг.7, который является блок-схемой примерного дополнительного порта 700 аудио/видеосигналов, следует отметить, что обеспечиваются разнообразные подключения по видеоканалу к системам видеоигр, видеокамерам, компьютерам, караоке-машинам и/или другим устройствам. Согласно примерному варианту осуществления, имеется банк 710 аналоговых видеовходов с 3-мя разъемами RCA и разъемом S-видео, позволяющий принимать композитные, компонентные сигналы и сигналы S-Video. Видеосигналы проходят на мультиформатный видеодекодер и аналого-цифровой преобразователь 730 для преобразования в последовательные цифровые видеосигналы, которые могут быть переданы на видеокоммутатор 220. Дополнительное подключение к порту 700 видеоигр обеспечивается через разъем 1340 HDMI, соединенный с приемником 1350 HDMI.
Возвращаясь к фиг.10, которая является блок-схемой модуля 1000 вывода видеосигналов согласно примерному варианту осуществления программируемого мультимедиа-контроллера 100, можно отметить следующее. Видеосигналы могут приниматься в различных форматах, в том числе в формате последовательного цифрового видео, параллельного цифрового видео или сжатого видео, передаваемого по Ethernet. Сжатое видео декодируется видеодекодером/кодером 1030 и затем передается на видеопроцессору 1040. Последовательные цифровые видеосигналы принимаются непосредственно видеопроцессором 1040, в котором они проходят деинтерлейсинг, масштабирование, комбинирование, преобразование частоты кадров, обработку "картинка-в-картинке" и другие функции обработки видео. Далее видеопроцессор 1040 масштабирует видеоизображения до разрешения, совместимого с дисплеем, на который они должны выводиться. Кроме того, параллельные видеосигналы буферизуются интерфейсами 1050, 1055 буфера изображений, соединенными с двумя буферными модулями 1060, 1065 памяти, за счет которых они синхронизируются с тактированием выходного сигнала видеопроцессора. Видеосигналы из указанных буферов изображений объединяются и смешиваются с выходным видеосигналом видеопроцессора в видеосмесителе 1070. Выходы видеосмесителя 1070 соединяются с передатчиками 1010, 1015 HDMI, которые выводят объединенные многоканальные аудиосигналы и цифровые видеосигналы высокой четкости на порты 1020, 1025 HDMI. К аналого-цифровым преобразователям 1080, 1085 подключены дополнительные выходы, которые реализуют аналоговые видеовыходы для банков 1090, 1095 видеовыходов, в том числе 3 разъема RCA и разъем S-Video.
Система, сконфигурированная таким образом, может выполнять множество операций, дающих значительное преимущество. Например, видеосигнал от любого источника может быть направлен видеокоммутатором 220 на видеодекодер/кодер 1030 для сжатия и выводиться в форме сжатого видео. Такое сжатое видео может быть сохранено в подсистеме 240 обработки для воспроизведения впоследствии (т.е. со сдвигом во времени) или перемещено на сменный носитель, такой как CDR или DVDR. Таким образом, можно реализовать функции цифрового видеомагнитофона (digital video recorder, DVR) и персонального видеомагнитофона (personal video recorder, PVR), позволяющие пользователю записывать и воспроизводить телепрограммы или другое содержание.
Далее, система может выполнять функции наложения видеоизображений, позволяющие накладывать динамическое видеоизображение, графические символы и/или текст, поступающие от подсистемы обработки, на различные компоненты входных сигналов модулей ввода. Функция экранного отображения (on-screen-display, OSD) в видеосистемах является тривиальной, однако обычные функции в общем случае ограничиваются наложением графических или текстовых данных в конкретных предопределенных прямоугольных областях видеодисплея. Настоящее изобретение позволяет выполнять наложение видео, графических символов и/или текста в любом месте видеодисплея по отдельным пикселям, а также по близким пикселям. Поскольку наложение строится в таком детальном масштабе, возможно наложение фактически любой формы. Далее, местоположение наложенного изображения может конфигурироваться динамически. Так, область дисплея, в которой выводится накладываемое изображение, может описываться по одному кадру, что позволяет, например, создавать "движущееся" наложенное изображение. Кроме того, логика смешивания и взаимного наложения может позволять накладывать видео, графические символы и/или текст с отображением в полупрозрачном виде или с эффектом появления/исчезновения изображения.
Для реализации вышеупомянутых описанных возможностей система использует для своих нужд большое количество цветов, которые могут быть представлены цифровыми видеосигналами. Например, цифровые видеосигналы, закодированные в 24-битных цветах, могут представлять приблизительно 16.7 миллиона уникальных цветов. В одном варианте осуществления настоящего изобретения видеопроцессор 1040 изменяет цвета, соответствующие пикселям в той области кадра, где требуется наложение, на предопределенный цвет. Предопределенный цвет может быть произвольно выбранным цветом, предпочтительно это цвет, который в типичном видео встречается с частотой реже средней. Видеосмеситель 1070 сконфигурирован для обнаружения появления предопределенного цвета, и в каждом пикселе видеокадра, содержащем такой цвет, выполняется подстановка видеоданных из другого видеопотока. Видеоданные из другого видеопотока могут представлять собой динамическое видео, статические изображения и/или текст. Например, область, имеющая предопределенный установленный цвет, может быть заменена на наложенное изображение с динамическим видео, поступающим от подсистемы 240 обработки и передаваемым через параллельные цифровые видеосигналы. Аналогичным образом в этой области может быть подставлено текстовое поле, сгенерированное подсистемой 240 обработки.
Путем выбора различных пикселей, заменяемых на предопределенный цвет, можно легко менять область видеодисплея, на которую будет производиться наложение. За счет этого накладываемые образы могут динамически перемещаться по экрану или могут выводиться меню любой формы, динамически расширяемые в другие области экрана при выборе пунктов.
В общем случае, ввиду большого количества цветов, которые могут представляться видеосигналами, любые "естественные" случаи появления пикселей предопределенного цвета встречаются относительно редко, поэтому любое непредусмотренное наложение видео, возникающее из-за таких пикселей, не будет достаточно заметно для зрителя. Согласно альтернативному варианту осуществления, перед заменой избранных пикселей кадра на предопределенный цвет видеопроцессор 1040 может просканировать кадр для обнаружения случаев появления такого цвета и изменить такие пиксели на почти идентичный оттенок, например, путем добавления одного бита. Таким образом, можно почти полностью предотвратить ошибки наложения видеоизображений.
В еще одном варианте осуществления видеопроцессор 1040 может изменять пиксели в указанной области для наложения предопределенного узора цветов. Например, смежные пиксели могут заменяться на повторяющийся узор из двух или трех пикселей, где каждый из трех смежных пикселей будет иметь собственный предопределенный цвет. Поскольку вероятность появления трех предопределенных цветов в смежных пикселях чрезвычайно низка, "естественные" случаи их появления могут быть устранены почти полностью.
Далее показывается, что может потребоваться наложение частей нескольких различных видеопотоков в каждом кадре видеодисплея. Специалисту в данной области техники будет ясно, что вышеописанная методика может быть расширена за счет выбора дополнительных предопределенных цветов с целью представления каждого накладываемого изображения и конфигурирования видеосмесителя 1070 для применения накладываемых изображений везде, где будет обнаружен каждый из этих цветов
Подсистема обработки
На фиг.14 приведена блок-схема подсистемы 240 обработки согласно примерному варианту осуществления настоящего изобретения. Подсистема 240 обработки реализует пользовательский интерфейс и другие прикладные программы для управления и реализации функциональных возможностей для программируемого мультимедиа-контроллера 100. Например, подсистема 240 обработки реализует функциональные возможности DVR, функции редактирования аудио и видео, контроль и управление средствами домашней автоматизации, управление телефонией и различные другие функции посредством программируемых сервисов. Подробности о сервисах, реализация которых возможна под управлением подсистемы 240 обработки, приведены в документе ПРОГРАММИРУЕМЫЙ МУЛЬТИМЕДИА-КОНТРОЛЛЕР С ПРОГРАММИРУЕМЫМИ ФУНКЦИЯМИ, ранее включенном в настоящий документ посредством ссылок.
Подсистема 240 обработки может включать в себя единственный компьютер или два или более компьютера, сконфигурированные для обеспечения избыточности и/или распределения нагрузки. Используемый термин "компьютер" следует понимать в широком смысле как охватывающий весь диапазон компонентов, реализующих специфичные (для определенных приложений) или универсальные функциональные возможности по обработке. Например, каждый "компьютер" может представлять собой плату центрального процессора, одноплатный компьютер (Single Board Computer, SBC), модуль обработки РС/104, обычную системную плату форм-фактора АТХ и центральный процессор, универсальный персональный компьютер малого форм-фактора, доступный в широкой продаже, и/или универсальный персональный компьютер большого форм-фактора или предназначенный для установки в стойку, доступный в широкой продаже. Соответственно, следует явно отметить, что в подсистеме 240 обработки могут с преимуществом использоваться различные другие "компьютеры", и с развитием технологий в соответствующих областях могут с преимуществом применяться новые технологии.
Согласно примерному варианту осуществления, каждый компьютер 1410, 1420 подключен к соединительной плате 1450, которая обеспечивает интерфейс подключения для портов ввода и вывода компьютера. Порты USB, IEEE 1394, Ethernet, DVI и порты питания, как и другие, подключаются через соединительную плату 1450. В других вариантах осуществления каждый компьютер 1410, 1420 может быть расположен вне домашнего мультимедиа-контроллера и соединяться с программируемым мультимедиа-контроллером по проводному сетевому соединению или беспроводному каналу, такому как канал IR, Wi-Fi и/или Bluetooth™.
Далее, каждый компьютер 1410, 1420 может быть соединен с запоминающими устройствами 1430, 1440, которые являются дополнительной емкостью, например, для хранения цифровой медиа-библиотеки. Запоминающие устройства 1430, 1440 могут представлять собой отдельные жесткие диски, RAID-массивы из нескольких жестких дисков, энергонезависимую оптическую или электромагнитную память и/или системы хранения данных других типов.
Согласно примерному варианту осуществления, подсистема 240 обработки включает в себя два универсальных персональных компьютера малого форм-фактора. Такие компьютеры предпочтительно используются без физической модификации, т.е. в том виде, в котором они имеются в широкой продаже, и остаются в своих первоначальных корпусах, с исходными компонентами и общим видом. В одном варианте осуществления два универсальных персональных компьютера малого форм-фактора представляют собой компьютеры Mac Mini™ производства Apple Computer, Inc. Размеры компьютера Mac Mini™ составляют приблизительно 2 дюйма в высоту, 6,5 дюймов в ширину и 6.5 дюймов в глубину; кроме того, он имеет удобную форму для интеграции в подсистему обработки. Компьютер Mac Mini™ имеет внутренний дисковый привод, который может использоваться совместно с запоминающими устройствами 1430, 1440 для получения расширенной емкости запоминающих устройств и/или для избыточности. Компьютер Mac Mini™ также имеет внутренний интерфейс WI-FI 1470, 1480, который может использоваться для подключения к программируемому мультимедиа-контроллеру 100 по WI-FI.
На фиг.15 изображено множество портов подключения на примерном универсальном персональном компьютере 1410 малого форм-фактора в трехмерном виде. Согласно примерному варианту осуществления, порты подключения персонального компьютера малого форм-фактора размещаются на одной панели компьютера таким образом, что компьютер может быть "включен" в соответственно установленные разъемы на соединительной плате 1450. Например, порт 1510 USB, порт 1520 IEEE 1394, порт 1530 Ethernet, порт 1540 DVI и порт питания 1550 могут соединяться с соединительной платой 1450 за счет прижима. В отсеках, в которые устанавливаются персональные компьютеры малого форм-фактора, могут быть установлены направляющие (не показаны). Такие шины позволяют "вдвигать" компьютеры в отсеки и выравнивать их с разъемами на соединительной плате 1450. В альтернативном варианте осуществления универсальные персональные компьютеры 1410,1420 малого форм-фактора связываются с соединительной платой 1450 набором коротких соединительных проводов (не показанный) к каждому интерфейсу портов компьютера. Такие провода можно легко перемещать для адаптации к различным местоположениям портов и, таким образом, применять различные компьютеры.
На фиг.16 представлена часть передней панели 1600 программируемого мультимедиа-контроллера, созданного в соответствии с примерным вариантом осуществления настоящего изобретения, и показаны два универсальных персональных компьютера 1410, 1420 малого форм-фактора, вставленные в отсеки. Передняя панель 1600 программируемого мультимедиа-контроллера имеет жидкокристаллический дисплей 1150, входы, выходы и устройства управления, такие как регуляторы и кнопки (не показаны). Согласно примерному варианту осуществления, персональные компьютеры 1410, 1420 малого форм-фактора представляют собой компьютеры Mac Mini™, непосредственно связанные с соединительной платой 1450. Передняя панель 1600 программируемого мультимедиа-контроллера может быть очерчена и/или покрашена для соответствия контуру и цвету передних поверхностей персональных компьютеров 1410, 1420 малого форм-фактора, с целью достижения требуемого вида. Кроме того, пользователю могут быть доступны медиа-приводы, такие как оптические приводы 1430, 1440.
Управление
На фиг.17а приведена блок-схема, на которой показаны модули управления, соединенные с программируемым мультимедиа-контроллером 100 согласно примерному варианту осуществления настоящего изобретения. Программируемый мультимедиа-контроллер 100 предпочтительно взаимодействует с множеством различных модулей управления и позволяет пользователю конфигурировать, управлять и выполнять другие действия с системой, состоящей из различных между собой устройств.
Согласно одному варианту осуществления, в качестве модуля дистанционного управления может использоваться мультимедиа-проигрыватель 1710, например портативный проигрыватель DVD или MPEG, DVD-проигрыватель в стойке, прикладное программное обеспечение проигрывания мультимедиа, работающее на универсальном компьютере, и/или устройство другого типа. Мультимедиа-проигрыватель 1710 загружает специальный медиа-файл, например, путем считывания файла DVD с диска DVD или другого носителя данных, такого как жесткий диск или flash-память. Указанный медиа-файл содержит пользовательский интерфейс для программируемого мультимедиа-контроллера 100. В альтернативном варианте мультимедиа-проигрыватель 1710 может получить медиа-файл с пользовательским интерфейсом от программируемого мультимедиа-контроллера 100 по проводному или беспроводному соединению. После этого пользователь может управлять системой путем выбора пунктов меню, отображаемого на мультимедиа-проигрывателе, способом, подобным выбору пунктов меню обычного DVD с кинофильмом. При выборе определенных пунктов меню мультимедиа-проигрыватель помещает в выходной сигнал, генерируемый этим мультимедиа-проигрывателем, предопределенную информацию. В одном варианте осуществления указанный выходной сигнал является выходным цифровым аудиосигналом. В другом варианте осуществления указанный выходной сигнал является выходным цифровым видеосигналом или сигналом другого типа.
Выходной сигнал может приниматься интерфейсом 1720 беспроводной передачи аудиосигнала, который передает сигнал в модуль 380 беспроводной передачи аудиосигнала в программируемом мультимедиа-контроллере 100. После этого информация, внедренная в сигнал, декодируется подсистемой обработки 240 для извлечения явных команд управления. В то время как согласно примерному варианту осуществления сигналы передаются на программируемый мультимедиа-контроллер 100 через беспроводное соединение, следует явно отметить, что могут также использоваться проводные соединения. Например, можно применить проводные соединения с модулем 400 ввода цифрового аудиосигнала или модулем 500 ввода аналогового аудиосигнала, и принимаемые таким образом сигналы будут обрабатываться подсистемой 240 обработки для извлечения специфических команд управления. Далее, можно указать, совместно с вышеописанной методикой внедрения информации управления могут использоваться устройства, отличные от проигрывателей на основе DVD. Например, сигналы с внедренной информацией управления при выборе пунктов меню может генерировать портативный МР3-проигрыватель, такой как IPOD™ производства Apple Computer Inc. Проигрыватель компакт-дисков также может генерировать внедренную информацию управления, например, при выборе пользователем определенной дорожки компакт-диска. Аналогично, система видеоигр, такая как PSP™ производства Sony Electronics Inc., может использоваться подобным способом для генерации информации управления согласно информации, вводимой пользователем. Соответственно, специалисту в данной области техники будет ясно, что вышеупомянутая описанная методика может быть легко адаптирована для использования совместно с различными потребительскими устройствами, способными отображать информацию для пользователя и генерировать сигналы в ответ на ввод информации пользователем.
В одном варианте осуществления методика управления с внедрением информации, описанная выше, представляет собой методику управления с заимствованием бита, в которой один или несколько битов каждого информационного слова выходного сигнала цифрового устройства используются для размещения внедренной информации управления. Например, мультимедиа-проигрыватель может изменять наименьший значащий бит выходного цифрового аудиосигнала для помещения информации управления, при этом остальные биты выходного сигнала остаются неизменными. Современные цифровые аудиосигналы обычно имеют дискретизацию 16 или более бит, поэтому изменение наименьшего значащего бита абсолютно незаметно для слушателя. Подробное описание методики управления с заимствованием бита приведено ниже со ссылками на фиг.17b.
В другом варианте осуществления методика управления с внедрением информации представляет собой методику управления с тональными сигналами, согласно которой персональный мультимедиа-проигрыватель или другое устройство при выборе пункта пользователем генерируют тональный аудиосигнал. Такой тональный аудиосигнал может передаваться программируемому мультимедиа-контроллеру 100 в цифровом или аналоговом формате. Далее тональный аудиосигнал декодируется программируемым мультимедиа-контроллером 100 для генерации определенной команды управления. Следует явно отметить, что возможно использование в системе множества других методик управления, и, таким образом, настоящее описание следует рассматривать как пример.
Кроме вышеописанных методик управления с внедрением информации, программируемым мультимедиа-контроллером можно также управлять через один или несколько обычных пультов 1730 дистанционного управления, генерирущих радиочастотные или инфракрасные сигналы. Такие сигналы принимаются приемопередатчиком 260 IR и конвертером 267 RF. Далее, для управления программируемым мультимедиа-контроллером 100 может использоваться карманный компьютер, ручной компьютер или другое устройство, имеющее интерфейс WI-FI стандарта IEEE 802.11, стандарта Bluetooth™, стандарта Zigbee™ или другого стандарта. Аналогичным образом, к программируемому мультимедиа-контроллеру 100 может быть подключен персональный компьютер 1750, на котором работает приложение управления, по соединению WI-FI и/или проводному соединению по порту 232 Ethernet. В одном варианте осуществления персональный компьютер 1750 снабжается интерфейсом сенсорного экрана, что позволяет пользователю выбирать операции в интерактивном режиме и управлять системой другими способами путем прикосновений.
На фиг.17b приведена блок-схема примерной методики управления с внедрением информации, в которой используется управление с заимствованием бита. Как описано выше, мультимедиа-проигрыватель или другое устройство управления может изменять один или несколько битов в цифровом выходном сигнале, например, наименьший значащий бит цифрового выходного аудиосигнала. После этого цифровой выходной аудиосигнал принимается программируемым мультимедиа-контроллером 100, например модулем 380 беспроводной передачи аудиосигнала. Далее сигнал передается в программируемую вентильную матрицу (Field Programmable Gate Array, FPGA) 1760 с управлением по заимствованному биту. Из цифрового аудиосигнала удаляется наименьший значащий бит 1768 каждого информационного слова 1765. Остающийся сигнал может передаваться в аудиокоммутатор 215 для возможного вывода на динамики, подключенные к системе. Наименьшие значащие биты принимаются модулем 1770 логики блокировочных слов, который восстанавливает управляющие командные слова из потока наименьших значащих битов. Модуль 1770 логики блокировочных слов может искать предопределенные битовые комбинации в полученных наименьших значащих битах для установки "блокировки" на границах слова. Таким образом, при обнаружении специфической предопределенной последовательности битов модуль 1770 логики блокировочных слов определяет достижение границы слова. После этого указанные биты сохраняются в буфере 1780 в качестве управляющих командных слов. Управляющие командные слова передаются в расширитель 1790 I2C и далее на микроконтроллер 210. Микроконтроллер 210 совместно с подсистемой 240 обработки выполняет действия, указанные в управляющих командных словах управления. Специалисту в данной области техники будет ясно, что в вышеописанную методику управления по заимствованному биту могут быть внесены различные модификации без отступления от существа изобретения. Например, могут использоваться другие биты выходного сигнала мультимедиа-проигрывателя, такие как два наименьших значащих бита каждого информационного слова. С другой стороны, сигнал не обязательно должен быть цифровым аудиосигналом. Указанная методика может быть реализована на основе цифрового видеосигнала или другого сигнала.
Расширение
Одиночный программируемый мультимедиа-контроллер 100 может быть соединен с дополнительными программируемыми мультимедиа-контроллерами через порт 280 расширения (фиг.2). Порт 280 расширения позволяет подключать два или более аудио- и видеокоммутатора и осуществлять обмен соответствующими данными управления. Таким образом, источники аудио- и видеосигналов, соединенные с одним контроллером, могут выводиться с другого контроллера, расположенного в другом месте, например в другой части здания или в другом здании.
На фиг.18 приведена диаграмма примерной схемы соединений и расширения для обработки аудиосигналов. Аудиокоммутаторы 215, 1810, 1820 программируемых мультимедиа-контроллеров 100, 1840, 1850 соединяются с интерфейсами 1860, 1870, 1880 Ethernet. Согласно примерному варианту осуществления, интерфейсы Ethernet представляют собой интерфейсы CobraNet™, которые выполняют преобразования "синхронный-в-изохронный" и "изохронный-в-синхронный", а также преобразование данных в форму, требуемую для передачи цифрового аудиосигнала по по сети Ethernet в реальном времени. Интерфейсы CobraNet™ также передают по сети Ethernet данные простого протокола управления сетью (Simple Network Management Protocol, SNMP). Согласно примерному варианту осуществления, любой отдельный программируемый мультимедиа-контроллер может передавать или принимать четыре декомпрессированных аудиопотока. Сама сеть Ethernet может представлять собой проводную сеть или сеть WI-FI на основе какого-либо протокола беспроводных сетей, такого как IEEE 802.11G.
На фиг.19 приведена диаграмма примерной схемы соединений и расширения для обработки видеосигналов. Видеокоммутаторы 220, 1910, 1920 программируемых мультимедиа-контроллеров 100, 1840, 1850 связаны двумя последовательными кольцами 1930, 1940 видеосигналов. Кольца 1930, 1940 последовательных видеосигналов могут представлять собой наборы последовательных видеолиний или, в альтернативном варианте, одиночную оптоволоконную линию, позволяющую передавать множество мультиплексированных последовательных видеосигналов. Согласно примерному варианту осуществления, четыре последовательных видеолинии представляют собой соединение CWDM (Coarse Wavelength Division Multiplexed, мультиплексирование с большим разнесением по длине волны) по одному оптическому волокну, при этом каждый последовательный видеосигнал передается с использованием индивидуальных длин волн.
Пример применения
На фиг.20 приведена блок-схема с двумя программируемыми мультимедиа-контроллерами 100, 1840, используемыми в примерном приложении, а именно в приложении 2000 профессиональной звукозаписи и микширования. Это приложение является лишь одним примером из множества различных приложений, в которых с преимуществом могут использоваться программируемые мультимедиа-контроллеры.
В профессиональной студии звукозаписи и микширования обычно применяется большое число соединений с различными аудиоустройствами, поэтому в настоящем примере используются два программируемых мультимедиа-контроллера 100, 1840, связанные согласно схемам расширения, описанным ранее. Дисплей 2010 редактирования и дисплей 2020 микширования соединяются с контроллерами, например, посредством подключения DVI или HDMI. Дисплеи могут представлять собой универсальные компьютеры, на которых работает прикладное программное обеспечение, имеющее функции редактирования и микширования, или интерфейс с прикладным программным обеспечением редактирования и микширования, работающего в другом месте, например на программируемых мультимедиа-контроллерах 100, 1840 или на подключенном к ним компьютере 2060. В альтернативном варианте дисплеи 2010, 2020 редактирования и микширования могут представлять собой просто компьютерные мониторы, например мониторы с сенсорными экранами, подключенные к программируемым мультимедиа-контроллерам 100, 1840. Кроме того, к программируемым мультимедиа-контроллерам 100, 1840 может быть подключен (например, по соединению Ethernet) один или несколько аппаратных модулей 2050, специально предназначенных для определенных приложений и оптимизированных для редактирования, микширования или других задач. Таким образом, имеется возможность соединения широкого разнообразия распространенного аудиооборудования.
Различные соединения, такие как соединения аналоговых аудиосигналов, цифровых аудиосигналов и/или Firewire™, могут также выводиться на интерфейсную панель 2070. На интерфейсной панели 2070 имеются порты подключения, такие как порты 2072 подключения инструментов и порты 2074 подключения микрофона. Принимаемый аудиосигнал передается программируемым мультимедиа-контроллерам 100, 1840 и может выводиться на динамики 230, 240. Таким образом, использование программируемых мультимедиа-контроллеров позволяет реализовать функциональные возможности профессиональной студии звукозаписи и микширования при минимуме дополнительных аппаратных средств.
Вышеприведенное описание относится к конкретным вариантам осуществления настоящего изобретения. С другой стороны, должно быть очевидно, что в описанные варианты осуществления могут вноситься другие изменения и модификации с достижением некоторых или всех их преимуществ. Кроме того, процедуры или процессы могут быть реализованы в аппаратных средствах, программном обеспечении, в форме носителя с возможностью считывания компьютером, на котором находятся программные команды, встроенном программном обеспечении или их комбинации. Таким образом, цель прилагаемой формулы изобретения состоит в описании всех таких изменений и модификаций в пределах сущности и объема изобретения.

Claims (30)

1. Мультимедиа-контроллер, включающий в себя следующие компоненты:
один или несколько модулей ввода аудиосигналов, соединенных с матричным аудиокоммутатором, причем каждый из модулей ввода аудиосигналов имеет соединение с одним или несколькими источниками аудиосигналов, при этом конфигурация каждого из модулей ввода аудиосигналов обеспечивает преобразование аудиосигналов различных форматов в аудиосигналы предопределенного формата;
один или несколько модулей ввода видеосигналов, соединенных с матричным видеокоммутатором, причем каждый из модулей ввода видеосигналов имеет соединение с одним или несколькими источниками видеосигналов, при этом конфигурация каждого из модулей ввода видеосигналов обеспечивает преобразование видеосигналов различных форматов в видеосигналы предопределенного формата;
один или несколько модулей вывода аудиосигналов, соединенных с матричным аудиокоммутатором, причем каждый из модулей вывода аудиосигналов имеет соединение с одним или несколькими устройствами вывода аудиосигналов, при этом конфигурация каждого из модулей вывода аудиосигналов обеспечивает преобразование аудиосигнала предопределенного формата в формат, совместимый с выбранным устройством вывода аудиосигналов;
один или несколько модулей вывода видеосигналов, соединенных с матричным видеокоммутатором, причем каждый из модулей вывода видеосигналов имеет соединение с одним или несколькими устройствами вывода видеосигналов, при этом конфигурация каждого из модулей вывода видеосигналов обеспечивает преобразование видеосигнала предопределенного формата в формат, совместимый с выбранным устройством вывода видеосигналов;
универсальный персональный компьютер, соединенный каналами связи с матричным аудиокоммутатором и матричным видеокоммутатором и управляющий указанными коммутаторами таким образом, что источники аудиосигналов коммутируются через матричный аудиокоммутатор на выбранные устройства вывода аудиосигналов, а источники видеосигналов коммутируются через матричный видеокоммутатор на выбранные устройства вывода видеосигналов, согласно одной или нескольким прикладным программам, выполняющимся на универсальном персональном компьютере, при этом универсальный персональный компьютер выполнен с возможностью наложения поступающих от универсального персонального компьютера видеоданных и/или графических данных и/или текста в одной или более выбранных областях в пределах кадров по меньшей мере некоторых видеосигналов от источников видеосигналов, которые коммутируются через матричный видеокоммутатор на выбранные устройства вывода видеосигналов, до вывода видеосигналов на выбранные устройства вывода видеосигналов, причем любая область кадров по меньшей мере некоторых видеосигналов, отличная от одной или более выбранных областей, свободна от наложения, а выбор одной или более выбранных областей реализован для отдельных кадров.
2. Мультимедиа-контроллер по п.1, отличающийся тем, что универсальный персональный компьютер представляет собой универсальный персональный компьютер малого форм-фактора, используемый без каких-либо физических модификаций.
3. Мультимедиа-контроллер по п.2, отличающийся тем, что универсальный персональный компьютер соединен с соединительной платой мультимедиа-контроллера посредством множества портов подключения, расположенных на панели универсального персонального компьютера.
4. Мультимедиа-контроллер по п.1, отличающийся тем, что предопределенный формат аудиосигнала представляет собой формат S/PDIF или формат I2S.
5. Мультимедиа-контроллер по п.1, далее включающий в себя следующие компоненты: асинхронный преобразователь частоты дискретизации, соединенный с одним из модулей ввода аудиосигналов, причем конфигурация асинхронного преобразователя частоты дискретизации обеспечивает вставку пустых кадров в аудиосигналы с нестандартной скоростью потока данных для приведения таких аудиосигналов к стандартной скорости потока данных.
6. Мультимедиа-контроллер по п.1, отличающийся тем, что предопределенный формат видеосигнала представляет собой формат последовательного цифрового интерфейса (SDI) или формат параллельного цифрового видеосигнала.
7. Мультимедиа-контроллер по п.1, отличающийся тем, что используется универсальный персональный компьютер, на котором сконфигурировано сжатие видеосигналов и вывод сжатого видеосигнала на один или несколько интерфейсов Ethernet.
8. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: телефонный интерфейс, выполненный с возможностью взаимодействия с телефонной сетью и соединенный с матричным аудиокоммутатором для обеспечения обмена сигналами между ними.
9. Мультимедиа-контроллер по п.8, отличающийся тем, что телефонный интерфейс включает в себя по меньшей мере одно из следующего: схему для подключения удаленной АТС (FXO) и схему для подключения удаленного абонента (FXS).
10. Мультимедиа-контроллер по п.8, отличающийся тем, что телефонный интерфейс сконфигурирован для соединения с телефонной сетью общего пользования (ТфОП).
11. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: микроконтроллер, соединенный с матричным аудиокоммутатором и матричным видеокоммутатором.
12. Мультимедиа-контроллер по п.11, отличающийся тем, что микроконтроллер, кроме того, соединен с по меньшей мере одним устройством, выбранным из группы, в которую входит телефонный интерфейс, интерфейс карт памяти, радиочастотный интерфейс, инфракрасный интерфейс и интерфейс RS232.
13. Мультимедиа-контроллер по п.11, отличающийся тем, что на универсальном персональном компьютере сконфигурирована генерация аудиосигналов, при этом матричный аудиокоммутатор выполнен с возможностью коммутации генерируемых аудиосигналов на выбранное устройство вывода аудиосигналов.
14. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: экран на передней панели, содержащий сенсорный экран, отображающий выбираемые значки, предназначенные для управления и конфигурирования мультимедиа-контроллера путем их выбора пользователем.
15. Мультимедиа-контроллер по п.14, отличающийся тем, что экран на передней панели представляет собой экран дисплея, выполненный с возможностью отображения видеоданных, поступающих от источника видеосигнала, соединенного с одним из модулей ввода видеосигналов.
16. Мультимедиа-контроллер по п.14, отличающийся тем, что экран на передней панели представляет собой экран дисплея, выполненный с возможностью отображения видеоданных, поступающих от универсального персонального компьютера.
17. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: второй универсальный персональный компьютер, соединенный каналами связи с матричным аудиокоммутатором и матричным видеокоммутатором, причем на втором универсальном персональном компьютере предусмотрено резервное управление матричным аудиокоммутатором и матричным видеокоммутатором на случай отказа универсального персонального компьютера.
18. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: интерфейс управления устройствами, выполненный с возможностью связи и управления устройствами освещения.
19. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: интерфейс управления устройствами, выполненный с возможностью связи и управления по меньшей мере одним устройством из следующей группы: система обогрева, вентиляции и кондиционирования воздуха (HVAC), система полива, система автоматического затенения и электронный дверной замок.
20. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: интерфейс, выполненный с возможностью связи и управления одним или несколькими компонентами из следующей группы: один или несколько источников аудиосигналов, один или несколько источников видеосигналов, одно или несколько устройств вывода аудиосигналов, одно или несколько устройств вывода видеосигналов.
21. Мультимедиа-контроллер по п.1, дополнительно включающий в себя следующие компоненты: одно или несколько запоминающих устройств, сконфигурированных для хранения аудио- и видеосигналов, причем универсальный персональный компьютер сконфигурирован для работы в качестве цифрового видеомагнитофона (DVR).
22. Способ управления мультимедиа-контроллером, включающий в себя следующие шаги:
осуществляют прием одного или нескольких аудиосигналов от одного или нескольких источников аудиосигналов, причем аудиосигналы имеют различные форматы;
преобразовывают аудиосигналы в предопределенный формат аудиосигнала;
осуществляют прием одного или нескольких видеосигналов от одного или нескольких источников видеосигналов, причем видеосигналы имеют различные форматы;
преобразовывают видеосигналы в предопределенный формат видеосигнала;
осуществляют коммутацию аудиосигналов на выбранное устройство вывода аудиосигналов и коммутацию видеосигналов на выбранное устройство вывода видеосигналов по команде одной или нескольких прикладных программ, выполняющихся на универсальном персональном компьютере мультимедиа-контроллера;
осуществляют наложение поступающих от универсального персонального компьютера мультимедийного контроллера видеоданных и/или графических данных и/или текста в одной или более выбранных областях в пределах кадров по меньшей мере некоторых коммутируемых видеосигналов от источников видеосигналов до вывода видеосигналов на выбранное устройство вывода видеосигналов, причем любая область кадров по меньшей мере некоторых видеосигналов, отличная от одной или более выбранных областей, свободна от наложения, а выбор одной или более выбранных областей производят для отдельных кадров;
преобразовывают аудиосигналы в предопределенном формате аудиосигналов в формат, совместимый с выбранным устройством вывода аудиосигналов;
осуществляют вывод преобразованных аудиосигналов на выбранное устройство вывода аудиосигналов;
преобразовывают видеосигналы в предопределенном формате видеосигналов в формат, совместимый с выбранным устройством вывода видеосигналов и
осуществляют вывод преобразованных видеосигналов на выбранное устройство вывода видеосигналов;
23. Способ по п.22, отличающийся тем, что универсальный персональный компьютер является универсальным персональным компьютером малого форм-фактора и используется без каких-либо физических модификаций.
24. Способ по п.23, отличающийся тем, что дополнительно включает в себя следующие шаги: соединяют универсальный персональный компьютер с соединительной платой мультимедиа-контроллера через множество портов подключения, расположенных на панели универсального персонального компьютера.
25. Способ по п.22, отличающийся тем, что преобразование аудиосигналов в предопределенный формат аудиосигналов дополнительно включает в себя следующие шаги: вставка пустых кадров в аудиосигналы с нестандартной скоростью потока данных для приведения таких аудиосигналов к стандартной скорости потока данных.
26. Способ по п.22, дополнительно включающий в себя следующие шаги: соединение мультимедиа-контроллера с телефонной сетью посредством телефонного интерфейса.
27. Способ по п.22, дополнительно включающий в себя следующие шаги: генерация аудиосигналов универсальным персональным компьютером и коммутация генерируемого аудиосигнала на выбранное устройство вывода аудиосигнала.
28. Способ по п.22, дополнительно включающий в себя следующие шаги: взаимодействие и управление по меньшей мере одним устройством из следующей группы: система обогрева, вентиляции и кондиционирования воздуха (HVAC), система полива, система автоматического затенения и электронный дверной замок.
29. Способ по п.22, дополнительно включающий в себя следующие шаги: взаимодействие и управление одним или несколькими элементами группы, состоящей из одного или нескольких источников аудиосигналов, одного или нескольких источников видеосигналов, одного или нескольких устройств вывода аудиосигналов, одного или нескольких устройств вывода видеосигналов.
30. Мультимедиа-контроллер, включающий в себя следующие компоненты:
модуль, осуществляющий прием одного или нескольких аудиосигналов от одного или нескольких источников аудиосигналов, причем аудиосигналы имеют различные форматы;
модуль, осуществляющий преобразование аудиосигналов в предопределенный формат аудиосигналов;
модуль, осуществляющий прием одного или нескольких видеосигналов от одного или нескольких источников видеосигналов, причем видеосигналы имеют различные форматы;
модуль, осуществляющий преобразование видеосигналов в предопределенный формат видеосигналов;
модуль, осуществляющий коммутацию аудиосигналов на выбранное устройство вывода аудиосигналов, и модуль, осуществляющий коммутацию видеосигналов на выбранное устройство вывода видеосигналов, по команде одной или нескольких прикладных программ, выполняющихся на универсальном персональном компьютере мультимедиа-контроллера;
модуль, осуществляющий наложение поступающих от универсального персонального компьютера мультимедийного контроллера видеоданных и/или графических данных и/или текста в одной или более выбранных областях в пределах кадров по меньшей мере некоторых коммутируемых видеосигналов от источников видеосигналов до вывода видеосигналов на выбранное устройство вывода видеосигнала, причем любая область кадров по меньшей мере некоторых видеосигналов, отличная от одной или более выбранных областей, свободна от наложения, а выбор одной или более выбранных областей реализован для отдельных кадров;
модуль, осуществляющий преобразование аудиосигналов в предопределенном формате аудиосигналов в формат, совместимый с выбранным устройством вывода аудиосигналов;
модуль, осуществляющий вывод преобразованных аудиосигналов в выбранное устройство вывода аудиосигналов;
модуль, осуществляющий преобразование видеосигналов в предопределенном формате видеосигналов в формат, совместимый с выбранным устройством вывода видеосигналов; и
модуль, осуществляющий вывод преобразованных видеосигналов на выбранное устройство вывода видеосигналов.
RU2008127910/07A 2005-12-20 2006-12-20 Система и способ управления программируемым мультимедийным контроллером RU2483461C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/314,664 US20070143801A1 (en) 2005-12-20 2005-12-20 System and method for a programmable multimedia controller
US11/314,664 2005-12-20
PCT/US2006/048625 WO2007075797A2 (en) 2005-12-20 2006-12-20 System and method for a programmable multimedia controller

Publications (2)

Publication Number Publication Date
RU2008127910A RU2008127910A (ru) 2010-01-27
RU2483461C2 true RU2483461C2 (ru) 2013-05-27

Family

ID=38175305

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2008127910/07A RU2483461C2 (ru) 2005-12-20 2006-12-20 Система и способ управления программируемым мультимедийным контроллером

Country Status (16)

Country Link
US (1) US20070143801A1 (ru)
EP (1) EP1966938B1 (ru)
JP (1) JP5285429B2 (ru)
KR (1) KR101330891B1 (ru)
CN (1) CN101379767B (ru)
AU (1) AU2006331691B2 (ru)
BR (1) BRPI0620121B1 (ru)
CA (1) CA2634200C (ru)
DK (1) DK1966938T3 (ru)
ES (1) ES2394843T3 (ru)
IL (1) IL192353A (ru)
MX (1) MX2008007887A (ru)
NZ (1) NZ569249A (ru)
PL (1) PL1966938T3 (ru)
RU (1) RU2483461C2 (ru)
WO (1) WO2007075797A2 (ru)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU189705U1 (ru) * 2018-08-27 2019-05-30 Общество с ограниченной ответственностью "Киберкар Мотор Рус" Видеоинтерфейс транспортного средства
RU2710048C1 (ru) * 2019-07-18 2019-12-24 Валентин Львович Ким Способ комплексного управления электрическими системами с помощью компьютера управления электросетями
WO2020046179A1 (ru) * 2018-08-27 2020-03-05 Общество с ограниченной ответственностью "Киберкар Мотор Рус" Видеоинтерфейс транспортного средства

Families Citing this family (100)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8165155B2 (en) 2004-07-01 2012-04-24 Broadcom Corporation Method and system for a thin client and blade architecture
US9138644B2 (en) 2002-12-10 2015-09-22 Sony Computer Entertainment America Llc System and method for accelerated machine switching
US20090118019A1 (en) * 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
US9077991B2 (en) 2002-12-10 2015-07-07 Sony Computer Entertainment America Llc System and method for utilizing forward error correction with video compression
US8964830B2 (en) * 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US9314691B2 (en) 2002-12-10 2016-04-19 Sony Computer Entertainment America Llc System and method for compressing video frames or portions thereof based on feedback information from a client device
CN1906573B (zh) * 2004-01-20 2011-01-05 美国博通公司 支持多个用户的系统和方法
US7697566B2 (en) * 2005-12-30 2010-04-13 Video Products Group, Inc. Method and apparatus for enabling transport of ethernet data over a serial digital interface transport service
US7549000B2 (en) * 2006-01-09 2009-06-16 Realtek Semiconductor Corp. Apparatus and method for generating bitstream of S/PDIF data in HDMI
US20070199043A1 (en) * 2006-02-06 2007-08-23 Morris Richard M Multi-channel high-bandwidth media network
US20070242062A1 (en) * 2006-04-18 2007-10-18 Yong Guo EDID pass through via serial channel
US7386641B2 (en) * 2006-04-18 2008-06-10 Owlink Technology, Inc. Protocol for uncompressed multimedia data transmission
US20070255433A1 (en) * 2006-04-25 2007-11-01 Choo Eugene K Method and system for automatically selecting digital audio format based on sink device
JP5186732B2 (ja) * 2006-05-19 2013-04-24 船井電機株式会社 テレビジョン受像機
US20070280282A1 (en) * 2006-06-05 2007-12-06 Tzeng Shing-Wu P Indoor digital multimedia networking
US20070292135A1 (en) * 2006-06-09 2007-12-20 Yong Guo Integrated remote control signaling
US20070286600A1 (en) * 2006-06-09 2007-12-13 Owlink Technology, Inc. Universal IR Repeating over Optical Fiber
JP4788522B2 (ja) * 2006-08-10 2011-10-05 ソニー株式会社 データ処理装置及びデータ処理方法、並びにコンピュータ・プログラム
WO2008022322A2 (en) * 2006-08-17 2008-02-21 Vantage Controls, Inc. System and method for creating a user interface
US8607281B2 (en) 2006-09-07 2013-12-10 Porto Vinci Ltd. Limited Liability Company Control of data presentation in multiple zones using a wireless home entertainment hub
US9386269B2 (en) 2006-09-07 2016-07-05 Rateze Remote Mgmt Llc Presentation of data on multiple display devices using a wireless hub
US8935733B2 (en) * 2006-09-07 2015-01-13 Porto Vinci Ltd. Limited Liability Company Data presentation using a wireless home entertainment hub
US8005236B2 (en) 2006-09-07 2011-08-23 Porto Vinci Ltd. Limited Liability Company Control of data presentation using a wireless home entertainment hub
US8966545B2 (en) 2006-09-07 2015-02-24 Porto Vinci Ltd. Limited Liability Company Connecting a legacy device into a home entertainment system using a wireless home entertainment hub
US20080061578A1 (en) * 2006-09-07 2008-03-13 Technology, Patents & Licensing, Inc. Data presentation in multiple zones using a wireless home entertainment hub
US9233301B2 (en) * 2006-09-07 2016-01-12 Rateze Remote Mgmt Llc Control of data presentation from multiple sources using a wireless home entertainment hub
US9319741B2 (en) 2006-09-07 2016-04-19 Rateze Remote Mgmt Llc Finding devices in an entertainment system
US7930644B2 (en) 2006-09-13 2011-04-19 Savant Systems, Llc Programming environment and metadata management for programmable multimedia controller
US20080074343A1 (en) * 2006-09-26 2008-03-27 Siemens Medical Solutions Usa, Inc. Digital Video Switch and Method of Switching Between Multiple Digital Video Inputs and Multiple Outputs
US20080134278A1 (en) * 2006-12-05 2008-06-05 General Instrument Corporation Set-Top Box and Method for Operating the Set-Top Box Using a Mobile Telephone
WO2008086057A1 (en) * 2007-01-05 2008-07-17 Radiospire Networks, Inc. System, method and apparatus for connecting multiple audio/video sources to an audio/video sink
JP5125134B2 (ja) * 2007-02-07 2013-01-23 ヤマハ株式会社 Av装置
JP4798024B2 (ja) * 2007-03-07 2011-10-19 船井電機株式会社 テレビジョン受像機、テレビジョン受信機
US20080219188A1 (en) * 2007-03-07 2008-09-11 International Business Machines Corporation Home Media Switch
US20080222312A1 (en) * 2007-03-09 2008-09-11 Westell Technologies, Inc. Apparatus and method for optimizing use of a modem jack
US8788076B2 (en) 2007-03-16 2014-07-22 Savant Systems, Llc Distributed switching system for programmable multimedia controller
US8150261B2 (en) * 2007-05-22 2012-04-03 Owlink Technology, Inc. Universal remote control device
EP2198566B1 (en) * 2007-09-05 2014-11-12 Savant Systems LLC Expandable multimedia control system and method
WO2009032279A1 (en) * 2007-09-05 2009-03-12 Savant Systems Llc. Multimedia control and distribution architechture
EP2037671A1 (en) * 2007-09-11 2009-03-18 Thomson Licensing Video processing apparatus and method for mixing a plurality of input frames on a pixel-by-pixel basis
US9137527B2 (en) * 2007-11-09 2015-09-15 Sony Corporation Communication signal strength display for TV internet adapter
JP5337370B2 (ja) 2007-11-13 2013-11-06 ソニー エスパナ,エス.エー. 表示装置、表示装置における映像信号送信方法、送信装置および映像信号の送信方法
JP4434267B2 (ja) 2007-11-22 2010-03-17 ソニー株式会社 インターフェース回路
JP2009178542A (ja) * 2008-01-29 2009-08-13 Olympus Medical Systems Corp 医療支援制御装置
KR101557176B1 (ko) * 2008-05-02 2015-10-02 사반트 시스템즈 엘엘씨 프로그램 가능한 멀티미디어 컨트롤러를 위한 터치 감응 비디오 신호 디스플레이
US20090282437A1 (en) * 2008-05-09 2009-11-12 Tap.Tv System and Method for Controlling Media at a Plurality of Output Devices
US7859137B2 (en) * 2008-05-09 2010-12-28 Tap.Tv, Inc. Scalable switch device and system
BRPI0918295B1 (pt) * 2008-09-04 2021-04-13 Savant Systems, Inc Sistemas de multimídia capaz de ser controlado remotamente, e, método para controlar remotamente um sistema de multímidia
US8213463B2 (en) * 2008-09-04 2012-07-03 Savant Systems, Llc Location-based sharing of multimedia control resources
US8515239B2 (en) * 2008-12-03 2013-08-20 D-Box Technologies Inc. Method and device for encoding vibro-kinetic data onto an LPCM audio stream over an HDMI link
US8639086B2 (en) * 2009-01-06 2014-01-28 Adobe Systems Incorporated Rendering of video based on overlaying of bitmapped images
US8019906B2 (en) * 2009-02-04 2011-09-13 Via Technologies, Inc. Dual mode displayport (DP) and high definition multimedia interface (HDMI) transmitter configured to transmit video and/or audio signals in DP or HDMI according to mode signal
US8608564B2 (en) * 2009-04-21 2013-12-17 Nyko Technologies, Inc. Connector for video game controller, and video game controller including the same
JP2010278578A (ja) * 2009-05-26 2010-12-09 Yamaha Corp Avコンテンツ再生装置
US8345681B2 (en) * 2009-09-23 2013-01-01 Samsung Electronics Co., Ltd. Method and system for wireless communication of audio in wireless networks
US9165394B2 (en) * 2009-10-13 2015-10-20 Nvidia Corporation Method and system for supporting GPU audio output on graphics processing unit
WO2011143403A2 (en) * 2010-05-12 2011-11-17 Smsc Holdings S.A.R.L. Systems and methods for operating media devices
KR20130115986A (ko) 2010-05-27 2013-10-22 에스엠에스씨 홀딩스 에스에이알엘 미디어 스트림의 끊김 없는 전송
US9191230B2 (en) 2010-06-03 2015-11-17 Savant Systems, Llc Docking station with redundant communication path
US20120036525A1 (en) * 2010-08-04 2012-02-09 Satish Mugulavalli Unified user interface for viewing desired multi-media content on an internet television
US9019083B2 (en) 2010-09-22 2015-04-28 Savant Systems, Llc Programmable multimedia control system having a tactile remote control
US8719581B2 (en) 2010-09-22 2014-05-06 Savant Systems, Llc Programmable multimedia controller with flexible user access and shared device configurations
KR101743776B1 (ko) 2010-09-28 2017-06-05 엘지전자 주식회사 영상 표시 기기, 방법 및 영상 전송 방법
WO2012044794A2 (en) * 2010-09-30 2012-04-05 Field Forensics, Inc. Detection kit
US20120090001A1 (en) * 2010-10-07 2012-04-12 Tzu-Chiang Yen Apparatus having multimedia interface and network access management integrated therein
US8782150B2 (en) * 2010-11-09 2014-07-15 Sony Corporation Method and apparatus for enabling device communication and control using XMPP
US20120131245A1 (en) * 2010-11-19 2012-05-24 Silicon Image, Inc. Transfer of control bus signaling on packet-switched network
CN102176320B (zh) * 2011-01-27 2014-03-12 深圳市杰科电子有限公司 一种家庭式多媒体播放系统及播放方法
KR101788061B1 (ko) * 2011-06-16 2017-10-19 엘지전자 주식회사 가상 머신이 탑재된 디스플레이 장치 및 그 제어 방법
TWI456992B (zh) * 2011-09-30 2014-10-11 Realtek Semiconductor Corp 電子裝置以及網路存取模組
US8713316B2 (en) 2011-12-13 2014-04-29 Crestron Electronics Inc. System, apparatus and method for enabling/disabling display data channel access to enable/disable high-bandwidth digital content protection
US8681977B2 (en) * 2011-12-13 2014-03-25 Crestron Electronics Inc. Enabling/disabling display data channel access to enable/ disable high-bandwidth digital content protection
US8972858B2 (en) 2012-04-19 2015-03-03 Savant Systems, Llc Configuration interface for a programmable multimedia controller
EP2672393A1 (en) * 2012-06-04 2013-12-11 Dialog Semiconductor B.V. Circuit and methods to use an audio interface to program a device within an audio stream
DE102012015881A1 (de) * 2012-08-08 2014-05-15 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Informations- und Unterhaltungssystem für ein Kraftfahrzeug und Verfahren zum Betreiben eines Informations- und Unterhaltungssystems
WO2014053465A1 (en) * 2012-10-02 2014-04-10 Dr Gaming Technology Europe Nv Controller for gaming devices
US10495785B2 (en) 2013-04-04 2019-12-03 Sky Motion Research, Ulc Method and system for refining weather forecasts using point observations
CN104298179B (zh) * 2013-07-15 2017-04-19 海尔集团公司 智能开关、智能控制网络及智能控制方法
CN103546801A (zh) * 2013-10-24 2014-01-29 深圳创维-Rgb电子有限公司 一种视频转换控制方法、装置及系统
KR20150049966A (ko) 2013-10-31 2015-05-08 삼성전자주식회사 오디오 보정을 위한 오디오 출력 장치 및 방법
US9679711B1 (en) * 2014-03-06 2017-06-13 William J. Rintz Portable programmable display and control module
US10447492B1 (en) 2014-07-24 2019-10-15 Savant Systems, Llc Residential management system for use with a plurality of home automation systems
TWI554089B (zh) * 2014-09-29 2016-10-11 緯創資通股份有限公司 影音分享方法與系統
JP3196335U (ja) * 2014-12-19 2015-03-05 ラディウス株式会社 音声携帯機器の表示装置
EP3245566A1 (en) * 2015-01-16 2017-11-22 Giva Audiovisual Technologies BVBA Audio, video and light control system encapsulated in a single housing
FR3038177A1 (fr) * 2015-06-26 2016-12-30 Orange Dispositif de communication, adapte pour donner acces a un equipement convenant pour un rendu
JP6586811B2 (ja) * 2015-07-31 2019-10-09 ティアック株式会社 カメラ接続型録音装置
US10042339B2 (en) 2015-10-05 2018-08-07 Savant Systems, Llc Cloud-synchronized architecture for a home automation system
US10018977B2 (en) 2015-10-05 2018-07-10 Savant Systems, Llc History-based key phrase suggestions for voice control of a home automation system
US9806900B2 (en) 2015-10-05 2017-10-31 Savant Systems, Llc Wireless provisioning and configuring of hardware elements of a home automation system
US10379560B2 (en) 2015-10-05 2019-08-13 Savant Systems, Llc Home automation system device power optimization
CN105632542B (zh) * 2015-12-23 2019-05-28 小米科技有限责任公司 音频播放方法及装置
TWM530975U (zh) * 2016-05-25 2016-10-21 宏正自動科技股份有限公司 用於工業嵌入式系統之影像管控裝置及系統
WO2018006354A1 (zh) 2016-07-07 2018-01-11 北京小米移动软件有限公司 音频播放系统、外接扩展设备、音频播放方法及装置
WO2019239396A1 (en) * 2018-06-12 2019-12-19 Kliots Shapira Ela Method and system for automatic real-time frame segmentation of high resolution video streams into constituent features and modifications of features in each frame to simultaneously create multiple different linear views from same video source
CN110726924B (zh) * 2018-07-17 2022-08-26 视联动力信息技术股份有限公司 一种芯片的运行方法和装置
CN109379674B (zh) * 2018-11-09 2024-02-06 福建星网智慧科技有限公司 一种基于cpld实现多路音频聚合装置及方法
CN110012332A (zh) * 2019-04-17 2019-07-12 深圳蓝普视讯科技有限公司 一种基于宽色域高动态范围HDR技术的物理10Bit信息采集播放系统
CN113840102A (zh) * 2020-06-23 2021-12-24 瑞昱半导体股份有限公司 多媒体影音系统
WO2022011397A1 (en) * 2020-07-09 2022-01-13 Microchip Technology Incorporated Time-synchronized hardware controllers and related audio systems and circuitry

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4847829A (en) * 1985-04-08 1989-07-11 Datapoint Corporation Video conferencing network
EP0727909A2 (en) * 1995-02-06 1996-08-21 Sony Corporation Interface for audio/video subscriber equipment and telecommunications line
US5675390A (en) * 1995-07-17 1997-10-07 Gateway 2000, Inc. Home entertainment system combining complex processor capability with a high quality display
WO1998035517A2 (en) * 1997-02-12 1998-08-13 Qualcomm Incorporated A system for exchanging asynchronous data over a synchronous communication interface between a communication device and an external accessory
US20020007490A1 (en) * 1998-08-03 2002-01-17 Jeffery Ross A. Audio/video and data signal redistribution system
WO2002093925A1 (en) * 2001-05-17 2002-11-21 Optibase Apparatus and method for multiple rich media formats video broadcasting
WO2003005714A1 (en) * 2001-07-03 2003-01-16 Terayon Communication Systems, Inc. Dvr enabled gateway for home network
EP1326384A2 (en) * 2001-12-20 2003-07-09 Nortel Networks Limited Technique for computing pathways in a multi-stage switch fabric through exploitation of symmetrical links
EP1355485A1 (en) * 2002-04-18 2003-10-22 Deutsche Thomson-Brandt Gmbh Method for generating a user interface on a HAVi device for the control of a Non-HAVi device
WO2003098847A1 (en) * 2002-05-22 2003-11-27 Helmes Josef J J Multi-media interaction system
RU2219677C2 (ru) * 1997-09-04 2003-12-20 Дискавери Коммьюникейшнз, Инк. Устройство, предназначенное для обеспечения видеодоступа и управления через компьютерную сеть, включая коррекцию изображения

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4710917A (en) * 1985-04-08 1987-12-01 Datapoint Corporation Video conferencing network
US5170252A (en) * 1990-04-09 1992-12-08 Interactive Media Technologies, Inc. System and method for interconnecting and mixing multiple audio and video data streams associated with multiple media devices
EP0484981B1 (en) * 1990-11-09 1998-07-08 Fuji Photo Film Co., Ltd. Image data processing apparatus
US5426731A (en) * 1990-11-09 1995-06-20 Fuji Photo Film Co., Ltd. Apparatus for processing signals representative of a computer graphics image and a real image
US7558557B1 (en) * 1991-11-12 2009-07-07 Broadcom Corporation Low-power messaging in a network supporting roaming terminals
US5861881A (en) * 1991-11-25 1999-01-19 Actv, Inc. Interactive computer system for providing an interactive presentation with personalized video, audio and graphics responses for multiple viewers
US5734589A (en) * 1995-01-31 1998-03-31 Bell Atlantic Network Services, Inc. Digital entertainment terminal with channel mapping
JPH0879847A (ja) * 1994-09-05 1996-03-22 Hitachi Ltd 情報システム及び該システムを構成するav機器及びリモコン操作装置
US5579308A (en) * 1995-11-22 1996-11-26 Samsung Electronics, Ltd. Crossbar/hub arrangement for multimedia network
US6611537B1 (en) * 1997-05-30 2003-08-26 Centillium Communications, Inc. Synchronous network for digital media streams
US6665741B1 (en) * 2000-10-17 2003-12-16 Hewlett-Packard Development Company, L.P. Portable computer with removable I/O device
JP3827518B2 (ja) * 2000-10-23 2006-09-27 シャープ株式会社 ホームネットワークシステム
EP1334617B1 (en) * 2000-11-14 2015-04-01 Cisco Technology, Inc. Networked subscriber television distribution
US20020194596A1 (en) * 2001-06-18 2002-12-19 Srivastava Gopal K. Control of multiple AV-devices by a single master controller using infrared transmitted commands and bus transmitted commands
US7908628B2 (en) * 2001-08-03 2011-03-15 Comcast Ip Holdings I, Llc Video and digital multimedia aggregator content coding and formatting
US7095456B2 (en) * 2001-11-21 2006-08-22 Ui Evolution, Inc. Field extensible controllee sourced universal remote control method and apparatus
US7412703B2 (en) * 2002-09-19 2008-08-12 Sedna Patent Services, Llc Low cost, highly accurate video server bit-rate compensation
HK1052830A2 (en) * 2003-02-26 2003-09-05 Intexact Technologies Ltd An integrated programmable system for controlling the operation of electrical and/or electronic appliances of a premises
TWI332652B (en) * 2003-05-23 2010-11-01 Via Tech Inc System and method of auto-configuration settings for multimedia apparatus
JP2005072799A (ja) * 2003-08-21 2005-03-17 Ricoh Co Ltd 記録装置と記録方法
US7827595B2 (en) * 2003-08-28 2010-11-02 Microsoft Corporation Delegated administration of a hosted resource
KR100562907B1 (ko) * 2003-12-18 2006-03-21 삼성전자주식회사 미디어 컨텐츠의 통합 관리 장치 및 그 방법
US7486337B2 (en) * 2003-12-22 2009-02-03 Intel Corporation Controlling the overlay of multiple video signals
JP2005196683A (ja) * 2004-01-09 2005-07-21 Hitachi Ltd 情報処理システム、情報処理装置、及び情報処理システムの制御方法
US20050235329A1 (en) * 2004-04-19 2005-10-20 Broadcom Corporation Systems and methods for integrated control within a home entertainment system
US8027335B2 (en) * 2004-05-05 2011-09-27 Prodea Systems, Inc. Multimedia access device and system employing the same
TW200539727A (en) * 2004-05-18 2005-12-01 Fusiontech Technologies Inc Wireless sound transmission and receiving amplifier system
US7646960B2 (en) * 2005-06-09 2010-01-12 International Business Machines Corporation Determining chapters based on presentation of a program
JP4266218B2 (ja) * 2005-09-29 2009-05-20 株式会社東芝 動画像データの再圧縮符号化方法、装置及びプログラム
US20070137988A1 (en) * 2005-12-02 2007-06-21 Microsoft Corporation Computer control of audio/video switching

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4847829A (en) * 1985-04-08 1989-07-11 Datapoint Corporation Video conferencing network
EP0727909A2 (en) * 1995-02-06 1996-08-21 Sony Corporation Interface for audio/video subscriber equipment and telecommunications line
US5675390A (en) * 1995-07-17 1997-10-07 Gateway 2000, Inc. Home entertainment system combining complex processor capability with a high quality display
WO1998035517A2 (en) * 1997-02-12 1998-08-13 Qualcomm Incorporated A system for exchanging asynchronous data over a synchronous communication interface between a communication device and an external accessory
RU2219677C2 (ru) * 1997-09-04 2003-12-20 Дискавери Коммьюникейшнз, Инк. Устройство, предназначенное для обеспечения видеодоступа и управления через компьютерную сеть, включая коррекцию изображения
US20020007490A1 (en) * 1998-08-03 2002-01-17 Jeffery Ross A. Audio/video and data signal redistribution system
WO2002093925A1 (en) * 2001-05-17 2002-11-21 Optibase Apparatus and method for multiple rich media formats video broadcasting
WO2003005714A1 (en) * 2001-07-03 2003-01-16 Terayon Communication Systems, Inc. Dvr enabled gateway for home network
EP1326384A2 (en) * 2001-12-20 2003-07-09 Nortel Networks Limited Technique for computing pathways in a multi-stage switch fabric through exploitation of symmetrical links
EP1355485A1 (en) * 2002-04-18 2003-10-22 Deutsche Thomson-Brandt Gmbh Method for generating a user interface on a HAVi device for the control of a Non-HAVi device
WO2003098847A1 (en) * 2002-05-22 2003-11-27 Helmes Josef J J Multi-media interaction system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Installation and User's Guide X-Port 40, Audio, Video and Data Switch. SMART Technologies Inc., 2004. *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU189705U1 (ru) * 2018-08-27 2019-05-30 Общество с ограниченной ответственностью "Киберкар Мотор Рус" Видеоинтерфейс транспортного средства
WO2020046179A1 (ru) * 2018-08-27 2020-03-05 Общество с ограниченной ответственностью "Киберкар Мотор Рус" Видеоинтерфейс транспортного средства
RU2710048C1 (ru) * 2019-07-18 2019-12-24 Валентин Львович Ким Способ комплексного управления электрическими системами с помощью компьютера управления электросетями
WO2021010859A1 (ru) * 2019-07-18 2021-01-21 Валентин Львович КИМ Способ комплексного управления электрическими системами с помощью компьютера управления электросетями

Also Published As

Publication number Publication date
WO2007075797A2 (en) 2007-07-05
AU2006331691B2 (en) 2011-04-07
DK1966938T3 (da) 2012-10-22
KR20080091451A (ko) 2008-10-13
RU2008127910A (ru) 2010-01-27
CN101379767A (zh) 2009-03-04
JP5285429B2 (ja) 2013-09-11
MX2008007887A (es) 2008-11-06
BRPI0620121A2 (pt) 2011-01-11
ES2394843T3 (es) 2013-02-06
KR101330891B1 (ko) 2013-12-09
AU2006331691A1 (en) 2007-07-05
NZ569249A (en) 2011-06-30
CA2634200C (en) 2016-02-09
IL192353A0 (en) 2008-12-29
US20070143801A1 (en) 2007-06-21
BRPI0620121B1 (pt) 2019-07-09
WO2007075797A3 (en) 2007-12-21
PL1966938T3 (pl) 2013-01-31
JP2009521857A (ja) 2009-06-04
EP1966938A2 (en) 2008-09-10
CN101379767B (zh) 2012-08-15
EP1966938B1 (en) 2012-08-01
IL192353A (en) 2013-05-30
CA2634200A1 (en) 2007-07-05

Similar Documents

Publication Publication Date Title
RU2483461C2 (ru) Система и способ управления программируемым мультимедийным контроллером
US9513615B2 (en) Techniques for configuring a multimedia system
US8378791B2 (en) Image reproduction system and signal processor used for the same
AU2009241750B2 (en) Touch sensitive video signal display for a programmable multimedia controller
US8659704B2 (en) Apparatus and method for mixing graphics with video images
US8793415B2 (en) Device control apparatus, device control method and program for initiating control of an operation of an external device
EP1596581B1 (en) A display device with data reading means
CN101146199A (zh) 视频信息处理设备、视频信息处理方法和计算机程序
CN100499771C (zh) 具有数字录像带连接性的增强显示系统
CN100414640C (zh) 通过单个在屏显示控制多个设备的组合系统及控制方法
KR100577052B1 (ko) 휴대용 동영상 장치 및 그 서비스 방법
KR100597009B1 (ko) 메뉴화면을 일관성 있게 생성할 수 있는 영상재생장치 및그 메뉴화면 생성방법
KR20060116446A (ko) 텔레비전을 기반으로 하는 디바이스 링크 시스템에서의그래픽 유저 인터페이스 화면 제공방법
WO2010122573A2 (en) Integrated dvd-dth system
KR20060125181A (ko) Dvd 복합제품에서의 자막 및 자막 백그라운드 색상변경방법 및 장치

Legal Events

Date Code Title Description
PD4A Correction of name of patent owner
PC43 Official registration of the transfer of the exclusive right without contract for inventions

Effective date: 20210909