RU2513722C1 - Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами и пользовательское устройство воспроизведения - мобильный терминал связи для осуществления способа - Google Patents
Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами и пользовательское устройство воспроизведения - мобильный терминал связи для осуществления способа Download PDFInfo
- Publication number
- RU2513722C1 RU2513722C1 RU2012150582/08A RU2012150582A RU2513722C1 RU 2513722 C1 RU2513722 C1 RU 2513722C1 RU 2012150582/08 A RU2012150582/08 A RU 2012150582/08A RU 2012150582 A RU2012150582 A RU 2012150582A RU 2513722 C1 RU2513722 C1 RU 2513722C1
- Authority
- RU
- Russia
- Prior art keywords
- mobile communication
- audiovisual
- communication terminal
- user
- information
- Prior art date
Links
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
Группа изобретений относится к области мобильной связи. Техническим результатом является повышение качества передачи информации по нестабильным каналам связи без занятия излишней полосы пропускания. Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию. Способ включает в себя этап одновременного получения аудиовизуальной информации от, по меньшей мере, двух источников, отображающих событие окружающей среды в различных ракурсах, обеспечивающих возможность получения видеоизображения и/или звука. Согласно способу, осуществляют объединение кадров исходных изображений в едином потоке видеоинформации, и передачу полученной аудиовизуальной информации от указанных источников на, по меньшей мере, один мобильный терминал связи с обеспечением ее синхронизации. Далее, осуществляют прием аудиовизуальной информации, по меньшей мере, одним мобильным терминалом связи. А также, осуществляют формирование на экране мобильного терминала связи поля аудиовизуального ряда, отображающего аудиовизуальную информацию, полученную от, по меньшей мере, одного из источников такой информации, при одновременном формировании, по меньшей мере, одного поля аудиовизуального ряда, закрытого от взгляда пользователя маской графических примитивов. 2 н.п. ф-лы, 1 ил.
Description
Предлагаемое изобретение относится к области мобильной связи, а именно к мобильным терминалам связи, обеспечивающим отображение транслируемого аудиовизуального ряда.
В настоящее время известны и достаточно широко используются пользовательские устройства воспроизведения, обеспечивающие отображение на экране нескольких визуальных полей, каждое из которых обеспечивает отображение какой-либо самостоятельной информации или же информации из одного и того же источника в различных ракурсах. Таким образом, пользователь может видеть на экране трансляции событий из различных мест, трансляцию событий с текстовыми или визуальными комментариями и т.п. Пример подобного решения приведен в заявке в патентное ведомство Японии JP 2004228699, опубликованной 12.08.2004 и выбранной в качестве ближайшего аналога предлагаемого способа и реализующего способ пользовательского устройства воспроизведения. В заявке JP 2004228699 на стороне сервера осуществляется объединение нескольких потоков видеоинформации и соответственно объединение одной или нескольких аудиодорожек, что обеспечивает пользователя описанной выше трансляцией, отображенной на нескольких полях экрана пользователя.
Однако при осуществлении описанной в JP 2004228699 трансляции не предусмотрена синхронизация изображений в канале передачи друг относительно друга, задача синхронизации изображений перекладывается на пользовательское устройство, то есть очевидна вероятность сбоев при трансляции разнородных потоков информации в особенности при нестабильных параметрах канала передачи или изменения параметров трансляции со стороны пользователя. В случае же использования решения по заявке JP 2004228699 для получения изображений на дисплеях мобильных терминалов связи из-за небольшого размера дисплея невозможно осуществить эффективное переключение с одного ракурса на другой.
В свою очередь предлагаемые способ и пользовательское устройство позволят устранить упомянутые недостатки и обеспечат синхронизацию нескольких видеоизображений при передаче по нестабильным каналам связи, наибольший эффект от синхронизации нескольких изображений будет достигнут при передаче нескольких изображений одного события. При этом полоса пропускания для нескольких видеоизображений и звука будет меньше, чем для информации передаваемой раздельно. Особенно важным результатом, который будет достигнут при использовании предлагаемых способа и устройства, будет возможность переключения с одного ракурса на другой на дисплеях мобильных терминалов связи.
Указанный технический результат достигается при использовании способа отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, который предусматривает одновременное получение аудиовизуальной информации от, по меньшей мере, двух источников, отображающих событие окружающей среды в различных ракурсах, обеспечивающих возможность получения видеоизображения и/или звука. Далее объединяют кадры исходных изображений в едином потоке видеоинформации, передают полученную аудиовизуальную информацию от указанных источников на, по меньшей мере, один мобильный терминал связи с обеспечением ее синхронизации. Аудиовизуальную информацию принимает, по меньшей мере, один мобильный терминал связи. На экране указанного мобильного терминала связи формируют поле аудиовизуального ряда, отображающее для пользователя аудиовизуальную информацию, полученную от, по меньшей мере, одного из источников такой информации. При этом, по меньшей мере один аудиовизуальный ряд, интересующий пользователя, доступен взгляду пользователя, а, по меньшей мере, один аудиовизуальный ряд, не интересующий пользователя, закрыт от взгляда пользователя маской графических примитивов. При необходимости обеспечивают смену аудиовизуального ряда при воздействии пользователя на интерфейс мобильного терминала связи.
Описанный выше способ реализуется при использовании мобильного терминала связи, являющегося оконечным пунктом канала двусторонней связи с, по меньшей мере, двумя указанными источниками аудиовизуальной информации. Мобильный терминал связи содержит компонент приема аудиовизуальной информации полученной от, по меньшей мере, двух источников, обеспечивающих возможность получения видеоизображения и/или звука, отображающих событие окружающей среды в различных ракурсах, преимущественно видеокамер. Компонент формирования на экране мобильного терминала связи поля аудиовизуального ряда отображает для пользователя аудиовизуальную информацию, полученную от по меньшей мере одного из источников такой информации, при одновременном формировании, по меньшей мере, одного поля аудиовизуального ряда, закрытого от взгляда пользователя маской графических примитивов. Пользовательский интерфейс мобильного терминала связи обеспечивает указанное формирование поля аудиовизуального ряда, а также средства доступа к аудиовизуальному ряду, интересующего пользователя. По меньшей мере, один доступный взгляду пользователя аудиовизуальный ряд, интересующий пользователя, отображен на соответствующем ему поле интерфейса мобильного терминала связи. По меньшей мере, один аудиовизуальный ряд, не интересующий пользователя, закрыт от взгляда пользователя маской графических примитивов интерфейса мобильного терминала связи.
Под мобильным терминалом связи 1 подразумевается программируемый терминал мобильной связи типа iPhone или iPad, подключаемый к сети связи и обеспечивающий прием аудиовизуальной информации от нескольких источников 21…2n. Такими источниками в подавляющем большинстве случаев будут видеокамеры, отображающие какое-либо событие (например, массовое мероприятие, конференцию) в различных ракурсах, а также дополнительные устройства, обеспечивающие получение фотографических изображений, текстовой информации, независимой звуковой информации и т.п. Источники 21…2n аудиовизуальной информации и мобильный терминал связи 1 связаны друг с другом через канал двусторонней связи 3. В канале связи 3 выделяется отдельный модуль по объединению видеоизображений. Полученная итоговая последовательность сформированных кадров представляет собой видеоизображение, которое в дальнейшем сжимается с помощью стандартных видеокодеков и передается по каналу двусторонней связи. За счет объединения кадров исходных видеоизображений и использования особенностей кодирования видеоизображений стандартными алгоритмами достигается экономия требуемой полосы пропускания, а также самосинхронизация изображений друг относительно друга на этапе формирования видеоизображения, до попадания в передающий тракт. Для приема аудиовизуальной информации в пользовательском устройстве 1 выделен соответствующий компонент 11, в качестве которого может быть использован модем, декодер и т.п. Компонент 12 пользовательского устройства 1 обеспечивает формирование на его экране 4, по меньшей мере одного поля 41…4n аудиовизуального ряда, каждое из которых отображает аудиовизуальную информацию, полученную от соответствующего источника 21…2n. В свою очередь не интересующие пользователя аудиовизуальные ряды закрываются маской графических примитивов, то есть маской расположенной поверх потоков аудиовизуальной информации. Интерфейс 13 обеспечивает пользовательскую корректировку параметров полей аудиовизуального ряда 41…4n, то есть переключение с одного интересующего пользователя поля на другое.
Решение может быть использовано при съемке какого-либо действия или мероприятия, представляющего интерес для зрителей, несколькими видеокамерами 21…2n, например, при съемке интервью, массового мероприятия и т.п. Аналогично предложенное решение может быть использовано и для получения информации из различных удаленных друг от друга источников, например от видеокамер, установленных на удалении друг от друга. От каждого источника - видеокамеры 21…2n получают свой ракурс снимаемого события, который, как может представлять интерес для зрителя, так может оказаться непривлекательным из-за неудачных условий съемки и т.п. Полученная аудиовизуальная информация от источников 21…2n через двусторонний канал связи 3 передается на пользовательское устройство воспроизведение - мобильный терминал связи 1 или же на нужное число терминалов 1 с обеспечением объединения изображений в соответствующем модуле и синхронизации информации. Таким образом, обеспечивается качественная передача информации по нестабильным каналам без занятия излишней полосы пропускания.
Формирование объединенного изображения осуществляется выделением каждого кадра из исходных видеоизображений и объединения их в один кадр путем пристыковки кадров исходных изображений друг к другу в определенном порядке. При этом выполняется выравнивание частоты смены кадров в исходных изображениях путем повтора кадров для источников с низкой кадровой частотой. В качестве исходного материала для формирования кадров нового видеоизображения могут быть статические или периодически обновляемые изображения (рисунки, графики). Также следует отметить, что в предложенном решении синхронизация изображений друг относительно друга выполняется до попадания в вещательный тракт, в отличие от известных средств, в которых синхронизация звука и видео осуществляется по меткам аудио-/видеопакетов на стороне воспроизводящего устройства. Синхронизация со звуком осуществляется стандартным способом (по меткам). Если задержка в передающем тракте все-таки возникает, она одинаково распространяется сразу на все изображения, что не приводит к их рассинхронизации и не требует специальных мер по ее восстановлению - обратной синхронизации. Дополнительно следует отметить, что известные в настоящее время технологии обеспечивают самостоятельное кодирование нескольких видеоизображений, с дальнейшим их объединением в мультиплекс в виде отдельных потоков; существующие способы, обеспечивающие снижение требуемой полосы пропускания за счет взаимного учета параметров кодирования нескольких видеоизображений через обратную связь видеокодеров, эффективны только при кодировании несвязанных между собой и не требующих синхронизации друг относительно друга изображений, и не могут обеспечить требуемое качество передачи нескольких видеоизображений одного события.
Компонент 11 пользовательского устройства воспроизведения 1 обеспечивает прием аудиовизуальной информации. Порядок следования и количество объединяемых кадров может меняться от канала к каналу (от события к событию), но всегда одинаково на стороне формирования и стороне приема, что определяется форматом канала (события). Компонент 12 пользовательского устройства 1 обеспечивает формирование на его экране 4, по меньшей мере одного поля 41…4n аудиовизуального ряда, каждое из которых отображает аудиовизуальную информацию, полученную от соответствующего источника. При этом, по меньшей мере один, доступный взгляду пользователя аудиовизуальный ряд, интересующий пользователя, отображается на соответствующем ему поле, например поле, занимающем большую часть дисплея. В свою очередь не интересующие пользователя аудиовизуальные ряды закрываются маской графических примитивов, то есть маской расположенной поверх потоков аудиовизуальной информации. Типовыми средствами пользовательского интерфейса 13 обеспечивается пользовательская корректировка параметров аудиовизуального ряда, пользователь может выбирать интересный для себя видеоряд, скрывая остальные, масштабировать видеоряды в соответствии со своими предпочтениями, и, конечно, осуществлять подстройку громкости звука, Также производится смена положения и/или размера полей 41…4n. Таким образом, обеспечивается переключение с одного ракурса на другой.
Таким образом, предложены способ отображения аудиовизуального ряда и мобильный терминал связи, которые обеспечат качественную трансляцию аудиовизуального ряда при возможности настройки параметров трансляции.
Claims (2)
1. Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, включающий
одновременное получение аудиовизуальной информации от, по меньшей мере, двух источников, отображающих событие окружающей среды в различных ракурсах, обеспечивающих возможность получения видеоизображения и/или звука,
объединение кадров исходных изображений в едином потоке видеоинформации,
передачу полученной аудиовизуальной информации от указанных источников на, по меньшей мере, один мобильный терминал связи с обеспечением ее синхронизации,
прием аудиовизуальной информации, по меньшей мере, одним мобильным терминалом связи,
формирование на экране указанного мобильного терминала связи поля аудиовизуального ряда, отображающего для пользователя аудиовизуальную информацию, полученную от, по меньшей мере, одного из источников такой информации,
при одновременном формировании, по меньшей мере, одного поля аудиовизуального ряда, закрытого от взгляда пользователя маской графических примитивов,
необходимую смену аудиовизуального ряда, доступного взгляду, при воздействии пользователя на интерфейс мобильного терминала связи.
одновременное получение аудиовизуальной информации от, по меньшей мере, двух источников, отображающих событие окружающей среды в различных ракурсах, обеспечивающих возможность получения видеоизображения и/или звука,
объединение кадров исходных изображений в едином потоке видеоинформации,
передачу полученной аудиовизуальной информации от указанных источников на, по меньшей мере, один мобильный терминал связи с обеспечением ее синхронизации,
прием аудиовизуальной информации, по меньшей мере, одним мобильным терминалом связи,
формирование на экране указанного мобильного терминала связи поля аудиовизуального ряда, отображающего для пользователя аудиовизуальную информацию, полученную от, по меньшей мере, одного из источников такой информации,
при одновременном формировании, по меньшей мере, одного поля аудиовизуального ряда, закрытого от взгляда пользователя маской графических примитивов,
необходимую смену аудиовизуального ряда, доступного взгляду, при воздействии пользователя на интерфейс мобильного терминала связи.
2. Мобильный терминал связи, содержащий
компонент приема аудиовизуальной информации полученной от, по меньшей мере, двух источников, обеспечивающих возможность получения видеоизображения и/или звука, отображающих событие окружающей среды в различных ракурсах, преимущественно видеокамер,
компонент формирования на экране мобильного терминала связи поля аудиовизуального ряда, отображающего для пользователя аудиовизуальную информацию, полученную от, по меньшей мере, одного из источников такой информации,
при одновременном формировании, по меньшей мере, одного поля аудиовизуального ряда, закрытого от взгляда пользователя маской графических примитивов,
причем пользовательский интерфейс включает средства доступа к аудиовизуальному ряду, не интересующему пользователя,
и являющийся оконечным пунктом канала двусторонней связи с, по меньшей мере, двумя указанными источниками аудиовизуальной информации,
в составе которого выделен модуль объединения видеоизображений, обеспечивающий синхронизацию изображений друг относительно друга до попадания в вещательный тракт и получением итоговой последовательности видеоизображения, сжимаемого и передаваемого по каналу двусторонней связи.
компонент приема аудиовизуальной информации полученной от, по меньшей мере, двух источников, обеспечивающих возможность получения видеоизображения и/или звука, отображающих событие окружающей среды в различных ракурсах, преимущественно видеокамер,
компонент формирования на экране мобильного терминала связи поля аудиовизуального ряда, отображающего для пользователя аудиовизуальную информацию, полученную от, по меньшей мере, одного из источников такой информации,
при одновременном формировании, по меньшей мере, одного поля аудиовизуального ряда, закрытого от взгляда пользователя маской графических примитивов,
причем пользовательский интерфейс включает средства доступа к аудиовизуальному ряду, не интересующему пользователя,
и являющийся оконечным пунктом канала двусторонней связи с, по меньшей мере, двумя указанными источниками аудиовизуальной информации,
в составе которого выделен модуль объединения видеоизображений, обеспечивающий синхронизацию изображений друг относительно друга до попадания в вещательный тракт и получением итоговой последовательности видеоизображения, сжимаемого и передаваемого по каналу двусторонней связи.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2012150582/08A RU2513722C1 (ru) | 2012-11-27 | 2012-11-27 | Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами и пользовательское устройство воспроизведения - мобильный терминал связи для осуществления способа |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2012150582/08A RU2513722C1 (ru) | 2012-11-27 | 2012-11-27 | Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами и пользовательское устройство воспроизведения - мобильный терминал связи для осуществления способа |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2513722C1 true RU2513722C1 (ru) | 2014-04-20 |
Family
ID=50481032
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2012150582/08A RU2513722C1 (ru) | 2012-11-27 | 2012-11-27 | Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами и пользовательское устройство воспроизведения - мобильный терминал связи для осуществления способа |
Country Status (1)
| Country | Link |
|---|---|
| RU (1) | RU2513722C1 (ru) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2583755C2 (ru) * | 2014-04-16 | 2016-05-10 | Общество с ограниченной ответственностью "Сетевизор" | Способ съемки и отображения зрелищного мероприятия и пользовательский интерфейс для осуществления способа |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004228699A (ja) * | 2003-01-20 | 2004-08-12 | Ud:Kk | 配信方法、配信システム、ストリーミングサーバ、及びコンピュータプログラム |
| RU2341018C2 (ru) * | 2004-04-21 | 2008-12-10 | Самсунг Электроникс Ко., Лтд. | Устройство и способ обработки данных из нескольких источников в беспроводном терминале |
| RU2404519C2 (ru) * | 2006-02-27 | 2010-11-20 | Квэлкомм Инкорпорейтед | Генерирование и выбор медиапотоков |
| RU2427104C2 (ru) * | 2008-05-20 | 2011-08-20 | ЭлДжи ЭЛЕКТРОНИКС ИНК. | Мобильный терминал и способ загрузки контента на него |
-
2012
- 2012-11-27 RU RU2012150582/08A patent/RU2513722C1/ru active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004228699A (ja) * | 2003-01-20 | 2004-08-12 | Ud:Kk | 配信方法、配信システム、ストリーミングサーバ、及びコンピュータプログラム |
| RU2341018C2 (ru) * | 2004-04-21 | 2008-12-10 | Самсунг Электроникс Ко., Лтд. | Устройство и способ обработки данных из нескольких источников в беспроводном терминале |
| RU2404519C2 (ru) * | 2006-02-27 | 2010-11-20 | Квэлкомм Инкорпорейтед | Генерирование и выбор медиапотоков |
| RU2427104C2 (ru) * | 2008-05-20 | 2011-08-20 | ЭлДжи ЭЛЕКТРОНИКС ИНК. | Мобильный терминал и способ загрузки контента на него |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2583755C2 (ru) * | 2014-04-16 | 2016-05-10 | Общество с ограниченной ответственностью "Сетевизор" | Способ съемки и отображения зрелищного мероприятия и пользовательский интерфейс для осуществления способа |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2469853B1 (en) | Method and device for processing video image data, system and terminal for video conference | |
| CN102342066B (zh) | 实时多媒体流处理带宽管理 | |
| US20110018966A1 (en) | Receiving Device, Communication System, Method of Combining Caption With Stereoscopic Image, Program, and Data Structure | |
| EP2563026A2 (en) | Transmission of video content | |
| TWI495331B (zh) | 機上盒、快閃眼鏡及多個用戶同時觀看多套影音節目的方法 | |
| WO2011140812A1 (zh) | 多画面合成方法、系统及媒体处理装置 | |
| KR101841313B1 (ko) | 멀티미디어 흐름 처리 방법 및 대응하는 장치 | |
| CN104822070B (zh) | 多路视频流播放方法及装置 | |
| US20170339469A1 (en) | Efficient distribution of real-time and live streaming 360 spherical video | |
| US10666903B1 (en) | Combining encoded video streams | |
| US20150093096A1 (en) | Audio and video synchronization | |
| WO2013048618A1 (en) | Systems and methods for synchronizing the presentation of a combined video program | |
| KR20150008739A (ko) | 개인화된 비디오 기반의 화면을 제공하는 서버 및 방법, 그리고 디바이스 | |
| KR20150009122A (ko) | 지역 광고를 합성하는 서버 및 장치, 그리고 영상 스트림을 합성하는 서버 | |
| US20230319371A1 (en) | Distribution of Multiple Signals of Video Content Independently over a Network | |
| KR20110134327A (ko) | 영상 처리 방법 및 그에 따른 영상 표시 장치 | |
| JP5941000B2 (ja) | 映像配信装置及び映像配信方法 | |
| JPWO2011089982A1 (ja) | 受信装置、送信装置、通信システム、受信装置の制御方法、及びプログラム | |
| RU2513722C1 (ru) | Способ отображения на экране мобильного терминала связи аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами и пользовательское устройство воспроизведения - мобильный терминал связи для осуществления способа | |
| KR20170130883A (ko) | 하이브리드 망 기반의 가상 현실 방송 서비스 방법 및 장치 | |
| Domański et al. | Demonstration of a simple free viewpoint television system | |
| Niamut et al. | Live event experiences-interactive UHDTV on mobile devices | |
| RU2583755C2 (ru) | Способ съемки и отображения зрелищного мероприятия и пользовательский интерфейс для осуществления способа | |
| KR101306439B1 (ko) | 스테레오스코픽 3ｄ 콘텐츠 프로젝터를 구비한 디지털 단말 장치 및 그 제어 방법 | |
| RU135870U1 (ru) | Пользовательское устройство воспроизведения для отображения аудиовизуального ряда, преимущественно относящегося к одному событию, сформированного при съемках несколькими камерами |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PD4A | Correction of name of patent owner | ||
| PC41 | Official registration of the transfer of exclusive right |
Effective date: 20200227 |