RU2022123665A - Способ оказания помощи пользователю в использовании и/или изучении функций бытового прибора посредством технологии дополнительной реальности - Google Patents

Claims (27)

1. Способ оказания помощи пользователю в использовании и/или изучении функций бытового прибора посредством технологии дополненной реальности, содержащий следующие этапы:

получение по меньшей мере одного цифрового видеопотока бытового прибора или его части посредством устройства пользователя;

на основе вышеуказанного цифрового видеопотока, распознавание средствами электронной обработки нескольких точек бытового прибора или частей бытового прибора, предварительно определенных как значимые, т.е. маркеров, связанных с соответствующими сохраненными цифровыми данными;

выделение определенных значимых частей или точек для пользователя путем наложения соответствующего трехмерного контента дополненной реальности и его привязывания к вышеупомянутым значимым точкам на видеоизображениях бытового прибора, отображаемых визуальным интерфейсом устройства пользователя во время формирования кадров пользователем;

выбор пользователем по меньшей мере одной интересующей значимой точки или части посредством действия выбора, на соответствующий трехмерный контент дополненной реальности;

предоставление пользователю сохраненных цифровых данных, связанных с соответствующей выбранной значимой точкой или частью, путем проекции или отображения вышеупомянутых сохраненных цифровых данных на визуальный интерфейс устройства пользователя.

2. Способ по п. 1, в котором этап получения содержит:

получение пользователем цифрового видеопотока бытового прибора в реальном времени;

отправку цифрового видеопотока, полученного устройством пользователя, на удаленное средство электронной обработки, адаптированное для выполнения этапа распознавания.

3. Способ по п. 1 или 2, в котором этап распознавания включает распознавание нескольких значимых точек или частей бытового прибора на основе визуальных процедур распознавания и/или алгоритмов, применяемых к изображениям, полученным из вышеуказанного цифрового видеопотока.

4. Способ по любому из вышеуказанных пунктов, в котором вышеописанный этап выделения содержит следующее:

анализ изображений видеопотока для определения нескольких значимых точек или частей на изображениях бытового прибора;

связывание трехмерного контента дополненной реальности с соответствующими значимыми точками или частями таким образом, чтобы вышеуказанный трехмерный контент дополненной реальности оставался привязанным к изменяющемуся стечением времени изображению бытового прибора в видеопотоке, получаемом пользователем, причем описанный этап связывания выполняется программным обеспечением управления функциями дополненной реальности.

5. Способ по п. 4, в котором описанный этап связывания осуществляется устройством пользователя, на котором хранится и может выполняться вышеуказанное программное обеспечение управления функциями дополненной реальности.

6. Способ по п. 4 или 5, в котором описанный этап связывания трехмерного контента дополненной реальности с соответствующими значимыми точками или частями, т.е. маркерами, содержит следующее:

размещение маркеров в опорной трехмерной системе координат, которая проецируется в соответствии с плоскостями, распознанными программным обеспечением управления функциями дополненной реальности.

7. Способ по любому из пп. 3-6, где вышеуказанные визуальные процедуры распознавания и/или алгоритмы, применяемые к изображениям, полученным из цифрового видеопотока, и/или вышеуказанные подэтапы анализа изображений видеопотока и связывания трехмерного контента дополненной реальности с соответствующими значимыми точками и частями выполняются одним или несколькими алгоритмами анализа изображений/видео, основанными на методах искусственного интеллекта и/или обученными алгоритмами и/или методами машинного обучения.

8. Способ по п. 7, где вышеупомянутые методы искусственного интеллекта, и/или обученные алгоритмы, и/или методы машинного обучения содержат в том числе обученные глубокие нейронные сети.

9. Способ по любому из вышеуказанных пунктов, содержащий этап связывания распознанной значимой точки или части с соответствующим бытовым прибором, причем этап связывания выполняется на известной идентификационной информации о продукте, или на основе информации о бытовом приборе, полученной от пользователя, или на основе процедуры визуального распознавания бытового прибора.

10. Способ по любому из вышеуказанных пунктов, в котором сохраненные цифровые данные, связанные с соответствующей значимой точкой или частью, содержат следующее:

краткое описание маркера и/или

гипертекст, содержащий видео, и/или аудио, и/или многостраничный текст.

11. Способ по п. 10, в котором цифровые данные содержат интерактивный контент, содержит следующие этапы использования контента дополненной реальности пользователем:

в ответ на первое касание, для выбора контента виртуальной реальности, предоставление пользователю краткого описания или двухмерного контента для маркера путем наложения на изображение, выведенное визуальным интерфейсом устройства пользователя;

в ответ на второе действие для выбора интерактивного двухмерного контента, предоставление пользователю гипертекстовой видео- и/или аудио- и/или многостраничной текстовой информации, путем наложения на изображение, выведенное визуальным интерфейсом устройства пользователя.

12. Способ по любому из вышеуказанных пунктов, в котором вышеуказанные цифровые данные или интерактивный контент содержат доступ к функциям удаленного доступа и/или телеуправления бытовым прибором, которые можно применять через приложения и смартфон.

13. Способ по любому из вышеуказанных пунктов, в котором вышеуказанные цифровые данные или интерактивный контент содержат доступ к функциям электронной коммерции для приобретения принадлежностей и/или расходных материалов через приложения или смартфон.