RU2602829C2 - Оценка признаков управления от устройства дистанционного управления с камерой - Google Patents
Оценка признаков управления от устройства дистанционного управления с камерой Download PDFInfo
- Publication number
- RU2602829C2 RU2602829C2 RU2013142937/07A RU2013142937A RU2602829C2 RU 2602829 C2 RU2602829 C2 RU 2602829C2 RU 2013142937/07 A RU2013142937/07 A RU 2013142937/07A RU 2013142937 A RU2013142937 A RU 2013142937A RU 2602829 C2 RU2602829 C2 RU 2602829C2
- Authority
- RU
- Russia
- Prior art keywords
- light
- time interval
- beacon
- remote control
- information
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S1/00—Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/30—User interface
- G08C2201/32—Remote control based on movements, attitude of remote control device
Abstract
Изобретение относится к области дистанционного управления устройствами, а именно к оцениванию признаков управления устройств (10) дистанционного управления, содержащих камеры (11) для обнаружения световых точек (51, 52) от маяков (31, 32), расположенных в устройствах (20) или рядом с ними, которые должны управляться посредством устройств (10) дистанционного управления с помощью предоставления возможности камерам (11) дополнительно обнаруживать световые точки (61, 62) от не маяков (41, 42). Техническим результатом является повышение точности оценки признаков управления. Для этого процессоры (2) оценивают признаки управления в ответ на информацию, полученную в результате обнаружений световых точек (51, 52, 61, 62). Не маяки (41, 42) содержат источники шума или любые другие источники, отличающиеся от маяков (31, 32). Запоминающие устройства (3) хранят за временной интервал информацию, полученную за обнаружение. Свет, приходящий от маяков (31, 32), может быть модулированным светом и свет, приходящий от не маяков (41, 42), может быть другим светом. Информация может содержать координаты, размеры и яркости световых точек (51, 52, 61, 62) за обнаружение и за временной интервал. Признак управления может содержать положение наведения, расстояние, угол поворота, угол наклона, местоположение, скорость, ускорение, перемещение и/или масштабирование устройства (10) дистанционного управления. 4 н. и 9 з.п. ф-лы, 6 ил.
Description
Область техники, к которой относится изобретение
Изобретение относится к устройству оценки по меньшей мере одного признака управления устройства дистанционного управления, причем устройство дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством устройства дистанционного управления.
Изобретение дополнительно относится к устройству дистанционного управления, содержащему устройство оценки, к устройству, содержащему устройство оценки, к способу оценки по меньшей мере одного признака дистанционного управления, устройству дистанционного управления, содержащему камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством дистанционного управления, к компьютерному программному продукту для выполнения этапа способа и к носителю данных, который хранит и содержит компьютерный программный продукт.
Примерами такого устройства являются устройства с дисплеями и другие устройства, которые должны управляться дистанционно.
Уровень техники, к которому относится изобретение
Из технологии Philips® и Wand® известно устройство оценки по меньшей мере одного признака управления для устройства дистанционного управления, причем устройство дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством дистанционного управления.
Проблема может возникнуть, когда также обнаруживается дополнительная световая точка, которая не образуется от маяка, а, например, образуется от источника шума. Существующая технология пытается фильтровать и/или удалять такие дополнительные световые точки, что не всегда легко.
Документ US2006/0023111 А1 раскрывает систему и способ обнаружения по меньшей мере одного признака экрана устройства отображения для дистанционного управления курсором. Этим признаком может быть край, угол или центр экрана. Система определяет местоположение или перемещение устройства дистанционного управления относительно экрана. Дистанционное устройство содержит камеру и поляризационный фильтр. Камера принимает ряд изображений для слежения за движением признака экрана, который отражает движение дистанционного устройства. Поляризационный фильтр имеет первую и вторую области с различными углами поляризации. Фильтруя свет с помощью этого фильтра перед получением изображения, признак экрана может быть обнаружен и отличен от объектов в фоновой области.
Документ US2008/0121782 А1 раскрывает систему дистанционного управления, способную отличать заданные источники света от посторонних источников света. Система использует известное геометрическое положение сигнатурной длины волны маяков, чтобы отфильтровывать посторонний свет.
Сущность изобретения
Задача настоящего изобретения состоит в обеспечении улучшенного устройства для оценки по меньшей мере одного признака управления устройства дистанционного управления, причем устройство дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством дистанционного управления.
Дополнительными задачами изобретения являются обеспечение устройства дистанционного управления, содержащего устройство оценки, устройства, содержащего устройство оценки, способа оценки по меньшей мере одного признака управления для устройства дистанционного управления, причем устройство дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством дистанционного управления, компьютерный программный продукт для выполнения этапа способа и носитель, который хранит и содержит компьютерный программный продукт.
В соответствии с первым аспектом, обеспечено устройство оценки по меньшей мере одного признака управления для устройства дистанционного управления, причем устройство дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством дистанционного управления, и для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного не маяка, причем свет, приходящий по меньшей мере от одного маяка, отличается от света, приходящего по меньшей мере от одного не маяка, при этом устройство содержит:
- процессор для оценки по меньшей мере одного признака управления в ответ на информацию, полученную в результате обнаружения световых точек.
Для оценки по меньшей мере одного признака управления процессор не только использует информацию, полученную в результате обнаружения световой точки от маяка, но также использует информацию, полученную в результате обнаружения световой точки от не маяка. Другими словами, световая точка, образующаяся от источника шума, которая в прошлом должна была фильтроваться и/или удаляться, теперь используется для создания дополнительной информации. Наличие дополнительной информации может использоваться для компенсации отсутствующей информации и для создания большего количества информации, чтобы улучшить оценку признака управления.
Не маяк содержит источник шума или любой другой источник, отличающийся от маяка.
Вариант осуществления устройства задан по меньшей мере одной световой точкой, образующейся от по меньшей мере одного маяка, содержащего первую и/или вторую световые точки, образующиеся от первого и/или второго маяков, и по меньшей мере одной световой точкой, образующейся от по меньшей мере одного не маяка, содержащего третью и/или четвертую световые точки, образующиеся от первого и/или второго не маяков, при этом камера выполнена с возможностью обнаружения первой и/или второй световых точек за временной интервал и третьей и/или четвертой световых точек за временной интервал, информация содержит первую и/или вторую информацию, полученную в результате первого и/или второго обнаружений первой и/или второй световых точек за временной интервал, и третью и/или четвертую информацию, полученную в результате третьего и/или четвертого обнаружений третьей и/или четвертой световых точек за временной интервал, и устройство дополнительно содержит:
- запоминающее устройство для хранения за временной интервал первой и/или второй информации и третьей и/или четвертой информации.
Обнаруживая световые точки за временной интервал и сохраняя информацию за временной интервал, можно осуществлять слежение за световыми точками и собирать больше информации. Дополнительная световая точка от третьего маяка или дополнительные световые точки от третьего и четвертого маяков и т.д. не должны исключаться. А также не должны исключаться дополнительная световая точка от третьего не маяка или также дополнительные световые точки от третьего и четвертого не маяков и т.д.
Вариант осуществления устройства задан тем, что когда из первого и/или второго маяков присутствует только первый маяк и когда из первого и/или второго не маяков присутствует только первый не маяк, в случае, когда первая световая точка не может быть обнаружена во временном интервале, процессор выполнен с возможностью оценки первой информации для этого временного интервала посредством обработки третьей информации для этого временного интервала и первой и третьей информации для предыдущего временного интервала. Этот вариант осуществления задает оценку в случае, когда присутствуют один маяк и один не маяк.
Вариант осуществления устройства задан тем, что, когда из первого и/или второго маяков присутствуют первый и/или второй маяк и когда из первого и/или второго не маяков присутствует только первый не маяк, в случае, когда первая световая точка не может быть обнаружена во временном интервале, процессор выполнен с возможностью оценки первой информации для этого временного интервала посредством обработки второй и третьей информации для этого временного интервала и первой, второй и третьей информации для предыдущего временного интервала. Этот вариант осуществления задает оценку в случае, когда присутствуют два маяка и один не маяк.
Вариант осуществления устройства задан тем, что когда из первого и/или второго маяков присутствуют первый маяк и второй маяк и когда из первого и/или второго не маяков присутствуют первый не маяк и второй не маяк, в случае, когда первая световая точка не может быть обнаружена во временном интервале, процессор выполнен с возможностью оценки первой информации для этого временного интервала посредством обработки второй, третьей и четвертой информации для этого временного интервала и первой, второй, третьей и четвертой информации для предыдущего временного интервала. Этот вариант осуществления задает оценку в случае, когда присутствуют один маяк и два не маяка.
Вариант осуществления устройства задан тем, что, когда из первого и/или второго маяков присутствуют первый маяк и второй маяк и когда из первого и/или второго не маяков присутствуют первый не маяк и второй не маяк, процессор выполнен с возможностью улучшения оценки по меньшей мере одного признака управления в ответ на первую, вторую, третью и четвертую информацию для этого временного интервала и/или первую, вторую, третью и четвертую информацию для предыдущего временного интервала. Этот вариант осуществления задает улучшение оценки в случае, когда присутствуют два маяка и два не маяка.
Вариант осуществления устройства задан светом, приходящим по меньшей мере от одного маяка, являющимся модулированным светом, и светом, приходящим по меньшей мере от одного не маяка, являющегося другим светом.
Вариант осуществления устройства задан информацией, содержащей координату и/или размер и/или яркость за определение и за временной интервал.
Вариант осуществления устройства задан по меньшей мере одним признаком управления, содержащим положение наведения на устройство и/или расстояние между устройством дистанционного управления и устройством и/или угол поворота устройства дистанционного управления и/или угол наклона устройства дистанционного управления и/или местоположение устройства дистанционного управления относительно устройства.
Вариант осуществления устройства задан по меньшей мере одним признаком управления, содержащим скорость устройства дистанционного управления и/или ускорение устройства дистанционного управления и/или перемещение устройства дистанционного управления и/или масштабирование устройства дистанционного управления.
В соответствии со вторым аспектом, обеспечено устройство дистанционного управления, содержащее устройство, как определено выше.
В соответствии с третьим аспектом, обеспечено устройство, содержащее устройство, описанное выше.
В соответствии с четвертым аспектом, обеспечен способ оценки по меньшей мере одного признака управления для устройства дистанционного управления, причем устройство дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка, расположенного на устройстве или рядом с устройством, которое должно управляться посредством устройства дистанционного управления, и для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного не маяка, причем свет, приходящий по меньшей мере от одного маяка отличается от света, приходящего по меньшей мере от одного не маяка, и упомянутый способ содержит этап, на котором:
- оценивают по меньшей мере один признак управления в ответ на информацию, полученную в результате обнаружения световых точек.
В соответствии с пятым аспектом, обеспечен компьютерный программный продукт для выполнения этапа способа, определенного выше.
В соответствии с шестым аспектом, обеспечивается носитель, на котором находится и хранится компьютерный программный продукт, определенный выше.
Следует понимать, что обнаружение дополнительной световой точки, которая образуется от не маяка, может использоваться для создания дополнительной информации.
Основная идея может состоять в том, что признак управления должен быть оценен в ответ на информацию, полученную при обнаружении световых точек от маяка, а также от не маяка.
Проблема обеспечения улучшенного устройства оценки по меньшей мере одного признака управления устройства дистанционного управления была решена.
Дополнительное преимущество может состоять в том, что объем обработки для фильтрации и/или устранения световой точки, образующейся от не маяка, можно уменьшить и/или исключить.
Эти и другие варианты изобретения будут совершенно понятны из подробного описания со ссылкой на варианты осуществления, описанные здесь далее.
Краткое описание чертежей
На чертежах:
Фиг. 1 показывает используемые устройство дистанционного управления и устройство, а также маяки, находящиеся около устройства, и не маяки;
Фиг. 2 схематично показывает устройство дистанционного управления и устройство, причем устройство дистанционного управления содержит устройство оценки и камеру;
Фиг. 3 показывает первые отображения, созданные камерой дистанционного управления для двух разных временных интервалов;
Фиг. 4 показывает вторые отображения, созданные камерой дистанционного управления для двух разных временных интервалов;
Фиг. 5 показывает третьи отображения, созданные камерой дистанционного управления для двух разных временных интервалов, и
Фиг. 6 схематично показывает устройство дистанционного управления и устройство, причем устройство дистанционного управления содержит камеру, а устройство содержит устройство оценки.
Подробное описание вариантов осуществления
На фиг. 1 показаны используемые устройство 10 дистанционного управления 10 и устройство 20. Около устройства 20 показаны маяки 31 и 32. Альтернативно, эти маяки 31 и 32 могут являться частью устройства 20. Дополнительно, показаны не маяки 41 и 42. Свет, приходящий от маяков 31 и 32, является, например, инфракрасным светом и/или, например, светом, модулированным по частоте, длине волны, яркости, режиму включения/выключения и т.д. Свет, приходящий от не маяков 41 и 42, является другим светом, например, другим инфракрасным светом и/или иначе модулированным светом или немодулированным светом. Не маяки 41 и 42 являются, например, источниками шума, такими как лампы, отражения, солнечный свет и т. д.
На фиг. 2 схематично показаны устройство 10 дистанционного управления и устройство 20. Устройство 10 дистанционного управления содержит устройство 1 и камеру 11. Камера 11 связана с контроллером 12. С одной стороны контроллер 12 связан с передатчиком 13, с другой стороны контроллер 12 связан с процессором 2 устройства 1. Процессор 2 связан с запоминающим устройством 3 устройства 1. Передатчик 13 посылает данные управления приемнику 21, связанному с устройством 20, чтобы управлять устройством 20. Камера 11 обнаруживает световые точки на отображении за временной интервал, причем световые точки образуются от маяков 31 и 32 и не маяков 41 и 42, как показано на фиг. 3-5. Обмен данными управления обычно производится посредством беспроводных технологий, например, посредством радиочастотного сигнала или другого беспроводного сигнала.
Альтернативно, устройство 1 может являться частью контроллера 12 или наоборот. Альтернативно, устройство 1 может занимать место контроллера 12 или устройство 1 может быть расположено между контроллером 12 и передатчиком 13. Приемник 21 может альтернативно являться частью устройства 20 и т.д.
Также, как показано на фиг. 3-5, камера 11 обнаруживает первую и/или вторую световые точки 51 и/или 52, образующиеся от маяков 31 и/или 32, и обнаруживает третью и/или четвертую световые точки 61 и/или 62, образующиеся от не маяков 41 и/или 42. Процессор 2 оценивает по меньшей мере один признак управления в ответ на информацию, полученную в результате обнаружения световых точек 51, 52, 61 и/или 62. Этот признак управления должен посылаться устройству 20 в качестве данных управления или должен быть преобразован в данные управления для управления устройством 20.
Камера 11 предпочтительно выполнена с возможностью обнаружения первой и/или второй световых точек 51 и 52 за временной интервал и третьей и/или четвертой световых точек 61 и 62 за временной интервал. Информация содержит первую и/или вторую информацию, полученную в результате первого и/или второго обнаружений первой и/или второй световых точек 51 и 52 за временной интервал и третьей и/или четвертой информации, полученной в результате третьего и/или четвертого обнаружений третьей и/или четвертой световых точек 61 и 62 за временной интервал. Запоминающее устройство 3 сохраняет за временной интервал первую и/или вторую информацию и третью и/или четвертую информацию.
Информация содержит, например, координату и/или размер и/или яркость (световой точки 51, 52, 61 и/или 62) за обнаружение и за временной интервал. По меньшей мере один признак управления может содержать положение наведения на устройство 20 и/или расстояние между устройством 10 дистанционного управления и устройством 20 и/или угол поворота устройства 10 дистанционного управления и/или угол наклона устройства 10 дистанционного управления и/или местоположение устройства 10 дистанционного управления относительно устройства 20. По меньшей мере один признак управления может содержать скорость устройства 10 дистанционного управления и/или ускорение устройства 10 дистанционного управления и/или перемещение устройства 10 дистанционного управления и/или масштабирование устройства 10 дистанционного управления. Масштабирование или его изменение могут дополнительно использоваться для передачи команд устройству 20. Устройство 10 дистанционного управления может добавлять дополнительные данные к данным управления для передачи команд устройству 20, например, в ответ на нажатую пользователем кнопку или, например, в ответ на данные, поступающие от датчика ускорения или датчика наклона и т.д.
Чтобы иметь возможность отличить свет, поступающий от маяка 31-32, с одной стороны, и не маяка 41-42, с другой стороны, камера 11 может быть, например, выполнена с возможностью обнаружения частоты или длины волны или яркости или режима включения/выключения и т.д. модулированного света от маяка 31-32 и/или, например, камера 11 может быть выполнена с возможностью обнаружения признака по-другому модулированного света или немодулированного света от не маяка 41-42. Обнаружения частоты и длины волны и яркости и режима включения/выключения и т.д. являются обычными в данной области техники. Кроме того, для обнаружения режима включения/выключения может оказаться необходимым выбирать длительность временного интервала, большую, чем период режима включения/выключения, и/или может оказаться необходимым выбрать период включения/выключения более коротким, чем длительность временного интервала, и/или дополнительное время (если имеется) между двумя последовательными временными интервалами может оказаться необходимым выбрать должным образом по сравнению с периодом режима включения/выключения, и/или может оказаться необходимым выбирать период включения/выключения должным образом по сравнению с дополнительным временем (если имеется) между двумя последовательными временными интервалами, и/или может оказаться необходимым использовать несколько временных интервалов и т.д. Упомянутые процессы обнаружения могут альтернативно быть переданы частично или полностью от камеры 11 контроллеру 12 и/или устройству 1.
На фиг. 3 показаны первые отображения, созданные камерой 11 устройства 10 дистанционного управления для двух разных временных интервалов. В этом случае маяк 32 и не маяк 42, например, не присутствуют или закрыты все время. В первом временном интервале или в первый момент времени камера 11 создает отображение, содержащее световую точку 51 от маяка 31, и световую точку 61 от маяка 41. Во втором временном интервале или во второй момент времени камера 11 создает отображение, содержащее световую точку 61 от маяка 41, только вследствие того, что световая точка 51 от маяка 31 временно не может быть обнаружена, как обозначено пунктирной линией. Однако, при использовании информации из обоих отображений, новое положение световой точки 51 может быть вычислено, здесь, например, при предположении, что никакое вращение не имело место. Ясно, что пользователь, по сравнению с первым временным интервалом, наводит немного больше влево во втором временном интервале вследствие того, что световые точки 51 и 61 располагаются немного больше справа.
На фиг. 4 показаны вторые отображения, созданные камерой 11 устройства 10 дистанционного управления для двух разных временных интервалов. В этом случае не маяк 42, например, не присутствует или закрыт все время. В первом временном интервале или в первый момент времени камера 11 создает отображение, содержащее световую точку 51 от маяка 31, световую точку 52 от маяка 32 и световую точку 61 от маяка 41. Во втором временном интервале или во второй момент времени камера 11 создает отображение, содержащее световую точку 52 от маяка 32 и световую точку 61 от маяка 41 только за счет того, что световая точка 51 от маяка 31 временно не обнаруживается, что обозначено пунктирной линией.
Однако, при использовании информации обоих отображений, может быть вычислено новое положение световой точки 51. Ясно, что пользователь, по сравнению с первым временным интервалом, наводит несколько ниже во втором временном интервале из-за того, что световые точки 51, 52 и 61 располагаются немного выше.
На фиг. 5 показаны третьи отображения, созданные камерой 11 устройства 10 дистанционного управления для двух разных временных интервалов. В первом временном интервале или в первый момент времени камера 11 создает отображение, содержащее световую точку 51 от маяка 31, световую точку 52 от маяка 32, световую точку 61 от маяка 41 и световую точку 62 от маяка 42. Во втором временном интервале или во второй момент времени камера 11 создает изображение, содержащее световую точку 52 от маяка 32, световую точку 61 от маяка 41 и световую точку 62 от маяка 42 только за счет того, что световая точка 51 от маяка 31 временно не обнаруживается, что обозначено пунктирной линией. Однако, при использовании информации обоих отображений, новое положение световой точки 51 может быть вычислено. Ясно, что пользователь, по сравнению с первым временным интервалом, во втором временном интервале наводит немного выше из-за того, что световые точки 51, 52, 61 и 62 располагаются немного ниже. Здесь для оценки местоположения отсутствующей световой точки может использоваться аффинное преобразование.
Предпочтительно, процессор 3 выполнен с возможностью улучшения оценки по меньшей мере одного признака управления в ответ на первую, вторую, третью и четвертую информацию для второго временного интервала и/или первую, вторую, третью и четвертую информацию для первого временного интервала. Ясно, что когда доступно больше информации, чем это совершенно необходимо, информация может быть проверена на неправильность и оценки могут быть улучшены.
Смотря на отображения, полученные в разные временные интервалы, преобразования, углы ворота, углы наклона, масштабирования, смещения и т.д. могут быть определены и назначения могут быть проверены и/или скорректированы. При большом количестве отображений, временных интервалов и световых точек не следует делать из них исключений. Временной интервал может иметь любую длительность и может содержать один момент во времени или больше, чем один момент во времени. Между двумя последовательными временными интервалами может присутствовать или не присутствовать дополнительное время.
Обычно световая точка будет охватывать больше одного пикселя. В случае, если форма световой точки или яркость световой точки не являются совершенно симметричными, для каждой точки света может быть определен угол поворота, сравнивая оба отображения. В случае, если форма световой точки и яркость световой точки совершенно симметричны, для двух или более световых точек требуется определить угол поворота, сравнивая оба отображения. Световые точки могут быть также известны как пятна. Данные пятна могут содержать координатные данные, данные размера и данные яркости.
Система интерфейса пользователя, такая как система управления на основе указателей или жестов, содержит устройство дистанционного управления с камерой, такое как устройство указателя на основе камеры, и такое устройство, как целевое устройство, и маяк, такой как стационарный маяк. Маяк может содержать, например, светодиоды инфракрасного свечения. Данные пятен от восьми пятен могут быть посланы устройству, которое может обработать данные пятен и использовать результат обработки для управления устройством, например, адаптируя графический интерфейс пользователя на экране отображения. Чтобы иметь возможность надежно обнаруживать пятна от любых других источников шума, пятна, обнаруженные камерой, должны отслеживаться посредством кадров, так чтобы, например, их модуляция яркости могла коррелироваться во времени и проверяться относительно известной модуляции маяков. Маяки могут дополнительно иметь известное расстояние между ними и/или известные местоположения относительно друг друга и/или относительно устройства. Используя отображения с пятнами в соседних кадрах, могут быть оценены положения отсутствующих, закрытых препятствием пятен. Более надежного слежения за маяками можно достигнуть, используя пятна от одного или более источников шума.
На фиг. 6 схематично показаны устройство 10 дистанционного управления и устройство 20, устройство 10 дистанционного управления содержит камеру 11 и устройство 20 содержит устройство 1. Фиг. 6 отличается от фиг. 2 тем, что устройство 1 перемещено из устройства 10 дистанционного управления в устройство 20. Дополнительно, маяки 31 и 32 и приемник 21 являются частью устройства 20, которое дополнительно содержит экран 22, связанный с контроллером 23, который связан с приемником 21 и процессором 3 устройства 1. В этом случае передатчик 13 будет посылать данные отображения приемнику 21, чтобы управлять устройством 20. В дополнение, внутри или около устройства 20, данные отображения должны обрабатываться, как обсуждается для фиг. 2-5.
Альтернативно, устройство 1 может являться частью контроллера 23 или наоборот. Альтернативно, устройство 1 может занимать место контроллера 23 или устройство 1 может быть расположено между контроллером 23 и приемником 21 и т.д.
Альтернативно, устройство 1 может быть расположено вне устройства 10 дистанционного управления и/или вне устройства 20 и быть выполнено с возможностью осуществления связи посредством проводной или беспроводной связи с устройством 10 дистанционного управления и/или устройством 20.
Подводя итог, устройство 1 оценивает признаки управления устройства 10 дистанционного управления, содержащего камеру 11 для обнаружения световых точек 51, 52 от маяков 31, 32, расположенных внутри или рядом с устройствами 20, которые должны управляться посредством устройства 10 дистанционного управления с помощью предоставления возможности камерам 11 дополнительно обнаруживать световые точки 61, 62 от не маяков 41, 42. Процессоры 2 оценивают признаки управления в ответ на информацию, полученную при обнаружении световых точек 51, 52, 61, 62. Не маяки 41, 42 содержат источники шума или любые другие источники, отличающиеся от маяков 31, 32. Запоминающие устройства 3 сохраняют за временной интервал информацию, полученную за обнаружение. Свет, приходящий от маяков 31, 32, может быть модулированным, а свет, приходящий от не маяков 41, 42, может быть другим светом. Информация может содержать координаты, размеры и яркость световых точек 51, 52, 61, 62, полученные за обнаружение и за временной интервал. Признак управления может содержать положение наведения, расстояние, угол поворота, угол наклона, местоположение, скорость, ускорение, перемещение и/или масштабирование устройства 10 дистанционного управления.
Хотя изобретение было показано и подробно описано на чертежах и в предшествующем описании, такие показ и описание следует считать иллюстративными или приведенными в качестве примера и не создающими ограничений; изобретение не ограничивается раскрытыми вариантами осуществления. Например, устройство (20) повсюду в тексте и формуле изобретения может быть заменено объектом, связанным с устройством (20). Как пример, наведение в ближнем направлении маяка, который находится вблизи рельефной поверхности радиатора (объект), может использоваться для формирования управляющего сигнала для связанного с ним центрального отопления (устройства). Другим примером являются жалюзи (объект), которые могут управляться, даже когда наведение на них (невидимых пользователю) ослепляет контроллер (устройство).
Другие изменения в раскрытых вариантах осуществления могут быть поняты и осуществлены специалистами в данной области техники при практической реализации заявленного изобретения, исходя из изучения чертежей, раскрытия и приложенной формулы изобретения. В формуле изобретения слово "содержащий" не исключает другие элементы или этапы, и единственное число не исключает множественное число. Простой факт, что некоторые меры приводятся во взаимно различных зависимых пунктах формулы изобретения, не указывает, что объединение этих мер не может использоваться для достижения преимущества. Любые ссылочные позиции в формуле изобретения не должны истолковываться как ограничение объема изобретения.
Claims (13)
1. Устройство (1) оценки по меньшей мере одного признака управления устройства (10) дистанционного управления, причем устройство (10) дистанционного управления содержит камеру (11) для обнаружения по меньшей мере одной световой точки (51, 52), образующейся от по меньшей мере одного маяка (31, 32), расположенного в устройстве (20) или рядом с ним, которое должно управляться посредством устройства (10) дистанционного управления, причем по меньшей мере одна световая точка (51, 52), образующаяся от по меньшей мере одного маяка (31, 32), содержит первую и/или вторую световые точки (51, 52), образующиеся от первого и/или второго маяков (31, 32), и для обнаружения по меньшей мере одной световой точки (61, 62), образующейся от по меньшей мере одного не маяка (41, 42), содержащего любой другой источник света, отличный по меньшей мере от одного маяка, причем по меньшей мере одна световая точка (61, 62), образующаяся от по меньшей мере одного не маяка (41, 42), содержит третью и/или четвертую световые точки (61, 62), образующиеся от первого и/или второго не маяков (41, 42), при этом камера (11) выполнена с возможностью обнаружения первой и/или второй световых точек (51, 52) за временной интервал и третьей и/или четвертой световых точек (61, 62) за временной интервал, при этом упомянутое устройство (1) содержит:
- процессор (2) для оценки по меньшей мере одного признака управления в ответ на информацию, полученную в результате обнаружений как по меньшей мере одной световой точки (51, 52) от по меньшей мере одного маяка (31, 32), так и по меньшей мере одной световой точки (61, 62) от по меньшей мере одного не маяка (41, 42), причем информация содержит первую и/или вторую информацию, полученную в результате первого и/или второго обнаружений первой и/или второй световых точек (51, 52) за временной интервал, и третью и/или четвертую информацию, полученную в результате третьего и/или четвертого обнаружений третьей и/или четвертой световых точек (61, 62) за временной интервал; и
- запоминающее устройство (3) для сохранения за временной интервал первой и/или второй информации и третьей и/или четвертой информации.
- процессор (2) для оценки по меньшей мере одного признака управления в ответ на информацию, полученную в результате обнаружений как по меньшей мере одной световой точки (51, 52) от по меньшей мере одного маяка (31, 32), так и по меньшей мере одной световой точки (61, 62) от по меньшей мере одного не маяка (41, 42), причем информация содержит первую и/или вторую информацию, полученную в результате первого и/или второго обнаружений первой и/или второй световых точек (51, 52) за временной интервал, и третью и/или четвертую информацию, полученную в результате третьего и/или четвертого обнаружений третьей и/или четвертой световых точек (61, 62) за временной интервал; и
- запоминающее устройство (3) для сохранения за временной интервал первой и/или второй информации и третьей и/или четвертой информации.
2. Устройство (1) по п. 1, в котором информация содержит по меньшей мере одно из: координаты, размера или яркости соответствующей световой точки.
3. Устройство (1) по п. 1, в котором, когда из первого и/или второго маяков (31, 32) присутствует только первый маяк (31) и когда из первого и/или второго не маяков (41, 42) присутствует только первый не маяк (41), в случае, когда первая световая точка (51) не может быть обнаружена во временном интервале, процессор (2) выполнен с возможностью оценки первой информации для этого временного интервала посредством обработки третьей информации для этого временного интервала и первой и третьей информации для предыдущего временного интервала.
4. Устройство (1) по п. 1, в котором, когда из первого и/или второго маяков (31, 32) присутствуют первый маяк (31) и второй маяк (32) и когда из первого и/или второго не маяков (41, 42) присутствует только первый не маяк (41), в случае, когда первая световая точка (51) не может быть обнаружена во временном интервале, процессор (2) выполнен с возможностью оценки первой информации для этого временного интервала посредством обработки второй и третьей информации для этого временного интервала и первой, второй и третьей информации для предыдущего временного интервала.
5. Устройство (1) по п. 1, в котором, когда из первого и/или второго маяков (31, 32) присутствуют первый маяк (31) и второй маяк (32) и когда из первого и/или второго не маяков (41, 42) присутствуют первый не маяк (41) и второй не маяк (42), в случае, когда первая световая точка (51) не может быть обнаружена во временном интервале, процессор (3) выполнен с возможностью оценки первой информации для этого временного интервала посредством обработки второй, третьей и четвертой информации для этого временного интервала и первой, второй, третьей и четвертой информации для предыдущего временного интервала.
6. Устройство (1) по п. 1, в котором, когда из первого и/или второго маяков (31, 32) присутствуют первый маяк (31) и второй маяк (32) и когда из первого и/или второго не маяков (41, 42) присутствуют первый не маяк (41) и второй не маяк (42), процессор (3) выполнен с возможностью улучшения оценки по меньшей мере одного признака управления в ответ на первую, вторую, третью и четвертую информацию для этого временного интервала и/или первую, вторую, третью и четвертую информацию для предыдущего временного интервала.
7. Устройство (1) по п. 1, в котором свет, приходящий от по меньшей мере одного маяка (31, 32), является модулированным светом и свет, приходящий от по меньшей мере одного не маяка (41, 42), является другим светом.
8. Устройство (1) по п. 2, в котором информация содержит координату и/или размер, и/или яркость за обнаружение и за временной интервал.
9. Устройство (1) по п. 1, в котором по меньшей мере один признак управления содержит положение наведения на устройство (20) и/или расстояние между устройством (10) дистанционного управления и устройством (20), и/или угол поворота устройства (10) дистанционного управления, и/или угол наклона устройства (10) дистанционного управления, и/или местоположение устройства (10) дистанционного управления относительно устройства (20).
10. Устройство (1) по п. 2, в котором по меньшей мере один признак управления содержит скорость устройства (10) дистанционного управления и/или ускорение устройства (10) дистанционного управления и/или перемещение устройства (10) дистанционного управления и/или масштабирование устройства (10) дистанционного управления.
11. Устройство (10) дистанционного управления, содержащее устройство (1) по п. 1.
12. Способ оценки по меньшей мере одного признака управления устройства (10) дистанционного управления, причем устройство (10) дистанционного управления содержит камеру для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного маяка (31, 32), расположенного на устройстве (20) или рядом с ним, которое должно управляться посредством устройства (10) дистанционного управления, причем по меньшей мере одна световая точка (51, 52), образующаяся от по меньшей мере одного маяка (31, 32), содержит первую и/или вторую световые точки (51, 52), образующиеся от первого и/или второго маяков (31, 32), и для обнаружения по меньшей мере одной световой точки, образующейся от по меньшей мере одного не маяка (41, 42), являющегося любым другим источником света, отличающимся от по меньшей мере одного маяка, причем по меньшей мере одна световая точка (61, 62), образующаяся от по меньшей мере одного не маяка (41, 42), содержит третью и/или четвертую световые точки (61, 62), образующиеся от первого и/или второго не маяков (41, 42), при этом камера (11) выполнена с возможностью обнаружения первой и/или второй световых точек (51, 52) за временной интервал и третьей и/или четвертой световых точек (61, 62) за временной интервал, при этом упомянутый способ содержит этапы, на которых:
- оценивают по меньшей мере один признак управления в ответ на информацию, полученную в результате обнаружений как по меньшей мере одной световой точки (51, 52) от по меньшей мере одного маяка (31, 32), так и по меньшей мере одной световой точки (61, 62) от по меньшей мере одного не маяка (41, 42), причем информация содержит первую и/или вторую информацию, полученную в результате первого и/или второго обнаружений первой и/или второй световых точек (51, 52) за временной интервал, и третью и/или четвертую информацию, полученную в результате третьего и/или четвертого обнаружений третьей и/или четвертой световых точек (61, 62) за временной интервал; и
- сохраняют за временной интервал первую и/или вторую информацию и третью и/или четвертую информацию.
- оценивают по меньшей мере один признак управления в ответ на информацию, полученную в результате обнаружений как по меньшей мере одной световой точки (51, 52) от по меньшей мере одного маяка (31, 32), так и по меньшей мере одной световой точки (61, 62) от по меньшей мере одного не маяка (41, 42), причем информация содержит первую и/или вторую информацию, полученную в результате первого и/или второго обнаружений первой и/или второй световых точек (51, 52) за временной интервал, и третью и/или четвертую информацию, полученную в результате третьего и/или четвертого обнаружений третьей и/или четвертой световых точек (61, 62) за временной интервал; и
- сохраняют за временной интервал первую и/или вторую информацию и третью и/или четвертую информацию.
13. Носитель данных, на котором хранится и содержится компьютерный программный продукт для выполнения этапа способа по п. 12.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP11155161.0 | 2011-02-21 | ||
| EP11155161 | 2011-02-21 | ||
| PCT/IB2012/050728 WO2012114240A1 (en) | 2011-02-21 | 2012-02-17 | Estimating control feature from remote control with camera |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2013142937A RU2013142937A (ru) | 2015-03-27 |
| RU2602829C2 true RU2602829C2 (ru) | 2016-11-20 |
Family
ID=45774288
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2013142937/07A RU2602829C2 (ru) | 2011-02-21 | 2012-02-17 | Оценка признаков управления от устройства дистанционного управления с камерой |
Country Status (8)
| Country | Link |
|---|---|
| US (2) | US9332169B2 (ru) |
| EP (1) | EP2678847B1 (ru) |
| JP (2) | JP6050258B2 (ru) |
| CN (1) | CN103493115B (ru) |
| BR (1) | BR112013020993A2 (ru) |
| RU (1) | RU2602829C2 (ru) |
| TW (1) | TWI569623B (ru) |
| WO (1) | WO2012114240A1 (ru) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI468997B (zh) | 2013-01-09 | 2015-01-11 | Pixart Imaging Inc | 具有較大可操作範圍的指向系統及影像系統 |
| EP4124178A1 (en) | 2015-08-05 | 2023-01-25 | Lutron Technology Company LLC | Commissioning and controlling load control devices |
| US10599174B2 (en) | 2015-08-05 | 2020-03-24 | Lutron Technology Company Llc | Load control system responsive to the location of an occupant and/or mobile device |
| CN112684923B (zh) * | 2021-03-11 | 2021-06-25 | 广东小天才科技有限公司 | 笔迹生成方法、装置、终端设备及计算机存储介质 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2008104864A (ru) * | 2005-07-11 | 2009-08-20 | Конинклейке Филипс Электроникс Н.В. (Nl) | Способ управления позицией контрольной точки в командной области и способ управления устройством |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5504501A (en) * | 1989-11-07 | 1996-04-02 | Proxima Corporation | Optical input arrangement and method of using same |
| US5488675A (en) | 1994-03-31 | 1996-01-30 | David Sarnoff Research Center, Inc. | Stabilizing estimate of location of target region inferred from tracked multiple landmark regions of a video image |
| JP3473989B2 (ja) | 1994-05-20 | 2003-12-08 | 株式会社ワコム | 情報入力装置 |
| JP4641566B2 (ja) | 1996-11-27 | 2011-03-02 | ピーヴィーアイ ヴァーチャル メディア サービスイズ，エルエルシー | 物理的なセンサーおよびパターン認識の結合を用いたビデオストリームへの画像挿入 |
| US6776334B1 (en) * | 2001-02-22 | 2004-08-17 | Advanced Micro Devices, Inc. | System and method for determining the location of a mobile device within a wireless network |
| KR100466857B1 (ko) * | 2001-12-01 | 2005-01-15 | 주식회사 아이콘트롤스 | 인터넷 기반 홈 오토메이션 서버 및 제어 방법 |
| JP2003208260A (ja) | 2002-01-10 | 2003-07-25 | Nippon Hoso Kyokai <Nhk> | ポインティング装置 |
| CN101101520B (zh) * | 2002-11-20 | 2012-11-14 | 皇家飞利浦电子股份有限公司 | 基于指示设备的用户接口系统 |
| US7420542B2 (en) * | 2004-05-25 | 2008-09-02 | Avago Technologies Ecbu Ip Pte Ltd | Apparatus for capturing and analyzing light and method embodied therein |
| US7542072B2 (en) * | 2004-07-28 | 2009-06-02 | The University Of Maryland | Device using a camera and light polarization for the remote displacement of a cursor on a display |
| US8456534B2 (en) * | 2004-10-25 | 2013-06-04 | I-Interactive Llc | Multi-directional remote control system and method |
| US20100141578A1 (en) * | 2005-07-29 | 2010-06-10 | Pioneer Corporation | Image display control apparatus, image display apparatus, remote controller, and image display system |
| JP2009522681A (ja) | 2006-01-05 | 2009-06-11 | ポイントチップス カンパニー リミテッド | イメージセンサーを用いた遠隔ポインティング装置及び方法 |
| JP5261895B2 (ja) * | 2006-07-27 | 2013-08-14 | 株式会社ニコン | 外部装置およびカメラ |
| US7566858B2 (en) * | 2006-11-07 | 2009-07-28 | Apple Inc. | Remote control systems that can distinguish stray light sources |
| TWI330541B (en) * | 2007-01-31 | 2010-09-21 | Pixart Imaging Inc | Control device and method for controlling an image display |
| US8285475B2 (en) * | 2007-03-02 | 2012-10-09 | Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. | Combined beacon and scene navigation system |
| US8237656B2 (en) | 2007-07-06 | 2012-08-07 | Microsoft Corporation | Multi-axis motion-based remote control |
| US20100201812A1 (en) * | 2009-02-11 | 2010-08-12 | Smart Technologies Ulc | Active display feedback in interactive input systems |
-
2012
- 2012-02-17 JP JP2013554044A patent/JP6050258B2/ja active Active
- 2012-02-17 BR BR112013020993A patent/BR112013020993A2/pt not_active IP Right Cessation
- 2012-02-17 EP EP12706705.6A patent/EP2678847B1/en active Active
- 2012-02-17 US US13/983,638 patent/US9332169B2/en active Active
- 2012-02-17 RU RU2013142937/07A patent/RU2602829C2/ru not_active IP Right Cessation
- 2012-02-17 CN CN201280009798.5A patent/CN103493115B/zh active Active
- 2012-02-17 WO PCT/IB2012/050728 patent/WO2012114240A1/en active Application Filing
- 2012-02-20 TW TW101105472A patent/TWI569623B/zh active
-
2016
- 2016-05-02 US US15/144,094 patent/US10051169B2/en active Active
- 2016-11-24 JP JP2016227942A patent/JP6470731B2/ja active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2008104864A (ru) * | 2005-07-11 | 2009-08-20 | Конинклейке Филипс Электроникс Н.В. (Nl) | Способ управления позицией контрольной точки в командной области и способ управления устройством |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2012114240A1 (en) | 2012-08-30 |
| TW201249167A (en) | 2012-12-01 |
| RU2013142937A (ru) | 2015-03-27 |
| US9332169B2 (en) | 2016-05-03 |
| US20130314560A1 (en) | 2013-11-28 |
| JP6470731B2 (ja) | 2019-02-13 |
| JP6050258B2 (ja) | 2016-12-21 |
| JP2017055446A (ja) | 2017-03-16 |
| EP2678847B1 (en) | 2020-07-01 |
| CN103493115B (zh) | 2016-10-12 |
| BR112013020993A2 (pt) | 2019-01-08 |
| CN103493115A (zh) | 2014-01-01 |
| EP2678847A1 (en) | 2014-01-01 |
| JP2014510459A (ja) | 2014-04-24 |
| US20160248961A1 (en) | 2016-08-25 |
| TWI569623B (zh) | 2017-02-01 |
| US10051169B2 (en) | 2018-08-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9465444B1 (en) | Object recognition for gesture tracking | |
| EP2898399B1 (en) | Display integrated camera array | |
| TWI540462B (zh) | 手勢辨識方法及其裝置 | |
| US20160104037A1 (en) | Method and device for generating motion signature on the basis of motion signature information | |
| US20130127705A1 (en) | Apparatus for touching projection of 3d images on infrared screen using single-infrared camera | |
| RU2016138012A (ru) | Система и/или способ распознавания покрытия для стекла | |
| US9766717B2 (en) | Optical pointing system | |
| RU2602829C2 (ru) | Оценка признаков управления от устройства дистанционного управления с камерой | |
| US20160105645A1 (en) | Identification device, method, and computer program product | |
| TWI489326B (zh) | 操作區的決定方法與系統 | |
| US9811916B1 (en) | Approaches for head tracking | |
| US9772679B1 (en) | Object tracking for device input | |
| US20130127704A1 (en) | Spatial touch apparatus using single infrared camera | |
| JP6986079B2 (ja) | 可視光通信の検出及び／又は復号 | |
| US20160019424A1 (en) | Optical touch-control system | |
| JP2014510459A5 (ru) | ||
| US20220091265A1 (en) | Mobile robot generating resized region of interest in image frame and using dual-bandpass filter | |
| US10943109B2 (en) | Electronic apparatus, method for controlling thereof and the computer readable recording medium | |
| KR20180033920A (ko) | 이동 단말기 및 이동 단말기의 동작 방법을 기록한 컴퓨터로 읽을 수 있는 기록 매체 | |
| KR101617738B1 (ko) | 다중 객체 실시간 영상 매핑 시스템 및 방법 | |
| TWI574176B (zh) | 光源擴增實境系統 | |
| KR101695727B1 (ko) | 스테레오 비전을 이용한 위치검출 시스템 및 위치검출 방법 | |
| US9411433B2 (en) | Whiteboard display | |
| TW201814246A (zh) | 影像辨識確定座標與導航裝置 | |
| JP6375279B2 (ja) | 相対位置判定方法、ディスプレイ制御方法、及び当該方法を適用するシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20180218 |