RU2574586C2

RU2574586C2 - Method and user interaction system for controlling lighting system, portable electronic device and computer programme product

Info

Publication number: RU2574586C2
Application number: RU2013122115/07A
Authority: RU
Inventors: Дмитрий Викторович АЛЯКСЕЕВ; Джонатан Дэвид МЕЙСОН; Дирк Велентинус Рене ЭНГЕЛЕН; Йоханнес ВЕДА; Бартел Маринус ВАН ДЕ СЛЕЙС
Original assignee: Конинклейке Филипс Электроникс Н.В.
Priority date: 2010-10-15
Filing date: 2011-10-13
Publication date: 2016-02-10

Abstract

FIELD: information technology.

SUBSTANCE: invention relates to user interaction systems for controlling lighting systems. The result is achieved due to that the user interaction system comprises a display (106), a means for receiving a location indication, a location identification means and an overlay image creator. The display (106) displays a subarea image and an overlay image. The subarea image is an image of a specific subarea of the environment. The location identification means detects which specific location in the environment is indicated by the location indication. The overlay image creator generates the overlay image. The overlay image comprises information related to a lighting effect which is obtainable by the lighting system at the specific location. The obtainable effect is an effect of at least two controllable light sources of the lighting system. The information which is related to the obtainable lighting effect is based on a lighting system model which represents effects that are obtainable in the environment by controllable light sources of the lighting system.

EFFECT: providing a user interaction system for controlling lighting systems.

11 cl, 11 dwg

Description

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕFIELD OF THE INVENTION

Изобретение относится к системам взаимодействия с пользователем для управления системами освещения.The invention relates to user interaction systems for controlling lighting systems.

УРОВЕНЬ ТЕХНИКИBACKGROUND

Опубликованная патентная заявка WO 2010/079400 раскрывает систему управления для управления одним или несколькими источниками света. Система содержит матрицу датчиков изображения для получения изображения сцены. Свет, излученный источниками света, содержит уникальный код для каждого из источников света. Эти коды обнаруживаются системой. Таким способом система получает сведения о доступных источниках света в окружении и о проекции каждого из источников света. Система представляет изображение сцены пользователю на дисплее и дополняет изображение сцены управляющим изображением, на котором показаны элементы управления. Элементы управления относятся к распознанным источникам света в сцене, и пользователь посредством соответствующих элементов управления может выбирать определенный режим работы для соответствующих источников света. Изображение сцены можно обновлять, чтобы показать результат управления источниками света. В варианте осуществления пользователь может выбрать зону в изображении сцены и обеспечить нужный эффект освещения для выбранной зоны. Система использует алгоритм интеллектуального отображения для управления световыми устройствами, чтобы оптимально воспроизвести запрошенный эффект освещения.Published patent application WO 2010/079400 discloses a control system for controlling one or more light sources. The system contains an image sensor matrix for acquiring a scene image. The light emitted by the light sources contains a unique code for each of the light sources. These codes are detected by the system. In this way, the system receives information about the available light sources in the environment and about the projection of each of the light sources. The system presents the scene image to the user on the display and complements the scene image with a control image that shows the controls. The controls relate to the recognized light sources in the scene, and the user, through the appropriate controls, can select a specific mode of operation for the respective light sources. The scene image can be updated to show the result of controlling the light sources. In an embodiment, the user can select a zone in the scene image and provide the desired lighting effect for the selected zone. The system uses an intelligent mapping algorithm to control lighting devices to optimally reproduce the requested lighting effect.

Когда пользователь обеспечивает системе изложенного уровня техники некий эффект, пользователю заранее не понятно, достижим ли этот эффект. Таким образом, в системе изложенного уровня техники может произойти так, что пользователь запрашивает эффект для определенной зоны, а эффект не является достижимым из-за ограниченных возможностей системы освещения. Система цитированного уровня техники обеспечивает только обратную связь пользователю посредством обновления изображения сцены и/или управления источниками света в реальной сцене, и эта обратная связь показывает, является ли запрошенный эффект освещения достижимым. Это неудобно для пользователя.When a user provides a certain effect to a system of the state of the art, it is not clear to the user whether this effect is achievable. Thus, in the system of the described prior art, it may happen that the user requests an effect for a certain area, and the effect is not achievable due to the limited capabilities of the lighting system. The cited prior art system provides only feedback to the user by updating the scene image and / or controlling the light sources in the real scene, and this feedback indicates whether the requested lighting effect is achievable. This is inconvenient for the user.

РАСКРЫТИЕ ИЗОБРЕТЕНИЯSUMMARY OF THE INVENTION

Цель изобретения - обеспечить более удобную для пользователя систему взаимодействия с пользователем для управления системой освещения.The purpose of the invention is to provide a more user-friendly user interaction system for controlling a lighting system.

Первый аспект изобретения обеспечивает систему взаимодействия с пользователем по п. 1 формулы изобретения. Второй аспект изобретения обеспечивает портативное электронное устройство по п. 12 формулы изобретения. Третий аспект изобретения обеспечивает способ управления системой освещения по п. 13 формулы изобретения. Четвертый аспект изобретения обеспечивает компьютерный программный продукт по п. 14 формулы изобретения. Предпочтительные варианты осуществления определяются в зависимых пунктах формулы изобретения.The first aspect of the invention provides a user interaction system according to claim 1. A second aspect of the invention provides a portable electronic device according to claim 12. A third aspect of the invention provides a method for controlling a lighting system according to claim 13. A fourth aspect of the invention provides a computer program product according to claim 14. Preferred embodiments are defined in the dependent claims.

Система взаимодействия с пользователем в соответствии с первым аспектом изобретения содержит дисплей, средство для приема указания местоположения, средство идентификации местоположения и формирователь наложенного изображения. Дисплей отображает изображение подобласти и наложенное изображение. Изображение подобласти является изображением определенной подобласти окружения. Средство идентификации местоположения обнаруживает, какое определенное местоположение в окружении указывается с помощью указания местоположения. Формирователь наложенного изображения формирует наложенное изображение. Наложенное изображение содержит информацию, имеющую отношение к эффекту освещения, который является достижимым в определенном местоположении с помощью системы освещения. Достижимый эффект является эффектом по меньшей мере двух управляемых источников света в системе освещения. Информация, которая имеет отношение к достижимому эффекту освещения, основывается на модели системы освещения, которая представляет эффекты, являющиеся достижимыми в данном окружении с помощью управляемых источников света в системе освещения.A user interaction system in accordance with a first aspect of the invention comprises a display, means for receiving a location indication, location identification means, and an overlay imager. The display shows a subarea image and an overlay image. An image of a subdomain is an image of a specific subdomain of the environment. The location identification tool detects which specific location in the environment is indicated by indicating the location. The overlay imager generates the overlay image. The overlay image contains information related to a lighting effect that is achievable at a specific location using a lighting system. An achievable effect is the effect of at least two controlled light sources in a lighting system. Information that relates to the achievable lighting effect is based on a model of the lighting system that represents the effects that are achievable in a given environment using controlled light sources in the lighting system.

Система взаимодействия с пользователем обеспечивает пользователю информацию о возможном эффекте освещения, который можно получить в определенном местоположении, которое указывается с помощью указания местоположения. Это удобно для пользователя, потому что пользователь заранее знает, какие эффекты могут быть достижимы для определенного местоположения, перед обеспечением ввода, имеющего отношение к нужному эффекту освещения. Поэтому пользователю не приходится методом проб и ошибок находить, является ли достижимым эффект, который он подразумевает. Таким образом, пользователь не выберет недостижимый эффект и не будет разочарован системой освещения. Системы освещения становятся намного более сложными, и поверхность или область окружения часто освещается множеством управляемых источников света и, соответственно, эффект освещения является сочетанием множества эффектов освещения отдельных управляемых источников света. Нужно отметить, что по меньшей мере два управляемых источника света, которые вносят вклад в достижимый эффект освещения, должны излучать свет для получения достижимого эффекта освещения. В частности, более интенсивное использование отдельно управляемых источников света, например отдельно управляемых светодиодов, гораздо больше усложняет пользователям оценку того, какие эффекты достижимы в определенных областях. Система допускает анализ эффектов освещения у множества управляемых источников света на основе модели системы освещения и превращает эффекты освещения управляемых отдельных источников света в эффекты освещения для определенного местоположения. Таким образом, система выполняет переход от того, "каковы возможности системы освещения", к тому, "какой эффект достижим в указанном местоположении". В результате пользователю нужно иметь меньше сведений о функционировании систем освещения в целом и системы освещения окружения, в частности.The user interaction system provides the user with information about a possible lighting effect that can be obtained at a specific location, which is indicated by indicating the location. This is convenient for the user because the user knows in advance which effects can be achieved at a particular location before providing input related to the desired lighting effect. Therefore, the user does not have to find by trial and error whether the effect that he implies is achievable. Thus, the user will not choose an unattainable effect and will not be disappointed with the lighting system. Lighting systems become much more complex, and the surface or surrounding area is often illuminated by a plurality of controllable light sources and, accordingly, the lighting effect is a combination of the plurality of illumination effects of individual controllable light sources. It should be noted that at least two controlled light sources that contribute to the achievable lighting effect must emit light in order to achieve an achievable lighting effect. In particular, the more intensive use of separately controlled light sources, such as separately controlled LEDs, makes it much more difficult for users to evaluate which effects are achievable in certain areas. The system allows analysis of the lighting effects of a plurality of controllable light sources based on a model of the lighting system and converts the lighting effects of the controllable individual light sources into lighting effects for a specific location. Thus, the system makes the transition from “what are the capabilities of the lighting system” to “what effect is achievable at a specified location”. As a result, the user needs less information about the functioning of the lighting systems in general and the lighting system of the environment in particular.

Указанное местоположение является местоположением на изображении подобласти либо указанное местоположение является местоположением в окружении. Если указанное местоположение является местоположением на изображении подобласти, то средству идентификации местоположения нужно обнаружить, какое определенное местоположение в окружении совпадает с указанным местоположением на изображении подобласти. Если указанное местоположение указывается в окружении, то средству идентификации местоположения нужно обнаружить, какое определенное местоположение указано. Указание местоположения может быть точкой на изображении подобласти или точкой в окружении, и указание местоположения может быть указанной областью на изображении подобласти или указанной областью в окружении.The specified location is the location in the subarea image, or the specified location is the location in the environment. If the specified location is a location in the subarea image, then the location identification means needs to detect which specific location in the environment matches the specified location in the subarea image. If the specified location is indicated in the environment, then the location identification means needs to find out which specific location is indicated. The location indication may be a point in the subarea image or a point in the environment, and the location indication may be a indicated area in the subarea image or a specified area in the environment.

Дополнительное преимущество системы состоит в том, что пользователю не обязательно присутствовать в том окружении. Конкретный момент времени, когда было получено изображение подобласти, может быть моментом времени, который не относится к моменту времени, в который пользователь указывает местоположение и принимает обратную связь относительно достижимых эффектов освещения. Например, изображение подобласти окружения может сохраняться в базе данных вместе с информацией о системе освещения и информацией об окружении. Либо в другом примере устройство может содержать систему и камеру для получения изображения подобласти, и после получения изображения подобласти устройство можно переместить в другое помещение, и/или пользователь может переместить устройство в более удобное положение перед обеспечением пользовательского ввода и приема информации о достижимом эффекте.An additional advantage of the system is that the user does not have to be present in that environment. The particular point in time when the subarea image was obtained may be a point in time that does not refer to the point in time at which the user indicates the location and receives feedback regarding achievable lighting effects. For example, an image of a subarea of the environment may be stored in a database along with information about the lighting system and information about the environment. Or in another example, the device may comprise a system and a camera for acquiring an image of the subarea, and after receiving the image of the subarea, the device can be moved to another room, and / or the user can move the device to a more convenient position before providing user input and receiving information about the achievable effect.

Изображение подобласти является изображением подобласти. Изображение может быть схематичным изображением подобласти окружения, либо изображение может быть записью подобласти окружения, например изображение может быть фотографией подобласти, снятой в конкретный момент времени.An image of a subdomain is an image of a subdomain. The image may be a schematic image of a subarea of the environment, or the image may be a record of the subarea of the environment, for example, the image may be a photograph of a subarea taken at a particular point in time.

Нужно отметить, что дисплей может представить изображение подобласти без наложенного изображения, например, перед тем, как принимается указание местоположения. Если формируется наложенное изображение, то дисплей представляет изображение подобласти и наложенное изображение. Кроме того, модель системы освещения можно получить посредством известных технологий, например, так называемой калибровки в темной комнате, или технологий, которые относятся к раскрытию заявки на патент, упомянутой в разделе "Уровень техники". В публикации WO 2010/079400 источники света излучают кодированный свет, и система использует датчик изображений для обнаружения проекций от источников света и обнаружения идентифицирующих кодов источников света. В другом варианте осуществления модель системы освещения создана человеком, например техническим специалистом, который устанавливал систему освещения в окружении.It should be noted that the display can present an image of a subarea without an overlay image, for example, before a location indication is received. If an overlay image is formed, then the display represents a subarea image and an overlay image. In addition, a model of the lighting system can be obtained by known technologies, for example, the so-called calibration in a dark room, or technologies that relate to the disclosure of the patent application mentioned in the section "Background". In WO 2010/079400, light sources emit coded light, and the system uses an image sensor to detect projections from light sources and detect identification codes of light sources. In another embodiment, a model of a lighting system is created by a person, such as a technician, who installed a lighting system in an environment.

В варианте осуществления средство для приема указания местоположения является средством пользовательского ввода для приема пользовательского ввода, содержащего указание местоположения. Для пользователя удобнее, если пользователь сам выбирает указание местоположения. Система затем обеспечивает достижимый эффект для местоположения, о котором пользователь хочет узнать достижимый эффект.In an embodiment, the means for receiving the location indication is user input means for receiving the user input comprising the location indication. It’s more convenient for the user if the user chooses to indicate the location. The system then provides an achievable effect for the location that the user wants to know about the achievable effect.

В варианте осуществления достижимый эффект является по меньшей мере одним из следующего: силу света можно увеличивать или уменьшать локально, локально достижимые цвета света являются определенным подпространством цветового пространства, силу света можно увеличивать или уменьшать глобально, достижимые цвета света в некой области и вокруг определенного местоположения являются определенным подпространством цветового пространства, контраст можно увеличивать или уменьшать в некой области и вокруг определенного местоположения, достижим более холодный или более теплый цвет, цветовую температуру можно увеличивать или уменьшать, и эффект перенаправляемого управляемого источника света можно перемещать. Нужно отметить, что достижимый эффект может относиться только к определенному местоположению, когда, например, силу света можно увеличивать или уменьшать в определенном местоположении, либо достижимый эффект может относиться к определенному местоположению и области рядом с определенным местоположением, когда, например, силу света можно увеличивать или уменьшать глобально. Применительно к достижимому эффекту под "глобальным" подразумевается: в определенном местоположении и в некой области вокруг определенного местоположения.In an embodiment, the achievable effect is at least one of the following: the luminous intensity can be increased or decreased locally, the locally achievable light colors are a specific subspace of the color space, the luminous intensity can be increased or decreased globally, the achievable light colors in a certain area and around a certain location are a certain subspace of the color space, contrast can be increased or decreased in a certain area and around a certain location, reaching it is colder or warmer, the color temperature can be increased or decreased, and the effect of the redirected controlled light source can be moved. It should be noted that the achievable effect can relate only to a certain location, when, for example, the light intensity can be increased or decreased at a certain location, or the achievable effect can relate to a certain location and an area near a certain location, when, for example, the light intensity can be increased or reduce globally. In relation to the achievable effect, “global” means: in a specific location and in a certain area around a specific location.

В варианте осуществления средство ввода дополнительно конфигурируется для приема нужного эффекта освещения или нужного изменения эффекта освещения. Принятый нужный эффект освещения и принятое нужное изменение эффекта освещения принимаются для определенного местоположения. Другими словами, после обеспечения указания местоположения (посредством средства пользовательского ввода) и приема обратной связи от системы касательно достижимых эффектов пользователь обеспечивает ввод, в котором пользователь выражает ожидание относительно эффекта освещения в определенном местоположении. Нужный эффект или изменение эффекта могут относиться к локальному изменению силы и/или цвета света либо к изменению силы и/или цвета света в некой области и вокруг определенной области.In an embodiment, the input means is further configured to receive the desired lighting effect or the desired change in the lighting effect. The accepted desired lighting effect and the adopted desired change in the lighting effect are received for a specific location. In other words, after providing a location indication (by means of user input) and receiving feedback from the system regarding achievable effects, the user provides input in which the user expresses an expectation regarding the lighting effect at a specific location. The desired effect or change in the effect may relate to a local change in the strength and / or color of the light, or to a change in the strength and / or color of the light in a certain area and around a specific area.

В дополнительном варианте осуществления система взаимодействия с пользователем дополнительно содержит контроллер эффектов освещения для формирования управляющего сигнала для управляемого источника света в системе освещения, чтобы оптимально получить нужный эффект освещения или нужное изменение эффекта освещения в определенном местоположении. Формирование управляющих сигналов основывается на модели системы освещения. Модель системы освещения дополнительно содержит информацию касательно отношения между значениями управляющих сигналов для управляемых источников света и откликом соответствующих управляемых источников света при приеме управляющих сигналов.In a further embodiment, the user interaction system further comprises a lighting effects controller for generating a control signal for the controlled light source in the lighting system in order to optimally obtain the desired lighting effect or the desired change in the lighting effect at a specific location. The formation of control signals is based on a model of the lighting system. The lighting system model further contains information regarding the relationship between the values of the control signals for the controlled light sources and the response of the respective controlled light sources when receiving the control signals.

Модель освещения может дополнительно содержать отношения между управляющими сигналами, которые могут принимать управляемые источники света в системе освещения, и тем, как управляющие сигналы меняют работу управляемых источников света. Таким образом, модель освещения содержит достаточно информации, чтобы позволить системе определить, как изменяется эффект освещения в окружении, если определенные управляющие сигналы обеспечиваются одному или нескольким управляемым источникам света в системе освещения. Пользователь обеспечивает нужный эффект освещения или нужное изменение эффекта освещения, и на основе информации в модели контроллер эффектов освещения формирует по меньшей мере один управляющий сигнал для управляемого источника света в системе освещения, так что нужный эффект освещения или нужное изменение эффекта освещения получается насколько возможно с помощью системы освещения, если управляемый источник света в системе освещения принимает по меньшей мере один управляющий сигнал. Таким образом, пользователю не нужно иметь много сведений о системе освещения и о том, как нужно управлять управляемыми источниками света в системе освещения.The lighting model may further comprise the relationship between the control signals that the controlled light sources in the lighting system can receive and how the control signals change the operation of the controlled light sources. Thus, the lighting model contains enough information to allow the system to determine how the lighting effect in the environment changes if certain control signals are provided to one or more controlled light sources in the lighting system. The user provides the desired lighting effect or the desired change in the lighting effect, and based on the information in the model, the lighting effects controller generates at least one control signal for the controlled light source in the lighting system, so that the desired lighting effect or the desired change in the lighting effect is obtained using lighting systems, if the controlled light source in the lighting system receives at least one control signal. Thus, the user does not need to have much information about the lighting system and how to manage controlled light sources in the lighting system.

Нужно отметить, что могло бы быть так, что нужный эффект освещения или нужное изменение эффекта освещения по-прежнему не полностью достижимы. Контроллер эффектов освещения конфигурируется для формирования управляющего сигнала, так что нужный эффект или нужное изменение эффекта можно получить насколько возможно. По меньшей мере один управляющий сигнал не обязательно сразу обеспечивается системе освещения. В последующих вариантах осуществления по меньшей мере один управляющий сигнал используется для разных целей.It should be noted that it might be that the desired lighting effect or the desired change in the lighting effect is still not fully achievable. The lighting effects controller is configured to generate a control signal so that the desired effect or desired change in effect can be obtained as much as possible. At least one control signal is not necessarily immediately provided by the lighting system. In subsequent embodiments, the implementation of at least one control signal is used for different purposes.

Посредством управляющего сигнала можно управлять несколькими параметрами управляемого источника света. Примерами являются сила излученного света, цвет излученного света, угол излучения света, или в случае перенаправляемых источников света, например, местоположение эффекта перенаправляемого источника света, точное местоположение источника света и направление, в котором излучается луч света. Другие параметры, которые могут содержаться в управляющем сигнале, являются зависящими от времени параметрами, например "излучать определенную силу света в течение определенного интервала времени".By means of a control signal, several parameters of a controlled light source can be controlled. Examples are the strength of the light emitted, the color of the light emitted, the angle of light emission, or in the case of redirected light sources, for example, the location of the redirected light source effect, the exact location of the light source and the direction in which the light beam is emitted. Other parameters that may be contained in the control signal are time-dependent parameters, for example, “emit a certain intensity of light for a certain period of time”.

В другом варианте осуществления формирователь наложенного изображения дополнительно конфигурируется для формирования наложенного изображения, которое содержит информацию, которая представляет измененную работу управляемого источника света в системе освещения в соответствии со сформированным управляющим сигналом. Другими словами, наложенное изображение является виртуальным дополнением к реальности изображения подобласти, которое показывает пользователю, как собирается выглядеть подобласть, когда система освещения управляется управляющим сигналом. Это позволяет пользователю оценить картину освещения, которая может возникнуть из управления системой освещения с помощью сформированного управляющего сигнала даже до того, как система освещения управляется с помощью управляющего сигнала. Пользователю удобно оценивать управление системой освещения в виртуальном окружении, потому что это дает возможность проектирования шаблона управления освещением без использования системы освещения и, соответственно, система освещения не занимается без надобности для проектирования шаблона управления освещением.In another embodiment, the overlay imager is further configured to form an overlay image that contains information that represents the changed operation of the controlled light source in the lighting system in accordance with the generated control signal. In other words, the overlay image is a virtual complement to the reality of the subarea image, which shows the user how the subarea is going to look when the lighting system is controlled by a control signal. This allows the user to evaluate the lighting pattern that may arise from controlling the lighting system using the generated control signal even before the lighting system is controlled using the control signal. It is convenient for the user to evaluate the control of the lighting system in a virtual environment, because it allows the design of a lighting control template without using a lighting system and, accordingly, the lighting system is not involved without the need for designing a lighting control template.

В варианте осуществления формирователь наложенного изображения конфигурируется для формирования наложенного изображения, которое содержит виртуальные объекты, которые размещаются в подобласти окружения и которые виртуально освещаются управляемыми источниками света в системе освещения в соответствии с управляющим сигналом.In an embodiment, the overlay imager is configured to form an overlay image that contains virtual objects that are located in a sub-area of the environment and that are virtually illuminated by controlled light sources in the lighting system in accordance with the control signal.

В дополнительном варианте осуществления формирователь наложенного изображения конфигурируется для формирования наложенного изображения, которое содержит обратную связь об осуществимости нужного эффекта освещения или нужного изменения эффекта освещения. Как упоминалось раньше, контроллер эффектов освещения из-за ограничений системы освещения может быть неспособен управлять системой освещения так, чтобы получился нужный эффект освещения или нужное изменение эффекта освещения. Наложенное изображение может предоставить пользователю обратную связь, которая указывает, до какой степени достижим нужный эффект освещения и до какой степени достижимо нужное изменение эффекта освещения, другими словами, обратная связь представляет то, насколько осуществим нужный эффект освещения или изменение эффекта освещения, с учетом присутствующей в окружении системы освещения. Обычно это воспринимается как удобное для пользователя, потому что это ставит пользователя в известность об ограничениях системы освещения, и пользователь не разочаруется неожиданно, когда система освещения управляется с помощью управляющего сигнала.In a further embodiment, the overlay driver is configured to generate an overlay image that contains feedback on the feasibility of a desired lighting effect or a desired change in a lighting effect. As mentioned earlier, the controller of lighting effects due to limitations of the lighting system may not be able to control the lighting system so as to obtain the desired lighting effect or the desired change in the lighting effect. The overlay image can provide the user with feedback that indicates to what extent the desired lighting effect is achievable and to what extent the desired change in lighting effect is achievable, in other words, the feedback represents how much the desired lighting effect or change in lighting effect is possible, taking into account surrounded by a lighting system. This is usually perceived as user-friendly because it informs the user of the limitations of the lighting system, and the user will not be disappointed unexpectedly when the lighting system is controlled by a control signal.

В другом варианте осуществления система взаимодействия с пользователем дополнительно содержит средство вывода для обеспечения управляющего сигнала системе освещения. При обеспечении управляющего сигнала системе освещения система освещения может управляться не только в виртуальном окружении, но также и в реальном окружении. Таким образом, система является удобной для пользователя системой, которая может использоваться для оценки достижимых эффектов системы освещения в виртуальном окружении посредством наложенного изображения и которая может использоваться для управления системой освещения в реальном окружении.In another embodiment, the user interaction system further comprises output means for providing a control signal to the lighting system. By providing a control signal to the lighting system, the lighting system can be controlled not only in a virtual environment, but also in a real environment. Thus, the system is a user-friendly system that can be used to evaluate the achievable effects of the lighting system in a virtual environment by means of an overlay image and which can be used to control the lighting system in a real environment.

В варианте осуществления формирователь наложенного изображения дополнительно конфигурируется для формирования наложенного изображения, содержащего информацию, имеющую отношение к одному или нескольким управляемым источникам света в системе освещения. Информация об определенном управляемом источнике света является по меньшей мере одним из положения определенного источника света, направления, в котором может излучаться луч света у определенного источника света, проекции луча света от определенного источника света, цветов, которые могут излучаться определенным источником света, силы света, которая может излучаться определенным источником света, вариантов перемещения определенного источника света, отношения между достижимым эффектом и определенным источником света. Обеспечение дополнительной информации относительно одного или нескольких источников света в системе освещения и/или их возможностей приводит к более удобной для пользователя системе, потому что дополнительная информация дает пользователю больше сведений о функционировании системы освещения и о ее возможностях. Дополнительная информация имеет отношение, например, к текущему положению и текущей работе источников света, то есть где расположены источники света и как на самом деле работают источники света, чтобы получить картину освещения, которая записана в изображении подобласти. В другом варианте осуществления дополнительная информация имеет отношение, например, к возможностям источников света в системе освещения, которые не обязательно приводятся в действие в тот конкретный момент времени, когда записывается изображение подобласти. В примере представляются возможные перемещения перенаправляемого пятна, представляется возможное подпространство цветового пространства источника света, а также возможная сила света, возможные углы излучения света и т.п.In an embodiment, the overlay imager is further configured to form an overlay image containing information related to one or more controllable light sources in the lighting system. Information about a particular controlled light source is at least one of the position of a specific light source, the direction in which a light beam can be emitted from a specific light source, the projection of a light beam from a specific light source, colors that can be emitted by a specific light source, light intensity, which can be emitted by a specific light source, options for moving a specific light source, the relationship between the achievable effect and a specific light source. Providing additional information regarding one or more light sources in the lighting system and / or their capabilities leads to a more user-friendly system, because additional information gives the user more information about the functioning of the lighting system and its capabilities. Additional information is related, for example, to the current position and current operation of the light sources, that is, where the light sources are located and how the light sources actually work in order to get a picture of the illumination that is recorded in the image of the subregion. In another embodiment, the additional information relates, for example, to the capabilities of the light sources in the lighting system, which are not necessarily actuated at that particular point in time when the image of the subarea is recorded. The example presents the possible movements of the redirected spot, the possible subspace of the color space of the light source, as well as the possible light intensity, possible angles of light emission, etc.

В другом варианте осуществления система взаимодействия с пользователем дополнительно содержит камеру для получения изображения с камеры, а дисплей дополнительно конфигурируется для отображения изображения с камеры. Этот вариант осуществления позволяет просмотр окружения через управляющее устройство. Камера получает одно или несколько последовательных изображений с камеры, а дисплей представляет одно или несколько изображений с камеры, следовательно, система взаимодействия с пользователем является средством, чтобы пользователь видел окружение. Особенно удобно для пользователя показывать изображения с камеры на дисплее, когда камера имеет иной угол обзора, нежели пользователь, и камера может, например, допускать масштабирование подробностей, которые трудно распознать пользователю.In another embodiment, the user interaction system further comprises a camera for receiving an image from the camera, and the display is further configured to display the image from the camera. This embodiment allows viewing the environment through a control device. The camera receives one or more consecutive images from the camera, and the display represents one or more images from the camera, therefore, the user interaction system is a means for the user to see the environment. It is especially convenient for the user to display images from the camera on the display when the camera has a different viewing angle than the user, and the camera can, for example, allow scaling of details that are difficult for the user to recognize.

Как обсуждалось ранее, изображение подобласти также можно представить на дисплее либо вместе с наложенным изображением, либо сначала без наложенного изображения. Изображение с камеры можно представить независимо от изображения подобласти и/или независимо от наложенного изображения, либо вместе с изображением подобласти и/или наложенным изображением. Если изображение с камеры и изображение подобласти представляются одновременно, то это можно сделать способом наложения, либо два изображения можно представить рядом друг с другом. В варианте осуществления наложенное изображение непрерывно формируется и представляется вместе с изображением с камеры.As previously discussed, the subarea image can also be displayed either with the overlay image or first without the overlay image. The camera image can be represented independently of the subregion image and / or regardless of the overlay image, or together with the subregion image and / or overlay image. If the camera image and the subarea image are presented at the same time, then this can be done by way of overlapping, or two images can be presented next to each other. In an embodiment, the overlay image is continuously formed and presented with the camera image.

В дополнительном варианте осуществления средство пользовательского ввода дополнительно конфигурируется для приема пользовательского ввода, указывающего в конкретный момент времени, что изображение с камеры является изображением подобласти. Просматривая с помощью системы взаимодействия с пользователем, пользователь может в конкретный момент времени решить, что изображение с камеры, которое представляется на дисплее, является изображением подобласти. Другими словами, когда пользователь обеспечивает ввод, что изображение с камеры является изображением подобласти, пользователь указывает системе взаимодействия с пользователем, что он хочет принять информацию относительно достижимого эффекта освещения на изображении с камеры в тот конкретный момент времени.In a further embodiment, the user input means is further configured to receive user input indicating at a particular point in time that the camera image is a subarea image. By viewing using a user interaction system, the user can decide at a particular point in time that the camera image that appears on the display is an image of a subregion. In other words, when the user provides input that the camera image is a subarea image, the user indicates to the user interaction system that he wants to receive information regarding the achievable lighting effect on the camera image at that particular moment in time.

В еще одном варианте осуществления камера содержит по меньшей мере одно из средства для обнаружения местоположения камеры, средства для обнаружения направления, в котором ориентирована камера, датчика наклона для обнаружения наклона камеры и средства для обнаружения угла обзора камеры. Средство идентификации местоположения конфигурируется для обнаружения, какая определенная подобласть окружения изображается на изображении подобласти, на основе по меньшей мере одного из: обнаруженного местоположения камеры, обнаруженного направления, обнаруженного наклона и обнаруженного угла обзора. Средство идентификации местоположения конфигурируется для базирования обнаружения определенного местоположения на обнаруженной определенной подобласти.In yet another embodiment, the camera comprises at least one of means for detecting the location of the camera, means for detecting the direction in which the camera is oriented, a tilt sensor for detecting camera tilt, and means for detecting a camera viewing angle. The location identification means is configured to detect which specific subarea of the environment is depicted in the subarea image based on at least one of: a detected camera location, a detected direction, a detected tilt, and a detected viewing angle. The location identification means is configured to base detection of a specific location on a detected specific subarea.

Особенно в случаях, где указание местоположения обеспечивается системе взаимодействия с пользователем в виде положения на изображении подобласти, система взаимодействия с пользователем должна знать, какая определенная подобласть записывается в подобласти, так что средство идентификации местоположения допускает обнаружение, какое определенное местоположение в окружении совпадает с указанием местоположения. Вариант осуществления обеспечивает средство для обнаружения, на какую часть окружения направлена камера и какая часть окружения записывается камерой, наряду с получением записи подобласти посредством камеры. Это очень удобно для пользователя, потому что система взаимодействия с пользователем допускает автоматическое обнаружение, какое определенное местоположение указывается на изображении подобласти, не требуя дополнительного взаимодействия с пользователем.Especially in cases where the location indication is provided to the user interaction system in the form of a position in the subregion image, the user interaction system must know which specific subregion is recorded in the subregion, so that the location identification means allows detection of which specific location in the environment matches the location indication . An embodiment provides means for detecting which part of the surroundings the camera is pointing at and which part of the surroundings is being recorded by the camera, along with obtaining a sub-area recording by the camera. This is very convenient for the user, because the user interaction system allows automatic detection of which specific location is indicated on the image of the subregion, without requiring additional user interaction.

Средство идентификации местоположения также имеет сведения об окружении. Это может предварительно программироваться в средстве идентификации местоположения в виде модели окружения, или средство идентификации местоположения допускает вывод модели окружения из изображения подобласти, или средство идентификации местоположения вместе с моделью системы освещения принимает и модель окружения.The location identification tool also has environmental information. This can be pre-programmed in the means of identifying the location as an environment model, or the means for identifying the location allows the derivation of the environment model from the image of the subarea, or the means for identifying the location together with the model of the lighting system accepts the environment model.

В другом варианте осуществления изображение подобласти сопровождается информацией, которая выражает, какая определенная подобласть окружения изображается на изображении подобласти.In another embodiment, the image of the subarea is accompanied by information that expresses which particular subarea of the environment is depicted in the image of the subarea.

В варианте осуществления камера содержит по меньшей мере одно из средства для обнаружения местоположения камеры, средства для обнаружения направления, в котором ориентирована камера, датчика наклона для обнаружения наклона камеры и средства для обнаружения угла обзора камеры. Средство пользовательского ввода конфигурируется для базирования указания местоположения по меньшей мере на одном из обнаруженного местоположения камеры, обнаруженного направления, обнаруженного наклона и обнаруженного угла обзора. В варианте осуществления камера вместе с дисплеем является средством обнаружения, состоящим из камеры, а также средства пользовательского ввода, то есть средства для указания на местоположение в окружении и посредством этого обеспечения указания местоположения. Можно, например, просматривать с помощью камеры, и в конечном счете направить камеру на подобласть и увеличить центр подобласти, чтобы предоставить указание местоположения. Потом формирователь наложенного изображения может сформировать наложенное изображение так, что пользователь может принять информацию об одном или нескольких достижимых эффектах освещения в указанном местоположении.In an embodiment, the camera comprises at least one of means for detecting the location of the camera, means for detecting the direction in which the camera is oriented, a tilt sensor for detecting camera tilt, and means for detecting a camera viewing angle. The user input means is configured to base the location indication on at least one of the detected camera location, the detected direction, the detected tilt, and the detected viewing angle. In an embodiment, the camera together with the display is a detection means consisting of a camera as well as user input means, that is, means for indicating a location in the environment and thereby providing a location indication. You can, for example, view with a camera, and ultimately point the camera at a sub-area and increase the center of the sub-area to provide an indication of location. Then, the overlay imager can form the overlay so that the user can receive information about one or more achievable lighting effects at a specified location.

В соответствии с вторым аспектом изобретения обеспечивается портативное электронное устройство, которое содержит систему взаимодействия с пользователем в соответствии с одним из вариантов осуществления системы взаимодействия с пользователем в соответствии с первой особенностью изобретения. Портативное электронное устройство является, например, мобильным телефоном или портативным компьютером.According to a second aspect of the invention, there is provided a portable electronic device that comprises a user interaction system in accordance with one embodiment of a user interaction system in accordance with a first aspect of the invention. A portable electronic device is, for example, a mobile phone or laptop computer.

В соответствии с третьим аспектом изобретения обеспечивается способ управления системой освещения для освещения некоторого окружения. Способ содержит этапы i) отображения изображения подобласти, являющегося изображением определенной подобласти окружения, ii) приема пользовательского ввода, содержащего указание местоположения, iii) обнаружения, какое определенное местоположение в окружении указывается с помощью указания местоположения, iv) формирования наложенного изображения, содержащего информацию, имеющую отношение к эффекту освещения, который достижим с помощью системы освещения в определенном местоположении, причем достижимый эффект освещения является эффектом по меньшей мере двух управляемых источников света в системе освещения, и информация, имеющая отношение к достижимому эффекту освещения, основывается на модели системы освещения, представляющей эффекты, достижимые в окружении с помощью управляемых источников света в системе освещения, v) отображения изображения подобласти и наложенного изображения.In accordance with a third aspect of the invention, there is provided a method of controlling a lighting system to illuminate a certain environment. The method comprises the steps of i) displaying an image of a subdomain that is an image of a certain subdomain of the environment, ii) receiving user input containing a location indication, iii) detecting which specific location in the environment is indicated by indicating the location, iv) forming an overlay image containing information having related to the lighting effect that is achievable with the lighting system at a specific location, the achievable lighting effect being an effect of at least two controlled light sources in the lighting system, and information related to the achievable lighting effect is based on a model of the lighting system representing effects achievable in the environment using controlled light sources in the lighting system, v) displaying a subarea image and an overlay image .

В варианте осуществления способ снова начинается с этапа отображения изображения подобласти после выполнения всех этапов способа.In an embodiment, the method begins again with the step of displaying the subarea image after all the steps of the method are completed.

В соответствии с четвертым аспектом изобретения обеспечивается компьютерный программный продукт, который содержит команды для побуждения процессорной системы выполнить способ в соответствии с третьей особенностью изобретения.In accordance with a fourth aspect of the invention, a computer program product is provided that comprises instructions for causing a processor system to execute a method in accordance with a third aspect of the invention.

Портативное электронное устройство, способ управления системой освещения и компьютерный программный продукт обеспечивают такие же выгоды, как и система взаимодействия с пользователем в соответствии с первым аспектом изобретения, и имеют аналогичные варианты осуществления с аналогичными результатами, как и соответствующие варианты осуществления системы.A portable electronic device, a lighting system control method, and a computer program product provide the same benefits as a user interaction system in accordance with the first aspect of the invention, and have similar embodiments with similar results as corresponding embodiments of the system.

Эти и другие особенности изобретения очевидны из описанных ниже вариантов осуществления и будут объясняться со ссылкой на них.These and other features of the invention are apparent from the embodiments described below and will be explained with reference to them.

Специалисты в данной области техники примут во внимание, что два или более вышеупомянутых варианта осуществления, реализаций и/или аспектов изобретения могут объединяться любым способом, считающимся полезным.Those skilled in the art will appreciate that two or more of the aforementioned embodiments, implementations, and / or aspects of the invention may be combined in any manner deemed useful.

Модификации и изменения способа, портативного устройства и/или компьютерного программного продукта, которые соответствуют описанным модификациям и изменениям системы, могут выполняться специалистом в данной области техники на основе настоящего описания.Modifications and changes to the method, portable device and / or computer program product that correspond to the described modifications and changes to the system can be performed by a person skilled in the art based on the present description.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙBRIEF DESCRIPTION OF THE DRAWINGS

Фиг. 1a схематично показывает первый вариант осуществления системы взаимодействия с пользователем в соответствии с первым аспектом изобретения,FIG. 1a schematically shows a first embodiment of a user interaction system in accordance with a first aspect of the invention,

Фиг. 1b схематично показывает дисплей, представляющий изображение подобласти и наложенное изображение,FIG. 1b schematically shows a display representing a subarea image and an overlay image,

Фиг. 2 схематично показывает второй вариант осуществления системы взаимодействия с пользователем,FIG. 2 schematically shows a second embodiment of a user interaction system,

Фиг. 3 схематично показывает типичный вариант использования системы взаимодействия с пользователем,FIG. 3 schematically shows a typical use of a user interaction system,

Фиг. 4 схематично показывает другой вариант осуществления дисплея, представляющего изображение подобласти и наложенное изображение,FIG. 4 schematically shows another embodiment of a display representing a subarea image and an overlay image,

Фиг. 5 схематично показывает модель системы освещения,FIG. 5 schematically shows a model of a lighting system,

Фиг. 6 схематично показывает другой вариант осуществления дисплея, представляющего изображение подобласти в виде схематичного изображения помещения,FIG. 6 schematically shows another embodiment of a display representing a subarea image as a schematic representation of a room,

Фиг. 7 показывает блок-схему алгоритма способа в соответствии с третьим аспектом изобретения.FIG. 7 shows a flowchart of a method in accordance with a third aspect of the invention.

Следует отметить, что элементы, обозначенные одинаковыми ссылочными позициями на разных фигурах, имеют одинаковые структурные признаки и одинаковые функции либо являются одинаковыми сигналами. Там, где объяснена функция и/или структура такого элемента, отсутствует необходимость его повторяющегося объяснения и подробного описания.It should be noted that the elements denoted by the same reference positions in different figures have the same structural features and the same functions or are the same signals. Where the function and / or structure of such an element is explained, there is no need for its repeated explanation and detailed description.

Фигуры являются исключительно схематичными и не изображены в масштабе. В частности, некоторые размеры сильно преувеличены для ясности.The figures are extremely schematic and not shown to scale. In particular, some dimensions are greatly exaggerated for clarity.

ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯDETAILED DESCRIPTION OF THE INVENTION

Первый вариант осуществления системы 100 взаимодействия с пользователем в соответствии с первым аспектом изобретения показан на фиг. 1a. Посредством системы 100 взаимодействия с пользователем можно управлять системой освещения для освещения некоторого окружения. Система 100 взаимодействия с пользователем содержит дисплей 106, средство 102 ввода, средство 104 идентификации местоположения и формирователь 108 наложенного изображения. Дисплей допускает отображение изображения 112 подобласти и наложенного изображения 113, которые показаны на фиг. 1b. Изображение 112 подобласти может отображаться без наложенного изображения 113 и вместе с наложенным изображением 113. Изображение 112 подобласти является записью определенной подобласти окружения, и изображение 112 подобласти записывается в определенный момент времени. Средство 102 пользовательского ввода предназначено для приема пользовательского ввода. Пользовательский ввод содержит указание 118 местоположения. Указание 118 местоположения первоначально может относиться к точке или местоположению на изображении 112 подобласти или может первоначально относиться к точке или местоположению в окружении. Средство 104 идентификации местоположения обнаруживает, какое определенное местоположение в окружении указывается с помощью указания 118 местоположения. Формирователь 108 наложенного изображения формирует наложенное изображение 113. Наложенное изображение 113 содержит информацию 116, имеющую отношение к эффекту освещения, который является достижимым в определенном местоположении в окружении с помощью системы освещения. Достижимый эффект освещения является эффектом по меньшей мере двух источников света. Другими словами, по меньшей мере два источника света вносят вклад в достижимый эффект освещения. Информация, которая имеет отношение к достижимому эффекту освещения, основывается на модели 110 системы освещения. Формирователь 108 наложенного изображения содержит модель 110 системы освещения во внутреннем запоминающем устройстве, либо формирователь 108 наложенного изображения допускает обращение к модели 110 системы освещения посредством, например, сетевого соединения. Модель 110 системы освещения представляет эффекты, которые достижимы в окружении с помощью источников света в системе освещения. Другими словами, модель системы освещения содержит информацию о том, какие эффекты освещения достижимы в каком месте окружения и с помощью каких источников света в системе освещения.A first embodiment of a user interaction system 100 in accordance with a first aspect of the invention is shown in FIG. 1a. By means of the user interaction system 100, a lighting system can be controlled to illuminate a certain environment. The user interaction system 100 comprises a display 106, input means 102, location identification means 104, and an overlay imager 108. The display is capable of displaying a subarea image 112 and an overlay image 113, which are shown in FIG. 1b. The sub-area image 112 may be displayed without the overlay image 113 and together with the overlay image 113. The sub-area image 112 is a recording of a certain environment sub-area, and the sub-area image 112 is recorded at a certain point in time. The user input means 102 is for receiving user input. User input contains an indication of 118 location. Location indication 118 may initially refer to a point or location in a subarea image 112, or may initially refer to a point or location in an environment. The location identification means 104 detects which specific location in the environment is indicated by location indication 118. The overlay image generator 108 forms the overlay image 113. The overlay image 113 contains information 116 related to a lighting effect that is achievable at a specific location in the environment using a lighting system. The achievable lighting effect is the effect of at least two light sources. In other words, at least two light sources contribute to an achievable lighting effect. Information that is related to the achievable lighting effect is based on the lighting system model 110. The overlay driver 108 includes a lighting system model 110 in the internal memory, or the overlay driver 108 allows access to the lighting system model 110 via, for example, a network connection. The lighting system model 110 represents effects that are achievable in an environment using light sources in a lighting system. In other words, the model of the lighting system contains information about which lighting effects are achievable in which place in the environment and with what light sources in the lighting system.

Система 100 взаимодействия с пользователем представляет на дисплее 106 изображение 112 подобласти, которое показано на фиг. 1b. Изображение 112 подобласти является записью определенной подобласти окружения. Две стены подобласти изображаются на изображении 112 подобласти. Первый светильник 114 присутствует на небольшом столе 122, а второй светильник 120 присутствует на одной из стен. Первый светильник 114 используется для локального освещения небольшого стола 122. Второй светильник 120 используется для глобального освещения подпространства. Поэтому общее количество света, которое падает на небольшой стол 122, зависит от света, излученного первым светильником 114 и вторым светильником 120.The user interaction system 100 displays on the display 106 a sub-area image 112, which is shown in FIG. 1b. The image 112 subdomain is a record of a specific subdomain of the environment. Two walls of the subregion are depicted in the image 112 subregion. The first lamp 114 is present on the small table 122, and the second lamp 120 is present on one of the walls. A first luminaire 114 is used to locally illuminate a small table 122. A second luminaire 120 is used to globally illuminate a subspace. Therefore, the total amount of light that falls on the small table 122 depends on the light emitted from the first lamp 114 and the second lamp 120.

Дисплей 106 может объединяться со средством 102 ввода. В варианте осуществления из фиг. 1b средство 102 ввода имеет сенсорный слой, объединенный с дисплеем 106, дающий пользователю возможность обеспечивать пользовательский ввод путем прикосновения к дисплею 106. В примере из фиг. 1b перо 124 используется пользователем для обеспечения указания 118 местоположения средству 102 ввода. Перо 124 касается дисплея 106 в одном или нескольких пикселях на верхней поверхности небольшого стола 122. В других вариантах осуществления средство ввода не обязательно является сенсорным экраном, а может содержать клавиатуру, или мышь, или другое средство для приема ввода от пользователя.Display 106 may be combined with input means 102. In the embodiment of FIG. 1b, the input means 102 has a sensor layer integrated with the display 106, enabling the user to provide user input by touching the display 106. In the example of FIG. 1b, pen 124 is used by a user to provide a location indication 118 to input means 102. The pen 124 touches the display 106 in one or more pixels on the upper surface of the small table 122. In other embodiments, the input means is not necessarily a touch screen, but may include a keyboard, or a mouse, or other means for receiving input from a user.

Средство 104 идентификации местоположения затем обнаруживает, какое определенное местоположение в подобласти указывается с помощью указания 118 местоположения. Средство 104 идентификации местоположения имеет, например, модель окружения и знает, какая подобласть окружения изображается на изображении 112 подобласти. С помощью отображения положения пикселей, которых касается перо 124, в поверхность на модели окружения средство 104 идентификации местоположения допускает обнаружение, что указание 118 местоположения совпадает с определенным местоположением на верхней поверхности небольшого стола 122. В другом варианте осуществления идентификация местоположения является областью указания на изображении подобласти. Пользовательский ввод может быть многоугольником, который рисуется вокруг области указания.The location identifier 104 then detects which specific location in the subarea is indicated by the location indication 118. The location identification means 104 has, for example, an environment model and knows which environment subarea is depicted in the subarea image 112. By displaying the position of the pixels that the pen 124 touches onto the surface on the environment model, the location identification means 104 detects that the location indication 118 is the same as the location on the upper surface of the small table 122. In another embodiment, the location identification is an indication area on the image of a subregion . User input can be a polygon that is drawn around the pointing area.

Формирователь 108 наложенного изображения использует модель 110 системы освещения для формирования наложенного изображения 113. Наложенное изображение 113 представляется на дисплее 106 вместе с изображением 112 подобласти по способу наложения. Наложенное изображение 113 содержит информацию 116, которая относится к достижимым эффектам освещения в определенном местоположении. На фиг. 1b видно, что информация 116 представляется в виде текста, однако информация 116 также может представляться в графическом формате. В примере из фиг. 1b представлены четыре разные характеристики достижимых эффектов освещения в определенном местоположении. В другом варианте осуществления представляется только одна характеристика эффекта освещения для определенного местоположения. Информация 116 показывает пользователю, что локальную яркость, которая является яркостью в определенном местоположении, можно увеличить и уменьшить. Глобальную яркость, которая также относится к яркости в области вокруг определенного местоположения, можно только уменьшить. Контраст, который имеет отношение к пропорции между локальной яркостью пятна и глобальной окружающей яркостью, можно уменьшить и увеличить. И доступные цвета освещения в определенном местоположении являются множеством сочетаний красного, зеленого и синего.The overlay image generator 108 uses the lighting system model 110 to form the overlay image 113. The overlay image 113 is displayed on the display 106 together with the subarea image 112 by the overlay method. The overlay image 113 contains information 116 that relates to achievable lighting effects at a specific location. In FIG. 1b it can be seen that the information 116 is presented as text, but the information 116 can also be presented in graphical format. In the example of FIG. 1b shows four different characteristics of achievable lighting effects at a specific location. In another embodiment, only one characteristic of the lighting effect for a specific location is presented. Information 116 shows the user that local brightness, which is brightness at a specific location, can be increased and decreased. Global brightness, which also refers to brightness in the area around a specific location, can only be reduced. Contrast, which relates to the proportion between local spot brightness and global ambient brightness, can be reduced and increased. And the available lighting colors at a specific location are a multitude of combinations of red, green, and blue.

Фиг. 2 показывает другой вариант осуществления системы 200 взаимодействия с пользователем в соответствии с первым аспектом изобретения. Система 200, взаимодействия с пользователем, содержит дисплей 212, средство 202 ввода, средство 204 идентификации местоположения, формирователь 214 наложенного изображения, контроллер 218 эффектов освещения, средство 220 вывода и камеру 208. Система 200 взаимодействия с пользователем дополнительно содержит коммуникационную шину 206, которая используется разными компонентами системы для обмена информацией друг с другом. Дисплей 212 отображает изображение подобласти, наложенное изображение и/или изображение с камеры. Средство 202 ввода принимает пользовательский ввод. Пользовательский ввод содержит указание местоположения. Средство 204 идентификации местоположения обнаруживает, какое определенное местоположение в окружении указывается с помощью указания местоположения. Формирователь 214 наложенного изображения формирует наложенное изображение, которое содержит информацию относительно достижимого эффекта освещения в определенном местоположении в окружении. Чтобы создать наложенное изображение, формирователем наложенного изображения используется модель 216 системы освещения. В показанном варианте осуществления модель 216 системы освещения хранится в контроллере 218 эффектов освещения и доступна формирователю наложенного изображения через коммуникационную шину 206.FIG. 2 shows another embodiment of a user interaction system 200 in accordance with a first aspect of the invention. The user interaction system 200 includes a display 212, input means 202, location identification means 204, overlay image shaper 214, lighting effects controller 218, output means 220 and a camera 208. The user interaction system 200 further comprises a communication bus 206 that is used different components of the system for exchanging information with each other. The display 212 displays a subarea image, an overlay image and / or a camera image. The input means 202 accepts user input. User input contains a location. The location identifier 204 detects which specific location in the environment is indicated by indicating the location. Overlay image generator 214 generates an overlay image that contains information regarding the achievable lighting effect at a specific location in the environment. To create an overlay image, the overlay imager uses the lighting system model 216. In the shown embodiment, the lighting system model 216 is stored in the lighting effects controller 218 and is accessible to the overlay imager via a communication bus 206.

Средство 202 пользовательского ввода также может принимать пользовательский ввод относительно нужного эффекта освещения для определенного местоположения, которое указывалось с помощью указания местоположения. Вместо нужного эффекта освещения с тем же успехом может обеспечиваться нужное изменение эффекта, которое означает, что обеспеченный пользовательский ввод является нужным изменением картины освещения, которая изображается на изображении подобласти. Если обеспеченным изменением эффекта освещения является, например, "локально повышенная яркость", то нужно локально увеличить яркость определенного местоположения, которая изображена на изображении подобласти. Контроллер 218 эффектов освещения использует нужный эффект освещения или нужное изменение эффекта освещения для формирования по меньшей мере одного управляющего сигнала по меньшей мере для одного источника света в системе освещения, так что если источники света в системе освещения излучают свет в соответствии по меньшей мере с одним управляющим сигналом, то нужный эффект освещения или нужное изменение эффекта освещения оптимально получается в определенном местоположении. "Оптимально" в этом смысле означает "насколько возможно" в связи с ограничениями системы освещения. Нужно отметить, что пользователь сначала информируется о возможных эффектах освещения, и поэтому предполагается, что пользователь обеспечивает нужный эффект освещения или нужное изменение эффекта освещения, которые достижимы с помощью системы освещения. Контроллер 218 эффектов освещения хранит модель 216 системы освещения, которая не только содержит информацию о том, какие эффекты освещения достижимы с помощью источников света в системе освещения, но также содержит информацию, которая связывает достижимые эффекты освещения с управляющими сигналами для управления работой источников света, чтобы получить те эффекты освещения. Нужно отметить, что управляющий сигнал может содержать информацию относительно каждой управляемой характеристики источников света в системе освещения. Например, если излучение света у источников света является управляемым, то управляющий сигнал может содержать управляющую информацию для излучения с определенной силой света. В других примерах управляемым является цвет света, угол излучения света или, например, положение источников света.The user input means 202 can also receive user input with respect to a desired lighting effect for a specific location, which was indicated by indicating the location. Instead of the desired lighting effect, with the same success, the desired change in effect can be provided, which means that the provided user input is the desired change in the lighting pattern that is displayed in the subarea image. If the provided change in the lighting effect is, for example, “locally increased brightness”, then it is necessary to locally increase the brightness of a specific location, which is shown in the image of the subregion. The lighting effect controller 218 uses the desired lighting effect or the desired change in the lighting effect to generate at least one control signal for at least one light source in the lighting system, so that if the light sources in the lighting system emit light in accordance with at least one control signal, then the desired lighting effect or the desired change in the lighting effect is optimally obtained at a specific location. “Optimum” in this sense means “as much as possible” due to the limitations of the lighting system. It should be noted that the user is first informed of the possible lighting effects, and therefore it is assumed that the user provides the desired lighting effect or the desired change in the lighting effect, which are achievable using the lighting system. The lighting effects controller 218 stores a lighting system model 216 that not only contains information about which lighting effects are achievable with the light sources in the lighting system, but also contains information that associates the achievable lighting effects with control signals to control the operation of the light sources so that get those lighting effects. It should be noted that the control signal may contain information regarding each controlled characteristic of the light sources in the lighting system. For example, if the light emission from the light sources is controllable, then the control signal may contain control information for radiation with a certain light intensity. In other examples, the color of light, the angle of emission of light, or, for example, the position of light sources, is controllable.

Сформированный управляющий сигнал может обеспечиваться системе освещения через средство 220 вывода. Вывод 222 из средства 220 вывода является, например, DMX-шиной, которая является системой коммуникационных шин, которая используется некоторыми системами освещения для передачи управляющих параметров к источникам света. Вывод 222 также может применять другую технологию связи типа беспроводного Ethernet, Bluetooth, ZigBee или соединения Z-Wave.The generated control signal may be provided to the lighting system via output means 220. The output 222 from the output means 220 is, for example, a DMX bus, which is a communication bus system that is used by some lighting systems to transmit control parameters to light sources. Terminal 222 may also employ other communication technology such as wireless Ethernet, Bluetooth, ZigBee, or Z-Wave.

Управляющий сигнал не обязательно используется для управления системой освещения. В варианте осуществления формирователь 214 наложенного изображения допускает формирование наложенного изображения, которое также представляло бы измененную работу источников света в системе освещения, если бы система освещения управлялась с помощью управляющего сигнала. Чтобы сформировать наложенное изображение, формирователь 214 наложенного изображения обращается к модели 216 системы освещения, чтобы воспроизвести эффект освещения, который является результатом управляющего сигнала. Такое наложенное изображение представляется вместе с изображением подобласти на дисплее 212, и объединенное изображение виртуально представляет эффекты управления.The control signal is not necessarily used to control the lighting system. In an embodiment, the overlay driver 214 allows for the formation of an overlay image that would also represent the altered operation of the light sources in the lighting system if the lighting system were controlled by a control signal. To form the overlay image, the overlay image driver 214 refers to the lighting system model 216 to reproduce the lighting effect that is the result of a control signal. Such an overlay image is presented along with the subarea image on the display 212, and the combined image virtually represents the control effects.

В варианте осуществления формирователь 214 наложенного изображения дополнительно допускает формирование наложенного изображения, которое представляет информацию относительно осуществимости нужного эффекта освещения или нужного изменения эффекта освещения. Другими словами, если нужный эффект освещения или нужное изменение эффекта освещения не полностью достижимо с помощью системы освещения из-за ограничений в системе освещения, то наложенное изображение может сообщить пользователю, что можно получить неполный эффект освещения, и наложенное изображение по возможности может сообщить, до какой степени можно получить тот эффект освещения.In an embodiment, the overlay image generator 214 further allows the formation of an overlay image that provides information regarding the feasibility of a desired lighting effect or a desired change in a lighting effect. In other words, if the desired lighting effect or the desired change in the lighting effect is not completely achievable with the lighting system due to limitations in the lighting system, then the overlay image can inform the user that it is possible to obtain an incomplete lighting effect, and the overlay image can inform, if possible, to what degree can that lighting effect be obtained.

Система 200 взаимодействия с пользователем дополнительно содержит камеру 208. Камера получает изображение части окружения, которая содержит систему освещения. Дисплей 212 может представлять изображение с камеры. По существу, система 200 взаимодействия с пользователем может использоваться для просмотра окружения, чтобы найти подобласть, в которой нужно управлять системой освещения. Средство 202 пользовательского ввода также может принимать определенный пользовательский ввод, который указывает, что в конкретный момент обеспечения определенного пользовательского ввода изображение с камеры является изображением подобласти. Таким образом, просмотр и обеспечение определенного пользовательского ввода могут использоваться пользователем системы 200 взаимодействия с пользователем для записи изображения подобласти. В варианте осуществления после получения изображения подобласти изображение с камеры больше не представляется на дисплее 212, и изображение с камеры заменяется изображением подобласти. Другими словами, при просмотре изображение с камеры фиксируется для управления системой освещения по отношению к одному или нескольким местоположениям, изображенным на зафиксированном изображении с камеры.The user interaction system 200 further comprises a camera 208. The camera receives an image of a part of the environment that contains the lighting system. The display 212 may represent a camera image. As such, the user interaction system 200 can be used to view the environment to find a subarea in which the lighting system needs to be controlled. The user input means 202 may also receive a specific user input, which indicates that at a particular moment of providing a specific user input, the camera image is a subarea image. Thus, viewing and providing a specific user input can be used by a user of the user interaction system 200 to record sub-area images. In an embodiment, after obtaining a sub-region image, the camera image is no longer displayed on the display 212, and the camera image is replaced with the sub-region image. In other words, when viewing the image from the camera is fixed to control the lighting system in relation to one or more locations depicted in the captured image from the camera.

Камера 208 может содержать по меньшей мере одно из следующих средств: средство 210 для обнаружения местоположения камеры, средство 224 для обнаружения направления, в котором ориентирована камера 208 для записи изображения с камеры, датчик 226 наклона и средство 228 для обнаружения угла обзора камеры 208. Средство 210 для обнаружения местоположения камеры 208 является, например, датчиком GPS или датчиком, который допускает определение местоположения камеры 208 относительно известной неподвижной точки в окружении. Средство 224 для обнаружения направления, в котором ориентирована камера 208, является, например, электронным компасом. Средство 228 для обнаружения угла обзора является, например, контроллером масштабирования в камере 208. Разные детектирующие датчики в камере 208 могут использоваться для разных целей.The camera 208 may include at least one of the following: means 210 for detecting the location of the camera, means 224 for detecting the direction in which the camera 208 for recording the image from the camera is oriented, the tilt sensor 226 and means 228 for detecting the viewing angle of the camera 208. Means 210 for detecting the location of the camera 208 is, for example, a GPS sensor or a sensor that can determine the location of the camera 208 with respect to a known fixed point in the environment. The means 224 for detecting the direction in which the camera 208 is oriented is, for example, an electronic compass. The means for detecting the viewing angle is, for example, a zoom controller in the camera 208. Various detection sensors in the camera 208 can be used for different purposes.

В варианте осуществления камера 208 является закрепленной камерой, чье направление и наклон могут управляться. Местоположение такой камера известно, наклон и направление соответствуют управляемому значению, и предполагается, что угол обзора является неизменным.In an embodiment, camera 208 is a fixed camera whose direction and tilt can be controlled. The location of such a camera is known, the tilt and direction correspond to a controlled value, and it is assumed that the viewing angle is unchanged.

В варианте осуществления обнаруженное местоположение камеры 208, обнаруженное направление записи, обнаруженный наклон и/или обнаруженный угол обзора используются средством 204 идентификации местоположения для определения, какая определенная подобласть окружения изображается на изображении подобласти. Средство 204 идентификации местоположения имеет, например, модель окружения, которая объединяется с обнаруженными параметрами для определения, какая определенная подобласть изображается. В качестве альтернативы тригонометрия используется для обнаружения, какая определенная подобласть изображается на изображении подобласти.In an embodiment, the detected location of the camera 208, the detected recording direction, the detected tilt, and / or the detected viewing angle are used by the location identification means 204 to determine which specific sub-area of the environment is displayed in the sub-area image. The location identification means 204 has, for example, an environmental model that combines with the detected parameters to determine which specific subarea is being displayed. As an alternative, trigonometry is used to detect which specific subdomain is displayed in the subdomain image.

В другом варианте осуществления обнаруженное местоположение камеры 208, обнаруженное направление записи, обнаруженный наклон и/или обнаруженный угол обзора используются средством ввода для обнаружения, какое указание местоположения пользователь обеспечивает в качестве пользовательского ввода. Тот факт, что пользователь направляет камеру 208 в определенную точку в окружении, может интерпретироваться средством 202 пользовательского ввода как пользователь, обеспечивающий пользовательский ввод указания местоположения. Например, центральная точка изображения с камеры может рассматриваться в качестве указания местоположения, если пользователь удерживает камеру 208 в неподвижном положении в течение заранее установленного интервала времени. Или, если пользователь увеличивает определенное местоположение в окружении, то это может интерпретироваться средством 202 ввода как пользователь, обеспечивающий пользовательский ввод указания местоположения. В варианте осуществления мобильный телефон, который снабжается камерой, содержит систему взаимодействия с пользователем из фиг. 2, где камера 208 системы взаимодействия с пользователем является камерой мобильного телефона. Пользователь просматривает окружение, и в конкретный момент времени нажимается кнопка, так что пользователь указывает, что изображение с камеры в конкретный момент времени является изображением подобласти. Потом пользователь с помощью камеры 208 увеличивает определенное местоположение подобласти окружения, и в момент времени, когда достигается максимальное увеличение, средство 202 пользовательского ввода рассматривает местоположение, которое изображается на увеличенном изображении, как указание местоположения. В другом варианте осуществления пользователю не нужно увеличивать местоположение, которое является указанием местоположения, но пользователь должен совместить центр изображения с камеры с указанием местоположения и удерживать камеру 208 в неподвижном положении в течение заранее установленного интервала времени.In another embodiment, the detected location of the camera 208, the detected recording direction, the detected tilt, and / or the detected viewing angle are used by the input means to detect which location indication the user provides as user input. The fact that the user directs the camera 208 to a specific point in the environment can be interpreted by the user input means 202 as a user providing user input for indicating the location. For example, the center point of the camera image may be considered as an indication of location if the user holds the camera 208 stationary for a predetermined time interval. Or, if the user enlarges a specific location in the environment, then this can be interpreted by the input means 202 as a user providing user input of the location indication. In an embodiment, a mobile phone that is provided with a camera comprises a user interaction system of FIG. 2, where the camera 208 of the user interaction system is a mobile phone camera. The user views the environment, and at a particular point in time, a button is pressed, so that the user indicates that the camera image at a particular point in time is a subarea image. Then, the user, with the help of the camera 208, enlarges the determined location of the sub-area of the environment, and at the time when the maximum increase is reached, the user input means 202 considers the location that is displayed in the enlarged image as an indication of the location. In another embodiment, the user does not need to increase the location, which is an indication of the location, but the user must align the center of the image from the camera with the location and hold the camera 208 in a fixed position for a predetermined time interval.

В другом варианте осуществления средство 204 идентификации местоположения содержит средство формирования трехмерной модели для формирования модели подобласти посредством анализа изображения подобласти. Определенная подобласть впоследствии используется для обнаружения, какое определенное местоположение указывается с помощью указания местоположения.In another embodiment, the location identification means 204 comprises three-dimensional model generation means for generating a sub-region model by analyzing the sub-region image. A specific subarea is subsequently used to detect which specific location is indicated by indicating the location.

В еще одном варианте осуществления в окружении доступны метки. Некоторые метки могут быть видимыми на изображении подобласти, и видимые метки распознаются средством 204 идентификации местоположения, чтобы идентифицировать, какая определенная подобласть окружения изображается на изображении подобласти. Средство 204 идентификации местоположения требует сведений о доступных метках и их связи с окружением.In yet another embodiment, labels are available in the environment. Some marks may be visible in the subarea image, and visible marks are recognized by the location identification means 204 to identify which specific subarea of the environment is depicted in the subarea image. The location identifier 204 requires information about available tags and their relationship to the environment.

Фиг. 3 показывает типичный вариант использования системы взаимодействия с пользователем. Фиг. 3a показывает манекен в магазине. Магазин освещается системой освещения. После одевания манекена в одежду новой коллекции продавец берет портативное электронное устройство, имеющее дисплей на одной стороне и камеру на стороне, противоположной дисплею. Продавец направляет камеру портативного электронного устройства на манекен. На фиг. 3b показано, что продавец обеспечивает ввод в портативное электронное устройство, и устройство записывает изображение манекена в качестве изображения подобласти. На фиг. 3c продавец перемещает портативное электронное устройство в более удобное положение, в то время как дисплей портативного электронного устройства по-прежнему представляет изображение подобласти. Фиг. 3d показывает, что продавец выбирает на (сенсорном) экране портативного электронного устройства местоположение, для которого он желает управлять освещением. Портативное электронное устройство на наложенном изображении представляет достижимые эффекты в выбранном местоположении, а затем продавец обеспечивает нужный эффект освещения для выбранного местоположения. На фиг. 3d показано, что управляющие сигналы, которые формируются портативным электронным устройством, сразу обеспечиваются системе освещения, так что продавец может увидеть в магазине, каков эффект управления. В другом варианте осуществления система освещения магазина не управляется сразу, а портативное электронное устройство на наложенном изображении представляет эффект управления системой освещения, так что продавец может спроектировать картину освещения вокруг манекена в виртуальном окружении.FIG. 3 shows a typical use of a user interaction system. FIG. 3a shows a mannequin in a store. The store is illuminated by a lighting system. After putting the mannequin in the clothes of the new collection, the seller takes a portable electronic device having a display on one side and a camera on the side opposite the display. The seller points the camera of a portable electronic device at a mannequin. In FIG. 3b shows that the seller provides input to a portable electronic device, and the device records an image of a mannequin as an image of a subarea. In FIG. 3c, the seller moves the portable electronic device to a more comfortable position, while the display of the portable electronic device still represents an image of a subarea. FIG. 3d shows that the seller selects on the (touch) screen of a portable electronic device the location for which he wants to control the lighting. A portable electronic device in an overlay image represents achievable effects at a selected location, and then the seller provides the desired lighting effect for the selected location. In FIG. 3d shows that control signals that are generated by a portable electronic device are immediately provided by the lighting system, so that the seller can see in the store what the control effect is. In another embodiment, the store’s lighting system is not immediately controlled, and the portable electronic device in the overlay image represents the effect of controlling the lighting system, so that the seller can design a lighting pattern around the mannequin in a virtual environment.

Фиг. 4 относится к другому варианту осуществления, в котором система освещения содержит перенаправляемый светильник 404 и неподвижный светильник 407. На фиг. 4 показан дисплей 106, который представляет изображение 112 подобласти и наложенное изображение 113. Наложенное изображение представляет достижимые эффекты освещения в местоположении, указанном с помощью пера 124. В варианте осуществления из фиг. 4 показано, что в указанном местоположении можно получить относительно яркое пятно 406 света. Свет в указанном местоположении является суммой свете от перенаправляемого светильника 404 и неподвижного светильника 407, который излучает свет на все окружение. Наложенное изображение 113 также представляет отношение между положением перенаправляемого светильника 404 и эффектами освещения, которые можно получить с помощью перенаправляемого светильника 404. Перенаправляемый светильник 404 может управляться для перемещения по линии 402, показанной на наложенном изображении 113. Когда перенаправляемый светильник 404 перемещается по линии 402, проекция луча света перемещается по изображенной траектории 410. В крайнем левом положении получается крайняя левая проекция 408, а в крайнем правом положении можно получить крайнюю правую проекцию 406. Если пользователь в качестве ввода обеспечивает, что нужный эффект состоит в том, что яркое пятно нужно создать в указанном местоположении, то контроллер эффектов освещения формирует управляющий сигнал, указывающий, что перенаправляемый светильник 404 должен переместиться в крайнее правое положение.FIG. 4 relates to another embodiment in which the lighting system comprises a redirectable lamp 404 and a fixed lamp 407. FIG. 4, a display 106 is shown which represents a subarea image 112 and an overlay image 113. The overlay image represents achievable lighting effects at the location indicated by pen 124. In the embodiment of FIG. 4 shows that a relatively bright spot of light 406 can be obtained at the indicated location. The light at the indicated location is the sum of the light from the redirected lamp 404 and the stationary lamp 407, which emits light to the entire environment. The overlay image 113 also represents the relationship between the position of the redirected luminaire 404 and the lighting effects that can be obtained with the redirected luminaire 404. The redirected luminaire 404 can be controlled to move along the line 402 shown in the overlaid image 113. When the redirected luminaire 404 moves along the line 402, the projection of the light beam moves along the depicted path 410. In the leftmost position, the leftmost projection 408 is obtained, and in the rightmost position, you can teach the rightmost projection 406. If the user as input ensures that the desired effect is a bright spot that you want to create in the specified location, the controller lighting effects generates a control signal indicating that the redirected light 404 should move to the far right.

Когда пользователь обеспечивает ввод относительно нужного эффекта освещения или нужного изменения эффекта освещения, пользователь в примере может перетащить самое яркое пятно по полу в другое положение. Самое яркое пятно практически соответствует проекции перенаправляемого светильника 404.When the user provides input regarding the desired lighting effect or the desired change in the lighting effect, the user in the example can drag the brightest spot across the floor to another position. The brightest spot almost corresponds to the projection of the redirected lamp 404.

В варианте осуществления перенаправляемый светильник 404 поворачивается вокруг оси x и оси y. Направление оси x и оси y указывается в нижнем правом углу фиг. 4. Проекция такого перенаправляемого светильника может направляться на пол или на одну из стен. Таким образом, достижимый эффект состоит в том, что локальное яркое пятно можно создать почти везде в подпространстве.In an embodiment, the redirectable luminaire 404 is rotated about the x axis and the y axis. The direction of the x axis and y axis is indicated in the lower right corner of FIG. 4. The projection of such a redirected luminaire may be directed to the floor or to one of the walls. Thus, the achievable effect is that a local bright spot can be created almost everywhere in the subspace.

Фиг. 5 показывает пример модели 500 системы освещения. Такую модель можно построить с использованием известных методик, например, так называемой калибровки в темной комнате, программного обеспечения для планирования света, представлений CAD, либо с использованием технологии, которая имеет отношение к излучению кодированного света с помощью источников света и записи и анализу излучения кодированного света. Документ, который упоминается в "Уровне техники", относится к построению такой модели с использованием источников света, которые излучают кодированный свет.FIG. 5 shows an example of a lighting system model 500. Such a model can be constructed using well-known techniques, for example, the so-called dark room calibration, light planning software, CAD views, or using technology that relates to coded light emission using light sources and recording and analysis of coded light emission . The document referred to in the "Background" relates to the construction of such a model using light sources that emit coded light.

Модель 500 системы освещения представляется в виде таблицы, однако такую модель можно хранить иначе, например, в реляционной базе данных, и модель можно реализовать иначе, например, в модуле моделирования света. Таблица содержит в строках характеристики одного определенного источника света. Например, строка 512 содержит параметры первого источника света. В столбце 502 представляется идентифицирующий код соответствующего источника света, в столбце 504 - местоположение (в окружении) соответствующего источника света, в столбце 506 - проекция соответствующего источника света, в столбце 508 - подпространство цветового пространства XYZ CIE, где свет может излучаться соответствующим источником света, и в столбце 510 хранится диапазон силы света у соответствующего источника света. Как видно на фиг. 5, первый источник света, который имеет идентифицирующий код LS1, расположен в окружении в положении, которое описывается координатами (x1, y1, z1). Первый источник света имеет овальную проекцию на полу окружения, и цвет излученного света является точкой где-то в центре цветового пространства XYZ CIE. Кроме того, первый источник света можно выключить, чтобы никакой свет не излучался, но если источник света включается, то сила излученного света находится между значением I_min1 и I_max1. Если в примере формирователь наложенного изображения должен сформировать наложенное изображение, которое представляет информацию относительно достижимого эффекта освещения в точке рядом с крайней правой стороной пола, то формирователь наложенного изображения находит в столбце 506 таблицы 500, что источники LS1 и LS2 света имеют проекцию в этом определенном положении, и таким образом, сочетание возможностей источников LS1 и LS2 света определяет достижимые эффекты. Например, достижимая сила света является суммой силы света, которая может излучаться источником LS1 света и источником LS2 света.The model 500 of the lighting system is presented in the form of a table, however, such a model can be stored differently, for example, in a relational database, and the model can be implemented differently, for example, in the light modeling module. The table contains in the lines the characteristics of one particular light source. For example, line 512 contains the parameters of the first light source. In column 502, the identification code of the corresponding light source is presented, in column 504 is the location (surrounded) of the corresponding light source, in column 506 is the projection of the corresponding light source, in column 508 is the subspace of the XYZ CIE color space, where the light can be emitted by the corresponding light source, and column 510 stores the luminous intensity range of the corresponding light source. As seen in FIG. 5, the first light source, which has the identification code LS1, is located in an environment in the position that is described by the coordinates (x1, y1, z1). The first light source has an oval projection on the floor of the environment, and the color of the emitted light is a point somewhere in the center of the XYZ CIE color space. In addition, the first light source can be turned off so that no light is emitted, but if the light source is turned on, the intensity of the emitted light is between the value of I _min1 and I _max1 . If in the example the overlay imager should generate an overlay image that represents information regarding the achievable lighting effect at a point near the right-most side of the floor, then the overlay imager finds in column 506 of table 500 that the light sources LS1 and LS2 have a projection in this specific position , and thus, the combination of the capabilities of the light sources LS1 and LS2 determines the achievable effects. For example, the achievable luminous intensity is the sum of the luminous intensity that can be emitted by the light source LS1 and the light source LS2.

Модель 500 из фиг. 5 является всего лишь примером такой модели. В модели может быть доступно больше информации, например, отношение между значением управляющих сигналов, которые могут приниматься источниками света, и характеристиками света, который излучается в ответ на прием управляющих сигналов. Столбец 506 может дополнительно содержать информацию относительно распределения силы в проекции луча света у соответствующего источника света, когда соответствующий источник света излучает свет с максимальной силой. Кроме того, в примере из фиг. 5 проекции соответствующих источников света представляются в столбце 506 в качестве проекции на пол или стены окружения. Программное обеспечение для планирования света также часто допускает работу с виртуальными плоскостями, и поэтому проекция также может храниться в виде проекции на виртуальную плоскость в окружении. Столбец 508 в модели 500, который содержит цветовое пространство, достижимое с помощью соответствующего источника света, также можно представить тремя цветовыми точками в цветовом пространстве XYZ, которые задают углы достижимого цветового пространства.Model 500 of FIG. 5 is just an example of such a model. More information may be available in the model, for example, the relationship between the value of the control signals that can be received by the light sources and the characteristics of the light that is emitted in response to receiving the control signals. Column 506 may further contain information regarding the distribution of power in the projection of the light beam from the corresponding light source when the corresponding light source emits light with maximum strength. In addition, in the example of FIG. 5, projections of respective light sources are presented in column 506 as projections onto the floor or surrounding walls. Planning light software also often allows you to work with virtual planes, and so the projection can also be stored as a projection onto a virtual plane in the environment. Column 508 in model 500, which contains the color space achievable with the appropriate light source, can also be represented by three color points in the XYZ color space, which specify the angles of the achievable color space.

Фиг. 6 показывает другой вариант осуществления, в котором изображение 112 подобласти является схематичным изображением помещения. Изображение подобласти показывает, например, что в офисе стол 606 для переговоров с 6 стульями размещается в правой стороне помещения. Стена 602 имеет входную дверь, и репродукция известной картины Мондриана крепится к боковой стене 610. Часть 604 схематичного изображения помещения не соответствует стене в окружении и нарисована только для ясности. Наложенное изображение 113 представляет достижимый эффект 608 на столе 606. Достижимый эффект 608 является локальным светом на столе 606.FIG. 6 shows another embodiment in which the subarea image 112 is a schematic representation of a room. The image of the sub-area shows, for example, that in the office, a conference table 606 with 6 chairs is located on the right side of the room. Wall 602 has an entrance door, and a reproduction of Mondrian’s famous painting is attached to the side wall 610. Part 604 of the schematic representation of the room does not correspond to the wall in the surroundings and is drawn for clarity. The overlay image 113 represents the achievable effect 608 on the table 606. The achievable effect 608 is the local light on the table 606.

Фиг. 7 показывает блок-схему алгоритма способа 700 в соответствии с третьим аспектом изобретения. На этапе 702 отображается изображение подобласти. Изображение подобласти является изображением определенной подобласти окружения в конкретный момент времени. На этапе 704 принимается пользовательский ввод. Пользовательский ввод содержит указание местоположения. На этапе 706 обнаруживается, какое определенное местоположение в окружении указывается с помощью указания местоположения. На этапе 708 формируется наложенное изображение. Наложенное изображение содержит информацию, имеющую отношение к эффекту освещения, который является достижимым в определенном местоположении с помощью системы освещения. Достижимый эффект освещения является эффектом по меньшей мере двух управляемых источников света в системах освещения. Информация, имеющая отношение к достижимому эффекту освещения, основывается на модели системы освещения, представляющей эффекты, являющиеся достижимыми в данном окружении с помощью управляемого источника света в системе освещения. На этапе 710 отображаются изображение подобласти и наложенное изображение. В варианте осуществления после того, как выполнены все этапы способа, способ снова начинается с этапа 702 отображения изображения подобласти.FIG. 7 shows a flow chart of a method 700 in accordance with a third aspect of the invention. At 702, a subarea image is displayed. An image of a subdomain is an image of a certain subdomain of the environment at a particular point in time. At 704, user input is received. User input contains a location. At 706, it is detected which specific location in the environment is indicated by indicating the location. At 708, an overlay image is generated. The overlay image contains information related to a lighting effect that is achievable at a specific location using a lighting system. The achievable lighting effect is the effect of at least two controlled light sources in lighting systems. Information related to the achievable lighting effect is based on a model of a lighting system representing effects that are achievable in a given environment using a controlled light source in the lighting system. At 710, a subarea image and an overlay image are displayed. In an embodiment, after all steps of the method have been completed, the method starts again from step 702 of displaying a subarea image.

Следует отметить, что вышеупомянутые варианты осуществления скорее иллюстрируют, а не ограничивают изобретение, и специалисты в данной области техники смогут спроектировать многие альтернативные варианты осуществления без отклонения от объема прилагаемой формулы изобретения.It should be noted that the above embodiments are more likely to illustrate rather than limit the invention, and those skilled in the art will be able to design many alternative embodiments without departing from the scope of the appended claims.

В формуле изобретения любые ссылочные позиции, помещенные в круглых скобках, не следует истолковывать в качестве ограничивающих формулу изобретения. Использование глагола "содержать" и его спряжений не исключает наличия элементов или этапов помимо заявленных в формуле изобретения. Указание элемента в единственном числе не исключает наличия множества таких элементов. Изобретение может быть реализовано посредством аппаратных средств, содержащих несколько отдельных элементов, и посредством соответствующим образом запрограммированного компьютера. В пунктах формулы на устройствах, перечисляющих несколько средств, некоторые из этих средств могут быть реализованы с помощью одного и того же элемента аппаратных средств. Сам факт, что некоторые критерии перечисляются во взаимно разных зависимых пунктах формулы изобретения, не указывает на то, что сочетание этих критериев не может использоваться с пользой.In the claims, any reference numerals in parentheses should not be construed as limiting the claims. The use of the verb “contain” and its conjugations does not exclude the presence of elements or steps other than those stated in the claims. Indication of an element in the singular does not exclude the presence of many such elements. The invention can be implemented by means of hardware containing several separate elements, and by means of an appropriately programmed computer. In the claims on devices listing several tools, some of these tools can be implemented using the same hardware element. The mere fact that certain criteria are listed in mutually different dependent claims does not indicate that a combination of these criteria cannot be used to advantage.

Claims

1. A user interaction system (100, 200) (100, 200) for controlling a lighting system to illuminate a certain environment, the user interaction system (100, 200) comprising
a display (106) for displaying the subregion image (112) and the overlay image (113), wherein the subregion image (112) is an image of a certain environment subregion,
- means (102) for receiving location indication (118),
- means of identifying (104, 204) the location to detect which specific location in the environment is indicated by indicating (118) the location,
- an overlay imager (108, 214) for generating an overlay image (113) containing information (116, 410, 608) related to the lighting effect that is achievable by the lighting system at a specific location, the achievable lighting effect being the effect of at least two controllable light sources in the lighting system, the information (116, 410, 608) related to the achievable lighting effect being based on the model (110, 216, 500) of the lighting system representing effects that are achievable in whirling using controlled light sources in a lighting system, wherein
the user interaction system (100, 200) further comprises a camera (208) for receiving an image from the camera, and wherein the display (106) is further configured to display the image from the camera;
means for receiving a location indication (102) is configured to receive user input selecting a camera image and indicating that the camera image is a subregion image (112) to be displayed;
the camera (208) contains at least one of the means (210) for detecting the location of the camera (208), the means (224) for detecting the direction in which the camera (208) is oriented, the tilt sensor (226) for detecting the tilt of the camera (208) and means (228) for detecting a camera angle (208), and
location identification means (104, 204) is configured to detect which specific sub-area of the environment is depicted in the sub-area image (112), determined using at least one of the detected camera location (208), the detected direction, the detected tilt, and the detected viewing angle, and wherein the location identification means is configured to determine a specific location on the detected specific subarea.

2. The user interaction system (100, 200) according to claim 1, wherein the means for receiving the location indication is user input means (102, 202) for receiving user input containing the location indication.

3. A user interaction system (100, 200) according to claim 1 or 2, wherein the achievable effect is at least
one of the following: luminous intensity can increase or decrease locally, locally achievable light colors are a specific subspace of color space, luminous intensity can increase or decrease globally, achievable light colors in a certain area and around a certain location are a certain subspace of color space, contrast can increase or decrease in a certain area and around a certain location, a colder or warmer color is achievable, color temperature the round can increase or decrease, and the effect of the redirected controlled light source can move.

4. The user interaction system (100, 200) according to claim 2, wherein the user input means (102, 202) is further configured to receive a desired lighting effect or a desired change in a lighting effect, wherein a desired lighting effect and a desired change in a lighting effect are accepted for specific location.

5. The user interaction system (100, 200) according to claim 4, wherein the user interaction system (100, 200) further comprises
- a lighting effects controller (218) for generating a control signal for the controlled light source in the lighting system in order to optimally obtain the desired lighting effect or the desired change in the lighting effect at a specific location,
moreover, the formation of control signals is based on the model (110, 216, 500) of the lighting system, and the model of the system
Lighting additionally contains information regarding the relationship between the values of the control signals for controlled light sources and the response of the respective controlled light sources when receiving control signals.

6. The user interaction system (100, 200) according to claim 5, wherein the overlay image generator (108, 214) is further configured to form the overlay image (113) comprising
- information representing the changed operation of the controlled light source in the lighting system in accordance with the generated control signal,
or
- feedback on the feasibility of the desired lighting effect or the desired change in the lighting effect.

7. The user interaction system (100, 200) according to claim 5, wherein the user interaction system (100, 200) further comprises
- output means (220) for providing a control signal to the lighting system.

8. The user interaction system (100, 200) according to claim 1 or 2, wherein the overlay image generator (108, 214) is further configured to form an overlay image (113) containing information related to one or more controllable light sources in a lighting system, wherein the information about a particular controlled light source is at least one of a position of a specific light source, a direction in which
a light beam is emitted from a specific light source, a projection of a light beam from a specific light source, colors that can be emitted by a specific light source, light intensity that can be emitted by a specific light source, options for moving or rotating a specific light source, or the relationship between an achievable effect and a specific light source.

9. The system (100, 200) of user interaction according to claim 2, in which
- the user input means (102, 202) is further configured to receive user input indicating that the camera image is a sub-area image (112) to be displayed.

10. A user interaction system (100, 200) for controlling a lighting system to illuminate a certain environment, the user interaction system (100, 200) comprising
a display (106) for displaying the subregion image (112) and the overlay image (113), wherein the subregion image (112) is an image of a certain environment subregion,
means (102) for receiving location indication (118),
means (104, 204) for identifying a location for detecting which specific location in the environment is indicated by indicating (118) the location,
an overlay imager (108, 214) for forming an overlay image (113) comprising
information (116, 410, 608) related to the lighting effect that is achievable by the lighting system at a specific location, the achievable lighting effect being the effect of at least two controlled light sources in the lighting system, information (116, 410, 608) related to the achievable lighting effect is based on a model (110, 216, 500) of a lighting system representing effects that are achievable in an environment using controlled light sources in a lighting system,
moreover, the means for receiving a location indication is a user input means (102, 202) for receiving a user input containing a location indication,
a camera (208) for acquiring an image from the camera, the display (106) being further configured to display an image from the camera,
characterized in that
- the camera (208) contains at least one of the means (210) for detecting the location of the camera (208), the means (224) for detecting the direction in which the camera (208) is oriented, the tilt sensor (226) for detecting the tilt of the camera (208) ) and means (228) for detecting the viewing angle of the camera (208), and
user input means (102, 202) is configured to base the location indication on at least one of the detected location of the camera (208), the detected direction, the detected tilt, and the detected viewing angle.

11. A portable electronic device containing a system (100, 200) of user interaction according to one of paragraphs. 1-10.