JP4340608B2 - Communication line establishment system, communication line establishment method, program, and recording medium - Google Patents
Communication line establishment system, communication line establishment method, program, and recording medium Download PDFInfo
- Publication number
- JP4340608B2 JP4340608B2 JP2004256396A JP2004256396A JP4340608B2 JP 4340608 B2 JP4340608 B2 JP 4340608B2 JP 2004256396 A JP2004256396 A JP 2004256396A JP 2004256396 A JP2004256396 A JP 2004256396A JP 4340608 B2 JP4340608 B2 JP 4340608B2
- Authority
- JP
- Japan
- Prior art keywords
- optical signal
- terminal
- hue difference
- communication line
- client terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Small-Scale Networks (AREA)
- Mobile Radio Communication Systems (AREA)
Description
本発明は、ユーザの携帯するクライアント端末とユーザ周囲に存在する任意の情報機器、情報端末との通信回線を確立するシステムおよび方法に関する。 The present invention relates to a system and a method for establishing a communication line between a client terminal carried by a user and an arbitrary information device existing around the user and the information terminal.
各種情報機器と携帯端末との間の情報交換に向けた近距離無線通信技術として、赤外線通信を用いるIrDA(Infrared Data Association)がある。IrDAとは、赤外線を利用した近距離のデータ通信を行う技術仕様を策定するために1993年に設立された業界団体、および、また、同団体が定めた赤外線通信の規格に基づく通信方式である。この無線通信方式では、通信可能距離1m、通信速度115.2kbpsまでのバージョン1.0仕様と、1m以内、4Mbpsまでの1.1仕様、0.2m以内、115.2kbpsまでの1.2仕様(低消費電力版)がある。赤外線通信ポートは、既に多くの携帯端末に具備され、IrDAによるデータ通信が広く利用されている。 As a short-range wireless communication technology for exchanging information between various information devices and portable terminals, there is IrDA (Infrared Data Association) using infrared communication. IrDA is a communication system based on the industry association established in 1993 to formulate technical specifications for short-range data communication using infrared rays, and the infrared communication standard established by the association. . In this wireless communication system, the version 1.0 specification up to a communicable distance of 1 m and a communication speed of 115.2 kbps, the 1.1 specification up to 1 m and 4 Mbps, the 1.2 specification up to 0.2 m and 115.2 kbps. (Low power consumption version). An infrared communication port is already provided in many portable terminals, and data communication using IrDA is widely used.
しかしながら、赤外線による方式では、通信機器間で赤外線ポートを互いに対向させてその光軸を一定範囲に合わせておくという制約があった。また、IrDAでは、通常、赤外線ポート間の距離が1m以下程度である必要があり、ユーザから数メートル離れた距離に位置する大画面ディスプレイとの通信などには適用できない。さらに、通信回線確立後、サーバ装置と携帯端末の間の光軸を通行者などの障害物により遮断されると通信が途切れるといった問題がある。 However, in the infrared system, there is a restriction that the infrared ports are opposed to each other between the communication devices and the optical axis thereof is set within a certain range. In addition, IrDA normally requires a distance between infrared ports of about 1 m or less, and is not applicable to communication with a large screen display located at a distance of several meters from a user. Furthermore, after the communication line is established, there is a problem that communication is interrupted if the optical axis between the server device and the portable terminal is blocked by an obstacle such as a passerby.
これらの問題を解決する方式として、電波を用いる無線LAN(IEEE802.11a/b/g)およびBluetoothが開発されている(例えば、非特許文献1参照)。 As a method for solving these problems, wireless LAN (IEEE802.11a / b / g) and Bluetooth using radio waves have been developed (see, for example, Non-Patent Document 1).
そして、無線LANデバイスや、Bluetoothを具備した携帯端末の普及に伴って、これらの携帯端末と通信を行う多様な情報機器も開発されている。例えば、携帯電話上の画像情報をBluetoothにより受信し出力する機能を備えたディスプレイやプリンターが開発されている。クーラーなどの家電製品もBluetoothを介して携帯電話からその動作を制御する仕組みを有するものが開発されている。さらに、街頭情報端末(駅売店の端末)、街頭ディスプレイなどがBluetooth等に対応し、携帯端末から情報取得操作などを行えるようになっている。 With the spread of wireless LAN devices and mobile terminals equipped with Bluetooth, various information devices that communicate with these mobile terminals have also been developed. For example, displays and printers having a function of receiving and outputting image information on a mobile phone by Bluetooth have been developed. Home appliances such as coolers have also been developed that have a mechanism for controlling their operation from a mobile phone via Bluetooth. Furthermore, street information terminals (station shop terminals), street displays, and the like are compatible with Bluetooth and the like, and information acquisition operations can be performed from a mobile terminal.
一方、指向性を有するIrDAと電波によるBluetoothを組み合わせて、Bluetooth回線をIrDAで指示した方向の機器と通信回線を確立するという方法が提案されている(例えば、特許文献1参照)。
図10に例示するように、携帯端末(以下、「クライアント端末」という)と近距離無線通信を行う情報機器(以下、「サーバ装置」という)がユーザ周囲に複数存在する場合を考える。例えば、図中のサーバ装置A〜Eは、パブリックスペースに設置された大型ディスプレイであり、ユーザは任意のディスプレイに表示された情報コンテンツをクライアント端末X上のボタンを用いて操作するといった例がこの状況に該当する。 As illustrated in FIG. 10, consider a case where there are a plurality of information devices (hereinafter referred to as “server devices”) that perform short-range wireless communication with a mobile terminal (hereinafter referred to as “client terminal”) around the user. For example, the server apparatuses A to E in the figure are large displays installed in a public space, and an example in which a user operates information content displayed on an arbitrary display using a button on the client terminal X is shown in this example. Applicable to the situation.
このとき、まず、ユーザが指定したサーバ装置と、クライアント端末の間で双方向通信回線を確立する必要がある。電波を用いる近距離無線通信では、まず、クライアント端末が、通信可能な距離に存在するサーバ装置の通信IDを問い合わせ、応答があったサーバ装置との双方向通信チャネルを確立するという手順をとる。 At this time, it is first necessary to establish a bidirectional communication line between the server device designated by the user and the client terminal. In short-range wireless communication using radio waves, first, a client terminal inquires about a communication ID of a server device existing at a communicable distance and establishes a bidirectional communication channel with the server device that has responded.
しかしながら、図10の例のように、周囲に複数のサーバ装置が存在する場合、クライアント端末は、複数のサーバ装置から応答を受信することになる。結果、クライアント端末は、ユーザが指定したサーバ装置の通信IDを特定できず、必要な通信回線の確立処理を進められないという問題が生じる。 However, when there are a plurality of server devices in the vicinity as in the example of FIG. 10, the client terminal receives responses from the plurality of server devices. As a result, there is a problem that the client terminal cannot specify the communication ID of the server device designated by the user and cannot proceed with the necessary communication line establishment processing.
一方、IrDAによる方法であれば、ユーザが任意のサーバ装置の赤外線ポートに携帯端末の赤外線ポートを対峙させることで、該サーバ装置との通信回線を確立できる。しかしながら、上述した問題から、電波を用いる双方向通信回線の方が利便性に優れる。 On the other hand, in the case of the IrDA method, the user can establish a communication line with the server device by allowing the infrared port of the portable terminal to face the infrared port of an arbitrary server device. However, because of the above-described problem, a bidirectional communication line using radio waves is more convenient.
なお、IrDAを電波通信と組み合わせることで、上記問題は改善されるが、赤外線ポートを持たない端末間では適用できない。 Although the above problem can be improved by combining IrDA with radio wave communication, it cannot be applied between terminals that do not have an infrared port.
本発明の目的は、赤外線ポートを持たない端末を使用して、周囲に存在する複数の情報機器、情報端末の中から特定の一つを指定し、電波による双方向通信回線を確立できる通信回線確立システム、確立方法、プログラムおよび記録媒体を提供することにある。 An object of the present invention is to use a terminal that does not have an infrared port, specify a specific one from a plurality of information devices and information terminals that exist in the vicinity, and establish a bidirectional communication line by radio waves. To provide an establishment system, an establishment method, a program, and a recording medium.
本発明により実現される通信回線確立システム、方法では、クライアント端末が光信号発信手段と電波無線通信手段を具備し、サーバ装置(情報機器、情報端末)が光信号受信手段と電波無線通信手段を具備し、通信回線確立には初めに光信号を用い、この後、電波により無線通信回線を確立する。光は電波に比較して直進性が高く、指向性を有する。ユーザがクライアント端末より任意のサーバ装置へ向けて光信号を発することにより、前記任意のサーバ装置のみが光信号を受信することになる。さらに、該光信号がクライアント端末の端末IDを伝送することにより、前記サーバ装置は、通信回線を確立すべきクライアント端末を認識できる。したがって、この後、電波により無線通信回線を容易に確立することができる。 In the communication line establishment system and method realized by the present invention, the client terminal includes the optical signal transmission means and the radio wave communication means, and the server device (information device, information terminal) includes the optical signal reception means and the radio wave communication means. An optical signal is first used to establish a communication line, and then a wireless communication line is established by radio waves. Light has high straightness and directivity compared to radio waves. When the user emits an optical signal from the client terminal to an arbitrary server device, only the arbitrary server device receives the optical signal. Furthermore, when the optical signal transmits the terminal ID of the client terminal, the server device can recognize the client terminal to establish a communication line. Therefore, a radio communication line can be easily established thereafter by radio waves.
すなわち、本発明の第1の通信回線確立システム、方法では、前記クライアント端末が自端末を特定する端末IDを光信号発信手段より、サーバ装置の光信号受信手段に向けて発信し、端末IDを受信した前記サーバ装置が無線通信手段を用いて、前記端末IDで特定されるクライアント端末との通信回線を確立する。 That is, in the first communication line establishment system and method of the present invention, the client terminal transmits a terminal ID for specifying its own terminal from the optical signal transmitting means to the optical signal receiving means of the server device, and the terminal ID is determined. The received server device establishes a communication line with the client terminal specified by the terminal ID using wireless communication means.
特に、インターネットを介した通信回線の確立に向けた,本発明の第2の通信回線確立システム、方法は、クライアント端末が、光信号発信手段とインターネット通信手段を具備し、サーバ装置が光信号受信手段とインターネット通信手段を具備し、前記クライアント端末が自端末のIPアドレスを光信号発信手段より、前記サーバ装置に光信号受信手段に向けて発信し、IPアドレスを受信した前記サーバ装置がインターネット通信手段を用いて前記IPアドレスで特定されるクライアント端末との回線を確立する。 In particular, in the second communication line establishment system and method of the present invention for establishing a communication line via the Internet, the client terminal includes optical signal transmission means and Internet communication means, and the server apparatus receives the optical signal. And the Internet communication means, wherein the client terminal transmits the IP address of the own terminal from the optical signal transmission means to the server apparatus to the optical signal reception means, and the server apparatus receiving the IP address transmits the Internet communication Means to establish a line with the client terminal specified by the IP address.
サーバ装置主導での通信回線確立処理が困難な場合に対応した、本発明の第3の通信回線確立システム、方法は、前記クライアント端末が自端末を特定する端末IDを光信号発信手段より、サーバ装置の光信号受信手段に向けて発信し、前記クライアント端末が、無線通信手段を用いてサーバ装置へ通信開始要求を行い、サーバ装置が前記光信号受信手段において受信した端末IDで特定される端末からの通信開始要求にのみ応答する。 The third communication line establishment system and method of the present invention corresponding to a case where the communication line establishment process led by the server device is difficult is the server ID for identifying the terminal of the client terminal by the optical signal transmission means. A terminal that is transmitted to the optical signal receiving means of the apparatus, the client terminal makes a communication start request to the server apparatus using the wireless communication means, and the server apparatus is identified by the terminal ID received by the optical signal receiving means It responds only to the communication start request from.
さらに、光信号として発信されるクライアント端末の端末IDを第3者に傍受されることを防ぐことを意図した本発明の第4の通信回線確立システム、方法では、前記クライアント端末が動的に生成したコンタクトIDを光信号発信手段より、サーバ装置の光信号受信手段に向けて発信し、コンタクトIDを受信した前記サーバ装置が無線通信手段を用いてコンタクトIDをクライアント端末に送信し、前記クライアント端末が前記コンタクトIDを送信してきたサーバ装置との無線通信回線を確立する。 Furthermore, in the fourth communication line establishment system and method of the present invention intended to prevent a third party from intercepting the terminal ID of the client terminal transmitted as an optical signal, the client terminal generates dynamically The contact ID is transmitted from the optical signal transmitting means to the optical signal receiving means of the server device, and the server device receiving the contact ID transmits the contact ID to the client terminal using the wireless communication means, and the client terminal Establishes a wireless communication line with the server device that has transmitted the contact ID.
さらに、以上の通信回線確立処理において、本発明では、特に、カラーディスプレイを有する携帯端末を本発明のシステムのクライアント端末として利用できるようにするために、カラーディスプレイを前記光信号発信手段とし、前記光信号受信手段としてイメージセンサを用い、発信される光信号として、色点滅を用いてデータを伝送する色相差光信号を用いる。もしくは、所定の幾何的形状特長によりデータを伝送するビジュアルコードを用いる。 Further, in the above communication line establishment processing, in the present invention, in particular, in order to make it possible to use a portable terminal having a color display as a client terminal of the system of the present invention, the color display is used as the optical signal transmission means, An image sensor is used as the optical signal receiving means, and a hue difference optical signal that transmits data using color blinking is used as the transmitted optical signal. Alternatively, a visual code that transmits data according to a predetermined geometric feature is used.
以上のことから、本発明は、以下の通信回線確立システム、確立方法、プログラムおよび記録媒体を特徴とする。 As described above, the present invention is characterized by the following communication line establishment system, establishment method, program, and recording medium.
(システムの発明)
(1)光信号発信手段と無線通信手段を具備するクライアント端末と、光信号受信手段と無線通信手段を具備するサーバ装置との間の通信回線確立システムであって、
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段を設け、
前記サーバ装置は、前記光信号受信手段により前記端末IDを受信する手段と、前記無線通信手段により前記端末IDで特定されるクライアント端末との通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信する手段を設けた、ことを特徴とする。
(Invention of the system)
(1) A communication line establishment system between a client terminal having an optical signal transmitting means and a wireless communication means, and a server apparatus having an optical signal receiving means and a wireless communication means,
The client terminal is provided with means for transmitting a terminal ID for identifying the own terminal from the optical signal transmitting means to the optical signal receiving means of the server device,
The server device includes means for receiving the terminal ID by the optical signal receiving means, and means for establishing a communication line with the client terminal specified by the terminal ID by the wireless communication means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means is provided for receiving the terminal ID by computing the generated hue difference and converting it into a data value .
(2)光信号発信手段とインターネット通信手段を具備するクライアント端末と、光信号受信手段とインターネット通信手段を具備するサーバ装置との間の通信回線確立システムであって、
前記クライアント端末は、自端末のIPアドレスを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段を設け、
前記サーバ装置は、前記光信号受信手段により前記IPアドレスを受信する手段と、前記インターネット通信手段により前記IPアドレスで特定されるクライアント端末との通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記IPアドレスを受信する手段を設けた、ことを特徴とする。
(2) A communication line establishment system between a client terminal having an optical signal transmission means and an Internet communication means, and a server apparatus having an optical signal reception means and an Internet communication means,
The client terminal is provided with means for transmitting the IP address of its own terminal from the optical signal transmitting means to the optical signal receiving means of the server device,
The server device includes means for receiving the IP address by the optical signal receiving means, and means for establishing a communication line with the client terminal specified by the IP address by the Internet communication means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means is provided for receiving the IP address by computing the generated hue difference and converting it into a data value .
(3)光信号発信手段と無線通信手段を具備するクライアント端末と、光信号受信手段と無線通信手段を具備するサーバ装置との間の通信回線確立システムであって、
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段と、前記無線通信手段により前記サーバ装置へ通信開始要求を行う手段とを設け、
前記サーバ装置は、前記光信号受信手段により受信された前記端末IDで特定されるクライアント端末からの前記通信開始要求に応答して通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信する手段を設けた、ことを特徴とする。
(3) A communication line establishment system between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal issues a communication start request to the server apparatus by means of transmitting a terminal ID identifying the terminal from the optical signal transmitting means to the optical signal receiving means of the server apparatus, and by the wireless communication means. Means,
The server device is provided with means for establishing a communication line in response to the communication start request from the client terminal specified by the terminal ID received by the optical signal receiving means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means is provided for receiving the terminal ID by computing the generated hue difference and converting it into a data value.
(4)光信号発信手段と無線通信手段を具備するクライアント端末と、光信号受信手段と無線通信手段を具備するサーバ装置との間の通信回線確立システムであって、
前記クライアント端末は、動的に生成したコンタクトIDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段を設け、
前記サーバ装置は、前記光信号受信手段により前記コンタクトIDを受信する手段と、前記無線通信手段により前記コンタクトIDを前記クライアント端末に送信する手段を設け、
前記クライアント端末は、前記無線通信手段により前記コンタクトIDを送信してきた前記サーバ装置との通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記コンタクトIDを受信する手段を設けた、ことを特徴とする。
(4) A communication line establishment system between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal is provided with means for transmitting a dynamically generated contact ID from the optical signal transmitting means to the optical signal receiving means of the server device,
The server device includes means for receiving the contact ID by the optical signal receiving means, and means for transmitting the contact ID to the client terminal by the wireless communication means,
The client terminal is provided with means for establishing a communication line with the server device that has transmitted the contact ID by the wireless communication means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means is provided for receiving the contact ID by computing the generated hue difference and converting it into a data value .
(5)前記データ値がN進数の場合、前記色相差を(N+1)階調とすることを特徴とする。 (5) When the data value is an N-ary number, the hue difference is set to (N + 1) gradation .
(方法の発明)
(6)光信号発信手段と無線通信手段を具備するクライアント端末と、光信号受信手段と無線通信手段を具備するサーバ装置との間の通信回線確立方法であって、
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップを有し、
前記サーバ装置は、前記光信号受信手段により前記端末IDを受信するステップと、前記無線通信手段により前記端末IDで特定されるクライアント端末との通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信するステップを有する、ことを特徴とする。
(Invention of method)
( 6 ) A communication line establishment method between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal has a step of transmitting a terminal ID for identifying the terminal from the optical signal transmitting unit to the optical signal receiving unit of the server device,
The server device includes a step of receiving the terminal ID by the optical signal receiving unit, and a step of establishing a communication line with the client terminal specified by the terminal ID by the wireless communication unit,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. A step of receiving the terminal ID by performing arithmetic processing on the generated hue difference and converting it into a data value is provided.
(7)光信号発信手段とインターネット通信手段を具備するクライアント端末と、光信号受信手段とインターネット通信手段を具備するサーバ装置との間の通信回線確立方法であって、
前記クライアント端末は、自端末のIPアドレスを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップを有し、
前記サーバ装置は、前記光信号受信手段により前記IPアドレスを受信するステップと、前記インターネット通信手段により前記IPアドレスで特定されるクライアント端末との通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記IPアドレスを受信するステップを有する、ことを特徴とする。
( 7 ) A communication line establishment method between a client terminal comprising an optical signal transmitting means and an Internet communication means, and a server device comprising an optical signal receiving means and an Internet communication means,
The client terminal has a step of transmitting the IP address of the own terminal from the optical signal transmitting unit to the optical signal receiving unit of the server device,
The server device includes a step of receiving the IP address by the optical signal receiving unit, and a step of establishing a communication line with the client terminal specified by the IP address by the Internet communication unit,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. The method includes the step of receiving the IP address by performing arithmetic processing on the generated hue difference and converting it into a data value .
(8)光信号発信手段と無線通信手段を具備するクライアント端末と、光信号受信手段と無線通信手段を具備するサーバ装置との間の通信回線確立方法であって、
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップと、前記無線通信手段により前記サーバ装置へ通信開始要求を行うステップとを有し、
前記サーバ装置は、前記光信号受信手段により受信された前記端末IDで特定されるクライアント端末からの前記通信開始要求に応答して通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信するステップを有する、ことを特徴とする。
(8) A communication line establishment method between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal transmits a terminal ID for identifying its own terminal from the optical signal transmitting unit to the optical signal receiving unit of the server device, and makes a communication start request to the server device by the wireless communication unit. And having steps
The server device has a step of establishing a communication line in response to the communication start request from the client terminal specified by the terminal ID received by the optical signal receiving means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. A step of receiving the terminal ID by performing arithmetic processing on the generated hue difference and converting it into a data value is provided.
(9)光信号発信手段と無線通信手段を具備するクライアント端末と、光信号受信手段と無線通信手段を具備するサーバ装置との間の通信回線確立方法であって、
前記クライアント端末は、動的に生成したコンタクトIDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップを有し、
前記サーバ装置は、前記光信号受信手段により前記コンタクトIDを受信するステップと、前記無線通信手段により前記コンタクトIDを前記クライアント端末に送信するステップを有し、
前記クライアント端末は、前記無線通信手段により前記コンタクトIDを送信してきた前記サーバ装置との通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記コンタクトIDを受信するステップを有する、ことを特徴とする。
( 9 ) A method of establishing a communication line between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal has a step of transmitting a dynamically generated contact ID from the optical signal transmitting unit to the optical signal receiving unit of the server device;
The server device includes a step of receiving the contact ID by the optical signal receiving unit, and a step of transmitting the contact ID to the client terminal by the wireless communication unit,
The client terminal has a step of establishing a communication line with the server device that has transmitted the contact ID by the wireless communication means;
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. The method includes a step of receiving the contact ID by performing arithmetic processing on the generated hue difference and converting it into a data value .
(10)前記データ値がN進数の場合、前記色相差を(N+1)階調とすることを特徴とする。 ( 10 ) When the data value is an N-ary number, the hue difference is set to (N + 1) gradation .
(プログラムの発明)
(11)上記(1)〜(10)のいずれか1項に記載の通信回線確立システムまたは確立方法における手段またはステップをコンピュータで実行可能に構成したことを特徴とする。
(Invention of the program)
( 11 ) A means or step in the communication line establishment system or establishment method described in any one of (1) to ( 10 ) above is configured to be executable by a computer.
(記録媒体の発明)
(12)上記(1)〜(10)のいずれか1項に記載の通信回線確立システムまたは確立方法における手段またはステップをコンピュータに実行させるためのプログラムを、該コンピュータが読み取り可能に記録したことを特徴とする。
(Invention of recording medium)
( 12 ) The computer records the program for causing the computer to execute the means or steps in the communication line establishment system or establishment method according to any one of (1) to ( 10 ) above. Features.
本発明によれば、通信回線確立の初期に、指向性の高い光信号を通信先装置に向けて発信し、端末の通信インタフェース(端末ID)を伝達することにより、周囲に無線通信装置をもつ情報機器、情報端末が存在しても、的確にクライアント端末とユーザが指定した装置との間の双方向通信回線を確立できる。 According to the present invention, at the initial stage of establishment of a communication line, an optical signal with high directivity is transmitted to a communication destination device, and a communication interface (terminal ID) of the terminal is transmitted, so that a wireless communication device is provided around Even if an information device and an information terminal exist, a bidirectional communication line between the client terminal and the device designated by the user can be established accurately.
また、本発明においては、通信回線確立の初期に用いる光信号として端末IDを送信する代わりに、動的に生成したコンタクトIDを送信することで、該光信号を傍受する第3者に端末IDが知られるのを防止できる。 Further, in the present invention, instead of transmitting a terminal ID as an optical signal used at the initial stage of establishing a communication line, a terminal ID is transmitted to a third party who intercepts the optical signal by transmitting a dynamically generated contact ID. Can be prevented from being known.
さらに、本発明においては、光信号発信手段として、より指向性の高い光源を用いることで、より精密に通信先デバイスを指定できるようになる。同様に、光信号発信手段として可視光源を用いることで、ユーザは光が照射されている装置を視覚的に認識できるので、より的確に通信先装置が指定できる。 Furthermore, in the present invention, a communication destination device can be specified more precisely by using a light source with higher directivity as the optical signal transmission means. Similarly, by using a visible light source as the optical signal transmission means, the user can visually recognize the device irradiated with the light, so that the communication destination device can be specified more accurately.
また、本発明においては、光信号発信には、カラーディスプレイから発信可能な色点滅光信号(色相差光信号)を用いることで、クライアント端末に特殊な光信号光源デバイスを具備することなく実現できる。 In the present invention, the light signal can be transmitted without using a special light signal light source device in the client terminal by using a color blinking light signal (hue difference light signal) that can be transmitted from the color display. .
(1)通信回線確立の基本方式
本発明の通信回線の確立システムおよび方法は、クライアント端末がその近くに存在するサーバ装置との間で、所定の無線電波を用いて通信回線を確立するためのシステムおよび方法である。特に、本発明は、図10に示すように、クライアント端末Xの近くに複数のサーバ装置(情報機器、情報端末)A〜Eが存在する場合にその効力を発揮する。
(1) Basic System for Establishing Communication Line The communication line establishment system and method of the present invention is for establishing a communication line using a predetermined radio wave between a client terminal and a server device located nearby. System and method. In particular, the present invention is effective when a plurality of server devices (information devices, information terminals) A to E exist near the client terminal X as shown in FIG.
本発明の通信回線確立システムの構成例を図1に示す。同図において、クライアント端末100は、光信号発信手段101と、電波による無線通信手段102、テンキーや表示装置などの各種I/O(入出力)デバイス103と、これらを制御するコントローラー(すなわち、CPU(中央演算装置)とCPU上で動作する各種ソフトウェアモジュール)104で構成される。このクライアント端末100は、通信手段を備えた携帯電話やPDA(Personal Data Assistant)、ラップトップPCなどが持つ構成をそのまま利用することができ、特に、光信号発信手段を備えることが特徴となる。
A configuration example of a communication line establishment system of the present invention is shown in FIG. In the figure, a
一方、サーバ装置200は、光信号受信手段201と、電波による無線通信手段202、テンキーや表示装置などの各種I/O(入出力)デバイス203と、これらを制御して通信回線確立などの処理を行うためのコントローラー(CPU(中央演算装置)とCPU上で動作する各種ソフトウェアモジュール)204を具備するものであればよい。例えば、サーバ装置200は、PC、TV、AV機器、情報家電、街頭情報端末(街頭ディスプレイ、駅売店の端末)などがもつ光信号受信手段と、クライアント端末との通信手段を備えた装置を利用することができる。
On the other hand, the
本発明の通信回線確立システムでは、最初に、クライアント端末100の光信号発信手段101から、サーバ装置200の光信号受信手段201へ光信号IDを発信する。光信号IDの伝達は以下のようにして実現される。
In the communication line establishment system of the present invention, first, the optical signal ID is transmitted from the optical signal transmitting means 101 of the
1つの例としては、光信号発信手段101としてLED(Light Emitting Diode)などを用い、光信号受信手段201としてフォトダイオード(Photo Diode)もしくはイメージセンサを用いる。この場合、LEDより赤外線もしくは可視光を発信し、データの伝送には光源を点滅させることによるPPM(Pulse Position Modulation)などにより実現できる。サーバ装置200では、フォトダイオードが検出した点滅パターンをデータに変換し受信する。この他、IrDAにより定義されている伝送方法や、下記の非特許文献2、非特許文献3、非特許文献4に記載の方法を適用することも可能である。
As one example, an LED (Light Emitting Diode) or the like is used as the optical signal transmitting means 101, and a photodiode or an image sensor is used as the optical signal receiving means 201. In this case, infrared or visible light is transmitted from the LED, and data transmission can be realized by PPM (Pulse Position Modulation) or the like by blinking the light source. In the
特に、光信号発信手段として、レーザ・ポインタに用いられるレーザ・ダイオードのような高指向性の可視光源デバイスを用いることができる。この場合、ユーザは光が照射されている装置を視覚的に認識でき、所定のポイントに精密に光を照射できるので、複数の周囲装置の中からより的確に通信先装置を指定することができる。 In particular, a highly directional visible light source device such as a laser diode used for a laser pointer can be used as the optical signal transmitting means. In this case, the user can visually recognize the device irradiated with light and can precisely irradiate light at a predetermined point, so that the communication destination device can be more accurately specified from among a plurality of surrounding devices. .
光信号IDの伝達のための他の例としては、クライアント端末のディスプレイデバイスを光源として用いる。このディスプレイデバイスには、下記の非特許文献5に記載されているような特定の幾何形状特長によりデータを伝達するビジュアルコードを表示し、これをサーバ装置に光信号受信手段として具備されたイメージセンサで読み取ることにより、IDを伝達することができる。 As another example for transmitting the optical signal ID, a display device of a client terminal is used as a light source. In this display device, a visual code for transmitting data with a specific geometric feature as described in Non-Patent Document 5 below is displayed, and this is provided as an optical signal receiving means in the server device. By reading with, ID can be transmitted.
また、図2に示すように、光信号発信手段としてカラーディスプレイ105、光信号受信手段としてカラーイメージセンサ205を用い、色点滅光信号(色相差光信号)を用いてIDを伝達することもできる。
In addition, as shown in FIG. 2, the
非特許文献2「松下伸行、日原大輔、後輝行、吉村真一、暦本純一、“ID Cam:シーンとIDを同時に取得可能なスマートカメラ”、情報処理学会論文誌、vol.43、No.12、pp.3664-3674、Dec.2002.」
非特許文献3「D.J. Moore,R.Want,et al."Implementing Phicons:Combining Computer Vision with Infrared Technology for Interactive Physical Icon",Proceedings of ACM UIST'99,Ashville,N.C.,November 8th-10th,pp.67-68,1999.」
非特許文献4「青木恒、“カメラで読みとる赤外線タグとその応用”、インタラクティブシステムとソフトウェアVIII,pp.131-136、近代科学社、2000.」
非特許文献5「暦本純一、“2次元マトリックスコードを利用した拡張現実感の構成手法”、インタラクティブシステムとソフトウェアIV,pp.199-208、近代科学社、1996.」
(2)色点滅光信号(色相差光信号)による光信号伝達方式
本発明における通信回線確立のための光信号伝達手段として、色点滅光信号(色相差光信号)方式を利用する。
Non-patent document 4 “Atsushi Aoki,“ Infrared tag read by camera and its application ”, interactive system and software VIII, pp.131-136, Modern Science, 2000.”
Non-Patent Document 5 “Junichi Kyokumoto,“ Augmented Reality Construction Method Using Two-Dimensional Matrix Code ”, Interactive System and Software IV, pp.199-208, Modern Science, 1996.”
(2) Optical signal transmission method using color blinking optical signal (hue difference optical signal) The color blinking optical signal (hue difference optical signal) method is used as an optical signal transmission means for establishing a communication line in the present invention.
図11に概略構成を示すように、送信側は、送信キュー10と、色点滅信号送信手段11と、ディスプレイ等の色表示手段12とを有する。一方、受信側は、カメラ等のイメージセンサ手段20と、色点滅信号受信手段21とを有する。
As shown schematically in FIG. 11, the transmission side includes a
色点滅信号送信手段11は、送信側の上位手段から送信キュー10に入力される送信データを色点滅信号に変換し、色表示手段12を用いて所定の色点滅周波数f(Hz)で色点滅信号を発信する。
The color blinking signal transmission unit 11 converts transmission data input to the
色点滅信号受信手段21は、色表示手段12をf(Hz)以上のフレームレートで撮像するイメージセンサ手段20から連続して入力される画像フレームを処理し、信号受信領域を検出するとともに、データ値を受信して、これらの値を受信側の上位手段に出力する。以下、色点滅光信号(色相差光信号)による送受信処理例を説明する。 The color blinking signal receiving means 21 processes image frames continuously input from the image sensor means 20 that images the color display means 12 at a frame rate of f (Hz) or higher, detects a signal receiving area, Receive values and output these values to the higher-level means on the receiving side. Hereinafter, an example of transmission / reception processing using the color blinking light signal (hue difference light signal) will be described.
(送受信処理例1)
図11及び図12を参照しながら色点滅信号送信手段の送受信処理例を説明する。図12は色点滅信号送信手段の実行する工程を示したフローチャートである。
(Transmission / reception processing example 1)
A transmission / reception processing example of the color blinking signal transmission unit will be described with reference to FIGS. 11 and 12. FIG. 12 is a flowchart showing the steps executed by the color blinking signal transmission means.
色点滅信号送信手段11は、データ値を演算処理して色相差に変換し、これを送信する。ここでは、色相差をN+1階調に用いる場合、色相差値一つでN進数のデータ値一つを送信できる。 The color blinking signal transmission means 11 performs arithmetic processing on the data value, converts it into a hue difference, and transmits it. Here, when the hue difference is used for N + 1 gradations, one N-ary data value can be transmitted with one hue difference value.
図12において、Nは(色相差の階調)−1を、fは色点滅周波数(Hz)を、hは色相の初期値を、lは明度の規定値を、sは採度の規定値を表す。図13、図14及び図18においても同様とする。 In FIG. 12, N is (hue difference gradation) -1, f is a color blinking frequency (Hz), h is an initial value of hue, l is a specified value of lightness, and s is a specified value of yield. Represents. The same applies to FIGS. 13, 14 and 18.
色点滅信号送信手段11には、送信キュー10に送信データが入力され送信処理が開始されるまでに、色表示手段12に色相H=h、明度L=l、彩度S=sの色を表示しておくとともに、変数chに現在表示されている色の色相Hを入力しておく(s201)。
The color blinking signal transmission unit 11 receives the color of hue H = h, lightness L = 1, and saturation S = s until the transmission data is input to the
送信キュー10に送信データが存在する場合、データ値の送信処理に進む(s202)。尚、任意の送信データは送信キュー10おいてN進数列として管理される。すなわち、一つのデータ値は0以上N未満の整数値nとなる。
If transmission data exists in the
送信処理では、先ず、送信キュー10からデータ値nを取得し、送信キュー10を更新する(s203)。
In the transmission process, first, the data value n is acquired from the
次に、データ値nを色相差dhに変換する(s204)。ここで、dh=(n+1)×2π/(N+1)である。この結果、次の表示色は、色相H=ch+dh、明度L、彩度Sの色に決定される(s205)。尚、色相Hは0以上2π未満の値となるので、もし、ch+dh>2πであれば、H=ch+dh−2πとなる。 Next, the data value n is converted into a hue difference dh (s204). Here, dh = (n + 1) × 2π / (N + 1). As a result, the next display color is determined to be a color of hue H = ch + dh, lightness L, and saturation S (s205). Since the hue H is a value of 0 or more and less than 2π, if ch + dh> 2π, H = ch + dh−2π.
そして、決定された表示色(色相H、明度L、彩度Sの色)を色表示手段12に表示する(s206)。 Then, the determined display color (color of hue H, lightness L, and saturation S) is displayed on the color display means 12 (s206).
点滅周波数がfHzである場合、ここで(1000/f)msec間静止し、前記表示色を提示し続ける(S207)。 If the blinking frequency is fHz, the display color is kept present for a period of (1000 / f) msec (S207).
その後、現在の表示色の色相Hを変数chに代入しs202のステップに戻る(s208)。尚、s207における静止時間はs207以外のステップが0msecで完了すると仮定する場合、(1000/f)msecとなるが、s207以外のステップでt msecの処理時間を要するならば、(1000/f)t msecである。 Thereafter, the hue H of the current display color is substituted for the variable ch, and the process returns to the step of s202 (s208). Note that the rest time in s207 is (1000 / f) msec when it is assumed that steps other than s207 are completed at 0 msec. However, if processing time of t msec is required in steps other than s207, (1000 / f) t msec.
s202において送信キューに送信データが無ければ、データ送信完了となる(s209)。 If there is no transmission data in the transmission queue in s202, the data transmission is completed (s209).
次に、図11、図13及び図14を参照しながら色点滅信号受信手段の送受信処理例を説明する。図13は色点滅信号受信手段の実行する工程を示したフローチャートである。図14は図13記載のs303の工程を示したフローチャートである。ここでは、N進数のデータ値を一つずつ受信する際の送受信処理例について説明する。 Next, a transmission / reception processing example of the color blinking signal receiving unit will be described with reference to FIGS. 11, 13 and 14. FIG. 13 is a flowchart showing the steps executed by the color blinking signal receiving means. FIG. 14 is a flowchart showing the process of s303 shown in FIG. Here, an example of transmission / reception processing when receiving N-ary data values one by one will be described.
開始の信号を受けると(s300)、色点滅信号受信手段21は、イメージセンサ手段20より連続して画像フレームI(i)を取得する(s301)。ここで、図13に示された工程では、画像フレームの取得周期(=フレームレート)が、送信側の色表示手段12の点滅周波数に等しいものとしている。
When the start signal is received (s300), the color blinking
色点滅信号受信手段21は、最新の画像フレームI(i)が取得される時点で、一つ前の画像フレームI(i−l)を保持している。図13に示された工程では、最新の画像フレームI(i)の取得イベント(s301)おきに実施される。
The color blinking
画像フレームI(i)が取得されると、画像フレームI(i−l)、I(i)の全ての画素について、色相差dh(x,y)[x,yは、それぞれ0≦x<WIDTH,0≦y<HEIGHTの整数である。尚、WIDTHは画像フレームの横軸画素数を、HEIGHTは画像フレームの縦軸画素数を表す(図18においても同様)。]を算出する(S302)。ここで、色相差を算出する際、彩度が低い画素、すなわち、ほとんど無色な画素は、色点滅信号を撮像したものとはみなせない。したがって、比較される両画素の色の彩度がともに既定値より大きい場合にのみ色相差を算出し、そうでなければ、色相差を0とすることができる。 When the image frame I (i) is acquired, the hue difference dh (x, y) [x, y is 0 ≦ x <for each pixel of the image frames I (i−1) and I (i). WIDTH, 0 ≦ y <HEIGHT. WIDTH represents the number of pixels on the horizontal axis of the image frame, and HEIGHT represents the number of pixels on the vertical axis of the image frame (the same applies to FIG. 18). ] Is calculated (S302). Here, when calculating the hue difference, a pixel with low saturation, that is, an almost colorless pixel cannot be regarded as an image of a color blinking signal. Therefore, the hue difference is calculated only when the saturation of the colors of both pixels to be compared is larger than the predetermined value, and otherwise, the hue difference can be set to zero.
次に、各画素について算出された色相差dh(x,y)をデータ値a(x,y)に変換する。但し、色相差がデータ値に変換できない値ならば、a(x,y)には−1(データ無し)を代入する(S303)。 Next, the hue difference dh (x, y) calculated for each pixel is converted into a data value a (x, y). However, if the hue difference cannot be converted into a data value, −1 (no data) is substituted for a (x, y) (S303).
具体的には、図14に示すように、−1≦n<Nの整数nについて、色相((n+1)×2π/(N+1))−R及び色相((n+1)×2π/(N+1))+Rが色平面上でなす狭角に、算出された色相差dh(x,y)が入るかどうかを検出する(S400)。尚、Rとは、色相(値)に許容する誤差である。 Specifically, as shown in FIG. 14, for an integer n where −1 ≦ n <N, hue ((n + 1) × 2π / (N + 1)) − R and hue ((n + 1) × 2π / (N + 1)) It is detected whether or not the calculated hue difference dh (x, y) falls within a narrow angle formed by + R on the color plane (S400). Note that R is an error allowed for the hue (value).
図15及び図16は、それぞれ、色相((n+1)×2π/(N+1))−R及び色相((n+1)×2π/(N+1))+Rが色平面上でなす狭角、及び、これに色相差dh(x,y)が入る場合(図15)、入らない場合(図16)を示している。尚、上記説明および図においては、Rを一定値としているが、色相((n+1)×2π/(N+1))の値により許容誤差Rの値を変えることも可能である。一般に、光源の発色性能やイメージセンサ手段20の色感度には特性があり、この特性を考慮する形で、許容誤差Rを可変にすること(例えば、イメージセンサ手段12の色感度が強い赤色近辺で許容誤差Rを小さくすること)は、色点滅信号の検出精度向上に寄与すると考えられる。 FIG. 15 and FIG. 16 show the narrow angle formed by the hue ((n + 1) × 2π / (N + 1)) − R and the hue ((n + 1) × 2π / (N + 1)) + R on the color plane, respectively. The case where the hue difference dh (x, y) enters (FIG. 15) and the case where it does not (FIG. 16) are shown. In the above description and drawings, R is a constant value, but the value of the allowable error R can be changed by the value of hue ((n + 1) × 2π / (N + 1)). In general, the color development performance of the light source and the color sensitivity of the image sensor means 20 have characteristics, and the tolerance R is made variable in consideration of this characteristic (for example, near the red color where the color sensitivity of the image sensor means 12 is strong). It is considered that the reduction of the allowable error R) contributes to the improvement of the detection accuracy of the color blinking signal.
ここで、色相((n+1)×2π/(n+1))−Rおよび色相((n+1)×2π/(N+1))+Rが色平面上でなす狭角にdh(x,y)が入れば、a(x,y)と決定する(s401)。 Here, if dh (x, y) enters a narrow angle formed by the hue ((n + 1) × 2π / (n + 1)) − R and the hue ((n + 1) × 2π / (N + 1)) + R on the color plane, A (x, y) is determined (s401).
−1≦n<Nの全ての整数nについて、色相((n+1)×2π/(n+1)−R及び色相((n+1)×2π/(n+1))+Rが色平面上でなす狭角にdh(x,y)が入らないならば、該当するデータ値がないので、a(x,y)=−1とする(s402)。 For all integers n where −1 ≦ n <N, hue ((n + 1) × 2π / (n + 1) −R and hue ((n + 1) × 2π / (n + 1))) + R have a narrow angle dh on the color plane. If (x, y) does not enter, there is no corresponding data value, so a (x, y) = − 1 is set (s402).
すなわち、図14に示す工程によって、N=2の場合に、色平面上において色相差dh(x,y)がデータ値0、データ値1、及びデータ無し(−1)に変換される範囲を示すと図17のようになる。尚、図17において、該当データ値なしの場合もdh(x,y)はデータ無し(−1)に変換される。
That is, the range in which the hue difference dh (x, y) is converted into the
全ての画素についてa(x,y)が算出された後、信号成分E(n)を抽出する(s304)。信号成分E(n)とは、a(x,y)=n(nは、0≦n<Nの整数)である画素座標の連結成分で、画素数が最大のものである。尚、図13に示した工程では、受信データ値が取りうる値である0≦n<Nの全ての整数nについてE(n)を検出するようになっているが、実際には、ループ1、ループ2内の処理においてa(x,y)を算出した際に、a(x,y)の要素として出現した値についてのみ行えばよい。
After a (x, y) is calculated for all pixels, the signal component E (n) is extracted (s304). The signal component E (n) is a connected component of pixel coordinates where a (x, y) = n (n is an integer satisfying 0 ≦ n <N), and has the largest number of pixels. In the process shown in FIG. 13, E (n) is detected for all integers n where 0 ≦ n <N, which is a possible value of the received data value. When a (x, y) is calculated in the processing in the
信号成分E(n)が検出された際には、E(n)に含まれる画素数が既定値TAより多いかどうかを検出する(s305)。既定値TAは信号成分を信号受信領域として決定するための画素数の閾値を表す。TAの値を0以上の値で設定することは、信号成分がTA以上のまとまったサイズの画素集合として検出される場合のみ有意な信号とみなすという条件を加えるになる。これによって局所的に偶然に生じた色相差をデータ信号として誤検出してしまう可能性が低減される。尚、TA=0とすれば、信号成分が検出された時点で、それが信号受信領域と決定される。 When the signal component E (n) is detected, it is detected whether or not the number of pixels included in E (n) is larger than the predetermined value TA (s305). The predetermined value TA represents a threshold value for the number of pixels for determining a signal component as a signal reception area. Setting the value of TA to a value greater than or equal to 0 adds a condition that a signal component is regarded as a significant signal only when the signal component is detected as a set of pixels having a group size greater than or equal to TA. This reduces the possibility of erroneously detecting a hue difference that occurs locally by chance as a data signal. If TA = 0, when a signal component is detected, it is determined as a signal reception area.
E(n)に含まれる画素数が既定値TAより多い場合、色点滅信号受信手段21は、E(n)を信号受信領域とし、nを受信データ値として、受信側上位手段に出力する(s306)。尚、信号受信領域については、該領域の座標集合に代えて、該領域を囲む矩形領域の情報を出力することや、前記矩形の重心座標を出力することができる。 When the number of pixels included in E (n) is larger than the predetermined value TA, the color blinking signal receiving means 21 outputs E (n) as a signal receiving area and n as a received data value to the receiving high-order means ( s306). For the signal receiving area, instead of the coordinate set of the area, information on a rectangular area surrounding the area can be output, and the barycentric coordinates of the rectangle can be output.
一方、0≦n<Nの全ての整数nについてE(n)が検出されなかったか、検出されてもその画素数がTA以下であった場合には、画像フレームI(i)に取得によって受信されたデータは無いとみなす(s307)。この後、画像フレームナンバーi=i+1として、次画像フレームに対する処理に移行する。 On the other hand, if E (n) is not detected for all integers n where 0 ≦ n <N, or if it is detected but the number of pixels is equal to or less than TA, the image frame I (i) is received by acquisition. It is assumed that there is no data that has been processed (s307). Thereafter, the image frame number i = i + 1 is set, and the process proceeds to the next image frame.
(送受信処理例2)
送受信処理例1で説明した送受信処理は、データ値を一つずつ受信する場合である。この例は、データ送受信装置の基本的な動作となる。しかし、低速な色点滅による信号を受信できるようにするためには、一定回数以上連続してデータ値が受信されることによって受信されたデータ値列を有効な受信データとして受理する仕組みが必要である。すなわち、既定回数以上連続して、一定の割合以上で色相が変化する画素を検出することで、低速な色点滅信号を有意なデータ信号として識別し受信することが可能になる。
(Transmission / reception processing example 2)
The transmission / reception processing described in the transmission / reception processing example 1 is a case where data values are received one by one. This example is a basic operation of the data transmitting / receiving apparatus. However, in order to be able to receive a signal due to slow color blinking, a mechanism for receiving the received data value sequence as valid received data by receiving data values continuously for a certain number of times is necessary. is there. That is, it is possible to identify and receive a low-speed color blinking signal as a significant data signal by detecting pixels whose hue changes at a certain rate or more continuously for a predetermined number of times.
以下には、送受信処理例1を基本とし、一定回数以上連続してデータ値が受信されることによって、受信されたデータ値列を有効な受信データとして受理するように修正した処理について説明する。 In the following, a process will be described that is based on the transmission / reception processing example 1 and modified so that the received data value sequence is accepted as valid received data by continuously receiving data values a predetermined number of times or more.
送信側の色点滅信号送信手段11の動作アルゴリズムは、図12を参照して説明したものと同様である。但し、連続信号長をKとするとき、送信キュー10に入力される送信データは、N進数のデータ値K個から構成されるデータ値列である。若しくは、送信データはKの倍数個のデータ値から構成されるデータ値列である。
The operation algorithm of the color blinking signal transmission means 11 on the transmission side is the same as that described with reference to FIG. However, when the continuous signal length is K, the transmission data input to the
図18に、この場合における色点滅信号受信手段21の動作アルゴリズムの一例を示す。色点滅信号受信手段21は、イメージセンサ手段20から連続して画像フレームI(i)を取得する。ここでも、画像フレームの取得周期(=フレームレート)は、送信側の色表示手段12の点滅周波数に等しいものとしている。また、連続信号長はKであり、データ値がK回連続して受信されることによって、受信されたデータ値列を有効な受信データとして判断している。
FIG. 18 shows an example of the operation algorithm of the color blinking signal receiving means 21 in this case. The color blinking
色点滅信号受信手段21は、前処理として、各画素において何回連続してデータ値を受信したかを保持するための配列c(x,y)の全ての値を0とする(s801)。以降の処理、s802,s803,s804,s813は、それぞれ図13を参照して説明したs301,s302,s303,s308と同様である。 The color blinking signal receiving means 21 sets all values of the array c (x, y) for holding how many times the data value is continuously received in each pixel as 0 as preprocessing (s801). The subsequent processing, s802, s803, s804, and s813 are the same as s301, s302, s303, and s308 described with reference to FIG.
ループ1、ループ2内では、s804によってa(x,y)の値が決定された後、a(x,y)!=−1(データ無し)かどうかを確認する(S805)。
そして、a(x,y)!=−1である場合、すなわち、座標(x,y)の画素においてデータ値を含む色点滅信号が受信されたとみなされる場合には、d(x,y,c(x,y))に、受信されたデータ値a(x,y)を代入し保持しておく(S806)。
配列dは、各画素座標において、連続して受信されたデータ値を保持しておくための配列である。次に、c(x,y)=c(x,y)+1とする(S807)。
In
And a (x, y)! == 1, that is, when it is considered that a color blinking signal including a data value is received at the pixel at the coordinate (x, y), d (x, y, c (x, y)) The received data value a (x, y) is substituted and held (S806).
The array d is an array for holding continuously received data values at each pixel coordinate. Next, c (x, y) = c (x, y) +1 is set (S807).
一方、a(x,y)!=−1でない場合、すなわち、座標(x,y)の画素においてデータ値を含む色点滅信号が受信されなかった場合には、c(x,y)=0とする(S808)。 On the other hand, a (x, y)! When it is not = −1, that is, when a color blinking signal including a data value is not received at the pixel at the coordinate (x, y), c (x, y) = 0 is set (S808).
全ての画素について、a(x,y)、c(x,y)、並びにd(x,y,c(x,y))が算出された後に、連続信号成分CEを検出する(s809)。尚、連続信号成分CEは、c(x,y)=Kであって、d(x,y,0)、d(x,y,1),…,d(x,y,K−1)が全て一致する画素座標(x,y)の連結成分で、画素数が最大のものである。すなわち、s809では、K個のデータ値からなるデータ値列を同時に受信した画素の連結成分で最大のものを連続信号成分として抽出する。 After a (x, y), c (x, y), and d (x, y, c (x, y)) are calculated for all pixels, the continuous signal component CE is detected (s809). The continuous signal component CE is c (x, y) = K, and d (x, y, 0), d (x, y, 1), ..., d (x, y, K-1). Are connected components of pixel coordinates (x, y) that all match, and have the largest number of pixels. That is, in s809, the largest connected component of the pixels that simultaneously received the data value sequence composed of K data values is extracted as a continuous signal component.
s809で、連続信号成分CEが検出された場合、連続信号成分CEの画素数がTAより多いかどうかを検出する(s810)。ここでの、TAとは連続信号成分CEを信号受信領域として決定するための画素数の閾値である。すなわち、TAを0以上の値を設定することは、連続信号成分がTA以上のまとまったサイズの画素集合として検出される場合のみ有意な信号とみなすという条件を加える。これによって局所的に、偶然に“連続して”生じた色相差をデータ信号として誤検出してしまう可能性が低減される。尚、TA=0とすれば、連続信号成分が検出された時点で、それが信号受信領域と決定される。 If the continuous signal component CE is detected in s809, it is detected whether the number of pixels of the continuous signal component CE is greater than TA (s810). Here, TA is a threshold value of the number of pixels for determining the continuous signal component CE as a signal reception area. That is, setting TA to a value equal to or greater than 0 adds a condition that a continuous signal component is regarded as a significant signal only when a continuous pixel component is detected as a set of pixels having a size equal to or greater than TA. As a result, the possibility of erroneously detecting a hue difference that occurs “continuously” locally and accidentally as a data signal is reduced. If TA = 0, when a continuous signal component is detected, it is determined as a signal reception area.
連続信号成分CEの画素数がTAより多い場合、CEを信号受信領域とし、CE中の任意の画素座標(x,y)を選択して、a(x,y,0)、d(x,y,1),…,d(x,y,K−1)を受信データ値列として、上位手段に出力する(s810)。そして、再び、配列c(x,y)の全ての値を0とし(s812)、s813へ進む。尚、信号受信領域については、該領域の座標集合に代えて、該領域を囲む矩形領域の情報を出力することや、前記矩形の重心座標を出力することができる。 When the number of pixels of the continuous signal component CE is larger than TA, CE is set as a signal reception area, arbitrary pixel coordinates (x, y) in the CE are selected, and a (x, y, 0), d (x, y, 1),..., d (x, y, K−1) are output to the higher-level means as a received data value sequence (s810). Then, all values of the array c (x, y) are set to 0 again (s812), and the process proceeds to s813. For the signal receiving area, instead of the coordinate set of the area, information on a rectangular area surrounding the area can be output, and the barycentric coordinates of the rectangle can be output.
一方、連続信号成分CEの画素数がTA以下であった場合には、単に、配列c(x,y)の全ての値を0とし(s812)、s813へ進む。また、s809において、連続信号成分CEが検出されなかった場合にも、s813へ進む。 On the other hand, when the number of pixels of the continuous signal component CE is equal to or less than TA, all values of the array c (x, y) are simply set to 0 (s812), and the process proceeds to s813. If the continuous signal component CE is not detected in s809, the process proceeds to s813.
この後、画像フレームナンバーi=i+1として(s813)、次画像フレームに対する処理に移行する。 Thereafter, the image frame number i = i + 1 is set (s813), and the process proceeds to the next image frame.
(送受信処理例3)
送受信処理例2の送受信処理では、受信側は連続信号長Kの倍数個のデータ値からなるデータ値列を受信できるが、送受信処理例1と送受信処理例2で示した処理方法を組み合わせることで、連続信号長K以上である任意の長さのデータ値からなるデータ値列を受信することができるようになる。
(Transmission / reception processing example 3)
In the transmission / reception processing of the transmission / reception processing example 2, the receiving side can receive a data value sequence consisting of multiple data values of the continuous signal length K. By combining the processing methods shown in the transmission / reception processing example 1 and the transmission / reception processing example 2, Thus, it becomes possible to receive a data value sequence composed of data values having an arbitrary length that is equal to or longer than the continuous signal length K.
この場合も、送信側の色点滅信号送信手段11の動作アルゴリズムは、図12の説明と同様である。但し、連続信号長をKとするとき、送信キュー10に入力される送信データは、K個以上のN進数のデータ値から構成されるデータ値列である。
Also in this case, the operation algorithm of the color blinking signal transmission unit 11 on the transmission side is the same as that described in FIG. However, when the continuous signal length is K, the transmission data input to the
受信側の色点滅信号受信手段21は、先ず、図18を参照しながら説明したアルゴリズムに基づき動作する。そして、有意な連続信号成分が検出され(s810)、信号受信領域並びに受信データ値列を出力した(s811)時点以降、該信号受信領域に含まれる画素座標については図13を参照して説明した動作アルゴリズムを適用し、逐次受信データ値を上位手段に出力する。但し、該信号受信領域に含まれる画素座標において受信データが無く(s307)、データ値の受信が途切れた場合には、即座に、図18を参照して説明した動作アルゴリズムヘ遷移する。以降、有意な連続信号成分が検出されるごとに上述の動作を行う。 The color blinking signal receiving means 21 on the receiving side first operates based on the algorithm described with reference to FIG. After the significant continuous signal component is detected (s810) and the signal reception area and the received data value sequence are output (s811), the pixel coordinates included in the signal reception area have been described with reference to FIG. The operation algorithm is applied, and the sequentially received data value is output to the host means. However, when there is no reception data at the pixel coordinates included in the signal reception area (s307) and reception of the data value is interrupted, the process immediately transitions to the operation algorithm described with reference to FIG. Thereafter, the above-described operation is performed each time a significant continuous signal component is detected.
また、上述までのデータ信号送信方法及びデータ信号受信方法は、上述した送受信処理例以外にもさまざまな実装が可能である。 Further, the data signal transmission method and the data signal reception method described above can be implemented in various ways other than the transmission / reception processing example described above.
また、上述までの送受信処理例では、シングルタスク処理系のプログラムとして実装する場合を想定しているが、マルチタスク処理、並列処理が可能な系では、該処理系に適応した実装を行ってよい。例えば、図12及び図18を参照して説明した動作アルゴリズムでループ1、ループ2によって行っている各画素座標における処理は、並列処理が可能な系においては、各画素座標に対して同時に並列して処理するよう実装してよい。
In the transmission / reception processing examples described above, it is assumed that the program is implemented as a single task processing system program. However, in a system capable of multitask processing and parallel processing, implementation suitable for the processing system may be performed. . For example, in the system capable of parallel processing, the processing at each pixel coordinate performed by
また、上述した送受信処理例では、色点滅信号受信手段21に接続されるカメラの画像フレームの取得周期(=フレームレート)は、送信側の色表示手段12の点滅周波数に等しいものとしている。フレームレートが送信側の色表示手段12の点滅周波数よりも高い場合には、この点を考慮した動作アルゴリズムを用いることができる。
In the transmission / reception processing example described above, the acquisition period (= frame rate) of the image frame of the camera connected to the color blinking
例えば、図12、図18を用いて説明した動作アルゴリズムに基づく工程が利用できる。図12及び図18の動作アルゴリズムにおいて、最新に取得された画像フレームI(i)の各画素についての色相差の算出対象となる画像フレームI(i−1)に以下の条件を満たす画像フレームを用いる。すなわち、画像フレームI(i)が撮像された時点をTとして、T−1000/f≦t<Tである時点tに撮像された画像フレームを全て画像フレームI(i−1)とみなす。さらに、これら複数の画像フレームI(i−1)と画像フレームI(i)間で各画素の色を比較しながら、データ値を受信したとみなされる画素座標(x,y)とデータ値a(x,y)を算出する。 For example, a process based on the operation algorithm described with reference to FIGS. 12 and 18 can be used. In the operation algorithm of FIGS. 12 and 18, an image frame that satisfies the following condition is added to the image frame I (i−1) that is a target of calculation of the hue difference for each pixel of the most recently acquired image frame I (i). Use. That is, assuming that the time point when the image frame I (i) is imaged is T, all the image frames imaged at the time point t where T−1000 / f ≦ t <T are regarded as the image frame I (i−1). Furthermore, while comparing the color of each pixel between the plurality of image frames I (i−1) and the image frame I (i), the pixel coordinates (x, y) and the data value a that are considered to have received the data value. Calculate (x, y).
上記までの色相差光信号による光信号伝達方式によれば、通常の携帯端末に具備されるカラーLCD(Liquid Crystal Display)と、ビデオフレームレート(30fps)の撮影能力を有するイメージセンサを用いても、ロバストにIDを伝送できる。 According to the optical signal transmission method using the hue difference optical signal described above, a color LCD (Liquid Crystal Display) provided in a normal mobile terminal and an image sensor having a video frame rate (30 fps) imaging capability can be used. ID can be transmitted robustly.
この光信号伝達方式を利用するクライアント端末およびサーバ装置の構成例を示す図13では、クライアント端末100に、I/Oデバイスの一つとして具備されているカラーディスプレイ105をそのまま光信号発信手段として用いるため、クライアント端末にLEDなどの特殊な光信号発信デバイスを付加する必要がない。
In FIG. 13 showing a configuration example of a client terminal and a server apparatus using this optical signal transmission method, the
(3)実施形態
前記の色点滅光信号(色相差光信号)による光信号伝達方式を利用した本発明の通信回線確立システム、方法の実施形態を説明する。
(3) Embodiment An embodiment of the communication line establishment system and method of the present invention using the optical signal transmission method by the color blinking optical signal (hue difference optical signal) will be described.
(実施形態1)
本実施形態は、図1または図2の構成において、クライアント端末100からの光信号を受信したサーバ装置200が主導的に電波無線通信回線を確立するものである。この場合の一般的な手順を図3に示す。
(Embodiment 1)
In the present embodiment, in the configuration of FIG. 1 or FIG. 2, the
(S1)まず、クライアント端末より光信号発信手段を用いて端末IDを送信する。端末IDは以降で通信に用いる所定の電波無線通信における物理的な通信インタフェースIDである。IEEE802系の無線LANにおいてはMACアドレスがこれに相当し、Bluetoothにおいてもこれに相当するデバイスIDが各端末に割り当てられている。 (S1) First, the terminal ID is transmitted from the client terminal using the optical signal transmission means. The terminal ID is a physical communication interface ID in predetermined radio wave communication used for communication thereafter. In an IEEE 802 wireless LAN, a MAC address corresponds to this, and in Bluetooth, a device ID corresponding to this is assigned to each terminal.
(S2)前記光信号端末IDを光信号受信手段により受信したサーバ装置は、通信開始要求を端末IDのクライアント端末に向けて送信する。この際、クライアント端末側に、通信開始要求の送信元であるサーバ装置の通信インタフェースID(以下、「サーバID」という)を通知する。 (S2) The server device that has received the optical signal terminal ID by the optical signal receiving means transmits a communication start request to the client terminal of the terminal ID. At this time, the client terminal side is notified of the communication interface ID (hereinafter referred to as “server ID”) of the server device that is the transmission source of the communication start request.
(S3)クライアント端末は、サーバIDで特定されるサーバ装置にACK(受信確認)を返信する。 (S3) The client terminal returns an ACK (reception confirmation) to the server device specified by the server ID.
(S4)ACKを受信したサーバ装置は、前記クライアント端末に、双方向通信回線確立に必要な諸情報を送信する。この際、例えば、装置内部の時刻情報、および、利用する無線チャネルIDなどを送信する。 (S4) Upon receiving the ACK, the server device transmits various information necessary for establishing a bidirectional communication line to the client terminal. At this time, for example, time information inside the apparatus and a wireless channel ID to be used are transmitted.
(S5)上記のチャンネルIDなどの情報を受信したクライアント端末は、前記サーバ装置にACKを返送することで、両者の間に双方向無線通信回線が確立され双方向のデータ通信が開始される。 (S5) The client terminal that has received the information such as the channel ID returns an ACK to the server device, whereby a bidirectional wireless communication line is established between them and bidirectional data communication is started.
次に、より具体的な実施形態として、無線通信手段として、Bluetoothを用いる場合の動作を説明する。 Next, as a more specific embodiment, an operation when Bluetooth is used as a wireless communication unit will be described.
Bluetoothデバイス同士の通信は、いずれか1台がマスタとなり、他がスレーブとなる。初めは、全てのデバイスは待機「standby」状態にあり、システムによりマスタとしての設定がなされると、マスタは周囲のデバイスを探す「inquiry」動作を行う。これを認識した他のデバイスは、マスタに対して自己のID情報を送り、マスタはすぐにデータ通信できる「Active Member」とその他当面通信の必要のない「Parked Member」に分けて内部のテーブルに登録する。そしてマスタは、通信開始を意味する「page」モードによって特定のスレーブを指定する。この通知を受けたスレーブはマスタに対して受け取ったことを知らせ、これを受け取ったマスタは、今後どのチャンネルでデータをやり取りするか、自分の時刻が今いつなのか、次の通信をいつから始めるのかといった情報をパケットに載せて送る。これを受け取ったスレーブはマスタに通知する。この後、双方の通信を始めることができる。この状態を「Connect」モードという。 For communication between Bluetooth devices, either one becomes the master and the other becomes the slave. Initially, all devices are in a standby “standby” state, and when the system is set as a master, the master performs an “inquiry” operation to search for surrounding devices. Other devices that have recognized this send their ID information to the master, and the master divides it into an “Active Member” that allows immediate data communication and a “Parked Member” that does not require communication for the time being. sign up. Then, the master designates a specific slave by the “page” mode which means the start of communication. The slave that has received this notification informs the master that the data has been received, and the master that has received this notification will know which channel the data will be exchanged in the future, when it is time, and when to start the next communication. Is sent in a packet. The slave that has received this notifies the master. After this, both communication can be started. This state is called “Connect” mode.
図4に無線通信手段として、Bluetoothを用いる場合の通信回線確立手順を示すように、クライアント、サーバ共に「standby」状態にある状態において、まず、クライアント端末より光信号発信手段を用いて端末ID(Bluetooth 通信インタフェースID)を送信する(S11)。これを受信したサーバ装置は、該IDを記憶しておくとともに、マスタ設定を行い、「inquiry」動作を行う(S12,S13)。結果、周囲のBluetoothデバイスより複数の端末IDを受信することになる。この際、サーバ装置では、既に光信号として受信された端末IDのデバイスを通信先スレーブとして決定し、「Page」(通信開始要求)を行い、上述した所定の手順によりBluetoothコネクションを確立する(S14〜S17)。 As shown in the communication line establishment procedure when Bluetooth is used as the wireless communication means in FIG. 4, first, in a state where both the client and the server are in the “standby” state, the terminal ID ( Bluetooth communication interface ID) is transmitted (S11). The server apparatus that has received the information stores the ID, performs master setting, and performs an “inquiry” operation (S12, S13). As a result, a plurality of terminal IDs are received from surrounding Bluetooth devices. At this time, the server apparatus determines the device having the terminal ID already received as the optical signal as the communication destination slave, performs “Page” (communication start request), and establishes the Bluetooth connection by the predetermined procedure described above (S14). To S17).
次に、別の具体的な実施形態として、インターネットを介した通信回線を確立する場合の動作を説明する。 Next, as another specific embodiment, an operation when establishing a communication line via the Internet will be described.
この場合のシステム構成を図5に示す。クライアント端末100は、無線LAN,携帯電話パケット通信回線などのインターネット通信手段106を用いて既にインターネットに接続されている状態にする。また、サーバ装置200も、有線/無線の通信手段(図示省略)によりインターネットに接続されている状態にする。このシステム構成におけるクライアント端末、サーバ装置の構成は、図6に示すように、無線通信手段に代えてインターネット通信手段206を具備する。このインターネット通信手段とは、PCや携帯端末に具備され所定の有線/無線データ通信デバイスとインターネット通信のための通信プロトコルを処理するソフトウェアモジュールから構成されるものである。
The system configuration in this case is shown in FIG. The
ここでの通信回線確立方式の役割は、クライアント端末とサーバ装置間での双方向IPパケット通信のためのTCP(Transmission Control Protocol)コネクションを確立することにある。この処理の手順を図7に示す。 The role of the communication line establishment method here is to establish a TCP (Transmission Control Protocol) connection for bidirectional IP packet communication between the client terminal and the server device. The procedure of this process is shown in FIG.
(S21)まず、クライアント端末100より光信号発信手段101を用いて該クライアント端末のIPアドレスを送信する。
(S21) First, the
(S22〜S24)サーバ装置200は、光信号受信手段201によりIPアドレスを受信すると、これをトリガーとして該IPアドレスの端末とのTCPコネクションの確立を進める。すなわち、該IPアドレスで特定される端末にSYN(コネクション要求)を送信し、該端末からのACKおよびSYNを受信し、これにACKを返送することで、TCPコネクションが確立される。
(S22 to S24) When the
(実施形態2)
本実施形態は、クライアント端末が主導的に電波無線通信回線を確立するものである。この場合の一般的な手順を図8に示す。
(Embodiment 2)
In this embodiment, a client terminal takes the lead in establishing a radio wave communication line. A general procedure in this case is shown in FIG.
(S31)まず、クライアント端末が、端末IDを特定のサーバ装置に向けて発信する。 (S31) First, the client terminal transmits a terminal ID to a specific server device.
(S32)次に、クライアント端末が、端末IDを含む通信開始要求を周囲デバイスに送信する。 (S32) Next, the client terminal transmits a communication start request including the terminal ID to surrounding devices.
(S33)上記の通信開始要求を受け取ったサーバ装置では、一定時間内に該通信開始要求に含まれる端末IDを光信号として受信したかどうかを確認し、光信号として受信された端末IDに一致する端末IDを含む通信開始要求にのみサーバIDを含むACKを返信する。 (S33) In the server device that has received the communication start request, it is confirmed whether or not the terminal ID included in the communication start request has been received as an optical signal within a predetermined time, and matches the terminal ID received as the optical signal. ACK including the server ID is returned only to the communication start request including the terminal ID to be transmitted.
(S34,S35)クライアント端末では、ACK(サーバID)を返送してきたサーバ装置に通信開始に必要な諸情報(時刻情報、無線通信チャンネルIDなど)を送信し、それに対するACKを受け取った後、双方向無線通信回線を確立する。 (S34, S35) The client terminal transmits various information (time information, wireless communication channel ID, etc.) necessary for communication start to the server apparatus that has returned ACK (server ID), and after receiving ACK for the information, Establish a two-way wireless communication line.
本実施形態においては、特に、無線通信回線としてBluetoothを利用する場合、クライアント端末は、光信号発信後、マスタとして設定され、「inquiry」動作を行う。これに対して、周囲のサーバ装置は、光信号として一定時間内に受信された端末IDのデバイスからの「inquiry」動作に対してのみ自身のIDを返信する。結果、クライアント端末は、光信号を送信した特定のサーバ装置のみからIDを受信するので、該IDの装置を通信先スレーブとしてBluetooth通信回線を確立する。 In the present embodiment, in particular, when using Bluetooth as a wireless communication line, the client terminal is set as a master after performing an optical signal transmission, and performs an “inquiry” operation. On the other hand, the surrounding server apparatus returns its own ID only for the “inquiry” operation from the device having the terminal ID received within a certain time as an optical signal. As a result, the client terminal receives the ID only from the specific server device that transmitted the optical signal, and thus establishes a Bluetooth communication line with the device having the ID as the communication destination slave.
(実施形態3)
本実施形態による通信回線の確立には、最初に、光信号として端末IDを送信する代わりに、動的に生成したコンタクトIDを送信し、該光信号を傍受する第3者に端末IDが知られるのを防ぐよう改善する。ここで、前記コンタクトIDとは、通信回線の確立の際に、クライアント端末がランダムに生成した値であってよい。この場合の動作例を図9に示す。
(Embodiment 3)
In establishing a communication line according to the present embodiment, instead of transmitting a terminal ID as an optical signal, a contact ID generated dynamically is transmitted first, and the terminal ID is known to a third party who intercepts the optical signal. Improve to prevent it. Here, the contact ID may be a value randomly generated by the client terminal when the communication line is established. An example of the operation in this case is shown in FIG.
(S41)まず、クライアント端末は、光信号発信手段を用いてコンタクトIDを特定のサーバ装置に向け送信する。 (S41) First, the client terminal transmits the contact ID to a specific server device using the optical signal transmission means.
(S42)次に、クライアント端末が、無線通信手段を介して周囲のサーバ装置を照会する信号を発信する。 (S42) Next, the client terminal transmits a signal for inquiring surrounding server devices via the wireless communication means.
(S43)上記の照会信号を受信したサーバ装置は、自身のサーバIDと光信号受信手段に受信されたコンタクトIDを返信する。 (S43) Upon receiving the inquiry signal, the server device returns its own server ID and the contact ID received by the optical signal receiving means.
(S44〜S47)クライアント端末は、自身が光信号として送信したコンタクトIDを返信したサーバ装置を通信先として決定、これに対して通信開始要求を送信し、所定の手続きを経て該サーバ装置との双方向無線通信回線を確立する。 (S44 to S47) The client terminal determines the server device that has returned the contact ID transmitted as an optical signal as a communication destination, transmits a communication start request to the server device, and performs a predetermined procedure to communicate with the server device. Establish a two-way wireless communication line.
なお、図9に示す手順は、以下のように変更できる。まず、クライアント端末は、光信号発信手段を用いてコンタクトIDを特定のサーバ装置に向け送信する。光信号受信手段により、コンタクトIDを受信したサーバ装置は、自身のサーバIDと光信号受信手段に受信されたコンタクトIDを周囲のデバイスに送信する。クライアント端末は、自身が光信号として送信したコンタクトIDを送信してきたサーバ装置を通信先として決定し、以降、所定の手続きを経てクライアント端末とサーバ装置との双方向無線通信回線を確立する。 The procedure shown in FIG. 9 can be changed as follows. First, the client terminal transmits the contact ID to a specific server device using the optical signal transmission means. The server apparatus that has received the contact ID by the optical signal receiving means transmits its own server ID and the contact ID received by the optical signal receiving means to surrounding devices. The client terminal determines the server device that has transmitted the contact ID transmitted as an optical signal as a communication destination, and thereafter establishes a bidirectional wireless communication line between the client terminal and the server device through a predetermined procedure.
また、以上までの実施形態に必要なハードウェア手段を具備する携帯電話、PDA、PCその他の情報機器、情報端末上で、図3,図4等に示した方法又は図1,図2等に示した装置の一部又は全部の処理機能をプログラムとして構成してコンピュータを用いて実現すること、あるいは図1〜図9で示した処理手順をプログラムとして構成してコンピュータに実行させることができる。また、コンピュータでその各部の処理機能を実現するためのプログラム、あるいはコンピュータにその処理手順を実行させるためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、フレキシブルディスク、MO、ROM、メモリカード、CD、DVD、リムーバブルディスクなどに記録して、保存したり、提供したりすることが可能であり、また、インターネットのような通信ネットワークを介して配布したりすることが可能である。 In addition, the method shown in FIGS. 3 and 4 or the method shown in FIGS. 1 and 2 or the like on a mobile phone, PDA, PC or other information device or information terminal equipped with hardware means necessary for the above-described embodiments. A part or all of the processing functions of the apparatus shown can be implemented as a program and realized using a computer, or the processing procedures shown in FIGS. 1 to 9 can be configured as a program and executed by a computer. In addition, a computer-readable recording medium such as a flexible disk, MO, ROM, or memory card can be used to store a program for realizing the processing function of each unit by the computer or a program for causing the computer to execute the processing procedure. It can be recorded on a CD, a DVD, a removable disk, etc., stored, provided, and distributed via a communication network such as the Internet.
本発明の通信回線確立システム、方法の活用には、以下のものが想定される。近年、Bluetoothなどの電波による無線通信デバイスが具備された携帯端末が普及している。同時に、室内、パブリックスペースにおいて該携帯端末と通信し、該携帯端末によって制御される情報機器が増加している。 The following can be assumed to utilize the communication line establishment system and method of the present invention. In recent years, portable terminals equipped with radio communication devices using radio waves such as Bluetooth have become widespread. At the same time, there is an increasing number of information devices that communicate with the portable terminal and are controlled by the portable terminal in a room or public space.
例えば、パブリックスペースに設置された街頭ディスプレイに表示されたコンテンツを携帯電話により操作するシステムがある。このようなシステムでは、携帯電話のボタン操作により街頭ディスプレイ上のコンテンツを選択して関連情報を携帯電話に取得したり、所定の情報を入力してユーザ登録、チケット予約などを行ったりすることが可能となっている。 For example, there is a system in which content displayed on a street display installed in a public space is operated by a mobile phone. In such a system, contents on the street display can be selected by operating a button on the mobile phone and related information can be acquired in the mobile phone, or user registration or ticket reservation can be performed by inputting predetermined information. It is possible.
本発明は、ユーザが周囲に多数存在する街頭ディスプレイから一つを選択し、Bluetoothなどの電波無線通信回線を介したインタラクティブな操作を実現するための通信回線確立手法として適用できる。IrDAによる手法では、操作対象となる街頭ディスプレイに1m以内まで近づいて回線を確立し、かつ通信のための光軸がずれたり、遮断されたりしないように維持しながら、端末上のボタン操作を行う必要があり利便性が悪い。Bluetoothによる無線通信であれば、10m程度はなれた機器との通信も可能であり、赤外線(光)通信の特性に起因する前記問題も解消される。 INDUSTRIAL APPLICABILITY The present invention can be applied as a communication line establishment method for realizing interactive operation via a radio wave communication line such as Bluetooth by a user selecting one from many street displays around the user. In the IrDA method, a button is operated on a terminal while establishing a line within 1 m from a street display to be operated and maintaining the optical axis for communication not being shifted or blocked. It is necessary and the convenience is bad. If the wireless communication is based on Bluetooth, it is possible to communicate with a device separated by about 10 m, and the above problem caused by the characteristics of infrared (light) communication is also solved.
Bluetoothなどの電波無線通信における通信回線確立時の問題を解決した本発明は、ユーザから10m程度以内の距離に存在する複数の通信デバイスの中の特定の一つと、ユーザの保持する端末との通信回線を的確に確立する有効な手法である。例えば、大型街頭ディスプレイとこれを視聴するユーザとの距離は4.5m以上あり、本発明によれば、このような状況下で大型街頭ディスプレイとユーザ端末間のBluetoothコネクションを的確に確立できる。したがって、光信号をトリガーとしてコネクションを確立した後、大型ディスプレイ上にユーザ端末に対応するカーソルが表示され、ユーザ端末上の十字キーなどを用いてカーソルを制御し、ディスプレイ上のコンテンツに対する各種操作を実行するシステムなどが実現できる。 The present invention that has solved the problem at the time of establishing a communication line in radio wave radio communication such as Bluetooth is a communication between a specific one of a plurality of communication devices existing within a distance of about 10 m from a user and a terminal held by the user. This is an effective method for establishing a line accurately. For example, the distance between the large street display and the user who views the large street display is 4.5 m or more. According to the present invention, a Bluetooth connection between the large street display and the user terminal can be accurately established under such circumstances. Therefore, after establishing a connection using an optical signal as a trigger, a cursor corresponding to the user terminal is displayed on the large display, and the cursor is controlled using a cross key on the user terminal to perform various operations on the content on the display. An execution system can be realized.
また、既に多くの携帯電話は、赤外線発光デバイスやカラーディスプレイを具備しているので、新しいデバイスを追加することなく、必要なソフトウェアのインストールのみで本発明を適用できる。したがって、本発明は、携帯電話その他の携帯機器と、ユーザ近隣に存在する情報機器との電波無線通信回線確立システムおよび方法として広く利用可能である。 In addition, since many mobile phones already have an infrared light emitting device and a color display, the present invention can be applied only by installing necessary software without adding a new device. Therefore, the present invention can be widely used as a radio wave communication line establishment system and method for a mobile phone or other portable device and an information device existing in the vicinity of the user.
100 クライアント端末
200 サーバ装置
101 光信号発信手段
102 無線通信手段
103 I/Oデバイス
104 コントローラー
105 カラーディスプレイ
106 インターネット通信手段
201 光信号受信手段
202 無線通信手段
203 I/Oデバイス
204 コントローラー
205 カラーイメージセンサ
206 インターネット通信手段
DESCRIPTION OF
Claims (12)
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段を設け、
前記サーバ装置は、前記光信号受信手段により前記端末IDを受信する手段と、前記無線通信手段により前記端末IDで特定されるクライアント端末との通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信する手段を設けた、
ことを特徴とする通信回線確立システム。 A communication line establishment system between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal is provided with means for transmitting a terminal ID for identifying the own terminal from the optical signal transmitting means to the optical signal receiving means of the server device,
The server device includes means for receiving the terminal ID by the optical signal receiving means, and means for establishing a communication line with the client terminal specified by the terminal ID by the wireless communication means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means for receiving the terminal ID by calculating and converting the generated hue difference into a data value;
A communication line establishment system characterized by this.
前記クライアント端末は、自端末のIPアドレスを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段を設け、
前記サーバ装置は、前記光信号受信手段により前記IPアドレスを受信する手段と、前記インターネット通信手段により前記IPアドレスで特定されるクライアント端末との通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記IPアドレスを受信する手段を設けた、
ことを特徴とする通信回線確立システム。 A communication line establishment system between a client terminal having an optical signal transmission means and an Internet communication means, and a server apparatus having an optical signal reception means and an Internet communication means,
The client terminal is provided with means for transmitting the IP address of its own terminal from the optical signal transmitting means to the optical signal receiving means of the server device,
The server device includes means for receiving the IP address by the optical signal receiving means, and means for establishing a communication line with the client terminal specified by the IP address by the Internet communication means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means for receiving the IP address by computing the resulting hue difference and converting it to a data value;
A communication line establishment system characterized by this.
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段と、前記無線通信手段により前記サーバ装置へ通信開始要求を行う手段とを設け、
前記サーバ装置は、前記光信号受信手段により受信された前記端末IDで特定されるクライアント端末からの前記通信開始要求に応答して通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信する手段を設けた、
ことを特徴とする通信回線確立システム。 A communication line establishment system between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal issues a communication start request to the server apparatus by means of transmitting a terminal ID identifying the terminal from the optical signal transmitting means to the optical signal receiving means of the server apparatus, and by the wireless communication means. Means,
The server device is provided with means for establishing a communication line in response to the communication start request from the client terminal specified by the terminal ID received by the optical signal receiving means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means for receiving the terminal ID by calculating and converting the generated hue difference into a data value;
A communication line establishment system characterized by this.
前記クライアント端末は、動的に生成したコンタクトIDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信する手段を設け、
前記サーバ装置は、前記光信号受信手段により前記コンタクトIDを受信する手段と、前記無線通信手段により前記コンタクトIDを前記クライアント端末に送信する手段を設け、
前記クライアント端末は、前記無線通信手段により前記コンタクトIDを送信してきた前記サーバ装置との通信回線を確立する手段を設け、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記コンタクトIDを受信する手段を設けた、
ことを特徴とする通信回線確立システム。 A communication line establishment system between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal is provided with means for transmitting a dynamically generated contact ID from the optical signal transmitting means to the optical signal receiving means of the server device,
The server device includes means for receiving the contact ID by the optical signal receiving means, and means for transmitting the contact ID to the client terminal by the wireless communication means,
The client terminal is provided with means for establishing a communication line with the server device that has transmitted the contact ID by the wireless communication means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Means for receiving the contact ID by performing arithmetic processing on the generated hue difference and converting it into a data value;
A communication line establishment system characterized by this.
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップを有し、
前記サーバ装置は、前記光信号受信手段により前記端末IDを受信するステップと、前記無線通信手段により前記端末IDで特定されるクライアント端末との通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信するステップを有する、
ことを特徴とする通信回線確立方法。 A communication line establishment method between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal has a step of transmitting a terminal ID for identifying the terminal from the optical signal transmitting unit to the optical signal receiving unit of the server device,
The server device includes a step of receiving the terminal ID by the optical signal receiving unit, and a step of establishing a communication line with the client terminal specified by the terminal ID by the wireless communication unit,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Receiving the terminal ID by computing the generated hue difference and converting it to a data value;
A communication line establishment method characterized by the above.
前記クライアント端末は、自端末のIPアドレスを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップを有し、
前記サーバ装置は、前記光信号受信手段により前記IPアドレスを受信するステップと、前記インターネット通信手段により前記IPアドレスで特定されるクライアント端末との通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記IPアドレスを受信するステップを有する、
ことを特徴とする通信回線確立方法。 A communication terminal establishment method between a client terminal comprising an optical signal transmitting means and an Internet communication means, and a server device comprising an optical signal receiving means and an Internet communication means,
The client terminal has a step of transmitting the IP address of the own terminal from the optical signal transmitting unit to the optical signal receiving unit of the server device,
The server device includes a step of receiving the IP address by the optical signal receiving unit, and a step of establishing a communication line with the client terminal specified by the IP address by the Internet communication unit,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Receiving the IP address by computing and converting the resulting hue difference into a data value;
A communication line establishment method characterized by the above.
前記クライアント端末は、自端末を特定する端末IDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップと、前記無線通信手段により前記サーバ装置へ通信開始要求を行うステップとを有し、
前記サーバ装置は、前記光信号受信手段により受信された前記端末IDで特定されるクライアント端末からの前記通信開始要求に応答して通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記端末IDを受信するステップを有する、
ことを特徴とする通信回線確立方法。 A communication line establishment method between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal transmits a terminal ID for identifying its own terminal from the optical signal transmitting unit to the optical signal receiving unit of the server device, and makes a communication start request to the server device by the wireless communication unit. And having steps
The server device has a step of establishing a communication line in response to the communication start request from the client terminal specified by the terminal ID received by the optical signal receiving means,
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Receiving the terminal ID by computing the generated hue difference and converting it to a data value;
A communication line establishment method characterized by the above.
前記クライアント端末は、動的に生成したコンタクトIDを前記光信号発信手段より前記サーバ装置の前記光信号受信手段に向けて発信するステップを有し、
前記サーバ装置は、前記光信号受信手段により前記コンタクトIDを受信するステップと、前記無線通信手段により前記コンタクトIDを前記クライアント端末に送信するステップを有し、
前記クライアント端末は、前記無線通信手段により前記コンタクトIDを送信してきた前記サーバ装置との通信回線を確立するステップを有し、
前記光信号発信手段はカラーディスプレイとし、前記光信号受信手段はカラーイメージセンサとし、前記光信号発信手段が発信する光信号として、色点滅を用いてデータを伝送する色相差光信号とし、前記光信号受信手段が、前記カラーイメージセンサによって連続して撮像される画像フレーム間の各画素の色相差を計算した後、一定値以上の色相差が生じる画素を信号成分として抽出し、この信号成分において生じた色相差を演算処理してデータ値に変換することによって前記コンタクトIDを受信するステップを有する、
ことを特徴とする通信回線確立方法。 A communication line establishment method between a client terminal comprising an optical signal transmitting means and a wireless communication means, and a server device comprising an optical signal receiving means and a wireless communication means,
The client terminal has a step of transmitting a dynamically generated contact ID from the optical signal transmitting unit to the optical signal receiving unit of the server device;
The server device includes a step of receiving the contact ID by the optical signal receiving unit, and a step of transmitting the contact ID to the client terminal by the wireless communication unit,
The client terminal has a step of establishing a communication line with the server device that has transmitted the contact ID by the wireless communication means;
The optical signal transmitting means is a color display, the optical signal receiving means is a color image sensor, the optical signal transmitted by the optical signal transmitting means is a hue difference optical signal that transmits data using color blinking, and the light After the signal receiving means calculates the hue difference of each pixel between image frames continuously captured by the color image sensor, the pixel in which the hue difference equal to or greater than a certain value is extracted as a signal component. Receiving the contact ID by computing the resulting hue difference and converting it to a data value;
A communication line establishment method characterized by the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004256396A JP4340608B2 (en) | 2004-09-03 | 2004-09-03 | Communication line establishment system, communication line establishment method, program, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004256396A JP4340608B2 (en) | 2004-09-03 | 2004-09-03 | Communication line establishment system, communication line establishment method, program, and recording medium |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006074532A JP2006074532A (en) | 2006-03-16 |
JP4340608B2 true JP4340608B2 (en) | 2009-10-07 |
Family
ID=36154636
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004256396A Expired - Fee Related JP4340608B2 (en) | 2004-09-03 | 2004-09-03 | Communication line establishment system, communication line establishment method, program, and recording medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4340608B2 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4592361B2 (en) * | 2004-09-03 | 2010-12-01 | 日本電信電話株式会社 | Authentication system, authentication method, program, and recording medium |
JP2008199503A (en) * | 2007-02-15 | 2008-08-28 | Funai Electric Co Ltd | Terminal and information relay apparatus |
JP2013149038A (en) * | 2012-01-18 | 2013-08-01 | Toshiba Corp | Transmitter and receiver |
JP6167647B2 (en) * | 2013-05-01 | 2017-07-26 | 株式会社ニコン | Imaging apparatus, system, method, and program |
JP6575759B2 (en) * | 2015-11-09 | 2019-09-18 | パナソニックIpマネジメント株式会社 | Data transfer system, data transmitting apparatus and data receiving apparatus |
EP3884685B1 (en) * | 2018-11-26 | 2023-08-02 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | User equipment and method of image sensor communication of same |
-
2004
- 2004-09-03 JP JP2004256396A patent/JP4340608B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2006074532A (en) | 2006-03-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101461353B1 (en) | Visual pairing in an interactive display system | |
EP3237991B1 (en) | Communication system comprising head wearable devices | |
US20140181683A1 (en) | Method and system for controlling external device | |
JP2015012512A (en) | Information processing apparatus and information processing method | |
EP2987269B1 (en) | Method and system for controlling external device | |
JP5528057B2 (en) | Device discovery method | |
KR20210098265A (en) | Mobile and operating method thereof | |
US20170038912A1 (en) | Information providing device | |
KR20090023735A (en) | Nfc enabled pointing with a mobile device | |
JP2011054162A (en) | Interactive information control system and program | |
JP2005136665A (en) | Method and device for transmitting and receiving data signal, system, program and recording medium | |
JP4340608B2 (en) | Communication line establishment system, communication line establishment method, program, and recording medium | |
JP2012019413A (en) | Display system, terminal device, display device, and program | |
US10684707B2 (en) | Display control device, display control method, and program | |
JP2004274520A (en) | Terminal to terminal communication system and program | |
JP7400091B2 (en) | Memo information display method, memo information transmission method, and electronic equipment | |
JP4592361B2 (en) | Authentication system, authentication method, program, and recording medium | |
US20160323542A1 (en) | User terminal device and method for providing interaction service therefor | |
CN112822170A (en) | Application program login method, device, equipment and medium | |
JP2008022141A (en) | Radio communication terminal and terminal-information server | |
KR100421182B1 (en) | System and method of Computer remote control using a mobile phone | |
JP2014049077A (en) | Information exchange system, terminal, and stylus pen | |
JP4224405B2 (en) | Data signal receiving method, apparatus and program therefor, and recording medium therefor | |
EP2211253A2 (en) | Terminal, display apparatus, and method for transmitting and receiving data thereof | |
US20170251043A1 (en) | Communication device, method of controlling web access, and computer readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060713 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080919 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081111 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090414 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090501 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20090526 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090630 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090706 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120710 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130710 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |