JP2006332741A - Image transmission-reception display system, and image transmission-reception display method - Google Patents
Image transmission-reception display system, and image transmission-reception display method Download PDFInfo
- Publication number
- JP2006332741A JP2006332741A JP2005149273A JP2005149273A JP2006332741A JP 2006332741 A JP2006332741 A JP 2006332741A JP 2005149273 A JP2005149273 A JP 2005149273A JP 2005149273 A JP2005149273 A JP 2005149273A JP 2006332741 A JP2006332741 A JP 2006332741A
- Authority
- JP
- Japan
- Prior art keywords
- image
- transmission
- data
- display
- reception
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
本発明は、画像をネットワークにより伝送して画像表示するシステムに係わり、 特に送信側と受信側で同一画像を表示する技術に関するものである。 The present invention relates to a system for transmitting an image through a network and displaying the image, and more particularly to a technique for displaying the same image on a transmission side and a reception side.
近年、デジタルカメラの普及により、個人で撮影した写真データは、デジタル化され、記憶装置に保管している局面が増加している。記憶装置に保管されているデータを表示するためには、従来からパーソナルコンピュータ(以下パソコンという。)のディスプレイに表示する方法が一般的であるが、そのためにはパソコンの操作が必要で、機械の操作に慣れていない人には難しいため、最近ではICカードの静止画像データを表示させることができるテレビ受像機も登場するようになった。 In recent years, with the spread of digital cameras, photograph data taken by individuals has been digitized and stored in a storage device. In order to display data stored in a storage device, a conventional method is to display it on the display of a personal computer (hereinafter referred to as a personal computer). Since it is difficult for those who are not familiar with the operation, recently television receivers that can display still image data of an IC card have also appeared.
しかしながら、写真を表示して見る状況を考えると、単に自分で撮影した写真を見て楽しむだけでなく、それを友人知人や親戚など、他の人と一緒に見てコミュニケーションをとり、楽しむという状況が多いことは、経験上明らかである。
静止画を他人に送る方法としては、静止画像を写真やCDに焼いて郵便で送ったり、パソコンを使って、電子メールに添付して送るとか、容量が大きい場合にはデータをサーバに送信して、それをダウンロードするなどの方法が考えられる。ところが、郵便などを使って写真やCDを送る方法は、誰でも使えるという利点がある反面、送るのに時間がかかる。また、パソコンを使う方法は、パソコンを操作できない人は利用できない。
さらに、事前に写真を送る方法では、遠隔地の他の人と一緒に写真を見ておしゃべりをしながら楽しむといった目的には、相手に送られた静止画像がどのように見られているのかが把握できず、使用しにくかった。
However, considering the situation of displaying and viewing photos, you can not only enjoy watching photos taken by yourself, but also enjoy viewing and communicating with other people such as friends and relatives. It is clear from experience that there are many.
To send a still image to another person, you can burn the still image into a photo or CD and send it by mail, or send it as an e-mail attachment using a personal computer, or send the data to the server if the capacity is large. Then, you can download it. However, the method of sending photos and CDs using postal mail has the advantage that anyone can use it, but it takes time to send. Also, the method of using a personal computer cannot be used by those who cannot operate the personal computer.
In addition, in the method of sending photos in advance, how to see the still image sent to the other party for the purpose of watching and chatting with other people in remote places. I couldn't figure it out and it was hard to use.
これらの問題を解決するためには、図9に示すような、テレビ受像機と電話を組み合わせたシステムが考えられる。前述した静止画像データを表示させる機能を持ったテレビ受像機に、通信機能を追加し、ネットワークを介して静止画像データを送信して、直接相手のテレビ受像機を指定して送信側から表示制御して、静止画像を表示させればよい。この時のコミュニケーション手段には電話を併用する。こうすれば、パソコンを使えない田舎のおじいちゃんと一緒に、孫の写真を見ながら、おしゃべりを楽しむことが可能となる。 In order to solve these problems, a system combining a television receiver and a telephone as shown in FIG. 9 can be considered. Add the communication function to the TV receiver with the function to display the still image data described above, send the still image data via the network, specify the other party's TV receiver directly, and control the display from the transmission side Then, a still image may be displayed. A telephone is used together as a communication means at this time. In this way, you can enjoy chatting with grandchildren from the countryside who can't use a computer while watching photos of your grandchildren.
しかし現在普及しているネットワークの環境では、下りの通信速度に対して上りの通信速度が低速なものがあり、大容量の高精細画像データを送信するのに時間がかかり、コミュニケーションをとるためには、画像を送信してから受信者の端末に画像が表示されるまでの遅れが無視できないという問題がある。
このため、画像を表示する際、最初にサムネイルなどの粗い画像を送信して画面に表示し、続いて、画像データの読み込みが進むにつれて、順次、本来の高精細画像を表示する画像表示方法も提案されている(例えば、特許文献1参照。)。こうすれば、画像伝送による待ち時間をある程度意識させないようにすることができる。
Therefore, when displaying an image, there is also an image display method in which a rough image such as a thumbnail is first transmitted and displayed on the screen, and then the original high-definition image is sequentially displayed as the reading of the image data proceeds. It has been proposed (see, for example, Patent Document 1). In this way, it is possible to avoid being aware of the waiting time due to image transmission to some extent.
しかしながら、コミュニケーションをとるためには、送信側端末にも、受信側端末に送信した画像と同一の静止画像を表示させることが必要である。送信側端末の表示と受信側端末の表示の同期を考慮せず、双方とも最善の速度で表示するようにすると、結果的に送信側端末では表示されている画像が受信側端末ではその時点で表示されておらず、送信側が受信側端末にどのような状態で表示されているかを知ることが出来ない。従って、コミュニケーションツールとして考えると、送信側と受信側で画像が同期していないので、話がしづらいという課題があった。 However, in order to communicate, it is necessary for the transmitting terminal to display the same still image as the image transmitted to the receiving terminal. If you do not consider the synchronization of the display on the sending terminal and the display on the receiving terminal, both display at the best speed, the resulting image displayed on the sending terminal will be It is not displayed, and it is impossible for the transmitting side to know what is displayed on the receiving side terminal. Therefore, when considered as a communication tool, there is a problem that it is difficult to talk because images are not synchronized on the transmission side and the reception side.
そこで、本発明は、上記のような問題点を解消するためになされたもので、遠隔地にある受信表示装置に自己の所有する静止画像を待ち時間を意識させないで高速に表示させると共に、送信側の表示装置と同一の画像を同期して表示させる画像送受信表示システムを提供することを目的とする。 Therefore, the present invention has been made to solve the above-described problems, and displays a still image owned by a receiving display device at a remote location at high speed without being aware of waiting time, and is transmitted. An object of the present invention is to provide an image transmission / reception display system that displays the same image as the display device on the side in synchronization.
本願発明における第1の発明は、ネットワークを介して送信装置から送信された圧縮画像を受信装置で受信し、伸張された前記画像の一部又は全部が前記受信装置の表示部に表示された際に、前記表示部に表示された前記画像の一部又は全部と同じ画像を前記送信装置の表示部に表示させ、前記送受信装置の表示部に表示された前記画像の一部又は全部を視認しながら音声通話を行う送受信システムにおいて、
前記送信装置は、圧縮された前記画像を送信する送信部(送信部106)と、前記画像を表示部に表示させる制御部(応答受信部107、表示制御部108)とを備え、
前記受信装置は、前記送信装置から送信された前記圧縮された画像を伸張する伸張部(伸張部202)と、前記伸張された前記画像の一部又は全部の初期画素と最終画素との座標位置を検出する画像検出部(応答生成部204)と、前記画像検出部で検出された前記座標位置を前記送信装置の制御部に送信する送信部(送信部203)と、を備えたことを特徴とする送受信システムを提供する。
第2の発明は、ネットワークを介して送信装置から送信された圧縮画像を受信装置で受信し、伸張された前記画像の一部又は全部を前記受信装置の表示部に表示させ、前記表示部に表示された前記画像の一部又は全部と同じ画像を前記送信装置の表示部に表示させ、前記送受信装置の表示部に表示された前記画像の一部又は全部を視認しながら音声通話を行う送受信方法において、
圧縮された前記画像を送信し(ステップS14)、この送信された前記画像の伸張を行って(ステップS16)前記受信装置の表示部に表示させ(ステップS17)、次に伸張された前記画像の一部又は全部の初期画素と最終画素との座標位置を検出し(ステップS18)、前記検出された前記座標位置を前記送信装置に送信して(ステップS19)、前記送信装置の表示部に表示させて(ステップS11)行うことを特徴とする送受信方法を提供する。
In a first aspect of the present invention, a compressed image transmitted from a transmitting device via a network is received by a receiving device, and a part or all of the decompressed image is displayed on a display unit of the receiving device. The same image as part or all of the image displayed on the display unit is displayed on the display unit of the transmission device, and part or all of the image displayed on the display unit of the transmission / reception device is visually recognized. While sending and receiving voice calls
The transmission device includes a transmission unit (transmission unit 106) that transmits the compressed image, and a control unit (
The reception device includes a decompression unit (expansion unit 202) that decompresses the compressed image transmitted from the transmission device, and a coordinate position between a part or all of initial pixels and final pixels of the decompressed image. And an image detection unit (response generation unit 204) that detects the image and a transmission unit (transmission unit 203) that transmits the coordinate position detected by the image detection unit to the control unit of the transmission device. A transmission / reception system is provided.
According to a second aspect of the present invention, a receiving device receives a compressed image transmitted from a transmitting device via a network, displays a part or all of the decompressed image on a display unit of the receiving device, and causes the display unit to display the compressed image. Transmission / reception in which the same image as a part or all of the displayed image is displayed on the display unit of the transmission device, and a voice call is performed while viewing part or all of the image displayed on the display unit of the transmission / reception device In the method
The compressed image is transmitted (step S14), the transmitted image is decompressed (step S16) and displayed on the display unit of the receiving apparatus (step S17), and then the decompressed image is displayed. The coordinate positions of some or all of the initial pixels and the final pixels are detected (step S18), and the detected coordinate positions are transmitted to the transmission device (step S19) and displayed on the display unit of the transmission device. And a transmission / reception method characterized by being performed (step S11).
本発明における第1の発明によれば、前記送信装置は、圧縮された前記画像を送信する送信部と、前記画像を表示部に表示させる制御部とを備え、前記受信装置は、前記送信装置から送信された前記圧縮された画像を伸張する伸張部と、前記伸張された前記画像の一部又は全部の初期画素と最終画素との座標位置を検出する画像検出部と、前記画像検出部で検出された前記座標位置を前記送信装置の制御部に送信する送信部とを備え、
第2の発明は、圧縮された前記画像を送信し、この送信された前記画像の伸張を行って前記受信装置の表示部に表示させ、次に、伸張された前記画像の一部又は全部の初期画素と最終画素との座標位置を検出し、前記検出された前記座標位置を前記送信装置に送信して、前記送信装置の表示部に表示させて行うので、
送信側と受信側とで同じ画像を同期して表示させた画像伝送ができる。このため、狭帯域のネットワークを使っても、同じ画像を同期表示させながら、コミュニケーションをとることができるので、画像伝送による待ち時間を意識させないコミュニケーションツールとしての楽しいTVを提供することができる。さらに、本発明によれば、画像表示に関しては、送信側で全てコントロールするので、受信側で機械に不慣れな人が操作する場合にも、負担をかけないでコミュニケーションをとることができる効果がある。
According to a first aspect of the present invention, the transmission device includes a transmission unit that transmits the compressed image, and a control unit that displays the image on a display unit, and the reception device includes the transmission device. An expansion unit that expands the compressed image transmitted from the image detection unit, an image detection unit that detects a coordinate position of a part or all of initial pixels and final pixels of the expanded image, and the image detection unit. A transmission unit that transmits the detected coordinate position to the control unit of the transmission device;
In a second aspect of the invention, the compressed image is transmitted, the transmitted image is expanded and displayed on the display unit of the receiving device, and then a part or all of the expanded image is displayed. Since the coordinate position of the initial pixel and the final pixel is detected, the detected coordinate position is transmitted to the transmission device, and is displayed on the display unit of the transmission device.
Image transmission in which the same image is displayed synchronously on the transmission side and the reception side can be performed. For this reason, even if a narrow-band network is used, communication can be performed while the same image is displayed synchronously, so that it is possible to provide a fun TV as a communication tool that is not conscious of waiting time due to image transmission. Furthermore, according to the present invention, since all the image display is controlled on the transmission side, even when a person unaccustomed to the machine operates on the reception side, there is an effect that communication can be performed without imposing a burden. .
最初に、本実施例で扱う画像について説明する。受信端末に高速に画像表示させるためには、通信量を減らすことが効果的である。画像はJPEG等の画像圧縮フォーマットで記録・伝送されることが一般的であるため、画像圧縮で通信量を減らすことは出来ない。本来、デジタルカメラ等で記録した画像のサイズとディスプレイ上に表示するに必要十分な画像サイズとは必ずしも一致しているわけではない。ディスプレイ上で表示するに十分な画像サイズが、記録した画像サイズより小さい場合、画像をリサイズして、再圧縮することにより通信量を減らすことは可能である。しかし、ディスプレイ上で表示するに十分な画像サイズは例えば1920ドットX1024ドット程度で、この時の圧縮された画像容量は500Kバイト程度となり、瞬時に通信で送るのは困難である。また、リサイズ後の再圧縮をソフトウエアで実現する際の圧縮処理時間も必要である。 First, an image handled in this embodiment will be described. In order to display an image at a high speed on the receiving terminal, it is effective to reduce the communication amount. Since images are generally recorded and transmitted in an image compression format such as JPEG, the amount of communication cannot be reduced by image compression. Originally, the size of an image recorded by a digital camera or the like does not necessarily match the image size necessary and sufficient for display on a display. When the image size sufficient for displaying on the display is smaller than the recorded image size, it is possible to reduce the communication amount by resizing and recompressing the image. However, the image size sufficient to be displayed on the display is, for example, about 1920 dots × 1024 dots, and the compressed image capacity at this time is about 500 Kbytes, and it is difficult to send it instantaneously by communication. Also, a compression processing time is required when the re-compression after resizing is realized by software.
また、ディスプレイ上で表示するに十分な画像サイズと、画像内容を理解するために必要な画像サイズは同一ではない。例えばDVDディスクの低解像度のモードでは320X240ドット程度の画像が用いられており、内容を理解するのにはこの程度の画像サイズでも十分である。そこで、送信端末で表示指示を行った際、まず低解像度で画像を送り、短時間に受信端末に画像を表示し、その後あらためて受信端末側に高解像度の画像を送ることにより、課題を解決する。320X240ドット程度の画像であれば、再圧縮、通信時間ともに十分高速に処理できる。以下、320X240ドット程度の画像を縮小画像、デジタルカメラ等で撮影した元のサイズの画像を元画像と呼ぶ。 Further, the image size sufficient for displaying on the display and the image size necessary for understanding the image contents are not the same. For example, in a low resolution mode of a DVD disc, an image of about 320 × 240 dots is used, and an image size of this level is sufficient to understand the contents. Therefore, when a display instruction is issued at the transmitting terminal, the problem is solved by first sending the image at a low resolution, displaying the image on the receiving terminal in a short time, and then sending the high resolution image to the receiving terminal again. . An image of about 320 × 240 dots can be processed at a sufficiently high speed for both recompression and communication time. Hereinafter, an image of about 320 × 240 dots is referred to as a reduced image, and an original size image captured by a digital camera or the like is referred to as an original image.
次に、本実施例の概要を述べる。本実施例の画像送受信表示システムは、背景技術で説明したコミュニケーションをとりながら画像伝送する電話とテレビを組み合わせたシステム(図9参照。)を前提としており、特にテレビは、静止画像データを表示させる機能を持ったテレビ受像機に、ネットワーク対応の送受信端末を追加したものとする。
以下の説明では、本発明に直接関係する送信端末、受信端末の構成、および動作についてだけ説明し、テレビの一般的動作とか電話については触れない。
また本実施例は、受信端末側に高速に画像データを伝送・表示すると共に、送信端末での画像表示と受信端末での画像表示を同期させることを目的とする。そして、表示の高速化では、従来例と同様に、まず受信端末で認識できる程度の縮小画像を表示し、ついで、順次データの到着に合わせて高精細な元画像を表示する2パス方式をとる。さらに、1パス目では、本発明の特徴である、受信端末の画像表示と同期して送信端末の画像表示が進行するように制御するものである。
Next, an outline of the present embodiment will be described. The image transmission / reception display system of this embodiment is premised on a system (see FIG. 9) that combines a telephone and a television for transmitting images while communicating as described in the background art. In particular, a television displays still image data. Assume that a network-compatible transmission / reception terminal is added to a TV receiver with functions.
In the following description, only the configuration and operation of the transmitting terminal and receiving terminal that are directly related to the present invention will be described, and the general operation of the television and the telephone will not be described.
Another object of the present embodiment is to transmit and display image data at a high speed on the receiving terminal side, and to synchronize the image display on the transmitting terminal and the image display on the receiving terminal. In order to increase the display speed, as in the conventional example, a reduced image that can be recognized by the receiving terminal is displayed first, and then a high-definition original image is sequentially displayed as data arrives. . Further, in the first pass, control is performed so that the image display of the transmission terminal proceeds in synchronization with the image display of the reception terminal, which is a feature of the present invention.
以上の前提のもとに、本発明の各実施形態に係る画像送受信表示システムについて図1〜図8を用いて説明する。図1は、本発明の画像送受信表示システムの構成図を示し、(A)は、画像送受信表示システムの送信端末、(B)は、受信端末である(実施例1)。図2は、本発明の画像送受信表示システムにおける送信データおよび応答データを示す構成図である(実施例1)。 図3は、本発明の画像送受信表示システムにおける送受信の動作を示すフローチャートで、(A)は送信側リモコン操作、(B)は受信側リモコン操作、(C)は送信側の動作、(B)は受信側の動作を示す(実施例1)。図4は、本発明の画像送受信表示システムのパス1における送信側の送信処理動作の詳細を示すフローチャートである(実施例1)。図5は、本発明の画像送受信表示システムにおける受信端末の表示内容と応答データとの対応を示す図である(実施例1)。図6は、本願発明の実施形態における画像送受信表示システムの構成図を示し、(A)は、画像送受信表示システムの送信端末、(B)は、受信端末である(実施例2)。図7は、本発明の画像送受信表示システムの送信データおよび応答データを示す構成図である(実施例2)。図8は、本発明の画像送受信表示システムにおける送受信の動作を示し、(A)は送信側の動作、(B)は受信側の動作を示すフローチャートで、(C)は送信・応答データを示す。(実施例2)
Based on the above assumptions, an image transmission / reception display system according to each embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a configuration diagram of an image transmission / reception display system according to the present invention. (A) is a transmission terminal of the image transmission / reception display system, and (B) is a reception terminal (Example 1). FIG. 2 is a configuration diagram showing transmission data and response data in the image transmission / reception display system of the present invention (Example 1). FIG. 3 is a flowchart showing the transmission / reception operation in the image transmission / reception display system of the present invention, where (A) is a transmission-side remote control operation, (B) is a reception-side remote control operation, (C) is a transmission-side operation, and (B). Indicates the operation on the receiving side (Example 1). FIG. 4 is a flowchart showing details of the transmission processing operation on the transmission side in
本発明の画像送受信表示システムの主要部は、図1(A)、(B)に示すように、送信端末100及び受信端末200から構成される。
送信端末100は、ICカードなどの記憶装置150から静止画の元画像の圧縮データを読み込むデータ読込部101、読み込んだデータを1パス目の処理を行うか、2パス目の処理を行うかを選択する処理選択部102、読み込んだデータを伸張する伸張部103、伸張した元画像を縮小画像に変換する縮小データ生成部104、縮小画像を圧縮する圧縮部105、縮小画像圧縮データから送信データ生成して受信端末に送信する送信部106、受信端末からの応答データを受信する応答受信部107、前記応答受信部と前記伸張部のデータから表示データを生成して、送信側の表示装置151に画像表示する表示制御部108とから構成されている。なお前記伸張部103からのデータは、表示するまでの間、表示制御部108により、バッファ109に一時的に保存しておくものとする。
また、受信端末200は、送信側からの送信データを受信する受信部201、受信した画像圧縮データを伸張する伸張部202、伸張された画像データを表示装置251に適したサイズで表示する表示部205、前記画像データの表示位置を送信端末に通知する応答生成部204及び送信部203から構成されている。
The main part of the image transmission / reception display system of the present invention is composed of a transmission terminal 100 and a reception terminal 200 as shown in FIGS.
The transmission terminal 100 reads the compressed data of the original image of the still image from the
The receiving terminal 200 includes a receiving
次に、送受信で使われる送信側からの送信データおよび受信側からの応答データの構成例を、図2(A)、(B)に示す。送信データは、各送信単位で送信されるデータが1パス目のデータか2パス目のデータかを示すパス情報と画像のサイズ情報、および圧縮された画像データにより構成されている。また応答データは、受信端末で受信したデータのパス識別情報と、受信表示された画像の座標位置範囲を示す表示位置データから構成される。 Next, FIGS. 2A and 2B show configuration examples of transmission data from the transmission side and response data from the reception side used in transmission and reception. The transmission data is composed of path information indicating whether data transmitted in each transmission unit is data of the first pass or data of the second pass, image size information, and compressed image data. The response data includes path identification information of data received at the receiving terminal and display position data indicating the coordinate position range of the received and displayed image.
次に、画像を送信して表示させる際の、送信側、受信側におけるリモコン操作を、図3(A)、(B)に示すフローチャートより説明する。
送信側ではテレビを送信設定モードとし(ステップS1)て、受信側との接続を行う(ステップS2)。そして、記憶装置150から圧縮画像データを読込み(ステップS3)、送信画像の指定を行う(ステップS4)。送信画像指定では、サムネイルから複数の画像を指定する。そして、テレビを画像送信表示モードとし(ステップS5)する。
受信側では、送信側からの電話連絡を受けて、受信側のテレビを画像受信表示モードに設定して(ステップS8)、送信側と接続する(ステップS9)。
そして、送信側では、送信指示(ステップS6)を出して、電話によりおしゃべりしながら、送信する画像がなくなるまで、送信指示を繰り返す(ステップS7)。
以上のように、受信側は、テレビを画像受信表示モードに設定し、送信側と接続するだけで、全ての画像伝送・画像表示は送信側で制御するので、受信側は操作不要となる。
なお、送信側と受信側の接続処理の方法は、送信側が受信端末の番号を指定し、発呼する方法や、送信側と受信側とで共通のIDを入力して接続する方法などが考えられるが、本発明ではどのような方法でもよい。
Next, remote control operations on the transmission side and the reception side when images are transmitted and displayed will be described with reference to the flowcharts shown in FIGS.
On the transmission side, the television is set to the transmission setting mode (step S1), and connection with the reception side is performed (step S2). Then, the compressed image data is read from the storage device 150 (step S3), and a transmission image is designated (step S4). In transmission image designation, a plurality of images are designated from thumbnails. Then, the television is set to the image transmission display mode (step S5).
The receiving side receives a telephone call from the transmitting side, sets the TV on the receiving side to the image receiving display mode (step S8), and connects to the transmitting side (step S9).
The transmission side issues a transmission instruction (step S6) and repeats the transmission instruction until there are no more images to be transmitted while talking over the telephone (step S7).
As described above, the receiving side simply sets the television in the image receiving display mode and connects to the transmitting side, and all image transmission and image display are controlled on the transmitting side, so that no operation is required on the receiving side.
Note that the connection method between the transmission side and the reception side may be a method in which the transmission side specifies the number of the reception terminal and places a call, or a method in which a common ID is input and connected between the transmission side and the reception side. However, any method may be used in the present invention.
次に、前記送受信操作を可能とする送受信端末の動作について説明する。
送信端末100は、前記リモコンの指示にしたがって、図3(C)に示す送信側ルーチンを起動させ、最初の画像データを、後述するように、送信する(ステップS12、S13、S14)。このとき、画像送信表示モードで送信が始まると、送信側の表示装置は、受信側に合わせるため一旦消去(ステップS10)される。
Next, the operation of the transmission / reception terminal that enables the transmission / reception operation will be described.
The transmission terminal 100 starts the transmission side routine shown in FIG. 3C in accordance with the instruction from the remote controller, and transmits the first image data as described later (steps S12, S13, S14). At this time, when transmission starts in the image transmission display mode, the display device on the transmission side is temporarily erased (step S10) to match the reception side.
また前記送信側ルーチンは、受信側から応答データを受信する毎に起動されて、後述するように送信側の画像表示を行い(ステップS11)、送信するデータが無くなるまで、以下に述べるようにデータを送信する。すなわち、データ読み込み部101は、記憶装置150から指定された画像の元画像の圧縮データを読み込み(ステップS12)、処理選択部102で判断したパスに対応したパス、サイズ、圧縮画像データからなる送信データを作成し(ステップS13)て、送信部106は前記送信データを受信側に送信(ステップS14)する。
Further, the transmission side routine is started every time response data is received from the reception side, performs image display on the transmission side as will be described later (step S11), and data as described below until there is no data to be transmitted. Send. That is, the data reading unit 101 reads the compressed data of the original image of the designated image from the storage device 150 (step S12), and transmits the transmission consisting of the path, size, and compressed image data corresponding to the path determined by the
次に、図4に示すフローチャートにより、1パス目の送信動作について、処理単位に合わせて詳細に説明する。
データ読み込み部101は、指定された画像の元画像の圧縮データを読み込む(ステップS20)。読み込まれた圧縮データは伸張部103により元画像に伸張される(ステップS21)。伸張後の画像サイズはデジカメなどで撮影した元の画像サイズである。ここで、伸張は画像全体に対して一度に行われるわけではなく、圧縮データの処理単位(スライス)ごとに行われる。処理単位は1ラインもしくは数ライン単位(例えば4ライン単位)である。すなわち元画像が横方向にスライスされた単位で以下の処理が行われる。
前記伸張された処理単位の元画像データは、表示制御部109及び縮小データ生成部104に送られる(ステップS23)。表示制御部108における表示処理については後述する。
縮小データ生成部104では、元画像データを縮小画像のデータにサイズ変換する(ステップS24)。なお、処理単位の元画像データから縮小画像のデータにサイズ変換できない場合がある。例えば元画像が2048×1536ドットであり、縮小画像が320×240ドットの場合、元画像6.4画素が縮小画像1画素に相当するため、処理単位として4ライン、すなわち2048×4ドットの入力が縮小データ生成部に入力された場合、出力は1ライン以下になるため、処理を行えない。また、たとえ出力が1ライン以上に相当しても、縮小データ生成部の処理として、フィルターにより、高品位の縮小画像を生成する際には処理する範囲より大きな入力データが必要なため、出力できない場合もある。これらの場合には、縮小データ生成部の内部でデータを保持し、1回もしくはそれ以前に入力されたデータとあわせて(ステップS22)、縮小データを生成する。
圧縮部105では、縮小データ生成部104から出力されたデータを画像圧縮し、出力する(ステップS26)。前記圧縮部においても、縮小データ生成部と同様、圧縮データを生成するために必要なデータが入力されるまで、内部に入力データを保持し、必要なデータがそろった段階で圧縮部から出力する(ステップS25)。すなわち、縮小データ生成部104に入力される処理単位と、圧縮部105から出力されるデータの処理単位は必ずしも一致しているわけではない。
圧縮部105から出力された圧縮縮小画像データは送信部106により受信端末200に送信される(ステップS27)。
以上の動作が、送信データが無くなるまで繰り返されて(ステップS28)、終了する。
なお、2パス目は、1パス目の処理が全て終了した後、単に読み込んだデータを送信部107から受信端末200に送信する処理を行うものである。
Next, the transmission operation of the first pass will be described in detail according to the processing unit with reference to the flowchart shown in FIG.
The data reading unit 101 reads the compressed data of the original image of the designated image (step S20). The read compressed data is expanded to the original image by the expansion unit 103 (step S21). The image size after expansion is the original image size taken with a digital camera or the like. Here, the expansion is not performed on the entire image at once, but is performed for each processing unit (slice) of the compressed data. The processing unit is one line or several lines (for example, four lines). That is, the following processing is performed in units obtained by slicing the original image in the horizontal direction.
The expanded original image data of the processing unit is sent to the
The reduced data generation unit 104 converts the size of the original image data into reduced image data (step S24). Note that there are cases where the size cannot be converted from original image data in a processing unit to reduced image data. For example, when the original image is 2048 × 1536 dots and the reduced image is 320 × 240 dots, 6.4 pixels of the original image correspond to one pixel of the reduced image, and therefore, four lines, that is, 2048 × 4 dots are input as a processing unit. Is input to the reduced data generation unit, the output is one line or less, and the process cannot be performed. Even if the output corresponds to one line or more, as the processing of the reduced data generation unit, when a high-quality reduced image is generated by a filter, input data larger than the processing range is required, and thus output cannot be performed. In some cases. In these cases, the data is held inside the reduced data generation unit, and reduced data is generated together with the data input once or before (step S22).
In the
The compressed reduced image data output from the
The above operation is repeated until there is no transmission data (step S28), and the process ends.
In the second pass, after all the processes of the first pass are completed, the process of simply transmitting the read data from the
次に、送信側の画像表示動作について説明する。送信端末100は、応答受信部107により受信端末200からの応答データを受信して読み込むと、図3(C)に示す送信側ルーチンを起動する。前記送信側ルーチンは、初期状態は別とすると、応答データを受信する毎に起動される。そして表示制御部108は、まず応答データの表示位置の座標情報に合わせて送信側の画像表示を行う(ステップS11)。1パス目の場合は、応答データの表示位置の縮小画像の座標を元画像の表示位置に変換した座標に基づいて表示する。応答データで表示位置を指定された元画像のデータは、既に伸張部103により生成されて、バッファ109に一時的に保管されている。表示制御部108では応答データ受信部107で受信された座標位置の画像を前記バッファから読み込み、表示装置151に送るとともに前記表示済みの元画像もデータをバッファから削除する。なお、元画像データのサイズと表示装置151に表示できる画像サイズが異なる場合、表示のためのリサイズは表示制御部108で行う。
Next, the image display operation on the transmission side will be described. When the
次に、受信側の動作を、図3(D)に示す受信側ルーチンにより説明する。受信端末200は、受信部201で送信端末からの送信データを受信すると、受信側ルーチンを起動する。この受信側ルーチンは、送信データを受信する毎に起動される。
そしてまず伸張部202により受信した圧縮画像データを伸張して、表示部205により、元画像もしくは縮小画像からなる画像表示データを作成する(ステップS16)。圧縮画像データの先頭には、伸張した画像のサイズが記述されているので、前記画像サイズと表示画面のサイズが合っていない場合には、画像をリサイズすることが必要である。
そして前記画像を表示装置251に画像表示する(ステップS17)。
なお、受信部は、1パス目の縮小画像圧縮データや2パス目の元画像圧縮データが全てそろってから伸張部にデータを送るのではなく、データを受信した単位で伸張部にデータを送る。伸張部では横方向にスライスされた矩形単位で伸張データが出力され、表示部に送られ、画像表示される。
そして応答生成部204では、パス、および表示された画像の表示位置からなる応答データを作成し(ステップS18)、送信部203を介して前記応答データを送信端末に送信する(ステップS19)。
Next, the operation on the receiving side will be described with reference to the receiving side routine shown in FIG. Receiving terminal 200 starts a receiving side routine when receiving
First, the compressed image data received by the
Then, the image is displayed on the display device 251 (step S17).
Note that the receiving unit does not send data to the decompression unit after all of the reduced image compressed data for the first pass and the original image compressed data for the second pass are gathered, but sends data to the decompression unit in units of receiving data. . In the decompression unit, decompression data is output in units of rectangles sliced in the horizontal direction, sent to the display unit, and displayed as an image.
The
前記表示位置は、例えば、伸張された画像の矩形領域を最初と最後のライン番号により指定したものである。また、1パス目の縮小画像場合は、表示位置の座標(ライン番号)は、縮小画像の座標である。
次に、表示位置の座標データについて、2560×1920ドットの元画像を320×240ドットの縮小画像として送信する場合を例にとって具体的に説明する。1パス目で送られてくる320×240ドットの縮小圧縮データは、伸張部202により伸張され、表示部205に送られる。この時、画像全体の320×240ドットのデータが一度に伸張されるのではなく、受信部201で逐次受信したデータをもとに横320ドットで縦が任意のライン数のデータが逐次生成される。
例として、最初に320×70ドット、次に320×40ドット、次に320×70ドットデータが伸張部202から出力されるとする。この時に受信側で表示される画像と応答データの例を図5に示す。最初の320×70ドットの画像が表示部に入力されると、画像301で示される70ライン分の画像が受信側に表示されるとともに、0〜69ラインを示す応答データ311が生成され、送信側に送信される。次の320×40ドットの画像が入力されると、画像302に示すように40ライン分の画像が追加表示され、70〜109ラインを示す応答データ312が送信され、その次は70ライン分の画像が追加表示され、110〜179ラインを示す応答データ313が送信される。
The display position is, for example, one in which a rectangular area of the expanded image is designated by the first and last line numbers. In the case of the reduced image in the first pass, the coordinates of the display position (line number) are the coordinates of the reduced image.
Next, the coordinate data of the display position will be described in detail by taking as an example a case where an original image of 2560 × 1920 dots is transmitted as a reduced image of 320 × 240 dots. The 320 × 240 dot reduced and compressed data sent in the first pass is decompressed by the
As an example, it is assumed that the
そして、以上の応答・送信を繰り返すことにより、全ての画像データ伝送が終了したら送信端末100は、前記送信側ルーチンを停止して、リモコンによる送信指示を終了し、次の画像の送信指示を待つ。 Then, by repeating the above response / transmission, the transmission terminal 100 stops the transmission side routine when the transmission of all the image data is completed, ends the transmission instruction by the remote control, and waits for the transmission instruction of the next image. .
以上のように、本発明の第1実施例によれば、表示制御部108では受信端末200で表示された表示位置の座標を応答データとして受け取ってから送信端末画像を表示する。そのために、ネットワークの負荷が重かったり、ネットワークの速度が遅い場合にも、送信端末100から受信端末200に送ったデータが受信端末200で表示される前に、元画像について受信端末200側の操作者に説明するということは起きなくなる。
また、1パス目において、画像の伸張、縮小、圧縮、送信および送信端末での表示を不可分に行うことにより、送信端末100と受信端末200を同期させて高速に表示させることが可能になる。
As described above, according to the first embodiment of the present invention, the display control unit 108 displays the transmission terminal image after receiving the coordinates of the display position displayed on the reception terminal 200 as response data. For this reason, even when the network load is heavy or the network speed is slow, before the data sent from the transmission terminal 100 to the reception terminal 200 is displayed on the reception terminal 200, the operation on the reception terminal 200 side for the original image is performed. Explaining to the person will not happen.
In addition, in the first pass, image expansion, reduction, compression, transmission, and display on the transmission terminal are inseparably performed, so that the transmission terminal 100 and the reception terminal 200 can be synchronized and displayed at high speed.
実施例2は、受信端末にキャッシュを設け、画像データを一時記憶させることにより、一旦伝送の終わった画像データは、再度伝送すること無しに、前に表示した画像に戻って表示することを可能としたもので、その他は実施例1と変わらない。以下、図6〜図8を用いて、説明する。 In the second embodiment, a cache is provided in the receiving terminal and image data is temporarily stored, so that once transmitted image data can be returned to the previously displayed image without being transmitted again. The others are the same as in the first embodiment. Hereinafter, a description will be given with reference to FIGS.
送信端末100は、実施例1の構成に加えて、データ管理部110を持つ。データ管理部は、送信する一連のデータに後述するデータIDを付加すると共に、リモコンからの指示にしたがって、一連のデータの送信開始から終了までを制御する。
また、受信端末200は、実施例1の構成にキャッシュ210を付加したほか、受信部201の機能にキャッシュデータ管理機能を追加した受信管理部209を持つ。
The transmission terminal 100 includes a
The reception terminal 200 has a reception management unit 209 in which a cache data management function is added to the function of the
この送信データの再利用機能は、図7に示す送信データ及び応答データ中のデータIDおよびフラグを使って、以下のように実現される。
送信データは、実施例1の送信データにデータIDが追加されたものである。データIDは、コミュニケーション開始から終了までのデータ毎に管理されたその画像データを示す固有の番号で、画像データの送る順番に従って送信データごとにインクリメントされるものとする。但し、同一データには、同一データIDを使用する。
また応答データは、実施例1の応答データに加えて、データID、および受信管理部209により前記データIDの次の画像データがキャッシュ上にあるかどうかを示すフラグが付加されている。
This transmission data reuse function is implemented as follows using the data ID and flag in the transmission data and response data shown in FIG.
The transmission data is obtained by adding a data ID to the transmission data of the first embodiment. The data ID is a unique number indicating the image data managed for each data from the start to the end of communication, and is incremented for each transmission data in accordance with the order of sending the image data. However, the same data ID is used for the same data.
In addition to the response data of the first embodiment, the response data includes a data ID and a flag indicating whether the image data next to the data ID is on the cache by the reception management unit 209.
送信者は、リモコンで画像を指定して、受信側の表示装置に送信表示させるよう指令する。すると、送信側のデータ管理部110は、前記リモコンの指示にしたがって、図8(A)に示す送信側ルーチンを起動させ、最初の画像データを送信する。
前記送信側ルーチンは、初期状態は別とすると、応答データを受信する毎に起動される。そしてまず表示位置の情報に合わせて送信側での表示処理(ステップS31)を行う。次に送信データを読み込み(ステップS32)、パス、データID、データサイズ、および画像データよりなる前記送信データを作成(ステップS33)する。この送信データは、前記応答データのフラグを参照(ステップS34)して、画像データがある場合は、画像データを削除(ステップS35)して、受信側に送信(ステップS36)する。但し、1回目の送信では、初期設定でフラグを0として(ステップS30)画像データを入れて送信する。
受信側のルーチンを図8(B)に示す。この受信側ルーチンは、送信データを受信する毎に起動され、まず受信した送信データのデータIDから、キャッシュ上の画像データの有無が判定(ステップS41)される。画像データがキャッシュに無い場合は、前記送信データをキャッシュに保存(ステップS42)する。なおこの時の送信データは、例えば容量が許す限りキャッシュ210に記憶すればよい。キャッシュにある場合は、画像データをキャッシュから読み出す(ステップS43)。こうして画像データを準備して、従来例同様、表示データを作成して(ステップS44)、前記画像データを画像表示(ステップS45)する。そしてパス、データID、および表示された画像の表示位置を含む表示応答データを作成(ステップS46)する。次に、前記画像データの次の画像データがキャッシュ上にあるかどうかチェック(ステップS47)する。このためには、前記データIDの次の番号のデータIDの画像データがあるかどうかを見ればよい。そして無い場合は、フラグをOFF(0)に設定(ステップS48)し、ある場合はフラグをON(1)に設定(ステップS49)して、応答データを完成する。そして応答データを送信(ステップS50)する。
この応答データのフラグと送信データ中の画像データ有無の関係を、図8(C)に示す。
そして、以上の応答・送信を繰り返すことにより、全ての画像データ伝送が終了したら送信側のデータ管理部110は、前記送信ルーチンを停止して、リモコンによる伝送表示指示を終了する。
The sender designates an image with the remote controller and instructs the display device on the receiving side to transmit and display it. Then, the
The transmission side routine is started each time response data is received, except for the initial state. First, display processing (step S31) on the transmission side is performed in accordance with the display position information. Next, the transmission data is read (step S32), and the transmission data including the path, the data ID, the data size, and the image data is created (step S33). The transmission data refers to the response data flag (step S34), and if there is image data, the image data is deleted (step S35) and transmitted to the receiving side (step S36). However, in the first transmission, the flag is set to 0 in the initial setting (step S30), and the image data is inserted and transmitted.
The reception side routine is shown in FIG. This reception side routine is activated every time transmission data is received, and first, the presence / absence of image data on the cache is determined from the data ID of the received transmission data (step S41). If the image data is not in the cache, the transmission data is stored in the cache (step S42). The transmission data at this time may be stored in the
FIG. 8C shows the relationship between the response data flag and the presence / absence of image data in the transmission data.
Then, by repeating the above response / transmission, when all the image data transmission is completed, the
以上のように、本発明の第2実施例によれば、一旦伝送の終わった画像データは、再度伝送すること無しに、前に表示した画像に戻って表示することができる。このため、送信データ量が減ることにより、処理速度が向上する。
なお、画像データが受信側のキャッシュに存在する場合は、パス1を省略して、直接元画像の高精細画像を表示するようにしてもよい。
As described above, according to the second embodiment of the present invention, once transmitted image data can be returned to the previously displayed image and displayed without being transmitted again. For this reason, the processing speed is improved by reducing the transmission data amount.
If the image data exists in the reception-side cache, pass 1 may be omitted and a high-definition image of the original image may be directly displayed.
なお、本発明の実施例では、送信された画像の受信側の表示位置は受信側で検出して、その座標位置を送信側に戻し、送信側では前記座標位置に基づいて画像表示したが、逆に送信側で予め送信するパケットの画像の表示位置を検出して、その座標位置をそのパケットのIDと共に記憶しておき、そのパケットが受信側で正しく受信されたのを確認して、そのパケットの画像を送信側の表示装置に表示するようにしても、送信側と受信側で同一画像を同期して表示することができる。
また、縮小画像として320X240ドットの例をあげたが、ディスプレイの解像度、通信速度、送信端末および受信端末の処理能力により、縮小画像サイズは必ずしも320X240ドットに限らない。表示画面が小さい場合には、DCFフォーマットの写真データから160X120ドットのサムネイル画像を抜き出して、直接縮小画像として使うことにより、送信装置を簡単化することもできる。
In the embodiment of the present invention, the display position on the reception side of the transmitted image is detected on the reception side, the coordinate position is returned to the transmission side, and the image is displayed based on the coordinate position on the transmission side. Conversely, the display position of the image of the packet to be transmitted in advance is detected on the transmission side, the coordinate position is stored together with the ID of the packet, and it is confirmed that the packet is correctly received on the reception side. Even if the image of the packet is displayed on the display device on the transmission side, the same image can be displayed synchronously on the transmission side and the reception side.
Further, although an example of 320 × 240 dots has been given as a reduced image, the reduced image size is not necessarily limited to 320 × 240 dots due to the display resolution, communication speed, and processing capabilities of the transmission terminal and the reception terminal. When the display screen is small, a 160 × 120 dot thumbnail image is extracted from DCF format photo data and directly used as a reduced image, thereby simplifying the transmission apparatus.
100 送信端末、101 データ読込部、102 処理選択部、103 伸張部、104 縮小データ生成部、105 圧縮部、106 送信部、107 応答受信部、108 表示制御部、109 バッファ、150 記憶装置、151 表示装置、200 受信端末、201 受信部、202 伸張部、203 送信部、204 応答生成部、205 表示部、251 表示装置
DESCRIPTION OF SYMBOLS 100 Transmission terminal, 101 Data reading part, 102 Process selection part, 103 Expansion | decompression part, 104 Reduction | restoration data generation part, 105 Compression part, 106 Transmission part, 107 Response reception part, 108 Display control part, 109 Buffer, 150 Storage device, 151 Display device, 200 reception terminal, 201 reception unit, 202 decompression unit, 203 transmission unit, 204 response generation unit, 205 display unit, 251 display device
Claims (2)
前記送信装置は、
圧縮された前記画像を送信する送信部と、
前記画像を表示部に表示させる制御部とを備え、
前記受信装置は、
前記送信装置から送信された前記圧縮された画像を伸張する伸張部と、
前記伸張された前記画像の一部又は全部の初期画素と最終画素との座標位置を検出する画像検出部と、
前記画像検出部で検出された前記座標位置を前記送信装置の制御部に送信する送信部と、
を備えたことを特徴とする送受信システム。 When the compressed image transmitted from the transmitting device via the network is received by the receiving device, and a part or all of the decompressed image is displayed on the display unit of the receiving device, the image is displayed on the display unit. In a transmission / reception system that displays the same image as a part or all of the image on the display unit of the transmission device and performs a voice call while visually recognizing part or all of the image displayed on the display unit of the transmission / reception device,
The transmitter is
A transmitter for transmitting the compressed image;
A control unit for displaying the image on a display unit,
The receiving device is:
A decompression unit for decompressing the compressed image transmitted from the transmission device;
An image detection unit for detecting a coordinate position of a part or all of initial pixels and final pixels of the expanded image;
A transmission unit that transmits the coordinate position detected by the image detection unit to a control unit of the transmission device;
A transmission / reception system comprising:
圧縮された前記画像を送信し、この送信された前記画像の伸張を行って前記受信装置の表示部に表示させ
次に、伸張された前記画像の一部又は全部の初期画素と最終画素との座標位置を検出し、
前記検出された前記座標位置を前記送信装置に送信して、前記送信装置の表示部に表示させて行うことを特徴とする送受信方法。
A compressed image transmitted from a transmitting device via a network is received by a receiving device, a part or all of the decompressed image is displayed on a display unit of the receiving device, and the image displayed on the display unit is displayed. In the transmission / reception method of displaying a part or all of the same image on the display unit of the transmission device and performing a voice call while visually recognizing part or all of the image displayed on the display unit of the transmission / reception device,
The compressed image is transmitted, and the transmitted image is decompressed and displayed on the display unit of the receiving device. Next, a part or all of the initial pixel and the final pixel of the decompressed image are displayed. Detect the coordinate position,
A transmission / reception method comprising: transmitting the detected coordinate position to the transmission device and displaying the coordinate position on a display unit of the transmission device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005149273A JP2006332741A (en) | 2005-05-23 | 2005-05-23 | Image transmission-reception display system, and image transmission-reception display method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005149273A JP2006332741A (en) | 2005-05-23 | 2005-05-23 | Image transmission-reception display system, and image transmission-reception display method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006332741A true JP2006332741A (en) | 2006-12-07 |
Family
ID=37554012
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005149273A Withdrawn JP2006332741A (en) | 2005-05-23 | 2005-05-23 | Image transmission-reception display system, and image transmission-reception display method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006332741A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011155494A (en) * | 2010-01-27 | 2011-08-11 | Casio Computer Co Ltd | Playback device, playback system, and program |
-
2005
- 2005-05-23 JP JP2005149273A patent/JP2006332741A/en not_active Withdrawn
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011155494A (en) * | 2010-01-27 | 2011-08-11 | Casio Computer Co Ltd | Playback device, playback system, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4443181B2 (en) | Communication system and method | |
US20050041035A1 (en) | Electronic apparatus having a communication function and an image pickup function, and image display method and program | |
KR101583088B1 (en) | A method and apparatus for sharing data in a video conference system | |
US7027171B1 (en) | Digital camera and document photographing and transmitting method of the same | |
JP4093833B2 (en) | Electronics | |
KR20150013312A (en) | Video communication method and apparatus | |
JP2001127847A (en) | Telephone set and data transmission method therefor | |
JP4618356B2 (en) | Electronic device and program | |
JP2004120176A (en) | Mobile phone | |
KR100308311B1 (en) | Method Of Image Recording Of Picturephone | |
US20070050830A1 (en) | Image data transmission apparatus and method, remote display control apparatus and control method thereof, program, and storage medium | |
EP1746830A2 (en) | Method for performing presentation in video telephone mode and wireless terminal implementing the same | |
JP2006332741A (en) | Image transmission-reception display system, and image transmission-reception display method | |
JP2005222542A (en) | Cellular phone | |
KR100738523B1 (en) | Image storage/output apparatus and method in picture phone | |
JP4795187B2 (en) | Still image transmission device, still image reception device, still image transmission / reception device, still image transmission method, still image reception method, still image transmission / reception method, camera device, and portable terminal device | |
KR100658528B1 (en) | Portable Mobile Equipment And Mobile Communication System And Method of Fax Data Procedure Thereof | |
JP2009081866A (en) | Thumbnail image display method and display device | |
JP2006054781A (en) | Image data transmitter and image data transmission and reception system | |
JP2007053583A (en) | Communication apparatus | |
JPS62171262A (en) | Still picture transmission system | |
JP2004120175A (en) | Portable telephone | |
JP2006148776A (en) | Non-contact data transmitting apparatus, non-contact data receiving apparatus and non-contact data transmitting method | |
JP2804540B2 (en) | Teleconference terminal | |
JPH06276518A (en) | Picture processor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070629 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20100303 |