JP2023109362A - Traffic operation monitoring system - Google Patents
Traffic operation monitoring system Download PDFInfo
- Publication number
- JP2023109362A JP2023109362A JP2022010828A JP2022010828A JP2023109362A JP 2023109362 A JP2023109362 A JP 2023109362A JP 2022010828 A JP2022010828 A JP 2022010828A JP 2022010828 A JP2022010828 A JP 2022010828A JP 2023109362 A JP2023109362 A JP 2023109362A
- Authority
- JP
- Japan
- Prior art keywords
- optical
- video
- monitoring
- monitor
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Train Traffic Observation, Control, And Security (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は監視用カメラを用いて建造物や公共施設、交通機関や河川・盛り土等の土木災害ハザードマップ箇所といった地点を監視者が監視用モニタを介して監視する監視システムいわゆるITV(industrial television)システムに係り、特に交通機関において鉄道のプラットホームや踏切、高速自動車国道・自動車専用道路の橋梁やトンネルといった地点で車両運行に支障をきたし得る事態が発生した場合、その影響の低減化を可能とする交通運行監視システムに関する。 The present invention is a surveillance system that uses a surveillance camera to monitor points such as buildings, public facilities, transportation facilities, rivers, embankments, and other civil engineering disaster hazard map locations through a surveillance monitor. Regarding the system, it is possible to reduce the impact of situations that may hinder vehicle operation, especially at points such as railway platforms, railroad crossings, highway national highways and highways, and tunnels. It relates to a traffic operation monitoring system.
従来の監視システムは監視対象地点の映像をアナログの電気信号で伝送するアナログ方式と、デジタル信号に変換しIPネットワークを経由して伝送するデジタル方式に大別される。図1にそれらの概念を示す。図1において1はアナログ方式の監視用カメラ、2はアナログ方式の監視用モニタ、3は監視用カメラ1と監視用モニタ2を接続する同軸ケーブル、4は監視用モニタ2の監視者、5はデジタル方式の監視用カメラ、6は監視用カメラ5の映像データ容量を圧縮するエンコーダ、7はそれを復元するデコーダ、8はデジタル方式の監視用モニタ、9はIPネットワーク、10は監視用カメラ1とエンコーダ6を接続するケーブル、11はエンコーダ6とIPネットワーク9を接続するケーブル、12はIPネットワーク9とデコーダ7を接続するケーブル、13はデコーダ7と監視用モニタ8を接続するケーブル、14は監視用モニタ8の監視者である。
Conventional surveillance systems are broadly divided into analog systems, which transmit images of monitored points as analog electrical signals, and digital systems, which convert them into digital signals and transmit them via IP networks. Figure 1 shows these concepts. In FIG. 1, 1 is an analog surveillance camera, 2 is an analog surveillance monitor, 3 is a coaxial cable connecting the surveillance camera 1 and the
アナログ方式はテレビジョンのNTSC方式に準拠し、監視用カメラ1の撮像素子上の画像を順に走査して読み出していき、読み出し信号を逐次テレビジョン用の同軸ケーブル3を経由して監視用モニタ2上を順に走査して画像を表示する。このため原理的に遅延が生じにくく、極めて短い遅延時間すなわち小さいレイテンシで映像を伝送させる目的に好適である。 The analog system complies with the NTSC system of television, and the image on the imaging device of the surveillance camera 1 is scanned in order and read out. The image is displayed by scanning the top in order. Therefore, delay is unlikely to occur in principle, and it is suitable for the purpose of transmitting video with an extremely short delay time, that is, a small latency.
一方、現在主流になりつつあるデジタル方式は、監視用カメラ5で取得したデジタル画像データをイーサネット、さらにルータを経由したインターネット等IPネットワーク9を経由してフレーム毎に伝送させている。従来のアナログ方式と比べてフルHD画質(1980×1080ピクセル)や4K画質ないしはウルトラHD(3840×2160ピクセル)の高画質映像を、画面比率16:9、対角43インチや55インチないしそれ以上の大画面モニタへIPネットワーク9経由で伝送することが可能である。 On the other hand, the digital method, which is becoming mainstream at present, transmits digital image data captured by the monitoring camera 5 frame by frame via an IP network 9 such as the Internet via Ethernet and a router. Compared to the conventional analog method, full HD image quality (1980 x 1080 pixels), 4K image quality or Ultra HD (3840 x 2160 pixels) high-quality images, screen ratio 16: 9, diagonal 43 inches or 55 inches or more It is possible to transmit to a large-screen monitor of the same size via an IP network9.
特許文献1にはデジタル方式を用い圧縮符号化する装置が示されている。圧縮符号化することによって伝送の際に遅延時間が増えてしまうが、遅延時間を短くするため撮像方向や撮像範囲を限定することを行っており、広範囲の映像を扱うことができない。 Patent Document 1 discloses a device for compression encoding using a digital method. Compression encoding increases the delay time during transmission, but in order to shorten the delay time, the imaging direction and imaging range are limited, and a wide range of images cannot be handled.
特許文献2には鉄道駅プラットホームの監視にIPネットワークを用いることが示されている。データ量を抑えるためにカメラ映像全てを伝送表示するのではなく、対象範囲に限定を加えているのでカメラでとらえた情報が減少している。
非特許文献1には、監視用カメラの高精細化が監視システム全般にとって必要な条件であることが述べられているが、それを低遅延で伝送することに関しては開示されていない。
Non-Patent Document 1 states that high-definition monitoring cameras are a necessary condition for surveillance systems in general, but does not disclose low-delay transmission.
監視システムは交通機関事業者に広く利用されているが、鉄道を例に取るとプラットホームへ入線してくる鉄道車両、鉄道車両ドアやホームドアの開閉、また混雑したプラットホーム上での乗客の人流の安全を監視するためフルHD画質(1980×1080ピクセル)や4K画質(3840×2160ピクセル)の高精細映像を、画面比率16:9、対角43インチや55インチないしそれ以上の大画面モニタへできるだけ小さいレイテンシで伝送させる必要性が生じつつある。 Monitoring systems are widely used by transportation operators, and in the case of railways, they are used to monitor trains entering the platform, opening and closing of train doors and platform doors, and the flow of passengers on crowded platforms. Full HD (1980 x 1080 pixels) and 4K (3840 x 2160 pixels) high-definition images are displayed on large screen monitors with a screen ratio of 16:9 and a diagonal of 43 inches, 55 inches or more for safety monitoring. There is a growing need for transmission with as little latency as possible.
従来のアナログ方式の場合、伝送がNTSC方式に準拠しているためレイテンシが極めて小さい映像伝送が可能であるが、ノイズ等の影響によりピクセルを細分化させるのが困難なため、QVGA画質(352×240ピクセル)、VGA画質(640×480ピクセル)、D1画質(740×480ピクセル)といった低画質レベルに留まっていた。またこの理由により、大画面化が困難という課題があった。 In the case of the conventional analog system, video transmission with extremely low latency is possible because the transmission conforms to the NTSC system. 240 pixels), VGA image quality (640 x 480 pixels), and D1 image quality (740 x 480 pixels). For this reason, there is also a problem that it is difficult to increase the size of the screen.
一方、デジタル方式のIPネットワークカメラは回線を圧迫しない様に画像フレームのデータにエンコーダによって圧縮処理を施して伝送容量を減じた後、データをパケットに分割してIPネットワーク経由で伝送を行っている。IPネットワーク上を流れるパケットはスイッチまたはルータでのコリジョンを避けるためにバッファリング処理が必要となりキューイング遅延が発生する。その結果、伝送先へパケットを均一なタイミングで到着させるのが困難である。また圧縮した画像データのデコーダによる復元処理にも時間が必要となる。このためアナログ方式と比べて高画質・大画面の映像が得られるものの、映像伝送のレイテンシが数100ミリ秒から数秒程度と大幅に増大する傾向があった。 On the other hand, a digital IP network camera compresses image frame data using an encoder to reduce the transmission capacity so as not to overload the line, then divides the data into packets and transmits them via the IP network. . Packets flowing over IP networks require buffering processing to avoid collisions at switches or routers, and queuing delays occur. As a result, it is difficult to have packets arrive at the transmission destination at uniform timing. In addition, it takes time to restore the compressed image data by the decoder. As a result, although it is possible to obtain high-definition, large-screen images compared to analog systems, the latency of video transmission tends to increase significantly from several hundred milliseconds to several seconds.
本発明の目的は交通機関事業者に対し、車両運行時や乗客の乗降時に運行に支障をきたし得る監視対象に対し、撮像ならびに表示を含め遠隔地点からも映像伝送のレイテンシが数10ミリ秒程度と超低遅延かつ高画質・大画面な映像での監視を可能にし、必要に応じ速やかな警報発出が行える交通運行監視システムを提供することにある。
The purpose of the present invention is to provide transportation operators with a video transmission latency of several tens of milliseconds even from a remote location, including imaging and display, for monitoring targets that may interfere with operation during vehicle operation and when passengers get on and off. and to provide a traffic operation monitoring system that enables monitoring with ultra-low-delay, high-definition, large-screen video, and that can promptly issue a warning as necessary.
上記従来方法の問題点の解決手段を鉄道へ応用した場合を例に説明する。 An example of applying the means for solving the problems of the conventional method to railways will be described.
図2にその詳細を示す。図2において100は色深度が4:2:0/8ビット、有効画素数が4K (3840×2160ピクセル)、フレームレートが60フレーム/毎秒で鉄道施設の駅プラットホームや踏切を監視するデジタル方式の4K監視用カメラ、101は4K監視用カメラの出力信号を波長1550 nm帯の非圧縮の光信号に変換する光トランスミッタ、102は光信号を2分岐させる光分配器、103、104は4K監視用カメラとは別地点に設置され受信した非圧縮の光信号を4K映像信号に変換する光レシーバ、105はフレームレートが60フレーム/毎秒、画面比率16:9、対角43インチ、デジタル方式の4K監視用モニタ、106は4K映像から取得した映像の機械学習ないしは深層学習の機能を有する画像解析機器、110、111、112はHDMI(HDMIは登録商標、以下同様)ケーブル等メタルケーブル、120、121、122はシングルモード光ファイバ、130は4K監視用モニタ105を監視する駅務員、131、132は駅務員130または画像解析機器106の少なくとも一方から4K監視用カメラ100が設置された地点近傍または鉄道運行指令所に対し発出される警報信号、133は警報発出機器である。
Details are shown in FIG. In Figure 2, 100 has a color depth of 4:2:0/8 bits, an effective pixel count of 4K (3840 x 2160 pixels), and a frame rate of 60 frames per second. 4K surveillance camera, 101 is an optical transmitter that converts the output signal of the 4K surveillance camera into an uncompressed optical signal with a wavelength of 1550 nm, 102 is an optical splitter that divides the optical signal into two, and 103 and 104 are for 4K surveillance. An optical receiver installed at a different location from the camera that converts the received uncompressed optical signal into a 4K video signal. Monitor for monitoring, 106 is an image analysis device with machine learning or deep learning function of video acquired from 4K video, 110, 111, 112 are metal cables such as HDMI (HDMI is a registered trademark, the same applies hereinafter) cable, 120, 121 , 122 is a single-mode optical fiber, 130 is a station attendant who monitors the
図2の例ではデータ伝送量が数ギガビット/毎秒から10ギガビット/毎秒で出力される4K監視用カメラ100の出力信号がHDMIケーブル等メタルケーブル110を経由して光トランスミッタ101でシリアルな非圧縮の光信号に変換される。非圧縮の光信号は光ファイバ120によって光分配器102に伝送され2分岐される。さらに光ファイバ121、122を経由して鉄道施設へ伝送され、光トランスミッタ103、104で60フレーム/毎秒の4K映像に再変換された後、4K監視用モニタ105へ映像表示、また画像解析機器106で必要な解析・記録が行われる。画像解析機器106が危険を検出した際には警報信号132が発出され、警報発出機器133が作動することにより、事故を未然に防ぐことが可能であった。また、駅務員130が4K監視用モニタ105の映像から異常を察知した場合には警報信号131によって警報発出機器を作動させ、事故を防ぐことも可能であった。
In the example of FIG. 2, the output signal of the
これらの結果、従来のIPネットワーク伝送を経由して4K監視用カメラ映像を4K監視用モニタへ伝送させる場合、映像伝送遅延は約500ミリ秒であったのに対し、本システムでは4K映像伝送遅延を約30ミリ秒に低減できた。 As a result, when transmitting 4K surveillance camera images to a 4K surveillance monitor via conventional IP network transmission, the image transmission delay was approximately 500 milliseconds. can be reduced to about 30 ms.
この結果、例えば混雑した駅プラットホーム上で乗客が駆け込み乗車を試みて鉄道車両ドアやホームドアでの荷物挟まり等の予兆が発生した場合、駅務室またはプラットホーム上の高画質・大画面4K監視用モニタを複数の駅務員や車掌が視聴できることから、鉄道車両ドアやホームドアで荷物挟まり等の事態が発生し、センサ作動あるいはプラットホーム上の非常停止ボタン作動が行われる以前にドアの再開放が行えるため、鉄道車両の定時運行が可能となる。また万一運行に支障をきたす事態が発生した場合でも駅務員の現場急行、後続車両を停車させるための警報発出機器133の動作を迅速に行うことが可能である。
As a result, for example, when passengers rush to get on a crowded station platform and there is a sign of baggage getting caught at the railroad car door or platform door, high-definition, large-screen 4K monitoring in the station office or platform will be possible. Since multiple station staff and conductors can view the monitor, a situation such as baggage getting caught in the door of a railway car or platform door occurs, and the door cannot be reopened before the sensor is activated or the emergency stop button on the platform is activated. As a result, it becomes possible to operate railway vehicles on time. In addition, even in the unlikely event that a situation that hinders operation occurs, it is possible to quickly operate the alarm issuing
また駅務員130が緊急と判断する事態を画像解析機器106が繰り返し学習することによって、画像解析機器106から当該駅や鉄道運行指令所へ鉄道車両ドアの開放や発車停止、後続車両の緊急停止といった運行信号を自動的に発出することも可能となる。
In addition, the
以下、本発明の実施例1では鉄道施設の1地点を多地点から監視する例について図3を用いて説明する。図3において200は鉄道路線、201は鉄道駅、202、203は駅201に隣接する駅、204、205、206は駅201、202、203の駅務室、207は駅201のプラットホーム、208はプラットホーム207上のホームドア、209はプラットホーム207に入線中の鉄道車両、210はプラットホーム207上の乗客である。
In the first embodiment of the present invention, an example of monitoring one point of a railway facility from multiple points will be described below with reference to FIG. 3, 200 is a railway line, 201 is a railway station, 202 and 203 are stations adjacent to
211はプラットホーム207に設置された色深度が4:2:0/8ビット、フレームレートが60フレーム/毎秒、データ伝送量が数ギガビット/毎秒から10ギガビット/毎秒、近赤外光にも感度を有するデジタル方式の4K監視用カメラ、212は後続の鉄道車両、213は鉄道車両212の進行方向、220は4K監視用カメラ用211の映像出力信号を波長1550 nmの非圧縮光信号に変換する4K非圧縮光トランスミッタ(DPN9042B、株式会社光パスコミュニケーションズ製)、221は光信号を8分岐する光分配器(DPN9049A、株式会社光パスコミュニケーションズ製)、230、231、232、233、234は光ファイバを経由して送信された非圧縮の光映像信号を4K監視用モニタならびに画像解析機器用映像信号に変換する4K非圧縮光レシーバ(DPN9044A、株式会社光パスコミュニケーションズ製)、240、241、242は駅務室204、205、206に設置された画面比率16:9、対角55インチ、デジタル方式の4K監視用モニタ、243はプラットホーム207上に設置された画面比率16:9、対角43インチ、デジタル方式の4K監視用モニタ、244は4K監視用カメラ211と光トランスミッタ220を接続するHDMIケーブル、250、251、252、253は光レシーバ230、231、232、233と4K監視用モニタ240、241、242、243を接続するHDMIケーブル、260は鉄道運転指令所等に設置され4K映像による緊急事態の機械学習ないしは深層学習の機能を有する画像解析機器、254は光レシーバ234と画像解析機器260を接続するHDMIケーブル、270は光トランスミッタ220と光分配器221を接続するシングルモード光ファイバ、271、272、273、274は光分配器221と光レシーバ230、231、232、233を接続するシングルモード光ファイバ、275は光分配器221と画像解析機器260を接続するシングルモード光ファイバ、280、281、282は4K監視モニタ用240、241、242を監視する駅務員である。
The 211 was installed on
従来は乗客210が鉄道車両209に駆け込み乗車を試みる際、例えば鉄道車両209ドアやホームドア208に挟まれる事態が発生すると、ドアに設けられたセンサがこれを検知してドアを開放すると共に、プラットホーム207上や駅務室204の駅務員、鉄道車両209の車掌が目視またはプラットホーム207上の監視用モニタで乗客の安全を確認して運行を再開していたが、従来の監視用カメラを介してプラットホームの安全を確認する場合、アナログ方式では分解能が十分ではなく、またIPネットワークカメラでは映像の伝送遅延が大きいため迅速な対応が取りにくいという問題があった。さらに朝夕の過密ダイヤ時には各駅での僅かな運行の遅れが大きな鉄道ダイヤの乱れの原因となっていた。
Conventionally, when the
一方、本発明の鉄道運行監視システムによれば、映像遅延が約30ミリ秒かつ4K高画質・大画面な監視用モニタ240、243映像でプラットホーム207の監視を行うことができるため、プラットホーム207で上記の様な運行に係わる事態が発生した場合、これをプラットホーム107上の駅務員や鉄道車両109の車掌も4K監視用モニタ243を介して迅速に発見し迅速に対応することが可能となった。また隣接駅202、203からも映像遅延が約30ミリ秒かつ4K高画質・大画面な監視用モニタ241、242を介してプラットホーム107の監視が可能なことから、4K監視用モニタを監視する駅務員は鉄道駅202、203に配置し、鉄道駅201のプラットホーム207上で安全運行に係わる事態が発生した場合には、鉄道駅201のプラットホーム207上の駅務員に無線等を介した手段で通報し緊急対応させることが可能となり、駅務員の合理的な配置が可能であった。
On the other hand, according to the railway operation monitoring system of the present invention, it is possible to monitor the
画像解析機器260が危険事象を検知した場合に警報信号が発出され、警報発出機器が作動することによって、事故を未然に防ぐことが可能であった。また、監視用モニタ240、241、242の画面から異常を察知した駅務員が警報発出機器を作動させ、事故を防ぐことも可能であった。
When the
4K監視用カメラ211の映像は画像解析機器260にも伝送させ駅務員が危険と判断する映像を学習させることによって、乗客の事前の動きから危険を予測してプラットホーム207に入線中の鉄道車両209の発車停止、後続の鉄道車両212の緊急停止といった警報を自動的に発出して運行をスムーズに行うことが可能であった。なお画像解析機器260は高画質の4K映像によって低画質の映像と比べ、機械学習ないしは深層学習の効果を高めることが可能であった。
The image of the
本実施例では鉄道会社が線路敷や側溝等、鉄道施設内に敷設している自社光ファイバないしその波長を使っているため、通信キャリアの光ファイバでは迂回する様な場合と比べて短い距離での接続を実現でき、自社光ファイバのため通信事業者の光ファイバを借用する場合と比べ低コストの運用が可能であった。 In this embodiment, the railway company uses its own optical fiber or its wavelength that is laid in the railway facilities such as railroad tracks and side ditches, so the distance is short compared to the case of detouring with the optical fiber of the communication carrier. Because it uses its own optical fiber, it was possible to operate at a lower cost than when borrowing the optical fiber of a telecommunications carrier.
本実施例では映像伝送用の光ファイバ270、271、272、273、274、275にはシングルモード光ファイバ、伝送用の光波長には1550 nm帯域を用いたが、伝送距離に応じて1310 nm帯等他の波長帯域、マルチモード光ファイバ等他の線種を用いることが可能であった。また超高画質の8K映像を伝送させる必要が生じた場合、伝送データ量が増大するため、波長ないし芯線を複数に分けて伝送させることが可能であった。さらにシングルモード光ファイバ272、273、275の接続区間が長距離になった場合、途中に光増幅器を設置して光信号の減衰を補いこれを伝送させることが可能であった。
In this embodiment, the
上記の説明では光分配器221を用いたが、これを設けることなく光信号を、4K非圧縮光レシーバ230で映像電気信号に変換したのち、映像電気信号を適宜複製して、4K監視用モニタならびに画像解析機器に印加するようにしても良い。
Although the
本発明の実施例2では鉄道施設の複数地点を1地点から監視する例について説明する。 In a second embodiment of the present invention, an example of monitoring multiple points of railway facilities from one point will be described.
図4において300は鉄道路線、301は鉄道車両、302は鉄道車両の進行方向、303、304は鉄道路線300と交差する踏切、305は踏切303と304間の鉄道駅、306は駅305の駅務室である。
In FIG. 4, 300 is a railway line, 301 is a railway vehicle, 302 is the direction of travel of the railway vehicle, 303 and 304 are railroad crossings that intersect with the
310、311は踏切303、304を監視する色深度が4:2:0/8ビット、フレームレートが60フレーム/毎秒、データ伝送量が数ギガビット/毎秒から10ギガビット/毎秒、近赤外光にも感度を有するデジタル方式の4K監視用カメラ、312は駅305のプラットホームを監視する色深度が4:2:0/8ビット、フレームレートが60フレーム/毎秒、データ伝送量が数ギガビット/毎秒から10ギガビット/毎秒、デジタル方式の4K監視用カメラ、320、321、322は4K監視用カメラの映像出力信号を波長1550 nmの非圧縮光信号に変換する4K非圧縮光トランスミッタ(DPN9042A、株式会社光パスコミュニケーションズ製)、323は非圧縮の光映像信号を4K監視用モニタ用映像信号に変換する4K非圧縮光レシーバ(DPN9044A、株式会社光パスコミュニケーションズ製)、330、331は鉄道路線300内に敷設されたシングルモード光ファイバ、332、333は駅305施設内に敷設されたシングルモード光ファイバ、340、341、342は4K監視用カメラ310、311、312と光トランスミッタ320、321、322を接続するHDMIケーブル、350は駅務室306に設置された画面比率16:9、対角55インチのデジタル方式の4K監視用モニタ、343は光レシーバ323と4K監視用モニタ350を接続するHDMIケーブル、351は3×1切替用光スイッチ、352は4K監視用モニタ351を監視する駅務員である。
310 and 311
鉄道車両301が鉄道運行の600 m条項で定められた踏切303の600 m手前に接近する1分前に光スイッチ351を手動または自動で切替え、踏切303上の4K監視用カメラ310映像の4K監視用モニタ350への伝送を開始した。この結果、駅務員352は駅務室306から踏切303上の障害物の有無をレイテンシが30ミリ秒程度の4K映像で確認し、障害が確認された場合は警報発出を行うことが十分可能であった。
The
次に鉄道車両301が駅305のプラットホームの600 m手前に接近する1分前に光スイッチ350を手動または自動で切替え、駅305プラットホーム上の4K監視用カメラ312映像の4K監視用モニタ350への伝送を開始した。この結果、駅務員352は駅務室306からプラットホーム上の乗客の人流をレイテンシが30ミリ秒程度の4K映像で確認し、乗客の安全な乗降を確認できた。
Next, the
さらに鉄道車両301が駅305を出発後、踏切304の600 m手前に接近する1分前に光スイッチ351を手動または自動で切替え、踏切304上の4K監視用カメラ映像の4K監視用モニタ350への伝送を開始した。その結果、駅務員352は駅務室306から踏切304上の障害物の有無をレイテンシが30ミリ秒程度の4K映像で確認し、障害が確認された場合は警報発出を行うことが十分可能であった。
Furthermore, one minute before the
この結果、当該駅前後での鉄道運行の安全監視が当該駅の駅務員1名で行えるため、運行の安全に掛かる駅務員の合理的な配置が可能になった。また駅務室306の4K監視用モニタ350が対角55インチのため複数の駅務員が同時に4K映像を共有し、運行に支障が生じる事態を早期に検知することが可能であった。なお路線長が短ければ全路線の監視が1ヵ所で可能であるが全路線を複数のエリアに分割し、エリア毎に同様な監視を行うことも可能であった。さらに踏切303、304の4K監視用カメラのレンズ、フィルタ、画像センサ等を近赤外光にも透過能・感度を有する仕様にすることによって、昼夜を問わず駅務室306から超低遅延かつ4K映像で踏切303、304の監視が可能であった。
As a result, safety monitoring of railway operations before and after the relevant station can be performed by a single station employee, making it possible to rationally allocate station personnel responsible for operational safety. In addition, since the 4K monitoring monitor 350 in the
実施例2は上記の説明に加え、実施例1同様に例えば駅務室に設置した画像解析機器に高精細映像を印加し、画像解析機器は必要な解析・記録を行う。画像解析機器が危険事象を検出した際には、画像解析機器から警報信号が発出され、警報発出機器を作動させて警報を発出させるようにすることで、事故を未然に防止する効果を有する。 In addition to the above description, in the second embodiment, a high-definition image is applied to an image analysis device installed in, for example, a station office in the same manner as in the first embodiment, and the image analysis device performs necessary analysis and recording. When the image analysis equipment detects a dangerous event, an alarm signal is issued from the image analysis equipment, and the alarm issuance device is operated to issue an alarm, thereby preventing accidents.
本発明の実施例3では高速道路の重要構造物である橋梁やトンネルを超低遅延、高画質で監視する例について説明する。 In the third embodiment of the present invention, an example of monitoring bridges and tunnels, which are important structures of expressways, with ultra-low delay and high image quality will be described.
図5において400は高速道路、401は高速道路400の橋梁、402は高速道路400のトンネル、403、404はそれぞれ橋梁401、トンネル402手前に設置された道路情報表示板である。
In FIG. 5, 400 is an expressway, 401 is a bridge of the
410、411は色深度が4:2:0/8ビット、フレームレートが60フレーム/毎秒、データ伝送量が数ギガビット/毎秒から10ギガビット/毎秒、近赤外光にも感度を有するデジタル方式の4K監視用カメラ、412、413は4K監視用カメラの映像出力信号を波長1550 nm帯の非圧縮光信号に変換する4K非圧縮光トランスミッタ(DPN9042B、株式会社光パスコミュニケーションズ製)、414、415はパーキングエリアや料金所の道路管制センタに設置され、非圧縮の光映像信号を4K監視用モニタ用映像信号に変換する4K非圧縮光レシーバ(DPN9044A、株式会社光パスコミュニケーションズ製)、416、417は4K監視用カメラ410、411と光トランスミッタ412、413を接続するHDMIケーブル、420は高速道路400の側溝に設置されたシングルモード光ファイバ、421は波長合波器、422は波長分波器、423は高速道路400の側溝に設置され波長合波器421と波長分波器422を接続するシングルモード光ファイバ、424、425は波長分波器422と光トランスミッタ414、415を接続するシングルモード光ファイバ、426は光トランスミッタ412と波長合波器421を接続するシングルモード光ファイバ、427は機械学習ないしは深層学習の機能を具備した画像解析機器、430、431はそれぞれ画面比率16:9、対角43インチ、デジタル方式の4K監視用モニタ、432、433はそれぞれ光トランスミッタ414、415と4K監視用モニタ430、431を接続するHDMIケーブル、434、435はそれぞれ光レシーバ414、415と画像解析機器427を接続するHDMIケーブルである。440、441は高速道路400上を橋梁・トンネル方向へ走行する車両、442は4K監視用モニタ430、431の監視者である。
The 410 and 411 have a color depth of 4:2:0/8 bits, a frame rate of 60 frames/second, a data transmission rate of several gigabits/second to 10 gigabits/second, and are sensitive to near-infrared light.
時速120 kmで高速道路400上を走行している車両440、441は1秒間に約33 m移動し、また急制動をかけても静止までに約60~70 m必要である。このため橋梁401やトンネル402で地震や経年劣化による崩落、車両故障による火災、河川の氾濫やその予兆が起こった場合には、道路情報表示板402、404に即座に緊急情報を表示させる必要がある。IPネットワークカメラを用いた従来の監視方法ではD1画質の場合、監視者の監視用モニタへ0.5秒程度の遅延で映像伝送・表示が可能であったが画質が十分ではなく、現場状況の把握が困難であった。一方、4K高画質の場合、現場状況の把握は容易であるが監視者の4K監視用モニタへの映像伝送にIPネットワークを経由させると2~3秒程度の映像伝送遅延が生じることとなり、この間に車両340、341の空走距離は100 m近くに及ぶ。このため災害現場手前での緊急停止が困難であった。
一方、本システムによれば4K監視用カメラ410ないし411の4K映像を30ミリ秒程度の超低遅延で4K監視用モニタ430ないし431へ表示させると共に、画像解析機器427へ4K映像の伝送が可能となり、その間の車両の空走距離は僅か1 mであった。この結果、画像解析機器427が災害現場の道路情報表示盤403、404上に余裕を持って「災害通行止」表示などの警報発出し、車両440、441等を高速道路300上で緊急停止させることによって車両事故の危険性を減じることが可能であった。または監視者442 が4K監視用カメラ410ないし411の4K映像から危険事象を察知した場合も、災害現場の道路情報表示盤403、404上に警報発出するほか必要な措置を迅速に行うことが可能であった。
On the other hand, according to this system, 4K video from
本実施例では光トランスミッタ412、413から発生する非圧縮光信号の波長λ1、λ2を1550 nm帯で例えば10 nm異なる波長とすることにより、シングルモード光ファイバ423で波長多重伝送が可能であり、限られた光ファイバ資源の有効活用が可能であった。また光ファイバ420が高速道路500の側溝に長距離に渡って敷設されたシングルモード光ファイバの場合、4K用監視カメラ410、411に加えて他地点の4K監視用カメラ映像の非圧縮光信号を光分岐挿入装置(ROADM、reconfigurable optical add/drop multiplexer)を用いて合波、分波させることによって高速道路400の長距離区間で任意の4K監視用カメラの映像取得が可能であった。また映像に加え橋梁やトンネル内に設けられた振動センサ等の出力を上記の光ファイバ網に重畳させ、崩落の予兆となる異常信号の早期伝送が可能であった。さらに車載ラジオ、5Gシステム等、無線を介した手段を使って走行中の車両へ緊急災害情報を伝送すると共に、車両の自動運転・緊急停止システムと連動させて車両を高速道路400の路肩に自動停止させる等、予防安全措置を講じることが可能であった。
In this embodiment, by setting the wavelengths λ 1 and λ 2 of the uncompressed optical signals generated from the
図1中の符号は以下のとおりである。
1 --- アナログ方式の監視用カメラ
2 --- アナログ方式の監視用モニタ
3 --- 監視用カメラと監視用モニタを接続する同軸ケーブル
4 --- 監視用モニタの監視者
5 --- デジタル方式の監視用カメラ
6 --- エンコーダ
7 --- デコーダ
8 --- デジタル方式の監視用モニタ
9 --- IPネットワーク
10 --- 監視用カメラとエンコーダを接続するケーブル
11 --- エンコーダとIPネットワークを接続するケーブル
12 --- IPネットワークとデコーダを接続するケーブル
13 --- デコーダと監視用モニタ接続するケーブル
14 --- 監視用モニタの監視者
Reference numerals in FIG. 1 are as follows.
1 --- Analog Surveillance Camera
2 --- analog monitoring monitor
3 --- Coaxial cable connecting surveillance camera and surveillance monitor
4 --- Surveillance Monitor Observer
5 --- Digital Surveillance Camera
6---Encoder
7--- Decoder
8 --- Digital Surveillance Monitor
9---IP network
10 --- Cable connecting surveillance camera and encoder
11 --- Cable connecting encoder and IP network
12 --- Cable connecting IP network and decoder
13 --- Cable to connect decoder and monitoring monitor
14 --- Observer of surveillance monitor
図2中の符号は以下のとおりである。
100 --- デジタル方式の4K監視用カメラ
101 --- 光トランスミッタ
102 --- 光分配器
103、104 --- 光レシーバ
105 --- デジタル方式の4K監視用モニタ
106 --- 画像解析機器
110、111、112 --- HDMIケーブル等メタルケーブル
120、121、122 --- シングルモード光ファイバ
130 --- 4K監視用モニタを監視する駅務員
131、132 --- 警報信号
133 --- 警報発出機器
Reference numerals in FIG. 2 are as follows.
100 --- Digital 4K Surveillance Camera
101 --- Optical Transmitter
102 --- Optical distributor
103, 104 --- Optical receiver
105 --- Digital 4K Surveillance Monitor
106 --- Image analysis equipment
110, 111, 112 --- Metal cables such as HDMI cables
120, 121, 122 --- single mode optical fiber
130 --- A station attendant watching a 4K surveillance monitor
131, 132 --- Alarm signal
133 --- Alarm device
図3中の符号は以下のとおりである。
200 --- 鉄道路線
201 --- 鉄道駅
202、203 --- 隣接する駅
204、205、206 --- 駅務室
207 --- 駅のプラットホーム
208 --- プラットホーム上のホームドア
209 --- プラットホームに入線中の鉄道車両
210 --- プラットホーム上の乗客
211 --- デジタル方式の4K監視用カメラ
212 --- 後続の鉄道車両
213 --- 後続の鉄道車両の進行方向
220 --- 光トランスミッタ
221 --- 光分配器
230、231、232、233、234 --- 光レシーバ
240、241、242 --- 駅務室に設置されたデジタル方式の4K監視用モニタ
243 --- プラットホーム上に設置されたデジタル方式の4K監視用モニタ
244 --- 4K監視用カメラと光トランスミッタを接続するHDMIケーブル
250、251、252、253 --- 光レシーバと4K監視用モニタを接続するHDMIケーブル
254 --- 光レシーバと画像解析機器を接続するHDMIケーブル
260 --- 画像解析機器
270 --- 光トランスミッタと光分配器を接続するシングルモード光ファイバ
271、272、273、274 --- 光分配器と光レシーバを接続するシングルモード光ファイバ
275 --- 光分配器と画像解析機器を接続するシングルモード光ファイバ
280、281、282 --- 4K監視用モニタを監視する駅務員
Reference numerals in FIG. 3 are as follows.
200 --- Railway Lines
201--- Railway Station
202, 203 --- Adjacent station
204, 205, 206 --- station office
207 --- Station platform
208 --- platform door on platform
209 --- Rail cars entering the platform
210 --- Passengers on the platform
211 --- Digital 4K Surveillance Camera
212 --- Trailing rail car
213 --- Direction of following railcar
220 --- Optical Transmitter
221 --- Optical distributor
230, 231, 232, 233, 234 --- Optical Receiver
240, 241, 242 --- Digital 4K monitor installed in the station office
243 --- Digital 4K surveillance monitor installed on the platform
244 --- HDMI cable to connect 4K surveillance camera and optical transmitter
250, 251, 252, 253 --- HDMI cable to connect optical receiver to 4K surveillance monitor
254 --- HDMI cable for connecting optical receiver and image analysis equipment
260 --- Image analysis equipment
270 --- Single-mode optical fiber connecting optical transmitter and optical splitter
271, 272, 273, 274 --- Single-mode optical fibers connecting optical splitters and optical receivers
275 --- Single-mode optical fiber connecting optical splitter and image analysis equipment
280, 281, 282 --- station attendants watching 4K surveillance monitors
図4中の符号は以下のとおりである。
300 --- 鉄道路線
301 --- 鉄道車両
302 --- 鉄道車両の進行方向
303、304 --- 鉄道路線と交差する踏切
305 --- 踏切間の鉄道駅
306 --- 駅務室
310、311 --- 踏切を監視するデジタル方式の4K監視用カメラ
312 ---駅のプラットホームを監視するデジタル方式の4K監視用カメラ
320、321、322 --- 光トランスミッタ
323 --- 光レシーバ
330、331 --- 鉄道路線内に敷設されたシングルモード光ファイバ
332、333 --- 駅施設内に敷設されたシングルモード光ファイバ
340、341、342 --- 4K監視用カメラと光トランスミッタを接続するHDMIケーブル
343 --- 光レシーバと4K監視モニタ用を接続するHDMIケーブル
350 --- 駅務室に設置された4K監視用モニタ、351 --- 光スイッチ
352 --- 4K監視用モニタを監視する駅務員
Reference numerals in FIG. 4 are as follows.
300 --- Railway Lines
301 --- Railway vehicles
302 --- Direction of travel of railway vehicles
303, 304 --- Railroad crossing with railroad tracks
305 --- railway station between railroad crossings
306 --- Station Office
310, 311 --- Digital 4K surveillance cameras for monitoring railroad crossings
312 --- Digital 4K surveillance camera to monitor the station platform
320, 321, 322 --- Optical Transmitter
323 --- Optical Receiver
330, 331 --- Single-mode optical fiber laid in railroad tracks
332, 333 --- Single-mode optical fiber installed in the station facility
340, 341, 342 --- HDMI cable to connect 4K surveillance camera and optical transmitter
343 --- HDMI cable connecting optical receiver to 4K surveillance monitor
350 --- 4K surveillance monitor installed in the station office, 351 --- Optical switch
352 --- A station attendant watching a 4K surveillance monitor
図5中の符号は以下のとおりである。
400 --- 高速道路
401 --- 橋梁
402 --- トンネル
403、404 --- 道路情報表示板
410、411 --- デジタル方式の4K監視用カメラ
412、413 --- 光トランスミッタ
414、415 --- 光レシーバ
420 --- 高速道路の側溝に設置されたシングルモード光ファイバ
421 --- 波長合波器
422 --- 波長分波器
423 --- 波長合波器と波長分波器を接続するシングルモード光ファイバ
424、425 --- 波長分波器と光トランスミッタを接続するシングルモード光ファイバ
426 --- 光トランスミッタと波長合波器を接続するシングルモード光ファイバ
427 --- 画像解析機器、430、431 --- デジタル方式の4K監視用モニタ
432、433 --- 光トランスミッタと4K監視用モニタを接続するHDMIケーブル
434、435 --- 光レシーバ414、415と画像解析機器427を接続するHDMIケーブル
440、441 --- 高速道路上の車両
442 --- 4K監視用モニタの監視者
Reference numerals in FIG. 5 are as follows.
400 --- Highway
401--- Bridge
402 --- Tunnel
403, 404 --- Road Information Board
410, 411 --- Digital 4K Surveillance Camera
412, 413 --- Optical Transmitter
414, 415 --- Optical Receiver
420 --- Single-mode optical fiber installed in highway gutters
421 --- Wavelength Multiplexer
422 --- Wavelength Demultiplexer
423 --- Single-mode optical fiber connecting wavelength multiplexer and wavelength demultiplexer
424, 425 --- Single-mode optical fiber connecting wavelength demultiplexer and optical transmitter
426 --- Single-mode optical fiber connecting optical transmitter and wavelength multiplexer
427 --- Image analysis equipment, 430, 431 --- Digital 4K surveillance monitor
432, 433 --- HDMI cable to connect optical transmitter and 4K surveillance monitor
434, 435 --- HDMI cable connecting
440, 441 --- Vehicles on highways
442 --- Observer for 4K Surveillance Monitor
Claims (7)
監視対象地点の映像を撮像する監視用カメラ、
前記監視用カメラから出力される第一の映像電気信号を第一の光信号へ変換する電気光変換器、
前記電気光変換器から出力される前記第一の光信号を伝送し、伝送後に第二の光信号を生成する光ファイバを含む光伝送路、
前記第二の光信号を印加し第二の映像電気信号へ変換する1ないし複数の光電気変換器、
前記第二の映像電気信号を印加し映像を表示する監視用モニタ、
前記第二の映像電気信号を印加し危険事象の有無を検出して警報信号を発生する画像解析機器、
前記画像解析機器から発せられた前記警報信号から前記監視対象地点に警報を発出する警報発出機器、
から構成されることを特徴とする交通運行監視システム
High-definition images with a resolution equal to or higher than that of full HD are captured for objects to be monitored on railways or motorways, and the captured information is analyzed to automatically detect dangerous events related to traffic operations and issue warnings. In a traffic monitoring system that issues warnings to prevent accidents,
a monitoring camera that captures images of a point to be monitored;
an electro-optical converter for converting a first video electrical signal output from the surveillance camera into a first optical signal;
an optical transmission line including an optical fiber that transmits the first optical signal output from the electrical-optical converter and generates a second optical signal after transmission;
one or more photoelectric converters for applying the second optical signal and converting it into a second video electrical signal;
a monitoring monitor that applies the second video electric signal and displays a video;
an image analysis device that applies the second video electrical signal to detect the presence or absence of a dangerous event and generates an alarm signal;
an alarm issuing device that issues an alarm to the monitored point from the alarm signal emitted from the image analysis device;
A traffic operation monitoring system characterized by comprising
2. The traffic operation monitoring system according to claim 1, wherein the first electrical video signal, the first optical signal, the second optical signal, and the second electrical video signal are uncompressed signals.
The image analysis device is equipped with a machine learning or deep learning function, and as the number of image analyzes increases, it learns the signs of a situation that hinders operation, and the accuracy of danger prediction can be improved step by step. Traffic operation monitoring system according to 1 to 2
When at least one of the monitor of the monitoring monitor and the image analysis device determines that there is an emergency, an alarm is issued from a second alarm issuing device installed in the traffic control center in addition to the vicinity of the monitoring target point. The traffic operation monitoring system according to claims 1 to 3, characterized in that
From claim 1, characterized in that an alarm issued from at least one of the supervisor of the monitoring monitor and the image analysis equipment is linked with the vehicle operation system to perform an emergency stop of the vehicle and a necessary response. 4. Traffic operation monitoring system according to
6. The traffic operation monitoring system according to any one of claims 1 to 5, wherein at least part of said optical transmission line passes through a provider optical transmission line laid in a transportation facility by a transportation provider.
In the optical transmission line of the business operator, a wavelength different from the optical wavelength used for commercial purposes other than the traffic operation system, or a core line different from the core wire used for commercial purposes other than the traffic operation system in the multi-core optical fiber cable 7. The traffic operation monitoring system according to claim 1, wherein the system is an optical transmission line.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022010828A JP2023109362A (en) | 2022-01-27 | 2022-01-27 | Traffic operation monitoring system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022010828A JP2023109362A (en) | 2022-01-27 | 2022-01-27 | Traffic operation monitoring system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2023109362A true JP2023109362A (en) | 2023-08-08 |
Family
ID=87522723
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022010828A Pending JP2023109362A (en) | 2022-01-27 | 2022-01-27 | Traffic operation monitoring system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2023109362A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2025007756A (en) * | 2023-07-03 | 2025-01-17 | 京楽産業.株式会社 | Gaming Machines |
| CN119705562A (en) * | 2024-12-13 | 2025-03-28 | 卡斯柯信号有限公司 | System and method for controlling operation safety of extension train |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001026266A (en) * | 1999-07-12 | 2001-01-30 | Ribasuto:Kk | System for monitoring and notifying obstacle on track |
| JP2002223433A (en) * | 2001-01-29 | 2002-08-09 | Toshiba Corp | Image transmission system |
| CN2653820Y (en) * | 2003-09-26 | 2004-11-03 | 深圳市兴电科技开发有限公司 | Visual emergency telephone system on high level road |
| JP2005150869A (en) * | 2003-11-12 | 2005-06-09 | Frontiers Co Ltd | Real-time broadcast system and real-time broadcast signal transmitting method |
| JP2014192762A (en) * | 2013-03-27 | 2014-10-06 | Hitachi Kokusai Electric Inc | Monitoring system |
| JP2019096179A (en) * | 2017-11-27 | 2019-06-20 | ホーチキ株式会社 | Behavior monitoring system |
| WO2020039897A1 (en) * | 2018-08-20 | 2020-02-27 | 株式会社音楽館 | Station monitoring system and station monitoring method |
| WO2020158197A1 (en) * | 2019-01-28 | 2020-08-06 | 日本電気株式会社 | Abnormal state reporting system |
| CN211296946U (en) * | 2020-02-21 | 2020-08-18 | 北京东峰英杰科技有限公司 | Railway electric power comprehensive operation and maintenance management system |
-
2022
- 2022-01-27 JP JP2022010828A patent/JP2023109362A/en active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001026266A (en) * | 1999-07-12 | 2001-01-30 | Ribasuto:Kk | System for monitoring and notifying obstacle on track |
| JP2002223433A (en) * | 2001-01-29 | 2002-08-09 | Toshiba Corp | Image transmission system |
| CN2653820Y (en) * | 2003-09-26 | 2004-11-03 | 深圳市兴电科技开发有限公司 | Visual emergency telephone system on high level road |
| JP2005150869A (en) * | 2003-11-12 | 2005-06-09 | Frontiers Co Ltd | Real-time broadcast system and real-time broadcast signal transmitting method |
| JP2014192762A (en) * | 2013-03-27 | 2014-10-06 | Hitachi Kokusai Electric Inc | Monitoring system |
| JP2019096179A (en) * | 2017-11-27 | 2019-06-20 | ホーチキ株式会社 | Behavior monitoring system |
| WO2020039897A1 (en) * | 2018-08-20 | 2020-02-27 | 株式会社音楽館 | Station monitoring system and station monitoring method |
| WO2020158197A1 (en) * | 2019-01-28 | 2020-08-06 | 日本電気株式会社 | Abnormal state reporting system |
| CN211296946U (en) * | 2020-02-21 | 2020-08-18 | 北京东峰英杰科技有限公司 | Railway electric power comprehensive operation and maintenance management system |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2025007756A (en) * | 2023-07-03 | 2025-01-17 | 京楽産業.株式会社 | Gaming Machines |
| CN119705562A (en) * | 2024-12-13 | 2025-03-28 | 卡斯柯信号有限公司 | System and method for controlling operation safety of extension train |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CA2327090A1 (en) | Method of detecting obstacles on railroad lines | |
| JP2023109362A (en) | Traffic operation monitoring system | |
| CN104309652B (en) | A kind of intelligent tramcar signal system | |
| DE102009040221A1 (en) | System and method for safe remote control of vehicles | |
| CN101108627A (en) | Automatic monitored control system for railway driving safety and operation method thereof | |
| GB2544122A (en) | Rail vehicle provided with an internally mounted video camera with external field of vision | |
| KR20090038111A (en) | Flood Level Monitoring and Prediction Alarm System | |
| CN216467864U (en) | Railway monitoring system | |
| KR100991407B1 (en) | Automatic control system for urban railway vehicles based on ground control | |
| KR100812315B1 (en) | Large train two-way microwave communication system and additional service providing method using the same | |
| KR100868909B1 (en) | Electric Vehicle Driving Section and Vehicle Condition Monitoring System and Operation Method | |
| CN116788316B (en) | Data acquisition method, equipment and medium of subway line network level engineering vehicle protection system | |
| Abdishukurovich et al. | Organization of video surveillance at railway crossings | |
| CN102700572A (en) | Method for monitoring and early warning visualization relay in block section for railway safe traveling | |
| CN205726142U (en) | A Fixed Video Surveillance System for Rail Transit | |
| JP2006298041A (en) | Vehicle driving support system | |
| EP2078659B1 (en) | A system and method for providing reliable collision hazard detection | |
| RU156053U1 (en) | SYSTEM OF SITUATIONAL CONTROL AT RAILWAY TRANSFER | |
| CN220474158U (en) | Intelligent traffic system for controlling vehicles in hydropower station construction period | |
| KR100840977B1 (en) | Video integrated control system and method of electric vehicle | |
| KR200416357Y1 (en) | Subway Vehicle Surveillance Device | |
| KR20030062533A (en) | Real time train monitoring system | |
| CN219122726U (en) | Stone intrusion recognition device applied to rail transit | |
| JP7717344B2 (en) | Transport equipment management support device, transport equipment management support method, and transport equipment management support program | |
| JP7755529B2 (en) | Camera system and method for controlling the camera system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20250107 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250929 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20251021 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20251217 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20260122 |