JP2014050091A - ストリーム処理装置、サーバ、及び、ストリーム処理方法 - Google Patents
ストリーム処理装置、サーバ、及び、ストリーム処理方法 Download PDFInfo
- Publication number
- JP2014050091A JP2014050091A JP2012194346A JP2012194346A JP2014050091A JP 2014050091 A JP2014050091 A JP 2014050091A JP 2012194346 A JP2012194346 A JP 2012194346A JP 2012194346 A JP2012194346 A JP 2012194346A JP 2014050091 A JP2014050091 A JP 2014050091A
- Authority
- JP
- Japan
- Prior art keywords
- data
- processing
- packet
- input
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims 9
- 238000013075 data extraction Methods 0.000 claims abstract description 37
- 239000000284 extract Substances 0.000 claims abstract description 16
- 238000000034 method Methods 0.000 claims description 71
- 238000007726 management method Methods 0.000 claims 15
- 238000013500 data storage Methods 0.000 claims 3
- 238000010586 diagram Methods 0.000 description 16
- 230000005856 abnormality Effects 0.000 description 14
- 238000001514 detection method Methods 0.000 description 10
- 230000004044 response Effects 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 6
- RTZKZFJDLAIYFH-UHFFFAOYSA-N Diethyl ether Chemical compound CCOCC RTZKZFJDLAIYFH-UHFFFAOYSA-N 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Security & Cryptography (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
【解決手段】ネットワークから入力されたパケットに含まれるデータに、クエリ処理を行うストリーム処理装置は、入力されたパケットを複数に複製する複製部と、複製されたパケットのうちの一方のパケットに、ネットワークに対応するプロトコル処理を行うことによって、パケットにエラーがあるか否かを判定するプロトコル処理部と、プロトコル処理による判定結果を示す管理フラグを格納する記憶部と、複製されたパケットのうちの他方のパケットから、クエリ処理に必要なデータを抽出するデータ抽出部と、抽出されたデータにクエリ処理を行い、当該クエリ処理の結果を含むデータを出力するクエリ処理部と、クエリ処理部から出力されたデータを、管理フラグに基づいて、ストリーム処理装置から出力するか否かを決定する出力制御部と、を有する。
【選択図】図3
Description
202 サーバ
203 ホストCPU
204 メモリ
205 IOハブ
206 ストリームプロセッサ
207 DRAM
208 入力ネットワークポート
209 出力ネットワークポート
301 組み込みCPU
302 MemoryI/F
303 IOバスI/F
304 ストリーム処理部
401 EtherPHY部
402 EtherMAC部
403 IP処理部
404 TCP/UDP処理部
405 データ抽出部
406 入力レジスタ
407 出力レジスタ
408 TCP/UDP処理部
409 IP処理部
410 EtherMAC部
411 EtherPHY部
412 一時レジスタ
413 クエリ処理部
414 管理フラグ
415 入力レジスタ制御部
416 出力レジスタ制御部
417 エントリ番号付与部
Claims (12)
- ネットワークから入力されたパケットに含まれるデータに、クエリ処理を行うストリーム処理装置であって、
前記ストリーム処理装置は、
前記入力されたパケットを複数に複製する複製部と、
前記複製されたパケットのうちの一方のパケットに、前記ネットワークに対応するプロトコル処理を行うことによって、前記パケットにエラーがあるか否かを判定するプロトコル処理部と、
前記プロトコル処理による判定結果を示す管理フラグを格納する記憶部と、
前記複製されたパケットのうちの他方のパケットから、前記クエリ処理に必要なデータを抽出するデータ抽出部と、
前記抽出されたデータに前記クエリ処理を行い、当該クエリ処理の結果を含むデータを出力するクエリ処理部と、
前記クエリ処理部から出力されたデータを、前記管理フラグに基づいて、前記ストリーム処理装置から出力するか否かを決定する出力制御部と、を有することを特徴とするストリーム処理装置。 - 請求項1に記載のストリーム処理装置であって、
前記ストリーム処理装置は、前記抽出されたデータを、前記クエリ処理部へ入力するか否かを決定する入力制御部を有し、
前記入力制御部は、前記管理フラグが前記プロトコル処理による判定結果を保持する場合、前記管理フラグに従って、前記抽出されたデータを、前記クエリ処理部へ入力するか否かを決定することを特徴とするストリーム処理装置。 - 請求項1又は2に記載のストリーム処理装置であって、
前記ストリーム処理装置は、前記抽出されたデータを保持する入力レジスタを、さらに有し、
前記クエリ処理部は、
前記抽出されたデータのうち蓄積されたデータを用いた所定の処理の結果を取得し、
前記取得された処理の結果と、前記抽出されたデータとに基づいて、前記クエリ処理を行い、
前記出力制御部は、前記クエリ処理部から出力されたデータを、前記ストリーム処理装置から前記ネットワークに出力することを決定した場合、前記入力レジスタに保持される抽出されたデータを蓄積することを決定することを特徴とするストリーム処理装置。 - 請求項3に記載のストリーム処理装置であって、
前記パケットは、シーケンス番号を含み、
前記プロトコル処理部は、前記クエリ処理に必要なデータが各々に分割されて含まれる、複数の前記パケットを受信した場合、
前記複数のパケットの各々が含むデータを、前記シーケンス番号に基づいて結合し、
前記複数のパケットのうちの一つの第1のパケットに含まれるデータを、前記結合されたデータによって更新し、
前記結合されたデータを含む前記第1のパケットを、前記データ抽出部に入力し、
前記複数のパケットに含まれる前記第1のパケット以外の第2のパケットから抽出されたデータに前記クエリ処理を行った結果を、前記ストリーム処理装置から出力しないように、前記管理フラグを更新することを特徴とするストリーム処理装置。 - ネットワークから入力されたパケットに含まれるデータに、クエリ処理を行うサーバであって、
前記サーバは、
前記入力されたパケットを複数に複製する複製部と、
前記複製されたパケットのうちの一方のパケットに、前記ネットワークに対応するプロトコル処理を行うことによって、前記パケットにエラーがあるか否かを判定するプロトコル処理部と、
前記プロトコル処理による判定結果を示す管理フラグを格納する記憶部と、
前記複製されたパケットのうちの他方のパケットから、第1のクエリ処理に必要なデータを抽出するデータ抽出部と、
前記抽出されたデータに前記第1のクエリ処理を行い、前記第1のクエリ処理の結果を含むデータを出力する第1のクエリ処理部と、
前記第1のクエリ処理部から出力されたデータを、前記管理フラグに基づいて、前記サーバから出力するか否かを決定する出力制御部と、を有することを特徴とするサーバ。 - 請求項5に記載のサーバであって、
前記サーバは、前記抽出されたデータを、前記第1のクエリ処理部へ入力するか否かを決定する入力制御部を有し、
前記入力制御部は、前記管理フラグが前記プロトコル処理による判定結果を保持する場合、前記管理フラグに従って、前記抽出されたデータを、前記第1のクエリ処理部へ入力するか否かを決定することを特徴とするサーバ。 - 請求項5又は6に記載のサーバであって、
前記サーバは、
前記抽出されたデータを保持する入力レジスタと、
前記抽出されたデータを蓄積するデータ蓄積部と、
前記データ蓄積部に蓄積されたデータに、第2のクエリ処理を行う第2のクエリ処理部と、をさらに有し、
前記第1のクエリ処理部は、前記第2のクエリ処理部による処理結果と、前記抽出されたデータとに基づいて、前記第1のクエリ処理を行い、
前記出力制御部は、前記第1のクエリ処理部から出力されたデータを、前記サーバから前記ネットワークに出力することを決定した場合、前記入力レジスタに保持される抽出されたデータを前記データ蓄積部に蓄積することを決定することを特徴とするサーバ。 - 請求項7に記載のサーバであって、
前記パケットは、シーケンス番号を含み、
前記プロトコル処理部は、前記クエリ処理に必要なデータが各々に分割されて含まれる、複数の前記パケットを受信した場合、
前記複数のパケットの各々が含むデータを、前記シーケンス番号に基づいて結合し、
前記複数のパケットのうちの一つの第1のパケットに含まれるデータを、前記結合されたデータによって更新し、
前記結合されたデータを含む前記第1のパケットを、前記データ抽出部に入力し、
前記複数のパケットに含まれる前記第1のパケット以外の第2のパケットから抽出されたデータに前記第1のクエリ処理を行った結果を、前記サーバから出力しないように、前記管理フラグを更新することを特徴とするサーバ。 - ネットワークから入力されたパケットに含まれるデータに、クエリ処理を行うストリーム処理装置によるストリーム処理方法であって、
前記ストリーム処理装置は、プロセッサ及びメモリを有し、
前記方法は、
前記プロセッサが、前記入力されたパケットを複数に複製する複製手順と、
前記プロセッサが、前記複製されたパケットのうちの一方のパケットに、前記ネットワークに対応するプロトコル処理を行うことによって、前記パケットにエラーがあるか否かを判定するプロトコル処理手順と、
前記プロセッサが、前記プロトコル処理による判定結果を示す管理フラグを前記メモリに格納する記憶手順と、
前記プロセッサが、前記複製されたパケットのうちの他方のパケットから、前記クエリ処理に必要なデータを抽出するデータ抽出手順と、
前記プロセッサが、前記抽出されたデータに前記クエリ処理を行い、当該クエリ処理の結果を含むデータを出力するクエリ処理手順と、
前記プロセッサが、前記クエリ処理手順によって出力されたデータを、前記管理フラグに基づいて、前記ストリーム処理装置から出力するか否かを決定する出力制御手順と、を有することを特徴とするストリーム処理方法。 - 請求項9に記載のストリーム処理方法であって、
前記方法は、
前記プロセッサが、前記抽出されたデータを、前記クエリ処理手順へ入力するか否かを決定する入力制御手順を有し、
前記入力制御手順は、前記プロセッサが、前記管理フラグが前記プロトコル処理による判定結果を保持する場合、前記管理フラグに従って、前記抽出されたデータを、前記クエリ処理手順へ入力するか否かを決定する手順を含むことを特徴とするストリーム処理方法。 - 請求項9又は10に記載のストリーム処理方法であって、
前記ストリーム処理装置は、前記抽出されたデータを保持する入力レジスタを、さらに有し、
前記クエリ処理手順は、
前記プロセッサが、前記抽出されたデータのうち蓄積されたデータを用いた所定の処理の結果を取得する手順と、
前記プロセッサが、前記取得された処理の結果と、前記抽出されたデータとに基づいて、前記クエリ処理を行う手順と、を含み、
前記出力制御手順は、前記クエリ処理手順によって出力されたデータを、前記ストリーム処理装置から前記ネットワークに出力することを決定した場合、前記入力レジスタに保持される抽出されたデータを蓄積することを決定する手順を含むことを特徴とするストリーム処理方法。 - 請求項11に記載のストリーム処理方法であって、
前記パケットは、シーケンス番号を含み、
前記プロトコル処理手順は、前記プロセッサが、前記クエリ処理に必要なデータが各々に分割されて含まれる、複数の前記パケットを受信した場合、
前記プロセッサが、前記複数のパケットの各々が含むデータを、前記シーケンス番号に基づいて結合する手順と、
前記プロセッサが、前記複数のパケットのうちの一つの第1のパケットに含まれるデータを、前記結合されたデータによって更新する手順と、
前記プロセッサが、前記結合されたデータを含む前記第1のパケットを、前記データ抽出手順に入力する手順と、
前記プロセッサが、前記複数のパケットに含まれる前記第1のパケット以外の第2のパケットから抽出されたデータに前記クエリ処理を行った結果を、前記ストリーム処理装置から出力しないように、前記管理フラグを更新する手順と、を含むことを特徴とするストリーム処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012194346A JP5836229B2 (ja) | 2012-09-04 | 2012-09-04 | ストリーム処理装置、サーバ、及び、ストリーム処理方法 |
US13/958,751 US20140067900A1 (en) | 2012-09-04 | 2013-08-05 | Stream processing device, server, and stream processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012194346A JP5836229B2 (ja) | 2012-09-04 | 2012-09-04 | ストリーム処理装置、サーバ、及び、ストリーム処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014050091A true JP2014050091A (ja) | 2014-03-17 |
JP5836229B2 JP5836229B2 (ja) | 2015-12-24 |
Family
ID=50188960
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012194346A Expired - Fee Related JP5836229B2 (ja) | 2012-09-04 | 2012-09-04 | ストリーム処理装置、サーバ、及び、ストリーム処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20140067900A1 (ja) |
JP (1) | JP5836229B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220350312A1 (en) * | 2020-01-23 | 2022-11-03 | Mitsubishi Electric Corporation | Data processing apparatus, data transmission method, and recording medium |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105335376B (zh) | 2014-06-23 | 2018-12-07 | 华为技术有限公司 | 一种流处理方法、装置及系统 |
US10965756B2 (en) * | 2014-09-16 | 2021-03-30 | Telefonaktiebolaget Lm Ericsson (Publ) | Sensor system of master and slave sensors, and method therein |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6295647B1 (en) * | 1998-10-08 | 2001-09-25 | Philips Electronics North America Corp. | Context life time management of a user interface in a digital TV broadcast |
JP3600189B2 (ja) * | 2001-06-19 | 2004-12-08 | 松下電器産業株式会社 | パケット送受信装置及びパケット伝送方法 |
US7103008B2 (en) * | 2001-07-02 | 2006-09-05 | Conexant, Inc. | Communications system using rings architecture |
US7817721B2 (en) * | 2003-05-15 | 2010-10-19 | Lsi Corporation | Posting status data in digital transport stream processing |
JP4389605B2 (ja) * | 2004-02-26 | 2009-12-24 | 日本電気株式会社 | マルチキャスト情報配信システムおよびマルチキャスト情報配信方法 |
US8213313B1 (en) * | 2009-04-15 | 2012-07-03 | Tellabs Operations, Inc. | Methods and apparatus for shared layer 3 application card in multi-service router |
-
2012
- 2012-09-04 JP JP2012194346A patent/JP5836229B2/ja not_active Expired - Fee Related
-
2013
- 2013-08-05 US US13/958,751 patent/US20140067900A1/en not_active Abandoned
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220350312A1 (en) * | 2020-01-23 | 2022-11-03 | Mitsubishi Electric Corporation | Data processing apparatus, data transmission method, and recording medium |
US11604454B2 (en) | 2020-01-23 | 2023-03-14 | Mitsubishi Electric Corporation | Data processing apparatus, data transmission method, and recording medium |
Also Published As
Publication number | Publication date |
---|---|
US20140067900A1 (en) | 2014-03-06 |
JP5836229B2 (ja) | 2015-12-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10924433B2 (en) | Mirror packet control method and mirror packet control device | |
US20190163364A1 (en) | System and method for tcp offload for nvme over tcp-ip | |
JP2015179328A (ja) | データ転送装置、データ受信システムおよびデータ受信方法 | |
JP6543246B2 (ja) | ネットワークインターフェイス | |
JP5836229B2 (ja) | ストリーム処理装置、サーバ、及び、ストリーム処理方法 | |
US8806159B2 (en) | Data storage resource management systems and methods | |
JP2012257122A (ja) | 車両制御装置、車両制御システム | |
JP5651962B2 (ja) | Raid装置、異常デバイス検出装置および異常デバイス検出方法 | |
WO2007099584A1 (ja) | エラー検出装置 | |
JP5884566B2 (ja) | バッチ処理システム、進捗状況確認装置、進捗状況確認方法、及びプログラム | |
JP2016059012A (ja) | 受信装置、送信装置およびデータ転送システム | |
US8392621B2 (en) | Managing dataflow in a temporary memory | |
JP6260088B2 (ja) | 仮想ファイルアクセスシステム、仮想ファイルアクセス方法、及び、仮想ファイルアクセスプログラム | |
US9292225B2 (en) | Methods for frame order control and devices in storage area network | |
JP5509272B2 (ja) | 計算機システム、データ一致化方法およびデータ一致化処理プログラム | |
JP5205817B2 (ja) | データ転送スケジュール装置、プログラム、記録媒体及び方法 | |
JP2005346164A (ja) | データ処理装置およびデータ転送制御方法 | |
JP6011727B2 (ja) | データ転送装置、データ転送方法及び情報処理装置 | |
JP6287691B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
JP6098219B2 (ja) | トランザクション処理装置、トランザクション処理システム、トランザクション処理方法及びプログラム | |
JP7223591B2 (ja) | データ移行管理装置、データ移行管理プログラム、およびデータ移行管理方法 | |
US20230079432A1 (en) | Storage transaction log | |
JP4864755B2 (ja) | データ処理システム及び診断方法 | |
JP2010124430A (ja) | コンピュータプログラム、データ捕捉装置、データ捕捉方法及びデータ管理システム | |
WO2013115153A1 (ja) | 情報処理装置および情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150709 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150714 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151006 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151102 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5836229 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |