JP7279174B2 - データ処理方法、装置、機器および記憶媒体 - Google Patents
データ処理方法、装置、機器および記憶媒体 Download PDFInfo
- Publication number
- JP7279174B2 JP7279174B2 JP2021546329A JP2021546329A JP7279174B2 JP 7279174 B2 JP7279174 B2 JP 7279174B2 JP 2021546329 A JP2021546329 A JP 2021546329A JP 2021546329 A JP2021546329 A JP 2021546329A JP 7279174 B2 JP7279174 B2 JP 7279174B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- physical
- slice
- group
- physical address
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/71—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/214—Database migration support
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24573—Query processing with adaptation to user needs using data annotations, e.g. user-defined metadata
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/75—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- Computing Systems (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
シーケンサから取得された第1データの論理情報に基づき、前記第1データに関連する物理データグループ内のデータスライス(shard,シャード)の物理アドレスである第1物理アドレスを確定することと、
前記第1物理アドレスを前記シーケンサに送信し、前記シーケンサによって前記第1物理アドレスに基づいて前記第1データをソートすることと、を含む、
データ処理方法を提供する。
第1データの論理情報をデータ処理側に送信し、前記データ処理側によって前記第1データの論理情報に基づいて前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを確定することと、
前記第1物理アドレスに基づいて前記第1データをソートすることと、を含む、
データ処理方法を提供する。
シーケンサから取得された第1データの論理情報に基づき、前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを確定するための第1アドレス確定モジュールと、
前記第1物理アドレスを前記シーケンサに送信し、前記シーケンサによって前記第1物理アドレスに基づいて前記第1データをソートするための第1アドレス送信モジュールと、を備える、
データ処理装置を提供する。
第1データの論理情報をデータ処理側に送信し、前記データ処理側によって前記第1データの論理情報に基づいて前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを確定するための論理情報送信モジュールと、
前記第1物理アドレスに基づいて前記第1データをソートするためのデータソートモジュールと、を備える、
データ処理装置を提供する。
少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに通信接続されたメモリと、を備え、
前記メモリには、前記少なくとも1つのプロセッサによって実行可能な命令が記憶され、
前記命令は、前記少なくとも1つのプロセッサが本発明の実施例のいずれか1項に記載のデータ処理方法を実行可能であるように、前記少なくとも1つのプロセッサにより実行される、
電子機器を提供する。
非一時的なコンピュータ可読記憶媒体を提供する。
シーケンサから取得された第1データの論理情報に基づき、前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを確定するための第1アドレス確定モジュール601と、
前記第1物理アドレスを前記シーケンサに送信し、前記シーケンサによって前記第1物理アドレスに基づいて前記第1データをソートするための第1アドレス送信モジュール602と、
を備えてもよい。
データコントローラにより、前記シーケンサから取得された第1データの論理情報に基づいて前記第1データのメタデータを確定し、前記第1データのメタデータを前記シーケンサに送信するための第1メタデータユニットと、
データベースにより、前記シーケンサから取得された第1データのメタデータに基づいて前記第1物理アドレスを確定するための第1アドレス確定ユニットと、
を備える。
データビルダから取得された第2データの論理情報に基づき、前記第2データに関連する物理データグループ内のデータスライスの物理アドレスである第2物理アドレスを確定するための第2アドレス確定モジュールと、
前記第2物理アドレスを前記データビルダに送信し、前記データビルダによって前記第2物理アドレスに基づいて前記第2データを書き込むための第2アドレス送信モジュールと、
を更に備える。
記憶コントローラにより、前記データビルダから取得された第2データの論理情報に基づいて前記第2データのメタデータを確定し、前記第2データのメタデータを前記データビルダに送信するための第2メタデータユニットと、
データベースにより、前記データビルダから取得された第2データのメタデータに基づいて前記第2物理アドレスを確定するための第2アドレス確定ユニットと、
を備える。
データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新するためのリソース調整モジュールを更に備える。
前記物理データグループ内の元のデータスライスのリソース利用率が第1リソース利用率の閾値よりも大きいことを検出した場合、前記物理データグループ内の元のデータスライスのために関連する新しいデータスライスを作成することと、
前記元のデータスライス内のデータを前記元のデータスライスおよび前記新しいデータスライス内に分け、かつ、前記元のデータスライスおよび前記新しいデータスライスの物理アドレスのそれぞれを前記物理データグループ内のデータスライスの物理アドレスとすることと、
に用いられる。
前記物理データグループ内のデータスライスのリソース利用率が第2リソース利用率の閾値よりも小さいことを検出した場合、前記物理データグループ内の少なくとも1つのデータスライスのデータを前記物理データグループ内の他のデータスライスに統合し、かつ、前記物理データグループ内のデータスライスの物理アドレスから前記少なくとも1つのデータスライスの物理アドレスを削除すること、
に用いられる。
前記物理データパケットにホットスポットデータが存在する場合、前記データ記憶リソース調整イベントを検出したことと、
前記物理データグループのために増分データスライスを作成し、前記ホットスポットデータを前記増分データスライスに書き込み、かつ、前記物理データグループ内の元のデータスライスを前記物理データグループの全量データスライスとすることと、
前記物理データグループ内の前記増分データスライスの物理アドレスを追加することと、
に用いられる。
データ記憶領域のリソース利用率が第3リソース利用率の閾値よりも大きいことを検出した場合、新しいデータ記憶領域を作成することと、
前記新しいデータ記憶領域で前記物理データグループの新しいデータスライスを作成し、前記新しいデータ記憶領域の物理アドレスを前記物理データグループ内の新しいデータスライスの物理アドレスとすることと、
に用いられる。
第1データの論理情報をデータ処理側に送信し、前記データ処理側によって前記第1データの論理情報に基づいて前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを確定するための論理情報送信モジュール701と、
前記第1物理アドレスに基づいて前記第1データをソートするためのデータソートモジュール702と、
を備えてもよい。
前記第1データの論理情報を前記データ処理側におけるデータコントローラに送信し、前記データコントローラによって前記第1データの論理情報に基づいて前記第1データのメタデータを確定するための論理情報送信ユニットと、
前記第1データのメタデータを前記データ処理側におけるデータベースに送信し、前記データベースによって前記第1データのメタデータに基づいて前記第1物理アドレスを確定するためのメタデータ送信ユニットと、
を備える。
Claims (34)
- データ処理側を含む電子機器により実行されるデータ処理方法であって、
前記データ処理側は、シーケンサから取得された第1データの論理情報に基づき、前記第1データに関連する物理データグループを確定し、前記物理データグループ内のデータスライスの物理アドレスを第1物理アドレスとすることと、
前記データ処理側は、前記第1物理アドレスを前記シーケンサに送信することとを含む、
データ処理方法。 - 同一の前記物理データグループ内のデータスライスは異なるデータ記憶領域に記憶され、同一の前記データ記憶領域に異なる前記物理データグループ内のデータスライスが記憶されている、
請求項1に記載の方法。 - 前記データ処理側は、データコントローラとデータベースとを含み、
前記データ処理側は、シーケンサから取得された第1データの論理情報に基づいて、前記第1データに関連する物理データグループを確定し、前記物理データグループ内のデータスライスの物理アドレスを第1物理アドレスとすることは、
前記データコントローラにより、前記シーケンサから取得された第1データの論理情報に基づいて前記第1データのメタデータを確定し、前記第1データのメタデータを前記シーケンサに送信することと、
前記データベースにより、前記シーケンサから取得された第1データのメタデータに基づいて前記第1物理アドレスを確定することとを含む、
請求項1に記載の方法。 - 前記第1データのメタデータは、前記第1データに関連する物理データグループ内のデータスライスのバージョン情報である、
請求項3に記載の方法。 - 前記第1物理アドレスは、前記第1データに関連する物理データグループ内の全量データスライスの全量物理アドレスおよび増分データスライスの増分物理アドレスを含み、前記シーケンサによって前記増分物理アドレスおよび前記全量物理アドレスに基づいて前記第1データをソートするために用いられる、
請求項1に記載の方法。 - 前記データ処理側は、データビルダから取得された第2データの論理情報に基づき、前記第2データに関連する物理データグループを確定し、前記物理データグループ内のデータスライスの物理アドレスを第2物理アドレスとすることと、
前記データ処理側は、前記第2物理アドレスを前記データビルダに送信することとを更に含む、
請求項1に記載の方法。 - 前記データ処理側は、記憶コントローラとデータベースとを含み、
前記データ処理側は、データビルダから取得された第2データの論理情報に基づいて、前記第2データに関連する物理データグループを確定し、前記物理データグループ内のデータスライスの物理アドレスを第2物理アドレスとすることは、
前記記憶コントローラにより、前記データビルダから取得された第2データの論理情報に基づいて前記第2データのメタデータを確定し、前記第2データのメタデータを前記データビルダに送信することと、
前記データベースにより、前記データビルダから取得された第2データのメタデータに基づいて前記第2物理アドレスを確定することとを含む、
請求項6に記載の方法。 - 前記データ処理側は、データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新することを更に含む、
請求項1に記載の方法。 - 前記データ処理側は、データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新することは、
前記物理データグループ内の元のデータスライスのリソース利用率が第1リソース利用率の閾値よりも大きいことを検出した場合、前記物理データグループ内の元のデータスライスのために関連する新しいデータスライスを作成することと、
前記元のデータスライス内のデータを前記元のデータスライスおよび前記新しいデータスライス内に分け、かつ、前記元のデータスライスおよび前記新しいデータスライスの物理アドレスのそれぞれを前記物理データグループ内のデータスライスの物理アドレスとすることとを含む、
請求項8に記載の方法。 - 前記データ処理側は、データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新することは、
前記物理データグループ内のデータスライスのリソース利用率が第2リソース利用率の閾値よりも小さいことを検出した場合、前記物理データグループ内の少なくとも1つのデータスライスのデータを前記物理データグループ内の他のデータスライスに統合し、かつ、前記物理データグループ内のデータスライスの物理アドレスから前記少なくとも1つのデータスライスの物理アドレスを削除することを含む、
請求項8に記載の方法。 - 前記データ処理側は、データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新することは、
前記物理データグループにホットスポットデータが存在する場合、前記データ記憶リソース調整イベントを検出したことと、
前記物理データグループのために増分データスライスを作成し、前記ホットスポットデータを前記増分データスライスに書き込み、かつ、前記物理データグループ内の元のデータスライスを前記物理データグループの全量データスライスとすることと、
前記物理データグループ内の前記増分データスライスの物理アドレスを追加することとを含む、
請求項8に記載の方法。 - 前記データ処理側は、データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新することは、
データ記憶領域のリソース利用率が第3リソース利用率の閾値よりも大きいことを検出した場合、新しいデータ記憶領域を作成することと、
前記新しいデータ記憶領域で前記物理データグループの新しいデータスライスを作成し、前記新しいデータ記憶領域の物理アドレスを前記物理データグループ内の新しいデータスライスの物理アドレスとすることとを含む、
請求項8に記載の方法。 - シーケンサを含む電子機器により実行されるデータ処理方法であって、
前記シーケンサは、第1データの論理情報をデータ処理側に送信し、前記データ処理側によって前記第1データの論理情報に基づいて確定された、前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを受信することと、
前記シーケンサは、前記第1物理アドレスに基づいて前記第1データをリコールしてソートすることとを含む、
データ処理方法。 - 前記シーケンサは、第1データの論理情報をデータ処理側に送信し、前記データ処理側によって前記第1データの論理情報に基づいて確定された第1物理アドレスを受信することは、
前記第1データの論理情報を前記データ処理側におけるデータコントローラに送信し、前記データコントローラによって前記第1データの論理情報に基づいて確定された前記第1データのメタデータを受信することと、
前記第1データのメタデータを前記データ処理側におけるデータベースに送信し、前記データベースによって前記第1データのメタデータに基づいて確定された前記第1物理アドレスを受信することと、
を含む、
請求項13に記載の方法。 - 前記第1データのメタデータは、前記第1データに関連する物理データグループ内のデータスライスのバージョン情報である、
請求項14に記載の方法。 - 前記第1物理アドレスは、前記第1データに関連する物理データグループ内の全量データスライスの全量物理アドレスおよび増分データスライスの増分物理アドレスを含み、
前記第1物理アドレスに基づいて前記第1データをリコールしてソートすることは、
前記増分物理アドレスに基づいて前記第1データを取得し、取得に失敗した場合、前記全量物理アドレスに基づいて前記第1データを取得することと、
取得した第1データをリコールしてソートすることとを含む、
請求項13に記載の方法。 - データ処理側に用いられるデータ処理装置であって、
シーケンサから取得された第1データの論理情報に基づき、前記第1データに関連する物理データグループを確定し、前記物理データグループ内のデータスライスの物理アドレスを第1物理アドレスとするための第1アドレス確定モジュールと、
前記第1物理アドレスを前記シーケンサに送信するための第1アドレス送信モジュールとを備える、
データ処理装置。 - 同一の前記物理データグループ内のデータスライスは異なるデータ記憶領域に記憶され、同一の前記データ記憶領域に異なる前記物理データグループ内のデータスライスが記憶されている、
請求項17に記載の装置。 - 前記データ処理側は、データコントローラとデータベースとを含み、
前記第1アドレス確定モジュールは、
前記データコントローラにより、前記シーケンサから取得された第1データの論理情報に基づいて前記第1データのメタデータを確定し、前記第1データのメタデータを前記シーケンサに送信するための第1メタデータユニットと、
前記データベースにより、前記シーケンサから取得された第1データのメタデータに基づいて前記第1物理アドレスを確定するための第1アドレス確定ユニットとを備える、
請求項17に記載の装置。 - 前記第1データのメタデータは、前記第1データに関連する物理データグループ内のデータスライスのバージョン情報である、
請求項19に記載の装置。 - 前記第1物理アドレスは、前記第1データに関連する物理データグループ内の全量データスライスの全量物理アドレスおよび増分データスライスの増分物理アドレスを含み、前記シーケンサによって前記増分物理アドレスおよび前記全量物理アドレスに基づいて前記第1データをソートするために用いられる、
請求項17に記載の装置。 - データビルダから取得された第2データの論理情報に基づき、前記第2データに関連する物理データグループを確定し、前記物理データグループ内のデータスライスの物理アドレスを第2物理アドレスとするための第2アドレス確定モジュールと、
前記第2物理アドレスを前記データビルダに送信するための第2アドレス送信モジュールとを更に備える、
請求項17に記載の装置。 - 前記データ処理側は、記憶コントローラとデータベースとを含み、
前記第2アドレス確定モジュールは、
前記記憶コントローラにより、前記データビルダから取得された第2データの論理情報に基づいて前記第2データのメタデータを確定し、前記第2データのメタデータを前記データビルダに送信するための第2メタデータユニットと、
前記データベースにより、前記データビルダから取得された第2データのメタデータに基づいて前記第2物理アドレスを確定するための第2アドレス確定ユニットとを備える、
請求項22に記載の装置。 - データ記憶リソース調整イベントを検出した場合、前記物理データグループの記憶リソースを更新し、かつ、前記物理データグループ内のデータスライスの物理アドレスを更新するためのリソース調整モジュールを更に備える、
請求項17に記載の装置。 - 前記リソース調整モジュールは、具体的に、
前記物理データグループ内の元のデータスライスのリソース利用率が第1リソース利用率の閾値よりも大きいことを検出した場合、前記物理データグループ内の元のデータスライスのために関連する新しいデータスライスを作成することと、
前記元のデータスライス内のデータを前記元のデータスライスおよび前記新しいデータスライス内に分け、かつ、前記元のデータスライスおよび前記新しいデータスライスの物理アドレスのそれぞれを前記物理データグループ内のデータスライスの物理アドレスとすることとに用いられる、
請求項24に記載の装置。 - 前記リソース調整モジュールは、具体的に、
前記物理データグループ内のデータスライスのリソース利用率が第2リソース利用率の閾値よりも小さいことを検出した場合、前記物理データグループ内の少なくとも1つのデータスライスのデータを前記物理データグループ内の他のデータスライスに統合し、かつ、前記物理データグループ内のデータスライスの物理アドレスから前記少なくとも1つのデータスライスの物理アドレスを削除することに用いられる、
請求項24に記載の装置。 - 前記リソース調整モジュールは、具体的に、
前記物理データグループにホットスポットデータが存在する場合、前記データ記憶リソース調整イベントを検出したことと、
前記物理データグループのために増分データスライスを作成し、前記ホットスポットデータを前記増分データスライスに書き込み、かつ、前記物理データグループ内の元のデータスライスを前記物理データグループの全量データスライスとすることと、
前記物理データグループ内の前記増分データスライスの物理アドレスを追加することとに用いられる、
請求項24に記載の装置。 - 前記リソース調整モジュールは、具体的に、
データ記憶領域のリソース利用率が第3リソース利用率の閾値よりも大きいことを検出した場合、新しいデータ記憶領域を作成することと、
前記新しいデータ記憶領域で前記物理データグループの新しいデータスライスを作成し、前記新しいデータ記憶領域の物理アドレスを前記物理データグループ内の新しいデータスライスの物理アドレスとすることとに用いられる、
請求項24に記載の装置。 - シーケンサに用いられるデータ処理装置であって、
第1データの論理情報をデータ処理側に送信し、前記データ処理側によって前記第1データの論理情報に基づいて確定された、前記第1データに関連する物理データグループ内のデータスライスの物理アドレスである第1物理アドレスを受信するための論理情報送信モジュールと、
前記第1物理アドレスに基づいて前記第1データをリコールしてソートするためのデータソートモジュールとを備える、
データ処理装置。 - 前記論理情報送信モジュールは、
前記第1データの論理情報を前記データ処理側におけるデータコントローラに送信し、前記データコントローラによって前記第1データの論理情報に基づいて確定された前記第1データのメタデータを受信するための論理情報送信ユニットと、
前記第1データのメタデータを前記データ処理側におけるデータベースに送信し、前記データベースによって前記第1データのメタデータに基づいて確定された前記第1物理アドレスを受信するためのメタデータ送信ユニットとを備える、
請求項29に記載の装置。 - 前記第1データのメタデータは、前記第1データに関連する物理データグループ内のデータスライスのバージョン情報である、
請求項30に記載の装置。 - 前記第1物理アドレスは、前記第1データに関連する物理データグループ内の全量データスライスの全量物理アドレスおよび増分データスライスの増分物理アドレスを含み、
前記データソートモジュールは、具体的に、
前記増分物理アドレスに基づいて前記第1データを取得し、取得に失敗した場合、前記全量物理アドレスに基づいて前記第1データを取得し、取得した第1データをリコールしてソートすることに用いられる、
請求項29に記載の装置。 - 少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに通信接続されたメモリとを備え、
前記メモリには、前記少なくとも1つのプロセッサによって実行可能な命令が記憶され、
前記命令は、前記少なくとも1つのプロセッサが請求項1~16のいずれか1項に記載の方法を実行可能であるように、前記少なくとも1つのプロセッサにより実行される、
電子機器。 - 請求項1~16のいずれか1項に記載の方法をコンピュータに実行させるためのプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010600582.2A CN111782632A (zh) | 2020-06-28 | 2020-06-28 | 数据处理方法、装置、设备和存储介质 |
CN202010600582.2 | 2020-06-28 | ||
PCT/CN2020/121143 WO2022000851A1 (zh) | 2020-06-28 | 2020-10-15 | 数据处理方法、装置、设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022544430A JP2022544430A (ja) | 2022-10-19 |
JP7279174B2 true JP7279174B2 (ja) | 2023-05-22 |
Family
ID=72760695
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021546329A Active JP7279174B2 (ja) | 2020-06-28 | 2020-10-15 | データ処理方法、装置、機器および記憶媒体 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11847161B2 (ja) |
EP (1) | EP3958141A4 (ja) |
JP (1) | JP7279174B2 (ja) |
KR (1) | KR20220154228A (ja) |
CN (1) | CN111782632A (ja) |
WO (1) | WO2022000851A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20240041141A (ko) * | 2022-09-22 | 2024-03-29 | 주식회사 블룸테크놀로지 | 블록체인 네트워크에서 어카운트 디렉토리 변경 시스템 및 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005190047A (ja) | 2003-12-25 | 2005-07-14 | Hitachi Ltd | データソート機能を持つストレージシステム |
JP2007164240A (ja) | 2005-12-09 | 2007-06-28 | Funai Electric Co Ltd | ファイル管理システムおよびストレージの自動管理方法、並びに自動管理プログラム |
JP2014529216A (ja) | 2011-08-12 | 2014-10-30 | ノースロップ グルムマン システムズ コーポレイション | 超伝導ラッチシステム |
JP2020511714A (ja) | 2017-03-09 | 2020-04-16 | ネットアップ,インコーポレイテッド | ストリームを使用するデータの割り振りエリアへの選択的記憶 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4409655A (en) * | 1980-04-25 | 1983-10-11 | Data General Corporation | Hierarchial memory ring protection system using comparisons of requested and previously accessed addresses |
JPH0566980A (ja) | 1991-09-09 | 1993-03-19 | Hitachi Ltd | フアイル制御方式 |
US6871011B1 (en) * | 2000-09-28 | 2005-03-22 | Matsushita Electric Industrial Co., Ltd. | Providing quality of service for disks I/O sub-system with simultaneous deadlines and priority |
US7158996B2 (en) * | 2003-01-27 | 2007-01-02 | International Business Machines Corporation | Method, system, and program for managing database operations with respect to a database table |
US9021175B2 (en) * | 2010-08-24 | 2015-04-28 | International Business Machines Corporation | Method for reordering access to reduce total seek time on tape media |
US9645758B2 (en) * | 2011-07-22 | 2017-05-09 | Sandisk Technologies Llc | Apparatus, system, and method for indexing data of an append-only, log-based structure |
US9268686B2 (en) * | 2011-12-05 | 2016-02-23 | Intel Corporation | Background reordering—a preventive wear-out control mechanism with limited overhead |
US9195666B2 (en) * | 2012-01-17 | 2015-11-24 | Apple Inc. | Location independent files |
US8898376B2 (en) * | 2012-06-04 | 2014-11-25 | Fusion-Io, Inc. | Apparatus, system, and method for grouping data stored on an array of solid-state storage elements |
WO2014031114A1 (en) * | 2012-08-22 | 2014-02-27 | Empire Technology Development Llc | Partitioning sorted data sets |
CN102955861B (zh) * | 2012-11-30 | 2017-04-12 | 华为技术有限公司 | 一种基于备份文件的索引文件生成方法和装置 |
CN102968498B (zh) * | 2012-12-05 | 2016-08-10 | 华为技术有限公司 | 数据处理方法及装置 |
CN103019953B (zh) * | 2012-12-28 | 2015-06-03 | 华为技术有限公司 | 一种元数据的构建系统及其方法 |
US9250819B2 (en) * | 2013-03-04 | 2016-02-02 | Dell Products L.P. | Learning machine to optimize random access in a storage system |
US10216949B1 (en) * | 2013-09-20 | 2019-02-26 | Amazon Technologies, Inc. | Dynamic quorum membership changes |
US10043208B2 (en) * | 2014-05-30 | 2018-08-07 | Walmart Apollo, Llc | Smart order management and database sharding |
US9817750B2 (en) * | 2014-07-03 | 2017-11-14 | Pure Storage, Inc. | Profile-dependent write placement of data into a non-volatile solid-state storage |
US10545667B1 (en) * | 2015-03-04 | 2020-01-28 | Amazon Technologies, Inc. | Dynamic data partitioning for stateless request routing |
WO2016172195A1 (en) * | 2015-04-20 | 2016-10-27 | Oracle International Corporation | System and method for providing access to a sharded database using a cache and a shard topology |
CN106933935B (zh) * | 2015-12-31 | 2019-12-10 | 北京国双科技有限公司 | 任务存储方法和装置 |
EP3427385A1 (en) * | 2016-03-08 | 2019-01-16 | Thomson Licensing | Method and device for decoding data segments derived from oligonucleotides and related sequencer |
CN107528871B (zh) | 2016-06-22 | 2020-05-26 | 伊姆西Ip控股有限责任公司 | 存储系统中的数据分析 |
CN106202441A (zh) | 2016-07-13 | 2016-12-07 | 腾讯科技(深圳)有限公司 | 基于关系型数据库的数据处理方法、装置和系统 |
CN106940715B (zh) | 2017-03-09 | 2019-11-15 | 星环信息科技(上海)有限公司 | 一种基于索引表的查询的方法及设备 |
US20190036703A1 (en) * | 2017-07-28 | 2019-01-31 | Nexenta Systems, Inc. | Shard groups for efficient updates of, and access to, distributed metadata in an object storage system |
CN107733709A (zh) | 2017-10-17 | 2018-02-23 | 北京奇虎科技有限公司 | 数据存储方法、装置及电子设备 |
US20190392047A1 (en) * | 2018-06-25 | 2019-12-26 | Amazon Technologies, Inc. | Multi-table partitions in a key-value database |
CN112486860A (zh) * | 2019-09-11 | 2021-03-12 | 伊姆西Ip控股有限责任公司 | 管理存储系统的地址映射的方法、设备和计算机程序产品 |
-
2020
- 2020-06-28 CN CN202010600582.2A patent/CN111782632A/zh active Pending
- 2020-10-15 EP EP20916237.9A patent/EP3958141A4/en not_active Withdrawn
- 2020-10-15 JP JP2021546329A patent/JP7279174B2/ja active Active
- 2020-10-15 US US17/593,128 patent/US11847161B2/en active Active
- 2020-10-15 WO PCT/CN2020/121143 patent/WO2022000851A1/zh unknown
- 2020-10-15 KR KR1020227036112A patent/KR20220154228A/ko active Search and Examination
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005190047A (ja) | 2003-12-25 | 2005-07-14 | Hitachi Ltd | データソート機能を持つストレージシステム |
JP2007164240A (ja) | 2005-12-09 | 2007-06-28 | Funai Electric Co Ltd | ファイル管理システムおよびストレージの自動管理方法、並びに自動管理プログラム |
JP2014529216A (ja) | 2011-08-12 | 2014-10-30 | ノースロップ グルムマン システムズ コーポレイション | 超伝導ラッチシステム |
JP2020511714A (ja) | 2017-03-09 | 2020-04-16 | ネットアップ,インコーポレイテッド | ストリームを使用するデータの割り振りエリアへの選択的記憶 |
Also Published As
Publication number | Publication date |
---|---|
US11847161B2 (en) | 2023-12-19 |
US20220342929A1 (en) | 2022-10-27 |
EP3958141A1 (en) | 2022-02-23 |
JP2022544430A (ja) | 2022-10-19 |
EP3958141A4 (en) | 2022-05-11 |
WO2022000851A1 (zh) | 2022-01-06 |
CN111782632A (zh) | 2020-10-16 |
KR20220154228A (ko) | 2022-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102549821B1 (ko) | 서버 리소스 할당 방법, 장치, 전자 기기 및 저장 매체 | |
KR20200027413A (ko) | 데이터 저장 방법, 장치 및 시스템 | |
CN111542812B (zh) | 基于虚拟节点资源的增强型高速缓存存储器分配 | |
JP2018518733A (ja) | ファイル操作方法及び装置 | |
US10320886B2 (en) | Image display method and apparatus | |
CN111737361B (zh) | 区块链处理方法、装置、设备和存储介质 | |
WO2022111313A1 (zh) | 一种请求处理方法及微服务系统 | |
KR20240046596A (ko) | 딥러닝 모델의 훈련 방법, 장치, 시스템, 기기, 매체 및 컴퓨터 프로그램 | |
US20210311914A1 (en) | Transaction processing method and device, electronic device and readable storage medium | |
CN111259205A (zh) | 一种图数据库遍历方法、装置、设备及存储介质 | |
TWI641951B (zh) | 動態分派工作及提供資源的方法、裝置及其系統 | |
JP7279174B2 (ja) | データ処理方法、装置、機器および記憶媒体 | |
CN111259060A (zh) | 数据查询的方法及装置 | |
CN112541513B (zh) | 一种模型训练方法、装置、设备及存储介质 | |
CN112035244A (zh) | 在多租户环境中虚拟节点集群的部署 | |
US11228537B2 (en) | Resource processing method and system, storage medium and electronic device | |
JP2024512843A (ja) | メモリチャネルコントローラのオンチップ相互接続 | |
CN112148467A (zh) | 计算资源的动态分配 | |
CN111737362B (zh) | 区块链处理方法、装置、设备和存储介质 | |
JP2021119531A (ja) | 業務内容出力方法、装置、機器、記憶媒体及びプログラムプロダクト | |
CN111935327A (zh) | 域名分配方法、装置、设备及计算机可读存储介质 | |
US11323512B2 (en) | Peer to peer infrastructure management architecture | |
CN114615273B (zh) | 基于负载均衡系统的数据发送方法、装置和设备 | |
EP4080363A1 (en) | Method and apparatus for operating blockchain system, device and storage medium | |
CN114647634A (zh) | 创建数据库的方法、操作数据库的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210806 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210806 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230425 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7279174 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |