JP2018526740A5 - - Google Patents

Download PDF

Info

Publication number
JP2018526740A5
JP2018526740A5 JP2018510513A JP2018510513A JP2018526740A5 JP 2018526740 A5 JP2018526740 A5 JP 2018526740A5 JP 2018510513 A JP2018510513 A JP 2018510513A JP 2018510513 A JP2018510513 A JP 2018510513A JP 2018526740 A5 JP2018526740 A5 JP 2018526740A5
Authority
JP
Japan
Prior art keywords
data
metadata
stored
key value
cache
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018510513A
Other languages
English (en)
Other versions
JP6788002B2 (ja
JP2018526740A (ja
Filing date
Publication date
Priority claimed from CN201510524667.6A external-priority patent/CN106484691B/zh
Application filed filed Critical
Publication of JP2018526740A publication Critical patent/JP2018526740A/ja
Publication of JP2018526740A5 publication Critical patent/JP2018526740A5/ja
Application granted granted Critical
Publication of JP6788002B2 publication Critical patent/JP6788002B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上の説明は本願の好ましい実施の形態にすぎず、本願の限定を意図してはいない。本願の主旨及び原理に含まれる改変、均等物との置き換え、改良等は全て本願の保護範囲に包含される。
[第1の局面]
オリジナルデータに形式変換を実行して予め設定された形式の第1のデータを得るステップと;
前記第1のデータの第1のメタデータを作成するステップと;
キャッシュに保存された、キー値とメタデータとの間の対応関係に従って、前記第1のデータがデータベースに記憶されているかどうかを判断するステップと;
前記第1のデータが前記データベースに記憶されていない場合には、前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータのキー値を前記キャッシュに保存するステップと;
予め設定されたトリガ条件が満たされた場合には、まだ前記データベースに記憶されていない、前記キャッシュ内の前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記キー値を、前記データベースに記憶するステップとを備える;
モバイル端末のためのデータ記憶方法
[第2の局面]
キャッシュに保存された、キー値とメタデータとの間の対応関係に従って、前記第1のデータがデータベースに記憶されているかどうかを判断する前記ステップは:
前記第1のデータの前記キー値に従って、前記キー値に対応する第2のメタデータが前記キャッシュに保存されているかどうかを判断するステップと;
前記キー値に対応する前記第2のメタデータが前記キャッシュに保存されていない場合には、前記第1のデータが前記データベースに記憶されていないと判定するステップとを備える;
第1の局面に記載の方法。
[第3の局面]
前記キー値に対応する前記第2のメタデータが前記キャッシュに保存されている場合には、前記第2のメタデータが前記第1のメタデータと同一であると判断するステップと;
前記第2のメタデータが前記第1のメタデータと異なる場合には、前記第1のデータが前記データベースに記憶されていないと判定するステップとを更に備え;
前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータのキー値を、前記データベースに記憶する前記ステップは:
前記キャッシュに保存されていて、前記第1のデータの前記キー値に対応する前記第2のメタデータを前記第1のメタデータへ更新し、前記第1のデータを記憶するステップを備える;
第2の局面に記載の方法。
[第4の局面]
前記第2のメタデータが前記第1のメタデータと同一であるかどうかを判断する前記ステップは:
前記第2のメタデータのハッシュ値が前記第1のメタデータのハッシュ値と同一であるかどうかを判断し、同一である場合には、前記第2のメタデータが前記第1のメタデータと同一であると判定し、同一でない場合には、前記第2のメタデータが前記第1のメタデータと異なると判定するステップを備える;
第3の局面に記載の方法。
[第5の局面]
前記予め設定されたトリガ条件は:
予め設定された時間が経過すること、及び、キャッシュされたデータ量が予め設定された閾値に達することを備える;
第1の局面に記載の方法。
[第6の局面]
データ読み出し中に、前記対応する第1のデータが前記キャッシュに保存されているかどうかを判定するために、前記キー値に従って前記キャッシュを検索するステップと;
前記キー値に対応する前記第1のデータが前記キャッシュに保存されていない場合には、前記キャッシュに保存され、前記キー値に対応する前記メタデータに従って、前記キー値に対応する前記第1のデータを前記データベースから取得するステップと;
前記第1のデータを前記オリジナルデータへ変換し、読み出し結果を戻すステップとを更に備える;
第1の局面に記載の方法。
[第7の局面]
オリジナルデータに形式変換を実行して予め設定された形式の第1のデータを得るように構成された第1の変換部と;
前記第1のデータの第1のメタデータを作成するように構成されたメタデータ作成部と;
キャッシュに保存された、キー値とメタデータとの間の対応関係に従って、前記第1のデータがデータベースに記憶されているかどうかを判断するように構成された記憶判断部と;
前記第1のデータが前記データベースに記憶されていない場合には、前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータのキー値を前記キャッシュに保存するように構成されたデータキャッシュ部と;
予め設定されたトリガ条件が満たされた場合には、まだ前記データベースに記憶されていない、前記キャッシュ内の前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記キー値を、前記データベースに記憶するように構成されたデータ記憶部とを備える;
モバイル端末のためのデータ記憶装置。
[第8の局面]
前記記憶判断部は、具体的に、前記キー値に対応する第2のメタデータが前記キャッシュに保存されているかどうかを、前記第1のデータの前記キー値に従って判断し、前記キー値に対応する前記第2のメタデータが前記キャッシュに保存されていない場合には、前記第1のデータが前記データベースに記憶されていないと判断するように構成される;
第7の局面に記載の装置。
[第9の局面]
前記記憶判断部は、具体的に、前記キー値に対応する前記第2のメタデータが前記キャッシュに保存されている場合には、前記第2のメタデータが前記第1のメタデータと同一であるかどうかを判断し、前記第2のメタデータが前記第1のメタデータと異なる場合には、前記第1のデータが前記データベースに記憶されていないと判断するように構成され;及び
前記データキャッシュ部は、具体的に、前記キャッシュに保存されており、前記第1のデータの前記キー値に対応する前記第2のメタデータを、前記第1のメタデータへ更新し、前記第1のデータを記憶するように構成される;
第8の局面に記載の装置。
[第10の局面]
前記記憶判断部は、具体的に、前記第2のメタデータのハッシュ値が前記第1のメタデータのハッシュ値と同一であるかどうかを判断し、同一である場合には、前記第2のメタデータが前記第1のメタデータと同一であると判定し、同一でない場合には、前記第2のメタデータが前記第1のメタデータと異なると判定するように構成される;
第9の局面に記載の装置。
[第11の局面]
前記予め設定されたトリガ条件は:
予め設定された時間が経過すること、及びキャッシュされたデータ量が予め設定された閾値に達することを備える;
第7の局面に記載の装置。
[第12の局面]
データ読み出し中に、前記対応する第1のデータが前記キャッシュに保存されているかどうかを判定するために、前記キー値に従って前記キャッシュを検索するように構成された第1の読み出し部と;
前記キー値に対応する前記第1のデータが前記キャッシュに保存されている場合には、前記キャッシュに保存され、前記キー値に対応する前記メタデータに従って、前記キー値に対応する前記第1のデータを前記データベースから取得するように構成される第2の読み出し部と;
前記第1のデータを前記オリジナルデータへ変換し、読み出し結果を戻すように構成される第2の変換部とを更に備える;
第7の局面に記載の装置。

Claims (13)

  1. モバイル端末により実行されるデータ記憶方法であって、
    前記モバイル端末は、
    基礎となる記憶媒体として、キー値、キー値に基づいてデータを記憶する非リレーショナルデータベースを使用し、
    複数のメタデータと、前記キー値の前記非リレーショナルデータベースに記憶されている前記データの対応するキー値との間の対応関係をキャッシュに保存し、
    前記データ記憶方法は:
    第1のオリジナルデータを予め設定された形式を有する第1のデータに変換するステップ(101)であって、オリジナルデータは、各種のアプリケーションのうちの1つによって必要とされるデータであり、ローカルにキャッシュされるものであり、前記予め設定された形式は、前記各種のアプリケーションのうちの異なるアプリケーションによって必要とされるオリジナルデータとの構造的な違いを排除し、前記第1のデータは第1のキー値を有する、前記変換するステップと;
    前記第1のデータの第1のメタデータを作成するステップ(02)と;
    前記対応関係に従って、前記第1のデータが前記非リレーショナルデータベースに記憶されているかどうかを判定するステップ(03)であって、前記対応関係が(i)前記第1のキー値と(ii)前記第1のメタデータと同一の第2のメタデータとの間の関係を含む場合、前記第1のデータは、前記非リレーショナルデータベースに記憶されていると判定するステップ、及び、それ以外の場合、前記第1のデータは、前記非リレーショナルデータベースに記憶されていないと判定するステップを含む、前記判定するステップと;
    前記第1のデータが前記非リレーショナルデータベースに記憶されていない場合には、前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記第1のキー値を前記キャッシュに保存するステップ(04)、及び、それ以外の場合、前記キャッシュの更新を実行せず、前記オリジナルデータ、前記第1のデータ、及び前記第1のメタデータを削除するステップと;
    予め設定されたトリガ条件が満たされた場合には、まだ前記非リレーショナルデータベースに記憶されていない、前記キャッシュ内の前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記キー値を、前記非リレーショナルデータベースに記憶するステップ(05)とを備える
    ータ記憶方法。
  2. 前記モバイル端末の再起動後、前記非リレーショナルデータベース内の、前記第1のメタデータの各ピースと前記対応するキー値との間の前記対応関係を前記キャッシュに保存するステップ;を更に備える、
    請求項1に記載のデータ記憶方法。
  3. 記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記キー値を、前記非リレーショナルデータベースに記憶する前記ステップは:
    前記キャッシュに保存されていて、前記第1のデータの前記キー値に対応する前記第2のメタデータを前記第1のメタデータへ更新し、前記第1のデータを記憶するステップ;を備える
    請求項に記載のデータ記憶方法。
  4. 前記第2のメタデータが前記第1のメタデータと同一であるかどうかを判定するテップは:
    前記第2のメタデータのハッシュ値が前記第1のメタデータのハッシュ値と同一であるかどうかを判断し、同一である場合には、前記第2のメタデータが前記第1のメタデータと同一であると判定し、同一でない場合には、前記第2のメタデータが前記第1のメタデータと異なると判定するステップを備える
    請求項に記載のデータ記憶方法。
  5. 前記予め設定されたトリガ条件は
    予め設定された時間が経過すること、又は、キャッシュされたデータ量が予め設定された閾値に達することを備える
    請求項1乃至請求項のいずれか1項に記載のデータ記憶方法。
  6. データ読み出し中に、応する第1のデータが前記キャッシュに保存されているかどうかを判定するために、ー値に従って前記キャッシュを検索するステップと;
    前記キー値に対応する前記第1のデータが前記キャッシュに保存されていない場合には、前記キャッシュに保存され、前記キー値に対応するタデータに従って、前記キー値に対応する前記第1のデータを前記非リレーショナルデータベースから取得するステップと;
    前記第1のデータを前記第1のオリジナルデータへ変換し、データ読み出し結果をすステップとを更に備える
    請求項1乃至請求項のいずれか1項に記載のデータ記憶方法。
  7. 前記キー値に対応する前記第1のデータが前記キャッシュに保存されている場合には、
    前記第1のデータをオリジナル形式に変換し、データ読み出し結果をステップ;を更に備える
    請求項に記載の方法。
  8. 前記第1のデータは、前記キャッシュ又は前記非リレーショナルデータベースに記憶される前に暗号化される、
    請求項1乃至請求項のいずれか1項に記載のデータ記憶方法。
  9. モバイル端末のためのデータ記憶装置であって、
    オリジナルデータを予め設定された形式を有する第1のデータに変換するように構成された第1の変換部(301)であって、オリジナルデータは、各種のアプリケーションのうちの1つによって必要とされるデータであり、ローカルにキャッシュされるものであり、前記予め設定された形式は、前記各種のアプリケーションのうちの異なるアプリケーションによって必要とされるオリジナルデータとの構造的な違いを排除する、前記第1の変換部と;
    前記第1のデータの第1のメタデータを作成するように構成されたメタデータ作成部(302)と;
    基礎となる記憶媒体として使用される、キー値に基づいてデータを記憶するように構成されたキー値非リレーショナルデータベースと;
    複数のメタデータと、前記非リレーショナルデータベースに記憶されている前記データの対応するキー値との間の対応関係を保存するように構成されたデータキャッシュ部(304)と;
    前記データキャッシュに保存された前記対応関係に従って、前記第1のデータが前記非リレーショナルデータベースに記憶されているかどうかを判定するように構成された記憶判定部(303)であって、前記対応関係が(i)前記第1のキー値と(ii)前記第1のメタデータと同一の第2のメタデータとの間の関係を含む場合、前記第1のデータは、前記非リレーショナルデータベースに記憶されていると判定すること、及び、それ以外の場合、前記第1のデータは、前記非リレーショナルデータベースに記憶されていないと判定することを含む、前記記憶判定部と;を備え、
    前記モバイル端末は、前記第1のデータが前記非リレーショナルデータベースに記憶されていない場合には、前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記キー値を前記データキャッシュ部(304)に保存し、それ以外の場合、前記キャッシュの更新を実行せず、前記オリジナルデータ、前記第1のデータ、及び前記第1のメタデータを削除するするように構成され、
    前記モバイル端末は、予め設定されたトリガ条件が満たされた場合には、まだ前記非リレーショナルデータベースに記憶されていない、前記データキャッシュ部(304)内の前記第1のデータ、前記第1のデータの前記第1のメタデータ、及び前記第1のデータの前記キー値を、前記データ記憶部(305)に記憶するように構成される、
    モバイル端末のためのデータ記憶装置。
  10. 前記データキャッシュ部は、具体的に、前記データキャッシュ部(304)に保存されており、前記第1のデータの前記キー値に対応する前記第2のメタデータを、前記第1のメタデータへ更新し、前記第1のデータを記憶するように構成される
    求項9に記載のデータ記憶装置。
  11. 前記記憶判定部は、具体的に、前記第2のメタデータのハッシュ値が前記第1のメタデータのハッシュ値と同一であるかどうかを判定し、同一である場合には、前記第2のメタデータが前記第1のメタデータと同一であると判定し、同一でない場合には、前記第2のメタデータが前記第1のメタデータと異なると判定するように構成される
    請求項10に記載のデータ記憶装置。
  12. 前記予め設定されたトリガ条件は
    予め設定された時間が経過すること、又は、キャッシュされたデータ量が予め設定された閾値に達することを備える
    請求項乃至請求項11のいずれか1項に記載のデータ記憶装置。
  13. データ読み出し中に、応する第1のデータが前記データキャッシュ部(304)に保存されているかどうかを判定するために、ー値に従って前記キャッシュを検索するように構成された第1の読み出し部(306)と;
    前記キー値に対応する前記第1のデータが前記データキャッシュ部(304)に保存されていない場合には、前記データキャッシュ部(304)に保存され、前記キー値に対応する前記メタデータに従って、前記キー値に対応する前記第1のデータを前記非リレーショナルデータベースから取得するように構成され第2の読み出し部(307)と;
    前記第1のデータを前記オリジナルデータへ変換し、読み出し結果をすように構成され第2の変換部(308)とを更に備える
    請求項乃至請求項12のいずれか1項に記載のデータ記憶装置。
JP2018510513A 2015-08-24 2016-08-16 モバイル端末のためのデータ記憶方法及び装置 Active JP6788002B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510524667.6 2015-08-24
CN201510524667.6A CN106484691B (zh) 2015-08-24 2015-08-24 移动终端的数据存储方法和装置
PCT/CN2016/095520 WO2017032240A1 (zh) 2015-08-24 2016-08-16 移动终端的数据存储方法和装置

Publications (3)

Publication Number Publication Date
JP2018526740A JP2018526740A (ja) 2018-09-13
JP2018526740A5 true JP2018526740A5 (ja) 2020-06-25
JP6788002B2 JP6788002B2 (ja) 2020-11-18

Family

ID=58099597

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018510513A Active JP6788002B2 (ja) 2015-08-24 2016-08-16 モバイル端末のためのデータ記憶方法及び装置

Country Status (7)

Country Link
US (1) US10776323B2 (ja)
EP (1) EP3343395B1 (ja)
JP (1) JP6788002B2 (ja)
CN (1) CN106484691B (ja)
ES (1) ES2812771T3 (ja)
PL (1) PL3343395T3 (ja)
WO (1) WO2017032240A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108197324B (zh) * 2018-02-06 2021-07-16 百度在线网络技术(北京)有限公司 用于存储数据的方法和装置
FR3081238A1 (fr) * 2018-05-17 2019-11-22 Amadeus S.A.S. Mise en memoire cache de base de donnees
CN110262329B (zh) * 2019-06-11 2021-12-14 华强方特文化科技集团股份有限公司 载人设备数据采集系统及数据格式化存储方法
CN114185746A (zh) * 2021-12-14 2022-03-15 北京字跳网络技术有限公司 数据存储方法、装置、电子设备及存储介质
CN115203159B (zh) * 2022-07-25 2024-06-04 北京字跳网络技术有限公司 一种数据存储方法、装置、计算机设备和存储介质

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6529909B1 (en) * 1999-08-31 2003-03-04 Accenture Llp Method for translating an object attribute converter in an information services patterns environment
US7630986B1 (en) * 1999-10-27 2009-12-08 Pinpoint, Incorporated Secure data interchange
US7818365B2 (en) * 2002-05-01 2010-10-19 Sybase, Inc. System, method, and computer program product for online and offline interactive applications on mobile devices
JP4506292B2 (ja) * 2004-06-10 2010-07-21 株式会社日立製作所 キャッシュ制御方法およびデータ処理システム並びにその処理プログラム
US8032707B2 (en) * 2008-09-15 2011-10-04 Microsoft Corporation Managing cache data and metadata
US8635402B2 (en) * 2009-03-31 2014-01-21 Nec Corporation Storage system and storage access method and program
JP4392676B1 (ja) * 2009-06-25 2010-01-06 修平 西山 キー・バリュー・ストアによるデータベース・キャッシュ装置
JP5620581B2 (ja) * 2010-08-25 2014-11-05 インテル コーポレイション キャッシュ階層化のための方法およびシステム
JP5524144B2 (ja) * 2011-08-08 2014-06-18 株式会社東芝 key−valueストア方式を有するメモリシステム
CN102298641B (zh) * 2011-09-14 2013-05-01 清华大学 一种基于键值库的文件与结构化数据统一存储方法
CN102999522B (zh) * 2011-09-15 2016-09-14 阿里巴巴集团控股有限公司 一种数据存储方法和装置
CN103034650B (zh) * 2011-09-29 2015-10-28 北京新媒传信科技有限公司 一种数据处理系统和方法
US9135350B2 (en) 2012-01-05 2015-09-15 Sri International Computer-generated sentiment-based knowledge base
US9619487B2 (en) * 2012-06-18 2017-04-11 International Business Machines Corporation Method and system for the normalization, filtering and securing of associated metadata information on file objects deposited into an object store
CN103853714B (zh) * 2012-11-28 2017-06-20 中国移动通信集团河南有限公司 一种数据处理方法和装置
WO2014171413A1 (ja) * 2013-04-16 2014-10-23 株式会社日立製作所 処理性能低下を回避するメッセージシステム
CN104462127B (zh) * 2013-09-22 2018-07-20 阿里巴巴集团控股有限公司 一种记录数据更新方法及装置
US9477731B2 (en) * 2013-10-01 2016-10-25 Cloudera, Inc. Background format optimization for enhanced SQL-like queries in Hadoop
US9405783B2 (en) * 2013-10-02 2016-08-02 Netapp, Inc. Extent hashing technique for distributed storage architecture
US20150249852A1 (en) * 2014-02-28 2015-09-03 United Video Properties, Inc. Systems and methods for crowd-sourced media access control
US9306939B2 (en) * 2014-05-30 2016-04-05 Oracle International Corporation Authorization token cache system and method
TWI550418B (zh) * 2014-12-05 2016-09-21 Real - time processing method and device and application system of huge amount of streaming data
CN104778193B (zh) * 2014-12-23 2018-03-23 北京锐安科技有限公司 数据去重方法及装置
CN104504158A (zh) * 2015-01-19 2015-04-08 浪潮(北京)电子信息产业有限公司 一种快速更新业务的内存缓存的方法和设备

Similar Documents

Publication Publication Date Title
JP2018526740A5 (ja)
US8706703B2 (en) Efficient file system object-based deduplication
US8751763B1 (en) Low-overhead deduplication within a block-based data storage
US20170371551A1 (en) Capturing snapshots of variable-length data sequentially stored and indexed to facilitate reverse reading
US20150302111A1 (en) Method and Apparatus for Constructing File System in Key-Value Storage System, and Electronic Device
JP2005122702A5 (ja)
US20130297570A1 (en) Method and apparatus for deleting duplicate data
US20130067237A1 (en) Providing random access to archives with block maps
JP2012525633A5 (ja)
CN110765076B (zh) 数据存储方法、装置、电子设备及存储介质
CN106649721B (zh) 一种文件排重方法和装置
US10649682B1 (en) Focused sanitization process for deduplicated storage systems
RU2016123091A (ru) Способ и система для обработки данных
JP6788002B2 (ja) モバイル端末のためのデータ記憶方法及び装置
CN104408044A (zh) 一种文件存取方法和系统
CN110888837A (zh) 对象存储小文件归并方法及装置
JP2018028905A5 (ja)
CN109992469A (zh) 一种合并日志的方法及装置
CN104615459A (zh) 一种MoCA设备参数配置方法及装置
CN105260266B (zh) 一种快照卷写方法及依赖快照系统
WO2016101528A1 (zh) 内存数据库的数据处理方法及装置
KR102071072B1 (ko) 데이터 저장장치의 주소 맵핑 테이블 운용 방법
JP2023520564A (ja) メタデータ記憶方法およびデバイス
CN109408462A (zh) 一种基于教育系统的文件存储管理方法及电子设备
CN110955682A (zh) 缓存数据的删除、数据缓存及缓存数据的读取方法及装置