TWI830162B - 用於產生資料交易日誌的系統以及方法 - Google Patents

用於產生資料交易日誌的系統以及方法 Download PDF

Info

Publication number
TWI830162B
TWI830162B TW111107356A TW111107356A TWI830162B TW I830162 B TWI830162 B TW I830162B TW 111107356 A TW111107356 A TW 111107356A TW 111107356 A TW111107356 A TW 111107356A TW I830162 B TWI830162 B TW I830162B
Authority
TW
Taiwan
Prior art keywords
data
transaction
storage
data table
transaction log
Prior art date
Application number
TW111107356A
Other languages
English (en)
Other versions
TW202238465A (zh
Inventor
董斌
Original Assignee
南韓商韓領有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 南韓商韓領有限公司 filed Critical 南韓商韓領有限公司
Publication of TW202238465A publication Critical patent/TW202238465A/zh
Application granted granted Critical
Publication of TWI830162B publication Critical patent/TWI830162B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2358Change logging, detection, and notification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2379Updates performed during online database operations; commit processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/278Data partitioning, e.g. horizontal or vertical partitioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations
    • G06F16/24554Unary operations; Data partitioning operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24568Data stream processing; Continuous queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/254Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F7/00Methods or arrangements for processing data by operating upon the order or content of the data handled
    • G06F7/06Arrangements for sorting, selecting, merging, or comparing data on individual record carriers
    • G06F7/14Merging, i.e. combining at least two sets of record carriers each arranged in the same ordered sequence to produce a single set having the same ordered sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/541Interprogram communication via adapters, e.g. between incompatible applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Computing Systems (AREA)
  • Educational Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

一種用於產生資料交易日誌的電腦實施的系統,系統包 括:至少一個第一儲存器,儲存至少一個第一資料表,所述至少一個第一資料表包括至少一個交易日誌且與第一節點相關聯;至少一個第二儲存器,用於儲存至少一個第二資料表;至少一個處理器,被配置成執行以下步驟:產生註冊表;維護至少一個資料源代理,每一資料源代理被配置成查詢註冊表以接收所述至少一個第一資料表的位址、因應於查詢而自所述至少一個第一儲存器接收所述至少一個交易日誌,其中每一交易日誌與交易時間相關聯、編譯一或多個經修改交易日誌;以及維護至少一個串流製程,每一串流製程被配置成基於經修改交易日誌產生所述至少一個第二資料表以儲存於所述至少一個第二儲存器中、及基於所述至少一個第二資料表產生顯示。

Description

用於產生資料交易日誌的系統以及方法
本揭露一般而言是有關於用於多節點串流處理(multi-nodal stream processing)的電腦化系統及方法。具體而言,本揭露的實施例是有關於用於分區資料庫之多節點串流處理框架的創造性及非常規系統。
於在線零售業務領域中,隨著大量使用者與在線零售業務的電腦系統交互,會發生大量交易。與該些交易相關聯的資料可儲存於各種資料庫中,且該些資料可用於實行分析,以獲得關於在線零售業務的有用見解。在一些情況下,該些資料可能會佔用太-位元組或拍位元組的記憶(memory),且實際上僅可儲存於許多資料庫及/或伺服器機器之中。
在某些情形中,該些資料可用於產生報告。舉例而言,為了自儲存於資料庫中的該些資料獲得業務見解,可利用系統及方法來近即時地擷取、處理該些資料且將該些資料轉換成供使用者消費的業務資訊。舉例而言,可即時地對此種資料進行串流,以 供使用者查看,以獲得對資料點的改變及運動的見解。此可藉由被稱為串流處理的方法來達成。串流處理不容許對該些有關的資料中的所有者實行批處理(當資料大小大時,此可能是耗時的),而僅容許對欲處理資料的改變或更新。串流處理的實例可包括阿帕奇弗林克(Apache Flink)。對資料的改變或更新可被稱為交易日誌。舉例而言,在MySQL中,此種交易日誌被稱為二進制日誌(binlog)。
然而,當在其中有關資料大的環境中操作時,傳統的串流處理方法及系統可能是低效的。舉例而言,隨著在線零售系統操作期間所產生的資料量增加,現有的儲存器可能不足。在此種情形中,可在線附加儲存容量,且可重新佈置已儲存的資料的一些部分。傳統的串流處理方法及系統可能無法補償此種重新佈置。通常要求對串流處理方法及系統進行重新編碼、重新程式化、重建及/或重新部署。
本揭露的系統及方法會解決上述問題中的一或多者及/或先前技術的其他問題。
本揭露的一個態樣是有關於一種用於產生資料交易日誌的電腦實施的系統,所述系統包括:至少一個第一儲存器,儲存至少一個第一資料表,所述至少一個第一資料表包括至少一個交易日誌且與第一節點相關聯;至少一個第二儲存器,用於儲存至少 一個第二資料表;至少一個處理器,被配置成執行以下步驟:產生註冊表;維護至少一個資料源代理,每一資料源代理被配置成查詢註冊表以接收所述一或多個第一資料表的位址、因應於查詢而自至少一個第一儲存器接收所述至少一個交易日誌,其中每一交易日誌與交易時間相關聯、編譯一或多個經修改交易日誌;以及維護至少一個串流製程,每一串流製程被配置成基於經修改交易日誌產生所述至少一個第二資料表以儲存於所述至少一個第二儲存器中、及基於所述至少一個第二資料表產生顯示。
本揭露的另一態樣是有關於一種用於產生資料交易日誌的系統的電腦實施的方法,所述系統包括:至少一個第一儲存器,儲存至少一個第一資料表,所述至少一個第一資料表包括至少一個交易日誌且與第一節點相關聯;至少一個第二儲存器,用於儲存至少一個第二資料表;至少一個處理器,被配置成執行以下步驟:產生註冊表;維護至少一個資料源代理,每一資料源代理被配置成查詢註冊表以接收所述一或多個第一資料表的位址、因應於查詢而自至少一個第一儲存器接收所述至少一個交易日誌,其中每一交易日誌與交易時間相關聯、編譯一或多個經修改交易日誌;以及維護至少一個串流製程,每一串流製程被配置成基於經修改交易日誌產生所述至少一個第二資料表以儲存於所述至少一個第二儲存器中、及基於所述至少一個第二資料表產生顯示。
本揭露的再一態樣是有關於一種用於產生資料交易日誌的系統,所述系統包括:多個第一儲存器,儲存至少一個第一資 料表,所述至少一個第一資料表包括一或多個交易日誌且由一或多個第一節點表徵;至少一個第二儲存器,儲存至少一個第二資料表;顯示介面;至少一個處理器,被配置成執行以下步驟:產生註冊表;維護跨越多個資源節點分佈的多個資料源代理,各所述多個資料源代理被配置成查詢所述註冊表以接收所述至少一個第一資料表的分佈、基於所述查詢而自至少一個第一儲存器接收所述至少一個交易日誌,其中每一交易日誌與交易時間相關聯、編譯一或多個經修改交易日誌;以及維護跨越所述多個資源節點分佈的多個串流製程,各所述多個串流製程被配置成產生所述至少一個第二資料表以儲存於所述至少一個第二儲存器中、基於所述至少一個第二資料表產生顯示,其中:資源中的各串流製程自同一資源節點中的對應資料源代理接收所述一或多個經修改交易日誌。
本文中亦論述其他系統、方法及電腦可讀取媒體。
100:示意性方塊圖/系統/列
101:裝運授權技術(SAT)系統/系統
102A:裝置/使用者裝置/行動裝置
102B:裝置/使用者裝置/電腦
103:外部前端系統
105:內部前端系統/系統
107:運輸系統
107A、107B、107C:行動裝置/裝置
109:賣方入口
111:裝運及訂單追蹤(SOT)系統
113:履行最佳化(FO)系統
115:履行訊息傳遞閘道(FMG)
117:供應鏈管理(SCM)系統
119:倉庫管理系統(WMS)
119A:行動裝置/裝置/平板電腦
119B:行動裝置/裝置/PDA
119C:行動裝置/裝置/電腦
121A、121B、121C:第三方履行(3PL)系統
123:履行中心授權系統(FC Auth)/FC Auth系統
125:勞資管理系統(LMS)
200:履行中心(FC)
201、222:卡車
202A、202B、208:物項
203:入站區
205:緩衝區
206:堆高機
207:卸貨區
209:揀選區
210:儲存單元
211:包裝區
213:中樞區
214:運輸機構
215:營地區
216:牆
218、220:包裝
224A、224B:交付工作者
226:汽車
300:系統
310:分區資料庫
312a、312b、322a、322b、a、b:節點
314a、314b、316a、316b、318a、318b、342:表
318:邏輯
320:串流環境
324a、324b:資料源代理
326a、326b:串流製程
330:註冊表
340:目的地資料庫
402:應用程式設計介面(API)
404:位址
500:製程
502、504、506、508、510、512:步驟
圖1A是示出根據所揭露實施例的網路的示例性實施例的示意性方塊圖,所述網路包括用於能夠進行通訊的裝運(shipping)、運輸(transportation)及物流操作的電腦化系統。
圖1B繪示出根據所揭露實施例的樣本搜尋結果頁面(Search Result Page,SRP),其包括滿足搜尋請求的一或多個搜尋結果以及交互式使用者介面元素。
圖1C繪示出根據所揭露實施例的樣本單一細節頁面(Single Detail Page,SDP),其包括產品及關於產品的資訊以及交互式使用者介面元素。
圖1D繪示出根據所揭露實施例的樣本購物車頁面(Cart page),其包括虛擬購物車中的物項以及交互式使用者介面元素。
圖1E繪示出根據所揭露實施例的樣本訂單頁面(Order page),其包括來自虛擬購物車的物項以及關於採購及裝運的資訊以及交互式使用者介面元素。
圖2是根據所揭露實施例的被配置成利用所揭露電腦化系統的示例性履行中心(fulfillment center)的圖例。
圖3是根據所揭露實施例的包括用於分區資料庫之多節點串流處理框架的示例性系統的示意圖。
圖4是根據所揭露實施例的示例性註冊表的示意圖。
圖5是根據所揭露實施例的用於分區資料庫之多節點串流處理框架的示例性製程的流程圖。
以下詳細說明參照附圖。在圖式及以下說明中盡可能使用相同的參考編號來指代相同或相似的部件。儘管本文中闡述了若干例示性實施例,然而可具有各種修改、改編及其他實施方案。舉例而言,可對圖式中示出的組件及步驟進行替換、添加或修改,且可藉由對所揭露的方法的步驟進行替換、重新排序、移除或添加 來修改本文中闡述的例示性方法。據以,以下詳細說明並非僅限於所揭露的實施例及實例。相反,本發明的正確範圍由隨附的專利申請範圍來界定。
參照圖1A,圖1A示出示意性方塊圖100,其示出包括用於能夠進行通訊的裝運、運輸及物流操作的電腦化系統的系統的示例性實施例。如圖1A中所示,系統100可包括各種系統,所述各種系統中的每一者可經由一或多個網路連接至彼此。所述系統亦可經由直接連接(例如使用纜線)連接至彼此。所繪示的系統包括裝運授權技術(shipment authority technology,SAT)系統101、外部前端系統103、內部前端系統105、運輸系統107、行動裝置107A、107B及107C、賣方入口109、裝運及訂單追蹤(shipment and order tracking,SOT)系統111、履行最佳化(fulfillment optimization,FO)系統113、履行訊息傳遞閘道(fulfillment messaging gateway,FMG)115、供應鏈管理(supply chain management,SCM)系統117、倉庫管理系統(warehouse management system,WMS)119、行動裝置119A、119B及119C(被繪示為位於履行中心(FC)200內部)、第三方履行(3rd party fulfillment,3PL)系統121A、121B及121C、履行中心授權系統(fulfillment center authorization system,FC Auth)123及勞資管理系統(labor management system,LMS)125。
在一些實施例中,SAT系統101可被實施為監控訂單狀態及交付狀態的電腦系統。舉例而言,SAT系統101可判斷訂單 是否超過其承諾交付日期(Promised Delivery Date,PDD),且可採取包括發起新的訂單、再裝運未交付訂單中的物項、取消未交付訂單、發起與訂購顧客的聯繫等在內的適當行動。SAT系統101亦可監控包括輸出(例如在特定時間段期間裝運的包裝的數目)及輸入(例如被接收用於裝運的空紙盒的數目)在內的其他資料。SAT系統101亦可充當系統100中不同裝置之間的閘道,使得能夠在例如外部前端系統103及FO系統113等裝置之間達成通訊(例如,使用儲存及轉送(store-and-forward)或其他技術)。
在一些實施例中,外部前端系統103可被實施為使得外部使用者能夠與系統100中的一或多個系統交互的電腦系統。舉例而言,在其中系統100能夠呈現系統以使得使用者能夠對物項下訂單的實施例中,外部前端系統103可被實施為接收搜尋請求、呈現物項頁面及懇求支付資訊的網站伺服器。舉例而言,外部前端系統103可被實施為運行例如阿帕奇超文件傳輸協定(Hypertext Transfer Protocol,HTTP)伺服器、微軟網際網路資訊服務(Internet Information Services,IIS)、NGINX等軟體的一或多個電腦。在其他實施例中,外部前端系統103可運行客製網站伺服器軟體,客製網站伺服器軟體被設計成接收及處理來自外部裝置(例如,行動裝置102A或電腦102B)的請求,基於該些請求自資料庫及其他資料儲存器獲取資訊,且基於所獲取的資訊提供對所接收請求的響應。
在一些實施例中,外部前端系統103可包括網站快取系 統(web caching system)、資料庫、搜尋系統或支付系統中的一或多者。在一個態樣中,外部前端系統103可包括該些系統中的一或多者,而在另一態樣中,外部前端系統103可包括連接至該些系統中的一或多者的介面(例如,伺服器至伺服器、資料庫至資料庫或其他網路連接)。
由圖1B、圖1C、圖1D及圖1E示出的一組例示性步驟將有助於闡述外部前端系統103的一些操作。外部前端系統103可自系統100中的系統或裝置接收資訊,以供呈現及/或顯示。舉例而言,外部前端系統103可代管或提供一或多個網頁,包括搜尋結果頁面(SRP)(例如,圖1B)、單一細節頁面(SDP)(例如,圖1C)、購物車頁面(例如,圖1D)或訂單頁面(例如,圖1E)。使用者裝置(例如,使用行動裝置102A或電腦102B)可導航至外部前端系統103,且藉由在搜尋框中輸入資訊來請求搜尋。外部前端系統103可自系統100中的一或多個系統請求資訊。舉例而言,外部前端系統103可自FO系統113請求滿足搜尋請求的資訊。外部前端系統103亦可請求及接收(自FO系統113)搜尋結果中所包括的每種產品的承諾交付日期或「PDD」。在一些實施例中,PDD可表示對以下的估計:容納產品的包裝將何時到達使用者所期望的位置,或者若在特定時間段(例如在一天結束(午後11:59)之前)內訂購則產品被承諾交付至使用者所期望的位置的日期。(以下參照FO系統113進一步論述PDD。)
外部前端系統103可基於所述資訊準備SRP(例如,圖 1B)。SRP可包括滿足搜尋請求的資訊。舉例而言,此可包括滿足搜尋請求的產品的圖片。SRP亦可包括每種產品的相應價格,或者與每種產品的增強交付選項、PDD、重量、大小、優惠、折扣等相關的資訊。外部前端系統103可向發出請求的使用者裝置發送SRP(例如,經由網路)。
接著使用者裝置可例如藉由點擊或輕敲使用者介面(或使用另一輸入裝置)以選擇在SRP上表現的產品而自SRP選擇產品。使用者裝置可製定對所選擇產品的資訊的請求,且將其發送至外部前端系統103。作為響應,外部前端系統103可請求與所選擇產品相關的資訊。舉例而言,所述資訊可包括除在相應的SRP上針對產品呈現的資訊之外的附加資訊。此附加資訊可包括例如儲架壽命(shelf life)、原產國、重量、大小、包裝中物項的數目、操作說明(handling instructions)或關於產品的其他資訊。所述資訊亦可包括對相似產品的建議(例如,基於購買此產品及至少一種其他產品的顧客的巨量資料及/或機器學習分析)、對常問問題的回答、來自顧客的評論、製造商資訊、圖片等。
外部前端系統103可基於所接收的產品資訊來準備單一細節頁面(SDP)(例如,圖1C)。SDP亦可包括例如「立即購買(Buy Now)」按鈕、「添加至購物車(Add to Cart)」按鈕、量欄(quantity field)、物項圖片等其他交互式元素。SDP可更包括提供所述產品的賣方的列表。所述列表可基於每一賣方提供的價格來排序,使得提出以最低價格售賣產品的賣方可被列於頂部。所述 列表亦可基於賣方排名來排序,使得排名最高的賣方可被列於頂部。賣方排名可基於包括例如賣方滿足所承諾PDD的過往追蹤記錄在內的多種因素來製定。外部前端系統103可將SDP交付至發出請求的使用者裝置(例如,經由網路)。
發出請求的使用者裝置可接收列出產品資訊的SDP。在接收到SDP後,使用者裝置接著可與SDP交互。舉例而言,發出請求的使用者裝置的使用者可點擊SDP上的「放入購物車中」按鈕或以其他方式與SDP上的「放入購物車中」按鈕交互。此會將產品添加至與使用者相關聯的購物車。使用者裝置可向外部前端系統103發射此種將產品添加至購物車的請求。
外部前端系統103可產生購物車頁面(例如,圖1D)。在一些實施例中,購物車頁面列出已被使用者添加至虛擬「購物車」的產品。使用者裝置可藉由點擊SRP、SDP或其他頁面上的圖標或以其他方式與SRP、SDP或其他頁面上的圖標交互來請求購物車頁面。在一些實施例中,購物車頁面可列出已被使用者添加至購物車的所有產品,以及關於購物車中的產品的資訊,例如每種產品的數量、每種產品的單價、每種產品的基於相關聯數量的價格、關於PDD的資訊、交付方法、裝運成本、用於修改購物車中的產品的使用者介面元素(例如,數量的刪除或修改)、用於訂購其他產品或設定產品的定期交付的選項、用於設定利息支付的選項、用於繼續採購的使用者介面元素等。使用者裝置處的使用者可點擊使用者介面元素(例如,讀為「立即購買」的按鈕)或以其他 方式與使用者介面元素(例如,讀為「立即購買」的按鈕)交互,以發起對購物車中的產品的採購。在這樣做時,使用者裝置可向外部前端系統103發射此種發起採購的請求。
外部前端系統103可因應於接收到發起採購的請求而產生訂單頁面(例如,圖1E)。在一些實施例中,訂單頁面重新列出來自購物車的物項,且請求輸入支付及裝運資訊。舉例而言,訂單頁面可包括請求關於購物車中物項的採購者的資訊(例如,姓名、位址、電子郵件位址、電話號碼)、關於接收方的資訊(例如,姓名、位址、電話號碼、交付資訊)、裝運資訊(例如,交付及/或收取的速度/方法)、支付資訊(例如,信用卡、銀行轉帳、支票、賒帳(stored credit))、請求現金收據(例如,出於稅務目的)的使用者介面元素等的部分。外部前端系統103可向使用者裝置發送訂單頁面。
使用者裝置可在訂單頁面上輸入資訊,且點擊向外部前端系統103發送所述資訊的使用者介面元素或以其他方式與向外部前端系統103發送所述資訊的使用者介面元素交互。外部前端系統103可自使用者介面元素將資訊發送至系統100中的不同系統,以使得能夠用購物車中的產品創建及處理新的訂單。
在一些實施例中,外部前端系統103可更被配置成使得賣方能夠發射及接收與訂單相關的資訊。
在一些實施例中,內部前端系統105可被實施為使得內部使用者(例如,擁有、營運或租賃系統100的組織的員工)能夠 與系統100中的一或多個系統交互的電腦系統。舉例而言,在其中系統101能夠呈現系統以使得使用者能夠對物項下訂單的實施例中,內部前端系統105可被實施為網站伺服器,網站伺服器使得內部使用者能夠查看關於訂單的診斷及統計資訊、修改物項資訊或者查核與訂單相關的統計量。舉例而言,內部前端系統105可被實施為運行例如阿帕奇HTTP伺服器、微軟網際網路資訊服務(IIS)、NGINX等軟體的一或多個電腦。在其他實施例中,內部前端系統105可運行客製網站伺服器軟體,客製網站伺服器軟體被設計成接收及處理來自繪示於系統100中的系統或裝置(以及未繪示的其他裝置)的請求,基於該些請求自資料庫及其他資料儲存器獲取資訊,且基於所獲取的資訊提供對所接收請求的響應。
在一些實施例中,內部前端系統105可包括網站快取系統、資料庫、搜尋系統、支付系統、分析系統、訂單監控系統等中的一或多者。在一個態樣中,內部前端系統105可包括該些系統中的一或多者,而在另一態樣中,內部前端系統105可包括連接至該些系統中的一或多者的介面(例如,伺服器至伺服器、資料庫至資料庫或其他網路連接)。
在一些實施例中,運輸系統107可被實施為使得能夠在系統100中的系統或裝置與行動裝置107A至107C之間達成通訊的電腦系統。在一些實施例中,運輸系統107可自一或多個行動裝置107A至107C(例如,行動電話、智慧型電話、個人數位助理(personal digital assistant,PDA)等)接收資訊。舉例而言,在 一些實施例中,行動裝置107A至107C可包括由交付工作者操作的裝置。交付工作者(其可為永久的、臨時的或輪班的員工)可利用行動裝置107A至107C來達成對容納由使用者訂購的產品的包裝的交付。舉例而言,為交付包裝,交付工作者可在行動裝置上接收指示交付哪一包裝以及在何處交付所述包裝的通知。在到達交付位置時,交付工作者可使用行動裝置來定位包裝(例如,在卡車的後部或包裝的板條箱中)、掃描或以其他方式捕獲與包裝上的辨識符(例如,條形碼、影像、正文字串、射頻辨識(radio frequency identification,RFID)標籤等)相關聯的資料以及交付包裝(例如,藉由將包裝留在前門、將其留給保全警衛、將其交給接收方等)。在一些實施例中,交付工作者可使用行動裝置捕獲包裝的照片及/或可使用行動裝置獲得簽名。行動裝置可向運輸系統107發送包括關於交付的資訊在內的資訊,所述關於交付的資訊包括例如時間、日期、全球定位系統(Global Positioning System,GPS)位置、照片、與交付工作者相關聯的辨識符、與行動裝置相關聯的辨識符等。運輸系統107可將此資訊儲存於資料庫(未畫出)中,以供系統100中的其他系統存取。在一些實施例中,運輸系統107可使用此資訊來準備追蹤資料並將追蹤資料發送至指示特定包裝位置的其他系統。
在一些實施例中,某些使用者可使用一種種類的行動裝置(例如,永久工作者可使用具有例如條形碼掃描器、觸控筆(stylus)及其他裝置等客製硬體的專用PDA),而其他使用者可 使用其他種類的行動裝置(例如,臨時工作者或輪班工作者可利用現成的行動電話及/或智慧型電話)。
在一些實施例中,運輸系統107可將使用者與每一裝置相關聯。舉例而言,運輸系統107可儲存使用者(由例如使用者辨識符、員工辨識符或電話號碼表示)與行動裝置(由例如國際行動設備辨識(International Mobile Equipment Identity,IMEI)、國際行動訂用辨識符(International Mobile Subscription Identifier,IMSI)、電話號碼、通用唯一辨識符(Universal Unique Identifier,UUID)或全球唯一辨識符(Globally Unique Identifier,GUID)表示)之間的關聯。運輸系統107可結合在交付時接收的資料使用此種關聯來分析儲存於資料庫中的資料,以便除其他資訊以外亦確定工作者的位置、工作者的效率或工作者的速度。
在一些實施例中,賣方入口109可被實施為使得賣方或其他外部實體能夠與系統100中的一或多個系統進行電子通訊的電腦系統。舉例而言,賣方可利用電腦系統(未畫出)來針對賣方希望使用賣方入口109藉由系統100來售賣的產品上載或提供產品資訊、訂單資訊、聯繫資訊等。
在一些實施例中,裝運及訂單追蹤系統111可被實施為如下的電腦系統:所述電腦系統接收、儲存及轉送關於容納由顧客(例如,由使用裝置102A至102B的使用者)訂購的產品的包裝的位置的資訊。在一些實施例中,裝運及訂單追蹤系統111可自由裝運公司操作的網站伺服器(未畫出)請求或儲存資訊,裝運公 司交付容納由顧客訂購的產品的包裝。
在一些實施例中,裝運及訂單追蹤系統111可自系統100中所繪示的系統請求及儲存資訊。舉例而言,裝運及訂單追蹤系統111可自運輸系統107請求資訊。如以上所論述,運輸系統107可自與使用者(例如,交付工作者)或車輛(例如,交付卡車)中的一或多者相關聯的一或多個行動裝置107A至107C(例如,行動電話、智慧型電話、PDA等)接收資訊。在一些實施例中,裝運及訂單追蹤系統111亦可自倉庫管理系統(WMS)119請求資訊,以確定各別產品在履行中心(例如,履行中心200)內部的位置。裝運及訂單追蹤系統111可自運輸系統107或WMS 119中的一或多者請求資料,對其進行處理,且根據請求將其呈現至裝置(例如,使用者裝置102A及102B)。
在一些實施例中,履行最佳化(FO)系統113可被實施為如下的電腦系統:所述電腦系統儲存來自其他系統(例如,外部前端系統103及/或裝運及訂單追蹤系統111)的顧客訂單的資訊。FO系統113亦可儲存闡述特定物項被容置或儲存於何處的資訊。舉例而言,某些物項可能僅儲存於一個履行中心中,而某些其他物項可能儲存於多個履行中心中。在再一些其他實施例中,某些履行中心可被設計成僅儲存特定的一組物項(例如,新鮮農產品(fresh produce)或冷凍產品(frozen product))。FO系統113儲存此種資訊以及相關聯資訊(例如,數量、大小、接收日期、過期日期等)。
FO系統113亦可為每種產品計算對應的承諾交付日期 (PDD)。在一些實施例中,PDD可基於一或多種因素。舉例而言,FO系統113可基於以下來為產品計算PDD:產品的過往需求(例如,在一段時間期間此產品被訂購過多少次)、產品的預期需求(例如,預報在即將到來的一段時間期間有多少顧客會訂購所述產品)、指示在一段時間期間訂購過多少產品的全網路過往需求、指示在即將到來的一段時間期間預期會訂購多少產品的全網路預期需求、儲存於每一履行中心200中的產品的一或多個計數、每種產品由哪一履行中心儲存、此產品的預期訂單或當前訂單等。
在一些實施例中,FO系統113可週期性地(例如,每小時)確定每種產品的PDD,且將其儲存於資料庫中,以供擷取或發送至其他系統(例如,外部前端系統103、SAT系統101、裝運及訂單追蹤系統111)。在其他實施例中,FO系統113可自一或多個系統(例如,外部前端系統103、SAT系統101、裝運及訂單追蹤系統111)接收電子請求,且按需計算PDD。
在一些實施例中,履行訊息傳遞閘道(FMG)115可被實施為如下的電腦系統:所述電腦系統自系統100中的一或多個系統(例如FO系統113)接收呈一種格式或協定的請求或響應,將其轉換成另一種格式或協定,且以所轉換的格式或協定將其轉送至例如WMS 119或第三方履行系統121A、121B或121C等其他系統,且反之亦然。
在一些實施例中,供應鏈管理(SCM)系統117可被實施為實行預報功能的電腦系統。舉例而言,SCM系統117可基於 例如產品的過往需求、產品的預期需求、全網路過往需求、全網路預期需求、儲存於每一履行中心200中的產品計數、每種產品的預期訂單或當前訂單等來預報特定產品的需求水準。因應於此種預報水準及所有履行中心的每種產品的量,SCM系統117可產生一或多個採購訂單,以採購及貯存足夠的數量來滿足特定產品的預報需求。
在一些實施例中,倉庫管理系統(WMS)119可被實施為監控工作流的電腦系統。舉例而言,WMS 119可自指示離散事件的各別裝置(例如,裝置107A至107C或119A至119C)接收事件資料。舉例而言,WMS 119可接收指示使用該些裝置中的一者來掃描包裝的事件資料。如以下參照履行中心200及圖2所論述,在履行過程期間,包裝辨識符(例如,條形碼或RFID標籤資料)可在特定階段由機器(例如,自動化條形碼掃描器或手持條形碼掃描器、RFID讀取器、高速照相機、例如平板電腦(tablet)119A、行動裝置/PDA 119B、電腦119C等裝置或者類似機器)掃描或讀取。WMS 119可將指示包裝辨識符的掃描或讀取的每一事件連同包裝辨識符、時間、日期、位置、使用者辨識符或其他資訊一起儲存於對應的資料庫(未畫出)中,且可將此資訊提供至其他系統(例如,裝運及訂單追蹤系統111)。
在一些實施例中,WMS 119可儲存將一或多個裝置(例如,裝置107A至107C或119A至119C)與和系統100相關聯的一或多個使用者相關聯的資訊。舉例而言,在一些情況下,使用者 (例如兼職員工或全職員工)與行動裝置的關聯可在於使用者擁有行動裝置(例如,行動裝置是智慧型電話)。在其他情況下,使用者與行動裝置的關聯可在於使用者臨時保管行動裝置(例如,使用者在一天開始時登記借出行動裝置,將在一天中使用行動裝置,且將在一天結束時歸還行動裝置)。
在一些實施例中,WMS 119可為與系統100相關聯的每一使用者維護工作日誌。舉例而言,WMS 119可儲存與每一員工相關聯的資訊,包括任何所分派的過程(例如,卸載卡車、自揀選區揀選物項、分撥牆工作(rebin wall work)、包裝物項)、使用者辨識符、位置(例如,履行中心200中的樓層或區)、員工在系統中移動的單元的數目(例如,所揀選的物項的數目、所包裝的物項的數目)、與裝置(例如,裝置119A至119C)相關聯的辨識符等。在一些實施例中,WMS 119可自例如在裝置119A至119C上操作的計時系統等計時系統接收簽入(check-in)資訊及簽出(check-out)資訊。
在一些實施例中,第三方履行(3PL)系統121A至121C表示與物流及產品的第三方提供商相關聯的電腦系統。舉例而言,儘管一些產品被儲存於履行中心200中(如以下針對圖2所論述),然而其他產品可被儲存於場外、可按需生產或者可在其他情況下不可儲存於履行中心200中。3PL系統121A至121C可被配置成自FO系統113(例如,藉由FMG 115)接收訂單,且可直接向顧客提供產品及/或服務(例如,交付或安裝)。在一些實施例中,3PL 系統121A至121C中的一或多者可為系統100的一部分,而在其他實施例中,3PL系統121A至121C中的一或多者可在系統100之外(例如,由第三方提供商擁有或營運)。
在一些實施例中,履行中心授權系統(FC Auth)123可被實施為具有各種功能的電腦系統。舉例而言,在一些實施例中,FC Auth 123可充當系統100中的一或多個其他系統的單一登入(single-sign on,SSO)服務。舉例而言,FC Auth 123可使得使用者能夠經由內部前端系統105登錄,確定使用者具有存取裝運及訂單追蹤系統111處的資源的相似特權,且使得使用者能夠存取該些特權而不需要第二次登錄過程。在其他實施例中,FC Auth 123可使得使用者(例如,員工)能夠將其自身與特定任務相關聯。舉例而言,一些員工可能不具有電子裝置(例如裝置119A至119C),而是可作為替代在一天的過程期間於履行中心200內在各任務之間及各區之間移動。FC Auth 123可被配置成使得該些員工能夠指示他們正在實行什麼任務以及他們在一天的不同時間處於什麼區。
在一些實施例中,勞資管理系統(LMS)125可被實施為儲存員工(包括全職員工及兼職員工)的出勤資訊及加班資訊的電腦系統。舉例而言,LMS 125可自FC Auth 123、WMS 119、裝置119A至119C、運輸系統107及/或裝置107A至107C接收資訊。
圖1A中繪示的特定配置僅為實例。舉例而言,儘管圖1A繪示出FC Auth系統123連接至FO系統113,然而並非所有 實施例皆需要此種特定配置。實際上,在一些實施例中,系統100中的系統可藉由包括以下在內的一或多種公共網路或私有網路連接至彼此:網際網路、內部網路(Intranet)、廣域網路(Wide-Area Network,WAN)、都會區域網路(Metropolitan-Area Network,MAN)、符合電機及電子工程師學會(Institute of Electrical and Electronic Engineers,IEEE)802.11a/b/g/n標準的無線網路、租用線路(leased line)等。在一些實施例中,系統100中的系統中的一或多者可被實施為在資料中心、伺服器場(server farm)等處實施的一或多個虛擬伺服器。
圖2繪示出履行中心200。履行中心200是儲存訂購時裝運至顧客的物項的實體位置的實例。履行中心(FC)200可被劃分成多個區,所述多個區中的每一者繪示於圖2中。在一些實施例中,該些「區」可被視為接收物項、儲存物項、擷取物項及裝運物項的過程的不同階段之間的虛擬劃分。因此,儘管在圖2中繪示出「區」,然而亦可存在區的其他劃分,且在一些實施例中,圖2中的區可被省略、複製或修改。
入站區203表示FC 200的自希望使用來自圖1A的系統100售賣產品的賣方接收物項的區。舉例而言,賣方可使用卡車201交付物項202A及202B。物項202A可表示足夠大以佔用其自己的裝運托板的單一物項,而物項202B可表示在同一托板上堆疊於一起以節省空間的一組物項。
工作者將在入站區203中接收物項,且可使用電腦系統 (未畫出)可選地檢查物項的損壞及正確性。舉例而言,工作者可使用電腦系統將物項202A及202B的數量與訂購的物項數量進行比較。若數量不匹配,則此工作者可拒絕物項202A或202B中的一或多者。若數量匹配,則工作者可將該些物項(使用例如推車、手推車、堆高機,或者手動地)移動至緩衝區(buffer zone)205。緩衝區205可為當前在揀選區中所不需要的物項(例如,由於在揀選區中存在足夠高數量的此物項來滿足預報需求)的臨時儲存區。在一些實施例中,堆高機206進行操作以在緩衝區205中四處移動物項以及在入站區203與卸貨區207之間移動物項。若在揀選區中需要物項202A或202B(例如,由於預報需求),則堆高機可將物項202A或202B移動至卸貨區207。
卸貨區207可為FC 200的在物項被移動至揀選區209之前儲存所述物項的區。被分派揀選任務的工作者(「揀選者」)可接近揀選區中的物項202A及202B,使用行動裝置(例如,裝置119B)掃描揀選區的條形碼且掃描與物項202A及202B相關聯的條形碼。接著揀選者可將物項帶至揀選區209(例如,藉由將物項放入搬運車(cart)上或者搬運物項)。
揀選區209可為FC 200的其中在儲存單元210上儲存物項208的區。在一些實施例中,儲存單元210可包括實體排架(physical shelving)、書架、盒、裝運箱、冰箱、冰櫃、冷藏庫等中的一或多者。在一些實施例中,揀選區209可被組織成多個樓層。在一些實施例中,工作者或機器可以包括例如堆高機、升降機、 傳送帶、搬運車、手推車、推車、自動化機器人或裝置或者手動方式在內的多種方式將物項移動至揀選區209中。舉例而言,揀選者可將物項202A及202B放入卸貨區207中的手推車或搬運車上,且步行將物項202A及202B送至揀選區209。
揀選者可接收將物項放入(或「存放(stow)」於)揀選區209中的特定地點(例如儲存單元210上的特定空間)的指令。舉例而言,揀選者可使用行動裝置(例如,裝置119B)掃描物項202A。所述裝置可例如使用指示過道、儲架及位置的系統來指示揀選者應將物項202A存放於何處。接著,在將物項202A存放於此位置中之前,所述裝置可提示揀選者掃描此位置處的條形碼。所述裝置可向電腦系統(例如圖1A中的WMS 119)發送(例如,經由無線網路)資料來指示物項202A已由使用裝置119B的使用者存放於所述位置處。
一旦使用者下訂單,揀選者便可在裝置119B上接收指令,以自儲存單元210擷取一或多個物項208。揀選者可擷取物項208,掃描物項208上的條形碼,且將其放入運輸機構214上。儘管運輸機構214被表示為滑動件,然而在一些實施例中,運輸機構可被實施為傳送帶、升降機、搬運車、堆高機、手推車、推車等中的一或多者。接著物項208可到達包裝區211。
包裝區211可為FC 200的自揀選區209接收物項且將物項包裝至盒或袋中以便最終裝運至顧客的區。在包裝區211中,被分派接收物項的工作者(「分撥工作者(rebin worker)」)將自揀 選區209接收物項208,且確定物項208對應於什麼訂單。舉例而言,分撥工作者可使用例如電腦119C等裝置來掃描物項208上的條形碼。電腦119C可以可視方式指示物項208與哪一訂單相關聯。舉例而言,此可包括牆216上的對應於訂單的空間或「單元格(cell)」。一旦訂單完成(例如,由於單元格容納訂單的所有物項),分撥工作者可向包裝工作者(或「包裝者(packer)」)指示訂單完成。包裝者可自單元格擷取物項,且將其放入盒或袋中進行裝運。接著,包裝者可例如藉由堆高機、搬運車、推車、手推車、傳送帶、手動方式或其他方式將盒或袋發送至中樞區(hub zone)213。
中樞區213可為FC 200的自包裝區211接收所有盒或袋(「包裝」)的區。中樞區213中的工作者及/或機器可擷取包裝218,且確定每一包裝擬定去往交付區的哪一部分,且將包裝路由至適當的營地區215。舉例而言,若交付區具有兩個較小的子區,則包裝將去往兩個營地區215中的一者。在一些實施例中,工作者或機器可掃描包裝(例如,使用裝置119A至119C中的一者)以確定其最終目的地。將包裝路由至營地區215可包括例如確定作為包裝的目的地的地理區的一部分(例如,基於郵遞區號),以及確定與所述地理區的所述部分相關聯的營地區215。
在一些實施例中,營地區215可包括一或多個建築物、一或多個實體空間或者一或多個區,其中的包裝是自中樞區213接收以分選至路線及/或子路線中。在一些實施例中,營地區215在實體上與FC 200分離,而在其他實施例中,營地區215可形成FC 200的一部分。
營地區215中的工作者及/或機器可例如基於目的地與現有路線及/或子路線的比較、對每一路線及/或子路線的工作負載的計算、一天中的時間、裝運方法、裝運包裝220的成本、與包裝220中的物項相關聯的PDD等來確定包裝220應與哪一路線及/或子路線相關聯。在一些實施例中,工作者或機器可掃描包裝(例如,使用裝置119A至119C中的一者)以確定其最終目的地。一旦包裝220被分派至特定路線及/或子路線,工作者及/或機器可移動待裝運的包裝220。在示例性圖2中,營地區215包括卡車222、汽車226以及交付工作者224A及224B。在一些實施例中,卡車222可由交付工作者224A駕駛,其中交付工作者224A是為FC 200交付包裝的全職員工,且卡車222由擁有、租賃或營運FC 200的同一公司擁有、租賃或營運。在一些實施例中,汽車226可由交付工作者224B駕駛,其中交付工作者224B是根據需要(例如,季節性地)進行交付的「彈性(flex)」或不定期工作者(occasional worker)。汽車226可由交付工作者224B擁有、租賃或營運。
根據一些實施例,提供一種用於產生資料交易日誌的系統。舉例而言,內部前端系統105可為以下系統的實例:所述系統用於產生資料交易日誌且被配置成使得內部使用者能夠查看關於訂單的診斷及統計資訊、修改物項資訊、查核與訂單相關的統計量、或者查看系統105的其他即時資料改變及更新。在一些實施 例中,內部前端系統105可代管用於對儲存於一或多個資料庫上的資料進行批處理及串流處理的軟體應用。批處理可指每小時、每天、每週或以其他時間間隔對儲存於所述一或多個資料庫中的整個資料集進行掃描,以產生供使用者消費的相關資料。批處理軟體應用的實例可包括海多普(Hadoop)、Mapreduce或斯帕克(Spark)。
由於批處理之間的時間間隔可能要求使用者等待可能延長的時間段來接收相關資料,因此內部前端系統105可在批處理之間實行串流製程,以即時地處置相關資料中的任何改變。串流處理軟體應用的實例可包括阿帕奇弗林克、卡夫卡串流(Kafka Streaming)、斯帕克串流及斯托姆(Storm)以及此項技術中已知的其他類似的資料串流平台。內部前端系統105可連續地實行串流處理,以向使用者即時地供應相關資料的改變。來自所述一或多個資料庫的相關資料的改變可被稱為交易日誌。舉例而言,在資料庫中的資料的批處理之間,購物者可使用系統100完成購物動作。並非在添加新資料(或移除舊資料)時處理與購物者動作相關的整個資料庫,而是可將此交易記錄於與購物資料相關的交易日誌中。因此,藉由監控交易日誌,可對系統100的即時活動進行評估。
因此,內部前端系統105可連續地擷取及解析交易日誌,以供應即時資料供使用者消費。藉由實例,在例如MySQL等資料庫環境中,此種交易日誌被稱為二進制日誌。在一些實施例中,交易日誌可以表格式儲存於水平分區的資料庫中。水平分區資料庫的實例可包括分片資料庫,此將在以下進一步闡述。在一些實施例 中,內部前端系統105可在多個分佈式伺服器機器中實施,或者在雲端計算環境中的虛設伺服器機器中實施,其中多個串流處理可並行地、協同地或者獨立地於其他串流製程來執行。舉例而言,為了增加資料處理能力或通量,內部前端系統105可在不同的伺服器機器或虛設伺服器機器中執行串流處理軟體應用。
藉由實例,圖3繪示出根據所揭露實施例的系統300的圖,系統300是包括用於分區資料庫之多節點串流處理框架的示例性系統。系統300可包括分區資料庫310、串流環境320、註冊表330及目的地資料庫340。
在一些實施例中,分區資料庫310可為第一儲存器的實例。分區資料庫310可包括多個資料庫節點,例如節點312a、節點312b等。在一些實施例中,每一節點(例如節點312a或節點312b)可為不同的資料儲存器裝置。在替代實施例中,例如在雲端計算上下文中,每一節點(例如節點312a或節點312b)可表示記憶體節點(跨越多個伺服器機器或虛設伺服器實施)。在一些實施例中,節點表示分區資料庫310的分區策略。分區策略可指管治分區製程的演算法。
分區(在此項技術中亦被稱為分片)可指將單個資料集分成多個集合或子集的方法或製程。舉例而言,當資料儲存於具有列及行的表中時,垂直分區可指垂直地劃分表(即,按行劃分表),而水平地分區可指水平地劃分表(即,按列劃分表)。藉由實例,可將具有100個列的儲存資料的表分區成兩個分區表,第一分區 表可包括原始表的列1至50,且第二分區表可包括原始表的列51至100。
在某些情況下,隨著系統(例如,系統100)收集越來越大量的資料,可向儲存資料的表中添加附加列。可採用分區策略,使得當現有的資料儲存器或記憶體節點被耗盡(例如,滿或完全被佔用)時將表分區,被劃分的部份儲存於附加的資料儲存器或記憶體節點中,同時仍然維持邏輯結構,使得被劃分的部份可在其中包含的資料需要擷取時被定位。類似地,若儲存於表中的資料量減少,或者若計算資源偏移,則可移除一或多個節點。
在一些實施例中,每一節點(例如節點312a或312b)可包含多個資料表,所述表可儲存先前闡述的交易日誌。舉例而言,節點312a包含表314a、316a及/或318a,且節點312b包含表314b、316b及/或318b。在一些實施例中,表314a與314b可藉由分區策略相關,表316a與316b藉由分區策略相關,等等。舉例而言,表314a可包含資料集的列1至50,而表314b可包含同一資料集的列51至100。在一些實施例中,表314a包含具有不同於表316a及表318a的邏輯的資料集。如本文中所使用的,表的邏輯可指將資料組織成表的邏輯。在一些實施例中,將資料組織成表的邏輯是基於資料類別。
資料類別可由業務需要決定。舉例而言,對於特定的業務目的,與使用者相關的資料可為一類資料(例如,使用者資料),與產品相關的資料可為另一類資料(例如,產品資料),等等。舉 例而言,系統100可追蹤訂購物項的交付。因此,每次由交付工作者(例如,224A或224B)完成交付且在系統100中標記為完成時,可產生關於交付的新資料且將其記錄於儲存於表(例如表314a)中的交易日誌中。在另一實例中,系統100可追蹤在其平台上完成的採購的數目,且每次採購可產生欲記錄於另一交易日誌中且被儲存於另一表(例如表316a)中新資料點。在又一實例中,系統100可追蹤與特定系統事件(例如,銷售事件、新系統特徵、新產品等)的使用者交互的數目),且每一使用者交互可產生欲記錄於又一交易日誌中且儲存於又一表(例如表318a)中的新資料點。表314a、316a及318a中的每一者可儲存不同資料類別(或邏輯)的交易日誌。此項技術中具有通常知識者應理解,所闡述的實例僅為例示性的,且可端視設計需要及約束而按期望對不同類型及類別的資料進行儲存、格式化及分區。
串流環境320可指系統300的以下部分:所述部分用於對可供串流(例如如前所述供使用者查看的串流)查看的交易日誌進行擷取、處理及配置。串流環境320可包括多個串流節點,例如節點322a、322b等等。在一些實施例中,每一串流節點可表示由處理器、機器、伺服器或者虛設伺服器或機器施行的單獨的串流線程(streaming thread)。舉例而言,處理能力(processing power)可跨越多個處理器、機器、伺服器或者虛設伺服器或機器共享,且串流的任務及功能可分佈於可用的計算資源之中。因此,每一節點可表示處理器、機器、伺服器或者虛設伺服器或機器中的一者,或 者用於實行串流的其他資源的計算單元。在一些實施例中,節點322a、322b等中的每一者可實行與每個其他節點相似或相同的功能。此項技術中具有通常知識者現在應理解,基於處理需求及/或計算資源的可用性,可按比例增加(增大)或按比例減少(減小)節點的數目。
每一串流節點可包括資料源代理及串流製程。舉例而言,節點322a包括資料源代理324a及串流製程326a;節點322b包括資料源代理324b及串流製程326b,等等。如前所述,每一串流節點的功能與其他串流節點基本相同。因此,為易於理解,以下僅詳細闡述節點322a。
在一些實施例中,資料源代理324a被配置成自分區資料庫310的一或多個資料庫節點擷取交易日誌。舉例而言,資料源代理324a可自節點312a擷取表318a的交易日誌,自節點312b擷取表318b的交易日誌,等等。在一些實施例中,資料源代理324a可與註冊表330進行通訊,且可被配置成基於通訊來擷取交易日誌。在一些實施例中,資料源代理324a可編譯經修改交易日誌。可基於擷取的交易日誌來編譯經修改交易日誌。以下參照圖4及圖5詳細闡述由資料源代理324a實行的操作及製程。
在一些實施例中,串流製程326a可對經修改交易日誌進行串流。如前所述,串流製程326a可被配置成在批處理之間即時地處置相關資料的任何改變。串流製程326a的實例可由例如阿帕奇弗林克等應用來實行。在一些實施例中,經修改交易日誌可儲 存於資料庫中,例如儲存於目的地資料庫340的表342中。
圖4是根據所揭露實施例的示例性註冊表330的示意圖。本文中使用的註冊表是指儲存資料表的位址、位置或分佈的程式化或模組。舉例而言,表314a可為資料表的實例。註冊表330被配置成幫助資料源代理(例如,資料源代理324a)定位及擷取特定的資料表。在一些實施例中,註冊表330可包括應用程式設計介面(API)402及位址404。API可指程式化、功能或演算法,或者管理或維護二或更多個軟體應用之間的交互。藉由實例,API 402可管理註冊表330與資料源代理324a之間的通訊。資料源代理324a可向API 402發送試圖定位資料表的「發現」查詢,API 402可接收「發現」查詢,且藉由定位包含被搜尋的交易日誌的資料表的位址來處理查詢,且將此資訊作為「通知」返回給資料源代理324a。
在一些實施例中,當串流製程326a正在對與特定邏輯(資料類別)相關的資料進行串流時,它可能首先需要聲明資料的源(例如,定位儲存交易日誌的位置)。舉例而言,此可能是有關於闡述資料庫的位址,獲得存取儲存於上面的資料的授權及認證,以及提供用於加載資料(例如交易日誌)的腳本或命令。另外或者作為另外一種選擇,可能要求其他步驟來自串流辨識及擷取所需的資料。當交易日誌儲存於分區資料庫的表中時,串流製程326a可能無法容易地聲明資料的源,此乃因資料可能跨越潛在的數百或數千個表分散。此外,當分區資料庫310中的節點的數目改變 時,交易日誌的位址亦可能改變,且在不手動重建軟體模組(例如,聲明新的/更新的資料的源)的條件下,串流製程326a可能無法適應此種改變。因此,在一些實施例中,串流製程326a可依靠資料源代理324a來聲明資料的源。藉由發送「發現」查詢,資料源代理324a向API 402提供串流製程326a所要求的特定交易日誌。API 402可在位址404中定位此交易日誌。一旦定位了交易日誌,API 402便根據包含所需交易日誌的表的邏輯及節點來發送交易日誌的位址,資料源代理324a使用所述位址來擷取該些交易日誌。
位址404可指分區資料庫310中的所述多個資料表的位置的經更新集合。如前所述,在其中儲存的資料表常常被不時分區的操作環境中,可創建或移除節點。位址404可使得系統300能夠在不需要手動重建串流製程(例如,326a)來順應資料庫改變的條件下自動地適應分區資料庫310中的任何改變。位址404可包括分區資料庫310中的資料表的映射或分佈,用作資料源代理324a定位交易日誌的類似索引功能。在一些實施例中,位址404可由邏輯及節點來組織。邏輯可為業務邏輯,例如如前所述的資料類型或類別,且節點可指如圖3中所繪示的分區資料庫310的節點。舉例而言,如圖4中所繪示,位址404包括具有邏輯「318」及節點「a」的資料表「資料1」(因此將是318a)、以及具有邏輯「318」及節點「b」的資料表「資料2」(因此將是318b),等等。因此,當系統300隨著分區資料庫310中的節點及表的改變而創建註冊表330且更新位址404時,即使分區資料庫310經歷進一步的分 區,仍不要求對資料源代理324a的部份或串流製程326a的附加的改變或修改。
註冊表330不限於單個註冊表。舉例而言,系統300可創建多個註冊表,所述多個註冊表各自通訊地耦合至一或多個資料源代理(例如資料源代理324a及/或324b)。在一些實施例中,多個註冊表被託管或儲存於分佈式系統或儲存器中。分佈式儲存器可為一致的分佈式儲存器。舉例而言,若存在多個版本或註冊表330,則期望當任何資料源代理與任何註冊表進行通訊時,所得的通訊將是一致的及/或相同的。
圖5是根據所揭露實施例的用於分區資料庫之多節點串流處理框架的示例性製程500的流程圖。
在步驟502中,系統300可產生註冊表330。在一些實施例中,產生註冊表330可包括最初創建註冊表,例如最初構建位址404。另外,產生註冊表330亦可包括以分區資料庫310中的改變(例如當資料表被分區或者節點被添加或移除時)來更新位址404。舉例而言,若表中的資料被分區至不同的節點,則據以更新位址404。在一些實施例中,API 402因應於分區策略的改變而以所述至少一個第一資料表的分佈的對應改變來更新資料源代理(例如資料源代理324a)。舉例而言,藉由先前闡述的「發現」及「通知」通訊,可將分區資料庫310的分區策略的更新傳送至資料源代理324a。
在步驟504中,資料源代理(例如資料源代理324a)可 查詢註冊表330。在一些實施例中,當使用者期望對一組特定的交易日誌進行串流時,資料源代理324a可藉由查詢註冊表330來嘗試定位包含串流所要求的交易日誌的資料表源。在一些實施例中,查詢註冊表330包括基於所述一組邏輯表及節點表(例如位址404)辨識所述一或多個第一資料表的分佈。藉由實例,資料源代理324a可向註冊表330的API 402發送「發現」通訊。API 402可處理此通訊且在位址404中搜尋相關結果。一旦找到期望的資料表,API 402便可藉由在「通知」通訊中將查詢的結果返回給資料源代理324a來發送所述一或多個第一資料表的分佈(例如,來自位址404的位址)。舉例而言,資料源代理324a可藉由向API 402發送「發現」通訊來尋找點擊與系統100相關聯的網站上的橫幅廣告的第n個使用者的交易日誌。API 402可使用一或多個搜尋演算法或函數以及位址404在包含所搜尋的交易日誌的分區資料庫310中定位所述表。API 402可將表(例如,318a,其包括邏輯及節點)的位址發送至資料源代理324a。
在步驟506中,資料源代理324a可自分區資料庫310的資料表擷取交易日誌。可在步驟504中辨識資料表。舉例而言,若API 402通知資料源代理324a期望的交易日誌處於表318a中(例如,具有邏輯「318」且位於節點「a」中),則資料源代理324a將自表318a中的節點a擷取期望的交易日誌。
在步驟508中,資料源代理324a可基於擷取的交易日誌來編譯經修改交易日誌。在一些實施例中,資料源代理324a可 藉由將來自不同資料表的交易日誌合併至單個表(例如圖3中繪示的表342)中來產生經修改交易日誌。在一些實施例中,可藉由對應的邏輯合併交易日誌。舉例而言,在資料源代理自節點a擷取表314a,且自節點b擷取表314b等等之後,資料源代理可將表中的具有相同邏輯(例如,314a、314b)的所有表合併至單個表中。因此,可將例如,314a及314b合併至單個表中,所述表作為表342儲存於資料庫中,此可表示編譯的經修改交易日誌。
在一些實施例中,資料源代理324a可附加交易日誌以包括位址404中的邏輯及節點。舉例而言,經修改交易日誌可將邏輯及節點附加至交易日誌。舉例而言,例示性的交易日誌可為「顧客_訂單_1」、「顧客_訂單_2」,經修改交易日誌中的表項可為「318_a_顧客_訂單_1」或「318_a_顧客_訂單_1」。藉由將邏輯及節點附加至擷取的交易日誌以創建經修改交易日誌,且然後將經修改交易日誌合併至由邏輯組織的單個表中,可能仍然包含不適合分區資料庫310的遺留程式化或代碼的串流製程326a可繼續操作,而無需手動重建。此項技術中具有通常知識者應理解,藉由合併來自分區資料庫310的不同節點的不同資料表,具有相同邏輯的所有交易日誌將位於單個位置中。因此,自串流製程326a的角度來看,經修改交易日誌看起來並不位於不同且不斷改變的節點中。因此,即使在分區資料庫310中添加或刪除節點,仍不必重新程式化或重新編碼。在一些實施例中,資料源代理324a可進一步向交易日誌中的表項附加時戳。舉例而言,藉由將時戳附加至擷取 的交易日誌以產生經修改交易日誌,新創建的表(例如表342)可藉由時戳的時間順序來組織經修改交易日誌。時戳可為系統100產生交易日誌的時間。
在步驟510中,可選地,串流製程326a可將編譯的經修改交易日誌儲存於目的地資料庫340中。舉例而言,可將經修改交易日誌儲存於表342中。在一些實施例中,目的地資料庫340可不是分區資料庫。
在步驟512中,串流製程326a可產生資料顯示。如前所述,串流製程326a可編譯資料中的改變以顯示給使用者。可藉由經修改交易日誌來追蹤該些改變。可利用資料串流程式(阿帕奇弗林克)來實施串流製程326a。舉例而言,當串流製程326a對與與系統100的特定系統特徵(例如,銷售事件、新系統特徵、新產品等)的使用者交互相關的交易日誌進行串流時,可即時地查看與使用者交互相關的資料點。另外,可將該些交易日誌轉換成有用的可視化(例如圖表、圖形、動畫或其他類型的視覺輔助)以顯示給使用者。另外或者作為另外一種選擇,可將交易日誌編譯成報告(例如度量報告)。度量報告可指包含關於標的的說明的報告。如本文中所使用的,度量報告可為總結串流資料的歷史、用於串流資料的系統及模組的效能以及串流資料的其他基礎分析及/或模式的報告。在一些實施例中,度量報告可由系統300藉由以下方法來編譯:利用資料操縱演算法(例如組合二或更多個表);對交易日誌的資料求和、求最大值或求平均值;對表進行分類或排序;藉由 一些標準過濾交易日誌等。
儘管已參照本揭露的具體實施例示出並闡述了本揭露,然而應理解,本揭露可不加修改地實踐於其他環境中。上述說明是出於例示目的而呈現。上述說明並非詳盡性的且並非僅限於所揭露的精確形式或實施例。藉由考量對所揭露實施例的說明及實踐,各種修改及改編對於熟習此項技術者而言將顯而易見。另外,儘管所揭露實施例的態樣被闡述為儲存於記憶體中,然而熟習此項技術者應理解,該些態樣亦可儲存於其他類型的電腦可讀取媒體上,例如輔助儲存裝置(例如硬碟或光碟唯讀記憶體(compact disk read-only memory,CD ROM))或者其他形式的隨機存取記憶體(random access memory,RAM)或唯讀記憶體(read-only memory,ROM)、通用序列匯流排(universal serial bus,USB)媒體、數位影音光碟(digital versatile disc,DVD)、藍光(Blu-ray)或其他光學驅動媒體上。
基於書面說明及所揭露的方法的電腦程式處於有經驗的開發者的技能範圍內。可使用熟習此項技術者已知的任何技術來創建各種程式或程式模組,或者可結合現有的軟體來設計各種程式或程式模組。舉例而言,可採用或借助.Net Framework、.Net Compact Framework(以及相關語言,如Visual Basic、C等)、爪哇(Java)、C++、Objective-C、超文件標記語言(Hypertext Markup Language,HTML)、HTML/AJAX組合、可擴展標記語言(Extensible Markup Language,XML)或包括爪哇小程式的 HTML來設計程式區段或程式模組。
此外,儘管本文中已闡述了例示性實施例,然而熟習此項技術者基於本揭露將設想出具有等效元素、修改形式、省略、組合(例如,各種實施例之間的態樣的組合)、改編及/或變更的任何及所有實施例的範圍。申請專利範圍中的限制應基於申請專利範圍中採用的語言進行廣義解釋,而並非僅限於本說明書中闡述的實例或在申請的過程期間闡述的實例。所述實例應被視為非排他性的。此外,所揭露方法的步驟可以任何方式進行修改,包括藉由對步驟進行重新排序及/或插入或刪除步驟。因此,本說明書及實例旨在僅被視為例示性的,真正的範圍及精神由以下申請專利範圍及其等效內容的全部範圍來指示。
300:系統
310:分區資料庫
312a、312b、322a、322b:節點
314a、314b、316a、316b、318a、318b、342:表
320:串流環境
324a、324b:資料源代理
326a、326b:串流製程
330:註冊表
340:目的地資料庫

Claims (20)

  1. 一種用於產生資料交易日誌的系統,所述系統包括:至少一個第一儲存器,儲存至少一個第一資料表,所述至少一個第一資料表包括至少一個交易日誌且與第一節點相關聯;至少一個第二儲存器,用於儲存至少一個第二資料表;顯示介面;以及至少一個處理器,被配置成執行以下步驟:產生註冊表,所述註冊表包括應用程式設計介面(API)及所述至少一個第一資料表的位址;維護至少一個資料源代理,每一資料源代理被配置成:查詢所述註冊表以接收所述至少一個第一資料表的所述位址;以所述至少一個第一資料表的所述位址向所述至少一個第一儲存器請求所述至少一個交易日誌;自所述至少一個第一儲存器接收所述至少一個交易日誌,其中每一交易日誌與交易時間相關聯;以及產生一或多個經修改交易日誌;以及維護至少一個串流製程,每一串流製程被配置成:基於所述一或多個經修改交易日誌產生所述至少一個第二資料表,以儲存於所述至少一個第二儲存器中;以及基於所述至少一個第二資料表產生資料顯示。
  2. 如請求項1所述的系統,其中所述至少一個第一儲 存器是由分區策略及所述第一節點表徵的水平分區資料庫。
  3. 如請求項1所述的系統,其中所述應用程式設計介面被配置成自所述至少一個資料源代理接收查詢且發送所述至少一個第一資料表的分佈,其中所述分佈由邏輯表及節點表表徵。
  4. 如請求項3所述的系統,其中所述註冊表包括在具有一致分佈式儲存的分佈式機器上執行的多個註冊表。
  5. 如請求項4所述的系統,其中所述多個註冊表的每一者被耦合以與所述資源料代理的一或多者進行通訊。
  6. 如請求項2所述的系統,其中產生所述註冊表包括:基於所述至少一個第一儲存器的所述分區策略產生一組邏輯表及節點表。
  7. 如請求項6所述的系統,其中查詢所述註冊表包括基於所述一組邏輯表及節點表辨識所述至少一個第一資料表的所述分佈。
  8. 如請求項7所述的系統,其中所接收的所述至少一個交易日誌與所述至少一個第一資料表相關聯。
  9. 如請求項8所述的系統,其中產生所述一或多個經修改交易日誌包括:辨識所接收的所述至少一個交易日誌中的在所述邏輯表中具有相同值的所有者;以及將所辨識的所述至少一個交易日誌合併於所述一或多個經修 改交易日誌中,其中所述一或多個經修改交易日誌中的每一表項按照所述交易時間被排序。
  10. 如請求項7所述的系統,其中:所述註冊表的所述應用程式設計介面因應於所述分區策略的改變而以所述至少一個第一資料表的所述分佈的對應改變來更新資料源代理。
  11. 一種用於產生資料交易日誌的方法,所述方法透過至少一處理器執行,其中所述方法包括:產生註冊表,所述註冊表包括應用程式設計介面(API)及所述至少一個第一資料表的位址,所述至少一個第一資料表包括至少一個交易日誌且與第一節點相關聯;維護至少一個資料源代理,每一資料源代理被配置成:查詢所述註冊表以接收一或多個第一資料表的所述位址;以所述至少一個第一資料表的所述位址向至少一個第一儲存器請求所述至少一個交易日誌;自所述至少一個第一儲存器接收所述至少一個交易日誌,其中每一交易日誌與交易時間相關聯;以及產生一或多個經修改交易日誌;維護至少一個串流製程,每一串流製程被配置成:基於所述一或多個經修改交易日誌產生至少一個第二資料表,以儲存於至少一個第二儲存器中;以及基於所述至少一個第二資料表產生顯示。
  12. 如請求項11所述的方法,所述至少一個第一儲存器是由分區策略及所述第一節點表徵的水平分區資料庫。
  13. 如請求項11所述的方法,其中所述應用程式設計介面被配置成自所述至少一個資料源代理接收查詢且發送所述一或多個第一資料表的分佈,其中所述分佈由邏輯表及節點表表徵。
  14. 如請求項13所述的方法,其中所述註冊表包括在具有一致分佈式儲存的分佈式機器上執行的多個註冊表。
  15. 如請求項14所述的方法,其中所述多個註冊表的每一者被耦合以與所述資源料代理的一或多者進行通訊。
  16. 如請求項12所述的方法,其中產生所述註冊表包括:基於所述至少一個第一儲存器的所述分區策略產生一組邏輯表及節點表。
  17. 如請求項16所述的方法,其中查詢所述註冊表包括基於所述一組邏輯表及節點表辨識所述一或多個第一資料表的所述分佈。
  18. 如請求項17所述的方法,其中所接收的所述至少一個交易日誌與所述一或多個第一資料表相關聯。
  19. 如請求項18所述方法,其中產生所述一或多個經修改交易日誌包括:辨識所接收的所述至少一個交易日誌中的在所述邏輯表中具 有相同值的所有者;以及將所辨識的所述至少一個交易日誌合併於所述一或多個經修改交易日誌中,其中所述一或多個經修改交易日誌中的每一表項按照所述交易時間被排序。
  20. 一種用於產生資料交易日誌的系統,所述系統包括:多個第一儲存器,儲存至少一個第一資料表,所述至少一個第一資料表包括一或多個交易日誌且由一或多個第一節點表徵;至少一個第二儲存器,儲存至少一個第二資料表;顯示介面;以及至少一個處理器,被配置成執行以下步驟:產生註冊表,所述註冊表包括應用程式設計介面(API)及所述至少一個第一資料表的位址;維護跨越多個資源節點分佈的多個資料源代理,各所述多個資料源代理被配置成:查詢所述註冊表以接收所述至少一個第一資料表的所述位址;以所述至少一個第一資料表的所述位址向所述多個第一儲存器請求所述至少一個交易日誌;自所述多個第一儲存器接收所述一或多個交易日誌,其中每一交易日誌與交易時間相關聯;以及編譯一或多個經修改交易日誌;以及 維護跨越所述多個資源節點分佈的多個串流製程,各所述多個串流製程被配置成:產生所述至少一個第二資料表以儲存於所述至少一個第二儲存器中;以及基於所述至少一個第二資料表產生顯示,其中:資源中的各所述多個串流製程自同一資源節點中的對應資料源代理接收所述一或多個經修改交易日誌。
TW111107356A 2021-03-02 2022-03-01 用於產生資料交易日誌的系統以及方法 TWI830162B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17/189,816 2021-03-02
US17/189,816 US11263206B1 (en) 2021-03-02 2021-03-02 Systems and methods for multi-nodal stream processing framework for partitioned database

Publications (2)

Publication Number Publication Date
TW202238465A TW202238465A (zh) 2022-10-01
TWI830162B true TWI830162B (zh) 2024-01-21

Family

ID=80442542

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111107356A TWI830162B (zh) 2021-03-02 2022-03-01 用於產生資料交易日誌的系統以及方法

Country Status (4)

Country Link
US (2) US11263206B1 (zh)
KR (2) KR102552686B1 (zh)
TW (1) TWI830162B (zh)
WO (1) WO2022185105A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117609315B (zh) * 2024-01-22 2024-04-16 中债金融估值中心有限公司 一种数据处理方法、装置、设备及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5943424A (en) * 1996-06-17 1999-08-24 Hewlett-Packard Company System, method and article of manufacture for processing a plurality of transactions from a single initiation point on a multichannel, extensible, flexible architecture
TWI280024B (en) * 2002-10-30 2007-04-21 American Express Travel Relate Method and system for providing privacy service
US10581990B2 (en) * 2007-09-14 2020-03-03 At&T Intellectual Property I, L.P. Methods, systems, and products for detecting online risks
TW202042218A (zh) * 2019-04-30 2020-11-16 開曼群島商創新先進技術有限公司 基於區塊鏈的資料壓縮、查詢方法及裝置和電子設備
TW202107377A (zh) * 2019-07-31 2021-02-16 開曼群島商創新先進技術有限公司 基於區塊鏈的資料授權方法及裝置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030105732A1 (en) 2000-11-17 2003-06-05 Kagalwala Raxit A. Database schema for structure query language (SQL) server
US20060085275A1 (en) 2002-01-16 2006-04-20 Stokes Patricia L System and method for facilitating online transactions
US7277905B2 (en) * 2004-03-31 2007-10-02 Microsoft Corporation System and method for a consistency check of a database backup
US7383230B2 (en) 2004-04-23 2008-06-03 Wolff Gregory J System and method for the efficient exchange and pricing of services and intangible works
KR100857036B1 (ko) * 2007-04-20 2008-09-05 (주)엔텔스 과금 시스템에서 트랜잭션 로그 파일을 이용한 장애 복구방법 및 그 장치
US20110040839A1 (en) 2007-10-23 2011-02-17 Valeriu Zabalan System and method for transactional storage of email data
US8510263B2 (en) * 2009-06-15 2013-08-13 Verisign, Inc. Method and system for auditing transaction data from database operations
RU2016122623A (ru) * 2010-03-18 2018-11-29 НУОДиБи ИНК. Система управления базой данных
US20120246303A1 (en) * 2011-03-23 2012-09-27 LogRhythm Inc. Log collection, structuring and processing
US20170109636A1 (en) * 2011-05-08 2017-04-20 Panaya Ltd. Crowd-Based Model for Identifying Executions of a Business Process
WO2013091167A1 (zh) * 2011-12-21 2013-06-27 华为技术有限公司 日志存储方法及系统
US9760584B2 (en) * 2012-03-16 2017-09-12 Oracle International Corporation Systems and methods for supporting inline delegation of middle-tier transaction logs to database
US9608907B2 (en) * 2014-09-29 2017-03-28 Vivint, Inc. Systems and methods for centrally-assisted distributed hash table
US10623581B2 (en) 2017-07-25 2020-04-14 Vail Systems, Inc. Adaptive, multi-modal fraud detection system
CN108876572A (zh) * 2018-05-29 2018-11-23 阿里巴巴集团控股有限公司 区块链交易的对账方法及装置、电子设备
US11151161B2 (en) * 2018-07-06 2021-10-19 Snowflake Inc. Data replication and data failover in database systems

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5943424A (en) * 1996-06-17 1999-08-24 Hewlett-Packard Company System, method and article of manufacture for processing a plurality of transactions from a single initiation point on a multichannel, extensible, flexible architecture
TWI280024B (en) * 2002-10-30 2007-04-21 American Express Travel Relate Method and system for providing privacy service
US10581990B2 (en) * 2007-09-14 2020-03-03 At&T Intellectual Property I, L.P. Methods, systems, and products for detecting online risks
TW202042218A (zh) * 2019-04-30 2020-11-16 開曼群島商創新先進技術有限公司 基於區塊鏈的資料壓縮、查詢方法及裝置和電子設備
TW202107377A (zh) * 2019-07-31 2021-02-16 開曼群島商創新先進技術有限公司 基於區塊鏈的資料授權方法及裝置

Also Published As

Publication number Publication date
WO2022185105A1 (en) 2022-09-09
TW202238465A (zh) 2022-10-01
KR102552686B1 (ko) 2023-07-07
US11263206B1 (en) 2022-03-01
KR20230107504A (ko) 2023-07-17
US20220284010A1 (en) 2022-09-08
KR20220124075A (ko) 2022-09-13

Similar Documents

Publication Publication Date Title
TWI765686B (zh) 用於在供應鏈中追蹤物品的電腦實施的系統以及方法
TWI759921B (zh) 供應鏈管理系統及供應鏈管理方法
TW202230160A (zh) 用於基於人工智慧的資料庫參數優化之電腦實施的系統以及方法
TW202117619A (zh) 顯示交付日期估算的系統及方法以及電腦可讀取媒體
TWI801861B (zh) 根據產品特性決定產品價格的倉儲管理電腦實行系統以及方法
TW202343328A (zh) 用於管理履行中心的庫存的電腦實施的系統以及用於包裝最佳化的電腦實施的方法
TWI813926B (zh) 用於網頁顯示修正的電腦化系統及方法
TWI773048B (zh) 降低資料庫查詢延遲之系統以及方法
TW202211109A (zh) 用於產品的智能化分配的電腦實施系統及電腦實施方法
KR20230134454A (ko) 데이터의 동적 집계와 데이터 손실의 최소화를 위한 시스템 및 방법
TW202234308A (zh) 分級退返產品管理倉儲之電腦實施的系統以及方法
KR20240007737A (ko) 제품 추천을 생성하기 위해 인공 지능을 사용하는 컴퓨터 시스템 및 방법
TWI759892B (zh) 自動遞送工作者指配的電腦化系統、電腦化方法及系統
TWI830162B (zh) 用於產生資料交易日誌的系統以及方法
TWI731618B (zh) 電腦實施系統及電腦實施方法
TW202147203A (zh) 用於追蹤線上社群的電腦實行系統以及方法
TW202121168A (zh) 用於自動化人員排程的聯網伺服器系統以及用於自動化人員排程的電腦實施方法
TW202341041A (zh) 電腦實施的系統以及電腦實施的方法
TWI834101B (zh) 用於低潛時聚合資料供應的電腦實施的系統與用於區域需求估計的電腦實施的系統以及方法
TWI780560B (zh) 用於在網站伺服器上登記產品的電腦實行系統以及方法
TWI831003B (zh) 資料庫協調之系統以及方法
TWI760043B (zh) 詐欺偵測與使用者帳號去除重複之電腦化系統以及方法
TW202418163A (zh) 用於產生資料交易日誌的系統以及方法
TWI729758B (zh) 用於在供應鏈中追蹤物品的電腦實施的系統以及方法
KR20230143089A (ko) 과거 구매에 기초하여 제품을 선택 및 제시하기 위한 시스템 및 방법