TWI606349B - 線上雲端服務處理系統與線上評測方法及其電腦程式產品 - Google Patents

線上雲端服務處理系統與線上評測方法及其電腦程式產品 Download PDF

Info

Publication number
TWI606349B
TWI606349B TW105142421A TW105142421A TWI606349B TW I606349 B TWI606349 B TW I606349B TW 105142421 A TW105142421 A TW 105142421A TW 105142421 A TW105142421 A TW 105142421A TW I606349 B TWI606349 B TW I606349B
Authority
TW
Taiwan
Prior art keywords
service
online
evaluation
application service
application
Prior art date
Application number
TW105142421A
Other languages
English (en)
Other versions
TW201824009A (zh
Inventor
郭建揚
呂誌軒
蘇志斌
葉晉昇
陳顥元
吳欣怡
Original Assignee
財團法人工業技術研究院
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 財團法人工業技術研究院 filed Critical 財團法人工業技術研究院
Priority to TW105142421A priority Critical patent/TWI606349B/zh
Priority to CN201611233365.4A priority patent/CN108230005B/zh
Priority to US15/458,988 priority patent/US10791038B2/en
Application granted granted Critical
Publication of TWI606349B publication Critical patent/TWI606349B/zh
Publication of TW201824009A publication Critical patent/TW201824009A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/508—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement
    • H04L41/5096—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement wherein the managed service relates to distributed or central networked applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G06Q30/0202—Market predictions or forecasting for commercial activities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0645—Rental transactions; Leasing transactions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements
    • H04L43/55—Testing of service level quality, e.g. simulating service usage
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5032—Generating service level reports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5041—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the time relationship between creation and deployment of a service

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Databases & Information Systems (AREA)
  • General Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

線上雲端服務處理系統與線上評測方法及其電腦程式產品
本揭露是有關於一種線上雲端服務處理系統與線上評測方法及其電腦程式產品。
隨著電腦科技及網際網路的蓬勃發展，由雲端運算（cloud computing）提供應用服務也日趨普遍。目前常見的雲端服務包括商品推薦服務、搜尋服務、個人化電子報寄送名單推薦服務、銷量預測服務等。一般來說，服務開發者會在雲端伺服器中運行服務引擎來執行其開發的應用程式以提供各種雲端服務給服務租戶（tenant）承租。服務租戶可將其經營的網站與雲端伺服器提供的雲端服務串接，雲端伺服器便可根據網站上的線上服務請求提供相應的服務內容。舉例而言，服務租戶可以向雲端服務業者承租商品推薦服務，並且將其經營的線上購物網站與商品推薦服務串接，即可在消費者瀏覽商品時即時地提供商品推薦清單。
服務開發者在開發雲端服務的應用程式時往往需要場域驗證來檢驗應用程式的成效。針對雲端服務而言，檢驗成效的方式包括離線測試與線上測試。離線測試是利用歷史資料來檢驗成效，而線上測試則是直接於服務提供時檢驗成效。然而，離線測試由於無法即時取得使用者對服務的反應，可能發生一個提供服務的演算法在離線測試時具有好的成效，但是在線上測試時卻無法產生相同成效的狀況。因此，如何提供線上場域來檢驗雲端服務的成效為本領域技術人員所關心的議題。
本揭露提供一種線上雲端服務處理系統與線上評測方法及其電腦程式產品，其能夠提供持續性的服務並且同時提供雲端服務進行線上測試。
本揭露的一範例實施例提供一種線上雲端服務處理系統，其包括至少一伺服器。所述至少一伺服器包括至少一記憶體以及至少一處理器。所述至少一處理器經配置執行儲存在至少一記憶體的多個指令。所述處理系統還包括至少一應用服務單元、至少一應用服務評估單元、評估管理模組、導流模組與評估模組。所述至少一應用服務單元經配置運行至少一應用服務，所述至少一應用服務評估單元，經配置評估一或多個應用服務。所述評估管理模組經配置執行所述至少一應用服務評估單元的至少一評估註冊程序以回應所接收的對所述至少一應用服務評估單元的至少一註冊請求。所述導流模組經配置將至少一線上服務請求的第一部分導流至所述至少一應用服務單元、所述至少一線上服務請求的第二部分則導流至所述至少一應用服務評估單元，以產生對應所述至少一線上服務請求的至少一輸出結果。所述評估模組經配置根據所述至少一輸出結果之中所述至少一應用服務評估單元產生的輸出結果計算各個所述至少一應用服務評估單元的至少一評等。
本揭露的另一範例實施例提供一種用於線上雲端服務處理系統的線上評測方法。此方法包括：運行所述處理系統中至少一應用服務單元；執行所述處理系統中至少一應用服務評估單元的至少一評估註冊程序以回應所接收的對所述至少一應用服務評估單元的至少一註冊請求；運行所述至少一應用服務評估單元；將至少一線上服務請求的第一部份導流至所述至少一應用服務單元，將所述至少一線上服務請求的第二部份導流至所述至少一應用服務評估單元，並且產生對應所述至少一線上服務請求的至少一輸出結果；以及根據所述至少一輸出結果之中所述至少一應用服務評估單元產生的輸出結果計算各個所述至少一應用服務評估單元的至少一評等。
本揭露的另一範例實施例提供一種包括至少一程式指令的電腦程式產品。當線上雲端服務處理系統載入程式指令並由所述處理系統所包括的至少一處理器執行後，可完成如上所述的線上評測方法。
基於上述，線上雲端服務處理系統可運行應用服務單元以維持雲端服務的穩定性，還可同時運行應用服務評估單元以串接服務開發者所開發的應用程式至服務租戶端的線上環境來進行線上測試。如此一來，可提供參與應用服務評估者所開發的應用程式的評估服務。
為讓本揭露的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。
圖1是根據一範例實施例所繪示之線上雲端服務處理系統所包括的雲端服務伺服器的示意圖。
請參照圖1，於一雲端服務平台(未顯示)上運作的線上雲端服務處理系統10可經配置包括至少一伺服器130(1)~130(S)，S為大於0的正整數。各伺服器可包括至少一處理器及至少一記憶體。例如，伺服器130(1)可包括至少一處理器110及至少一記憶體120。然而雖然圖1的實施例繪示了伺服器130(1)~130(S)，但本揭露並不限制伺服器的數目。依據實際應用上的不同需求，線上雲端服務處理系統10可經配置運行一個或多個伺服器。
至少一處理器110可經配置以處理伺服器130(1)的運作。至少一處理器110例如可以是中央處理單元（Central Processing Unit，CPU），或是其他可程式化之微處理器（Microprocessor）、數位訊號處理器（Digital Signal Processor，DSP）、可程式化控制器、特殊應用積體電路（Application Specific Integrated Circuits，ASIC）、可程式化邏輯裝置（Programmable Logic Device，PLD）、多核處理器、其他類似裝置或以上各裝置的任意組合，本揭露並不加以限制。
至少一記憶體120經配置以儲存資訊、資料、應用程式、指令等以使處理器110能夠實行伺服器130(1)的各種功能。舉例來說，至少一記憶體120可經配置以儲存用於由至少一處理器110可經配置執行的程式指令和/或用於由至少一處理器110經配置處理的資料。例如，至少一記憶體120可經配置儲存執行雲端服務所需載入的程式碼、從線上環境接收的項目資訊與線上服務請求、執行雲端服務產生的輸出結果等。在此，至少一記憶體120可為揮發性記憶體、非揮發性記憶體或其組合。例如，至少一記憶體120可包括硬碟、隨機存取記憶體、高速緩衝記憶體、快閃記憶體、壓縮光碟唯讀記憶體（CD-ROM）、固態記憶體、數位通用光碟唯讀記憶體（DVD-ROM）、光碟、經配置以儲存資訊的電路或積體電路等等。
線上雲端服務處理系統10中所包括的至少一伺服器130(1)~130(S)可經配置以提供各種雲端服務功能。於一實施例中，至少一伺服器130(1)~130(S)的至少一處理器110可經配置載入至少一記憶體120中的各配置執行模組（及或單元）的程式碼以提供雲端服務。本揭露中所述及的雲端服務可包括商品智慧推薦服務、智慧搜尋服務、個人化電子報寄送名單推薦服務、銷量預測服務等，但不以此為限制。
在本範例實施例中，服務需求業者或服務租戶（爾後稱服務租戶）20及服務開發者30可分別操作電子裝置（例如，個人電腦、伺服器等）並藉由網際網路連接至線上雲端服務處理系統10。服務開發者30可提供其開發的應用程式至線上雲端服務處理系統10。透過所運行的至少一伺服器130(1)~130(S)，線上雲端服務處理系統10可將服務開發者30的應用程式串接至服務租戶20端的線上環境，並且根據在服務租戶20的線上環境（例如服務租戶20經營的購物網站）中發生的線上服務請求提供對應的雲端服務內容。舉例而言，終端使用者在服務租戶20經營的購物網站上流覽商品所執行的點擊操作可觸發要求提供推薦商品的線上服務請求。線上雲端服務處理系統10則可根據此線上服務請求提供對應的推薦商品內容。
必須了解的是，雖然在圖1中僅繪示一個服務開發者30，於一實施例中，也可以由一個以上的服務開發者30來提供雲端服務的應用程式。再者，服務開發者30可以為，對提供雲端服務應用程式有興趣或有研究的群眾（crowd），例如資料科學家、程式設計者等等，本揭露不設限。簡單來說，線上雲端服務處理系統10可運行多個服務開發者30提供的應用程式以根據線上服務請求提供服務內容，並且亦可分配部分服務請求，進行提供此種服務之各應用程式中服務演算法的成效測試，以期望能持續精進雲端服務品質及/或媒合服務租戶與服務開發者。
圖2是根據一範例實施例所繪示之線上雲端服務處理系統的示意圖。
請參照圖2，線上雲端服務處理系統10包括至少一雲端服務伺服器210、評估管理模組220、導流模組230、資料庫240及評估模組250。至少一處理器110可經配置運行線上雲端服務處理系統10的各模組，以啟動線上雲端服務處理系統10的各功能。在本範例實施例中，線上雲端服務處理系統10可包括一個或一個以上的雲端服務伺服器210。於一實施例，所述各模組可經配置在同一伺服器中運作，例如一雲端服務伺服器210。於另一實施例，所述各模組則可經配置機動性單獨運作或組合運作在至少一伺服器中，各模組所被配置的伺服器可相同或不同。在本範例實施例中的雲端服務伺服器210的架構可與圖1中的伺服器130(1)相同或類似。
於此實施例中，雲端服務伺服器210可經配置運行至少一應用服務單元211(1)~211(X)與至少一應用服務評估單元212(1)~212(N)，X與N分別為大於0的正整數。於不同實施例中，當服務租戶20發出線上服務請求時，雲端服務伺服器210可經配置運行至少一應用服務單元211(1)~211(X)、或至少一應用服務評估單元212(1)~212(N)、或同時運行至少一應用服務單元211(1)~211(X)與至少一應用服務評估單元212(1)~212(N)，來執行雲端服務功能以產生對應線上服務請求的輸出結果。至少一處理器110可經配置運行雲端服務伺服器210的各單元或各模組，以啟動雲端服務伺服器210各單元或各模組的各對應功能。再者，至少一應用服務單元211，可經配置運行至少一應用服務，至少一應用服務評估單元212，可經配置評估一或多個應用服務。應用服務評估單元所評估的一或多個應用服務可以相同或不同於應用服務單元所運行的至少一應用服務。
圖2實施例中繪示的雲端服務伺服器210可經配置運行應用服務單元211(1)~211(X)與應用服務評估單元212(1)~212(N)，然而本揭露並不限制應用服務單元211(1)~211(X)與應用服務評估單元212(1)~212(N)的數目。依據實際應用上的不同需求，雲端服務伺服器210可經配置運行一個或多個應用服務單元211(1)~211(X)與應用服務評估單元212(1)~212(N)。此外，於不同實施例中，所述至少一應用服務單元211(1)~211(X)與至少一應用服務評估單元212(1)~212(N)可經配置單獨運作或組合運作在一或多個伺服器中，各單元所被配置的伺服器可相同或不同。
評估管理模組220包括註冊子模組221、驗證子模組222、資訊保密子模組223及管理控制台224。
註冊子模組221可經配置執行至少一應用服務評估單元212(1)~212(N)的評估註冊程序。具體而言，當服務開發者30欲使其所開發的雲端服務應用程式參與線上測試時，服務開發者30可提供至少一註冊請求至線上雲端服務處理系統10。至少一處理器110可經配置根據至少一註冊請求來註冊至少一應用服務評估單元212(1)~212(N)以回應此至少一註冊請求。詳細來說，至少一處理器110可經配置運行註冊子模組221以根據至少一註冊請求來設定至少一應用服務評估單元212(1)~212(N)對應的至少一服務邏輯規則與至少一服務數據模型。至少一應用服務評估單元212(1)~212(N)可經配置根據至少一服務邏輯規則與至少一服務數據模型執行雲端服務功能。例如，至少一服務邏輯規則定義所指定的至少一服務數據模型的結合方式等。進一步地，至少一處理器110可經配置將設定的至少一服務邏輯規則與至少一服務數據模型儲存在至少一記憶體120的資料庫240中。資料庫240可以是關聯式資料庫（Relational Database Management System, RDBMS）或物件導向式資料庫（Object-oriented Database Management System, ODBMS），並可以標準資料查詢語言（Structured Query Language, SQL）或NoSQL等方式來實施。在此，至少一處理器110可經配置以運行一個或多個應用服務評估單元，本揭露並不限制應用服務評估單元的數量。
在本範例實施例中，服務開發者30提供至線上雲端服務處理系統10的至少一註冊請求可以包括服務邏輯規則與服務數據模型的相關資訊。例如，以服務數據模型而言，至少一註冊請求可以包括符合固定格式的服務數據模型結果檔，讓服務租戶20端可以經由統一的應用程式介面（application programming interface，簡稱API）讀取使用。此固定格式可為線上雲端服務處理系統10的預設格式。再者，至少一註冊請求也可以包括建立服務數據模型結果檔的訓練程式碼，至少一應用服務評估單元211(1)~211(X)可執行此訓練程式碼在線上環境建立服務數據模型結果檔，以提供服務租戶20端所界接的應用程式介面讀取使用。以購物網站為例，上述的服務數據模型結果檔可包括商品與商品之間的關聯性記錄。以服務邏輯規則而言，至少一註冊請求可以包括應用程式介面的網址（uniform resource locator，簡稱URL），其輸入、輸出值可為線上雲端服務處理系統10的預設格式，至少一處理器110可經配置運行至少一應用服務評估單元212(1)~212(N)以連結網址來呼叫此應用程式介面以執行雲端服務功能。再者，至少一註冊請求也可以包括服務邏輯規則的原始程式碼，其輸入、輸出值可為線上雲端服務處理系統10的預設格式，至少一處理器110可經配置運行至少一應用服務評估單元以執行此原始程式碼來執行應用服務功能。此外，至少一註冊請求也可以包括可結合應用服務單元211(1)~211(X)所使用的服務邏輯規則的結合程式碼，以結合應用服務單元211(1)~211(X)所使用的服務數據模型結果檔來產生新的服務邏輯規則以讓所註冊的至少一應用服務評估單元212(1)~212(N)使用。
驗證子模組222可經配置執行驗證操作以評估所註冊的至少一應用服務評估單元212(1)~212(N)是否符合上線條件。具體而言，至少一處理器110可經配置運行驗證子模組222來驗證已註冊的至少一應用服務評估單元212(1)~212(N)的至少一服務邏輯規則及至少一服務數據模型。上線條件可例如為至少一應用服務評估單元212(1)~212(N)運作時所需達到的功能、效率或效能等。進一步地，至少一處理器110可經配置將符合上線條件的至少一應用服務評估單元212(1)~212(N)串接至服務租戶20端的線上環境。
資訊保密子模組223可經配置執行資料保護操作以保護服務租戶20端提供的項目資訊。具體而言，至少一處理器110可經配置運行資訊保密子模組223來執行資訊保密功能。以經營購物網站的服務租戶20為例，項目資訊可以包括商品名稱、商品價格、商品描述、網站營收、產品銷售量、訂價策略、消費者資料或其組合等等。上述的項目資訊僅為舉例，實際上項目資訊還可包括其它的資訊，本揭露的項目資訊不以上述為限。
圖3是根據一範例實施例所繪示之資訊保密操作的示意圖。
請同時參照圖2及圖3，至少一處理器110可經配置運行資訊保密子模組223以對服務租戶20提供的項目資訊執行資訊保密操作並產生保密項目資訊。之後，至少一處理器110可將保密項目資訊提供給服務開發者30。服務開發者30接收到此保密項目資訊後，則可根據保密項目資訊執行資料分析以建立保密服務數據模型。此外，至少一處理器110可經配置運行資訊保密子模組223對所建立的保密服務數據模型執行還原操作以取得包括真實資訊的服務數據模型。基此，至少一處理器110可經配置運行至少一應用服務單元211(1)~211(X)及至少一應用服務評估單元212(1)~212(N)以根據服務數據模型來執行雲端服務。
資訊保密子模組223經配置執行的資訊保密操作例如是用以排除項目資訊中的機密資訊。具體而言，資訊保密子模組223可經配置根據服務數據模型的建立方式來決定需排除的機密資訊。例如，針對以使用者行為模式（例如點擊行為）的資料分析為基礎所建立的服務數據模型，資訊保密子模組223可經配置排除項目資訊中關於商品的具體描述。此外，針對以商品本質的資料分析為基礎所建立的服務數據模型，資訊保密子模組223可經配置排除項目資訊中的商品銷售數量。基此，資訊保密子模組223所產生的保密項目資訊將不會包含已排除的項目資訊。
再者，資訊保密子模組223經配置執行的資訊保密操作也可例如是將項目資訊轉換為映射項目資訊以產生保密項目資訊。在本揭露的一範例實施例中，資訊保密子模組223可加密項目資訊來產生保密項目資訊。例如，至少一處理器110可經配置運行資訊保密子模組223以利用進階加密標準（Advanced Encryption Standard，簡稱AES）、資料加密標準（Data Encryption Standard，簡稱DES）、三重資料加密演算法（Triple Data Encryption Algorithm，簡稱3DES）、RC2加密演算法、RSA加密演算法等加密演算法來加密項目資訊。然而，在本揭露的另一範例實施例中，資訊保密子模組223也可經配置使用正規化（normalization）處理將項目資訊轉換為映射項目資訊。基此，資訊保密子模組223經配置所產生的保密項目資訊可包括映射項目資訊。例如，資訊保密子模組223可經配置將某件商品的商品名稱重新命名以轉換為映射商品名稱。或者，至少一處理器110可經配置將多個服務租戶20對同一件商品提供的多個商品價格計算平均值以得到映射商品價格，並且將項目資訊與映射項目資訊之間的關聯性記錄在包括至少一記憶體120的資料庫240中。如此一來，資訊保密子模組223便可經配置根據資料庫240中的關聯性記錄對服務開發者30提供的保密服務數據模型執行還原映射操作以取得包括真實資料的服務數據模型。
請再參照圖2，導流模組230可經配置執行導流操作以將服務租戶20端的至少一線上服務請求導流至至少一應用服務單元211(1)~211(X)與至少一應用服務評估單元212(1)~212(N)。具體而言，至少一處理器110可經配置運行導流模組230以根據預設流量比例來分配導流至至少一應用服務單元211(1)~211(X)與至少一應用服務評估單元212(1)~212(N)的至少一線上服務請求。在本範例實施例中，為維持服務品質，至少一處理器110可經配置將大部分流量的線上服務請求導流至至少一應用服務單元211(1)~211(X)。此外，在本實施例中，線上雲端服務處理系統10的至少一伺服器130(1)~130(S)（例如雲端服務伺服器210）還可包括至少一主機（例如實體主機或虛擬主機），並且導流模組230亦可以佈署在一或多個主機中。
在本範例實施例中，至少一處理器110還可經配置將至少一線上服務請求的流量資訊記錄在至少一記憶體120的資料庫240中。流量資訊可例如為發出至少一線上服務請求的服務租戶帳號、線上服務請求的發生時間、點擊的網頁、訂單等，或是至少一處理器110經配置執行導流操作後提供的線上服務請求與應用服務單元的相關資訊（例如流量等）。此外，至少一處理器110還可經配置在資料庫240中記錄線上服務請求是被導流至至少一應用服務單元211(1)~211(X)或至少一應用服務評估單元212(1)~212(N)。
圖4是根據一範例實施例所繪示之導流線上服務請求的示意圖。
請同時參照圖2及圖4，在本範例實施例中，線上雲端服務處理系統10的至少一伺服器130(1)~130(S)所包括的至少一處理器110可經配置運行應用服務單元211及應用服務評估單元212(1)~212(3)來執行雲端服務功能。至少一處理器110可經配置運行導流模組230以將至少一線上服務請求區分為要導流至應用服務單元211的線上服務請求（以下亦稱為第一部份）以及要導流至應用服務評估單元212(1)~212(3)的線上服務請求（以下亦稱為第二部份）。例如，導流模組230將使用者user1發出的線上服務請求區分為第一部份並導流至應用服務單元211。導流模組230將使用者user2在三個時段t1~ t3發出的線上服務請求區分為第二部份並分別導流至應用服務評估單元212(1)~212(3)。特別的是，在本範例實施例中，導流模組230可經配置將使用者user2在時段t1發出的線上服務請求導流至應用服務評估單元212(1)；在時段t2發出的線上服務請求導流至應用服務評估單元212(2)；在時段t3發出的線上服務請求導流至應用服務評估單元212(3)。以下將以圖5的範例實施例來說明上述的導流功能。
圖5是根據一範例實施例所繪示之根據流量比例導流線上服務請求的示意圖。
請同時參照圖2及圖5，在本範例實施例中，線上雲端服務處理系統10的至少一伺服器130(1)~130(S)（例如雲端服務伺服器210）所包括的至少一處理器110可經配置運行一個應用服務單元211及N個應用服務評估單元212(1)~212(N)來執行雲端服務功能。服務租戶20端根據使用者的操作提供多個線上服務請求至線上雲端服務處理系統10。至少一處理器110可預先設定應用服務單元211對應的流量比例M%與應用服務評估單元212(1)~212(N)對應的評估流量比例m%（以下亦稱為總評估流量比例）。在本範例實施例中，至少一處理器110可經配置設定主要流量比例M%大於總評估流量比例m%，並且M與m的總和等於100。舉例而言於一實施例中，主要流量比例設定為80%，而總評估流量比例設定為20%。換句話說，導流模組230可經配置將80%流量的線上服務請求區分為第一部份而導流至應用服務單元211，並且將其他20%流量的線上服務請求區分為第二部份而導流至應用服務評估單元212(1)~212(N)。
在本範例實施例中，線上雲端服務處理系統10上註冊了N個應用服務評估單元212(1)~212(N)。因此，導流模組230還可經配置將線上服務請求的第二部份平均分配給每一個應用服務評估單元。換句話說，導流模組230可經配置設定每一個應用服務評估單元的個別評估流量比例為n%，並且總評估流量比例m%等於個別評估流量比例n%乘以應用服務評估單元的數目N。舉例而言，假設總評估流量比例為20%且線上雲端服務處理系統10上註冊了10個應用服務評估單元，至少一處理器110可經配置設定每一個應用服務評估單元的個別評估流量比例為2%。換句話說，至少一處理器110可經配置將2%流量的線上服務請求導流至每一個應用服務評估單元。
在實際運作上，至少一處理器110可以針對每一個線上服務請求計算一個數值（以下亦稱為第一分配數值），並且根據所計算的數值來決定如何導流每一個線上服務請求。在本範例實施例中，至少一處理器110是將每一個線上服務請求的流量資訊輸入至雜湊函數以計算出雜湊值，並且根據雜湊值來產生第一分配數值。在此，可以依據實際需求來決定輸入至雜湊函數的流量資訊，本揭露並不限制流量資訊的內容。以電商（亦即服務租戶）購物網站之商品智慧推薦服物為例，為確保顧客於瀏覽期間可接受同一評估應用服務，輸入至雜湊涵數的流量資訊會包含服務租戶名稱、瀏覽期間編號、發生時段。倘若至少一處理器110根據某個線上服務請求計算出第一分配數值，並且判斷第一分配數值對應至主要流量比例，至少一處理器110可經配置決定此線上服務請求屬於第一部份並導流至應用服務單元211。此外，至少一處理器110還可經配置將所計算出的雜湊值進行正規化處理以產生第一分配數值。例如，在本範例實施例中，倘若經過正規化處理所產生的第一分配數值介於0~M之間，至少一處理器110可經配置將線上服務請求導流至應用服務單元211。另一方面，倘若經過正規化處理所產生的第一分配數值介於M~100之間，至少一處理器110可經配置將線上服務請求導流至應用服務評估單元212(1)~212(N)。上述0~M之間的範圍可定義為大於或等於0並且小於M的數值範圍，而上述的M~100之間的範圍可定義為大於或等於M並且小於100的數值範圍。至少一處理器110可經配置預先將第一分配數值與至少一應用服務單元（或主要流量比例）及至少一應用服務評估單元（或總評估流量比例）的對應關係記錄在至少一記憶體120的資料庫240中。
類似地，倘若至少一處理器110經配置判斷第一分配數值對應至總評估流量比例（例如介於M~100之間），至少一處理器110可經配置決定此線上服務請求屬於第二部分並將此線上服務請求導流至應用服務評估單元212(1)~212(N)。在本範例實施例中，至少一處理器110可經配置再針對此線上服務請求計算另一個數值（以下亦稱為第二分配數值）。例如，至少一處理器110可經配置將此線上服務請求的服務租戶名稱、瀏覽期間編號、發生時段等流量資訊輸入至雜湊函數以計算出雜湊值，並且根據雜湊值來產生第二分配數值。進一步地，至少一處理器110還可經配置將所計算出的雜湊值進行正規化處理以產生第二分配數值。類似於第一分配數值的判斷方式，在本範例實施例中，倘若經過正規化處理所產生的第二分配數值介於0~n之間，至少一處理器110可經配置將此線上服務請求導流至應用服務評估單元212(1)。倘若經過正規化處理所產生第二分配數值介於n~2n之間，至少一處理器110可經配置將此線上服務請求導流至應用服務評估單元212(2)。依此類推，導流至應用服務評估單元212(1)~212(N)的線上服務請求的流量便可符合預設的總評估流量比例，並且導流至各應用服務評估單元的流量可趨於相等。特別的是，上述用來產生第一分配數值與第二分配數值的雜湊函數可以是相同或相異。此外，上述的第一分配數值與第二分配數值也可以根據亂數產生，但本揭露並不限於此，亦可使用其他方式來產生第一分配數值與第二分配數值。
請再參照圖2，評估模組250可經配置執行評估操作以根據至少一應用服務評估單元212所產生的輸出結果計算各個至少一應用服務評估單元212的至少一評等。
圖6是根據一範例實施例所繪示之成效評估操作的示意圖。
請同時參照圖2及圖6，至少一處理器110可經配置運行評估模組250以計算對應至少一應用服務評估單元212(1)~212(N)的至少一評估指標，進而根據所計算的至少一評估指標得到至少一應用服務評估單元212(1)~212(N)的至少一評等。一實施例中，每個應用服務評估單元可包括各自的至少一評估指標，並且得到至少一評等。具體而言，至少一處理器110可經配置將至少一應用服務評估單元212(1)~212(N)依據至少一線上服務請求所產生的輸出結果儲存在資料庫240中。此外，至少一處理器110可經配置預先決定計算評等所需使用的至少一評估指標，並且運行評估模組250以根據儲存在資料庫240中的流量資訊與輸出結果計算至少一評估指標。以購物網站的商品推薦服務為例，評估指標可例如是點擊瀏覽率（click-through rate）、下單率（order rate）、點擊下單率（click-order rate）、資源使用（resource usage）等。儲存在資料庫240中的流量資訊可包括各購物網站的瀏覽記錄以及至少一線上服務請求與至少一應用服務評估單元212(1)~212(N)之間的對應關係。例如，點擊瀏覽率可根據資料庫240中使用者對至少一應用服務評估單元212(1)~212(N)的輸出結果執行點擊的次數計算而得；下單率可根據資料庫240中的訂單成立數目計算而得；並且點擊下單率可根據資料庫240中使用者對至少一應用服務評估單元212(1)~212(N)的輸出結果執行點擊以產生訂單的點擊次數計算而得。
評估模組250可經配置根據上述的流量資訊與至少一應用服務評估單元212(1)~212(N)的至少一輸出結果計算出對應至少一應用服務評估單元(1)~212(N)的至少一評估指標。一實施例中，每個應用服務評估單元可包括各自的至少一評估指標。例如，評估模組250可直接以單一評估指標進行至少一應用服務評估單元(1)~212(N)的評等。除此之外，評估模組250也可根據多個評估指標和對應的權重值來計算出評等。舉例而言，至少一處理器110可經配置根據「點擊瀏覽率」與「下單率」來計算出評等。假設評等的主要目的是為了找出具有最高點擊瀏覽率的雲端服務的應用服務評估單元，至少一處理器110可經配置將「點擊瀏覽率」這個評估指標設定為對應最大的權重值，並且將「點擊瀏覽率」與「下單率」分別乘以各自對應的權重值後加總而得出評等。在本揭露中並不限制對應各評估指標的權重值。
請再參考圖2，管理控制台224包括評估描述子模組225、評估結果子模組226及評估排名子模組227。
評估描述子模組225可經配置提供至少一應用服務評估單元212(1)~212(N)的相關描述（例如應用程式簡介），或者提供線上雲端服務處理系統10所提供的評估資訊（例如雲端服務描述、評估規則、成效評估指標與計算方式）、需符合的資料格式（例如服務數據模型結果檔的固定格式）等。
評估結果子模組226可經配置根據所計算出的評等提供評估結果給服務開發者30。在一範例實施例中，評估結果子模組226可根據各應用服務評估單元的評等執行統計檢定（statistics test），例如，T檢定（T testing）或變異數分析（analysis of variance，ANOVA）來比較各應用服務評估單元的評等的評估結果。在另一範例實施例中，評估結果子模組226可直接比對各應用服務評估單元的評等以產生評估結果。
評估排名子模組227用以根據各應用服務評估單元的評等或評估結果產生評估排行榜。
在本範例實施例中，至少一處理器110還可經配置運行評估管理模組220的註冊子模組221以根據至少一應用服務單元211(1)~211(X)註冊至少一比對應用服務單元。詳細來說，至少一處理器110可經配置複製至少一應用服務單元211(1)~211(X)以產生至少一比對應用服務單元，並且將至少一比對應用服務單元作為至少一應用服務評估單元212(1)~212(N)至少其中之一。換句話說，被導流至至少一應用服務評估單元212(1)~212(N)的至少一線上服務請求中，部分的線上服務請求將可經配置被導流至至少一比對應用服務單元。如此一來，至少一比對應用服務單元與至少一應用服務評估單元212(1)~212(N)將可分別地對相同比例流量的線上服務請求執行雲端服務。至少一處理器110可經配置根據至少一比對應用服務單元的評估指標來計算出對應的評等，並且可比較至少一比對應用服務單元（亦即所複製的至少一應用服務單元211）與至少一應用服務評估單元212(1)~212(N)的評等，譬如效能優劣或其他評等。
在本範例實施例中，上述各模組是以軟體型式來實作並儲存在至少一記憶體120中。當線上雲端服務處理系統10運作時，至少一伺服器130(1)~130(S)所包括的至少一處理器110可經配置從至少一記憶體120中載入上述各模組的程式碼以執行對應操作。然而，必須了解的是，本揭露不限於此。在另一範例實施例，上述各模組的對應功能亦可以硬體電路型式來實作。
圖7是根據一範例實施例所繪示之評測方法的流程圖。此評測方法用於上述的線上雲端服務處理系統。
請參照圖7。在步驟S701中，至少一處理器110可經配置運行線上雲端服務處理系統中至少一應用服務單元211(1)~211(X)。並且，在步驟S703中，至少一處理器110可經配置執行線上雲端服務處理系統中至少一應用服務評估單元212(1)~212(N)的至少一評估註冊程序以回應所接收的對至少一應用服務評估單元212(1)~212(N)的至少一註冊請求。在此步驟中，至少一處理器110可經配置設定至少一應用服務評估單元212(1)~212(N)的至少一服務邏輯規則與至少一服務數據模型。
然後，在步驟S705中，至少一處理器110可經配置運行至少一應用服務評估單元212(1)~212(N)。
在步驟S707中，至少一處理器110可經配置將至少一線上服務請求的第一部份導流至至少一應用服務單元211(1)~211(X)，將至少一線上服務請求的第二部分導流至至少一應用服務評估單元212(1)~212(N)，並且產生對應至少一線上服務請求的至少一輸出結果。在此步驟中，至少一處理器110可經配置計算對應至少一線上服務請求的至少一第一分配數值，並且根據至少一第一分配數值將至少一線上服務請求區分為第一部份與第二部分。進一步地，至少一處理器110還可經配置計算對應至少一線上服務請求的第二部分的至少一第二分配數值，並且根據至少一第二分配數值將至少一線上服務請求的第二部份導流至至少一應用服務評估單元212(1)~212(N)。
最後，在步驟S709中，至少一處理器110可經配置根據至少一輸出結果之中至少一應用服務評估單元212(1)~212(N)的輸出結果計算各個至少一應用服務評估單元的至少一評等。
上述圖7的各步驟已於前述的範例實施例中詳細說明，於此不再贅述。
本揭露的另一範例實施例提出一種電腦程式產品，用以執行上述線上評測方法的各個步驟。此電腦程式產品包括多個程式指令，且線上雲端服務處理系統10中的至少一伺服器130(1)~130(S)所包括的至少一處理器110載入並執行此些程式指令之後，可完成上述的線上評測方法以及實現線上雲端服務處理系統10的功能。
綜上所述，本揭露的線上雲端服務伺服器可同時運行至少一應用服務評估單元與至少一應用服務單元。透過導流機制可將大部分的線上服務請求導流至至少一應用服務單元以執行一般的雲端服務功能，並將少部分的線上服務請求提供給至少一應用服務評估單元以執行測試的雲端服務功能。如此一來，線上雲端服務伺服器仍可以至少一應用服務單元為主來持續提供雲端服務，還可提供至少一應用服務評估單元根據即時的線上服務請求來進行評估測試，並進行評等。
雖然本揭露已以實施例揭露如上，然其並非用以限定本揭露，任何所屬技術領域中具有通常知識者，在不脫離本揭露的精神和範圍內，當可作些許的更動與潤飾，故本揭露的保護範圍當視後附的申請專利範圍所界定者為準。
10‧‧‧線上雲端服務處理系統
20‧‧‧服務租戶
30‧‧‧服務開發者
110‧‧‧處理器
120‧‧‧記憶體
130(1)~130(S)‧‧‧伺服器
210‧‧‧雲端服務伺服器
211、211(1)~211(X)‧‧‧應用服務單元
212(1)~212(N)‧‧‧應用服務評估單元
220‧‧‧評估管理模組
221‧‧‧註冊子模組
222‧‧‧驗證子模組
223‧‧‧資訊保密子模組
224‧‧‧管理控制台
225‧‧‧評估描述子模組
226‧‧‧評估結果子模組
227‧‧‧評估排名子模組
230‧‧‧導流模組
240‧‧‧資料庫
250‧‧‧評估模組
user1、user2‧‧‧使用者
t1、t2、t3‧‧‧時段
S701~S709‧‧‧線上評測方法的步驟
圖1是根據一範例實施例所繪示之線上雲端服務處理系統所包括的雲端服務伺服器的示意圖。 圖2是根據一範例實施例所繪示之線上雲端服務處理系統的示意圖。 圖3是根據一範例實施例所繪示之資訊保密操作的示意圖。 圖4是根據一範例實施例所繪示之導流線上服務請求的示意圖。 圖5是根據一範例實施例所繪示之根據流量比例導流線上服務請求的示意圖。 圖6是根據一範例實施例所繪示之成效評估操作的示意圖。 圖7是根據一範例實施例所繪示之線上評測方法的流程圖。
S701~S709‧‧‧線上評測方法的步驟

Claims (30)

  1. 一種線上雲端服務處理系統，包括： 至少一伺服器，各伺服器包括至少一記憶體以及至少一處理器，經配置以執行儲存在所述至少一記憶體的多個指令； 至少一應用服務單元，經配置以運行至少一應用服務； 至少一應用服務評估單元，經配置以評估一或多個應用服務； 一評估管理模組，經配置執行所述至少一應用服務評估單元的至少一評估註冊程序，以回應所接收的對所述至少一應用服務評估單元的至少一註冊請求； 一導流模組，經配置將至少一線上服務請求的第一部分導流至所述至少一應用服務單元、所述至少一線上服務請求的第二部分則導流至所述至少一應用服務評估單元，以產生對應所述至少一線上服務請求的至少一輸出結果；以及 一評估模組，經配置根據所述至少一輸出結果之中所述至少一應用服務評估單元產生的輸出結果計算各個所述至少一應用服務評估單元的至少一評等。
  2. 如申請專利範圍第1項所述的線上雲端服務處理系統，其中所述評估管理模組包括一註冊子模組，經配置根據所述至少一註冊請求設定所述至少一應用服務評估單元對應的至少一服務邏輯規則與至少一服務數據模型，以執行所述至少一應用服務評估單元的所述至少一評估註冊程序。
  3. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述至少一註冊請求包括對應所述至少一服務數據模型的至少一服務數據模型結果檔。
  4. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述至少一註冊請求包括至少一訓練程式碼，其中所述至少一應用服務評估單元經配置執行所述至少一訓練程式碼以建立對應所述至少一服務數據模型的至少一服務數據模型結果檔。
  5. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述至少一註冊請求包括至少一網址，其中所述至少一網址對應所述至少一服務邏輯規則的至少一應用程式介面。
  6. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述至少一註冊請求包括對應所述至少一服務邏輯規則的至少一原始程式碼。
  7. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述至少一註冊請求包括至少一結合程式碼，其中所述至少一應用服務評估單元經配置執行所述至少一結合程式碼以根據所述至少一應用服務單元所使用的至少一服務數據模型結果檔來產生所述至少一服務邏輯規則。
  8. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述評估管理模組經配置接收多個項目資訊，並且將所述多個項目資訊轉換為多個映射項目資訊，其中所述至少一服務數據模型是根據所述多個映射項目資訊所產生。
  9. 如申請專利範圍第2項所述的線上雲端服務處理系統，其中所述評估管理模組經配置根據所述至少一服務邏輯規則與所述至少一服務數據模型來執行一驗證操作。
  10. 如申請專利範圍第1項所述的線上雲端服務處理系統，其中所述導流模組經配置計算對應所述至少一線上服務請求的至少一第一分配數值，並且根據所述至少一第一分配數值將所述至少一線上服務請求區分為所述第一部分與所述第二部份。
  11. 如申請專利範圍第10項所述的線上雲端服務處理系統，其中所述導流模組經配置計算對應所述至少一線上服務請求的所述第二部份的至少一第二分配數值，並且根據所述至少一第二分配數值將所述至少一線上服務請求的所述第二部份導流至所述至少一應用服務評估單元。
  12. 如申請專利範圍第11項所述的線上雲端服務處理系統，其中所述導流模組經配置根據至少一雜湊函數產生所述至少一第一分配數值與所述至少一第二分配數值。
  13. 如申請專利範圍第1項所述的線上雲端服務處理系統，其中所述評估模組經配置根據所述至少一輸出結果之中所述至少一應用服務評估單元產生的輸出結果計算對應所述至少一應用服務評估單元的至少一評估指標，並且根據所述至少一評估指標計算各個所述至少一應用服務評估單元的所述至少一評等。
  14. 如申請專利範圍第1項所述的線上雲端服務處理系統，其中所述評估管理模組經配置根據所述至少一應用服務單元建立至少一比對應用服務單元，並且以所述至少一比對應用服務單元作為所述至少一應用服務評估單元的至少其中之一。
  15. 如申請專利範圍第1項所述的線上雲端服務處理系統，其中所述至少一伺服器的各伺服器還包括: 所述至少一應用服務單元、所述至少一應用服務評估單元、所述評估管理模組、所述導流模組以及所述評估模組，至少其中之一。
  16. 一種線上評測方法，適用於一線上雲端服務處理系統，所述線上評測方法包括： 運行所述處理系統中至少一應用服務單元； 執行所述處理系統中至少一應用服務評估單元的至少一評估註冊程序以回應所接收的對所述至少一應用服務評估單元的至少一註冊請求； 運行所述至少一應用服務評估單元； 將至少一線上服務請求的第一部份導流至所述至少一應用服務單元，將所述至少一線上服務請求的第二部份導流至所述至少一應用服務評估單元，並且產生對應所述至少一線上服務請求的至少一輸出結果；以及 根據所述至少一輸出結果之中所述至少一應用服務評估單元產生的輸出結果計算各個所述至少一應用服務評估單元的至少一評等。
  17. 如申請專利範圍第16項所述的線上評測方法，其中執行所述評估註冊程序以回應所述至少一註冊請求時，還包括： 根據所述至少一註冊請求設定所述至少一應用服務評估單元對應的至少一服務邏輯規則與至少一服務數據模型。
  18. 如申請專利範圍第17項所述的線上評測方法，其中所述至少一註冊請求包括對應所述至少一服務數據模型的至少一服務數據模型結果檔。
  19. 如申請專利範圍第17項所述的線上評測方法，其中所述至少一註冊請求包括至少一訓練程式碼，其中所述至少一訓練程式碼建立對應所述至少一服務數據模型的至少一服務數據模型結果檔。
  20. 如申請專利範圍第17項所述的線上評測方法，其中所述至少一註冊請求包括至少一網址，其中所述至少一網址對應所述至少一服務邏輯規則的至少一應用程式介面。
  21. 如申請專利範圍第17項所述的線上評測方法，其中所述至少一註冊請求包括對應所述至少一服務邏輯規則的至少一原始程式碼。
  22. 如申請專利範圍第17項所述的線上評測方法，其中所述至少一註冊請求包括至少一結合程式碼，其中所述至少一結合程式碼用以根據所述至少一應用服務單元所使用的至少一服務數據模型結果檔來產生所述至少一服務邏輯規則。
  23. 如申請專利範圍第17項所述的線上評測方法，還包括： 接收多個項目資訊；以及 將所述多個項目資訊轉換為多個映射項目資訊， 其中所述至少一服務數據模型是根據所述多個映射項目資訊所產生。
  24. 如申請專利範圍第17項所述的線上評測方法，其中執行所述評估註冊程序以回應所述至少一註冊請求時，還包括： 根據所述至少一服務邏輯規則與所述至少一服務數據模型來執行一驗證操作。
  25. 如申請專利範圍第16項所述的線上評測方法，其中還包括： 計算對應所述至少一線上服務請求的至少一第一分配數值，並且根據所述至少一第一分配數值將所述至少一線上服務請求區分為所述第一部分與所述第二部份。
  26. 如申請專利範圍第25項所述的線上評測方法，其中還包括： 計算對應所述至少一線上服務請求的所述第二部份的至少一第二分配數值，並且根據所述至少一第二分配數值將所述至少一線上服務請求的所述第二部份導流至所述至少一應用服務評估單元。
  27. 如申請專利範圍第26項所述的線上評測方法，還包括： 根據至少一雜湊函數產生所述至少一第一分配數值與所述至少一第二分配數值。
  28. 如申請專利範圍第16項所述的線上評測方法，其中計算所述至少一評等時，還包括： 根據所述至少一輸出結果之中所述至少一應用服務評估單元產生的輸出結果計算對應所述至少一應用服務評估單元的至少一評估指標；以及 根據所述至少一評估指標計算各個所述至少一應用服務評估單元的所述至少一評等。
  29. 如申請專利範圍第16項所述的線上評測方法，還包括： 根據所述至少一應用服務單元建立至少一比對應用服務單元，並且以所述至少一比對應用服務單元作為所述至少一應用服務評估單元的至少其中之一。
  30. 一種電腦程式產品，包括多個指令，當一線上雲端服務處理系統載入該些指令並由所述處理系統所包括的至少一處理器執行後，可完成申請專利範圍第16~29項所述之方法。
TW105142421A 2016-12-21 2016-12-21 線上雲端服務處理系統與線上評測方法及其電腦程式產品 TWI606349B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW105142421A TWI606349B (zh) 2016-12-21 2016-12-21 線上雲端服務處理系統與線上評測方法及其電腦程式產品
CN201611233365.4A CN108230005B (zh) 2016-12-21 2016-12-28 在线云端服务处理系统与评测方法及其计算机程序产品
US15/458,988 US10791038B2 (en) 2016-12-21 2017-03-15 Online cloud-based service processing system, online evaluation method and computer program product thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW105142421A TWI606349B (zh) 2016-12-21 2016-12-21 線上雲端服務處理系統與線上評測方法及其電腦程式產品

Publications (2)

Publication Number Publication Date
TWI606349B true TWI606349B (zh) 2017-11-21
TW201824009A TW201824009A (zh) 2018-07-01

Family

ID=61023029

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105142421A TWI606349B (zh) 2016-12-21 2016-12-21 線上雲端服務處理系統與線上評測方法及其電腦程式產品

Country Status (3)

Country Link
US (1) US10791038B2 (zh)
CN (1) CN108230005B (zh)
TW (1) TWI606349B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108415811A (zh) * 2018-03-23 2018-08-17 广发证券股份有限公司 一种监测业务逻辑的方法及装置

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109144721B (zh) * 2018-07-18 2022-08-16 Oppo广东移动通信有限公司 资源排序方法、资源显示方法、相关装置及存储介质
CN109934468A (zh) * 2019-02-26 2019-06-25 北京多点在线科技有限公司 一种兼职工作匹配方法及系统、存储介质
CN110427983B (zh) * 2019-07-15 2020-12-01 北京智能工场科技有限公司 一种基于本地模型与云端反馈的全流程人工智能竞赛系统及其数据处理方法
US11632419B1 (en) 2019-12-19 2023-04-18 Avalara, Inc. Coarse values for estimating less-than-critical resources
US12028273B2 (en) 2019-09-27 2024-07-02 Avalara, Inc. Computing systems, networks, and notifications
US11463375B1 (en) 2020-03-05 2022-10-04 Avalara, Inc. Online software platform (OSP) accessing digital rules updated based on client inputs
CA3182235A1 (en) 2020-07-02 2022-01-06 Gregory T. Kavounas Online service platform (osp) generating and transmitting on behalf of primary entity to third party proposal of the primary entity while maintaining the primary entity anonymous
CN113269406A (zh) * 2021-05-06 2021-08-17 京东数字科技控股股份有限公司 线上服务的评价方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880542A (zh) * 2011-07-14 2013-01-16 易云捷讯科技（北京）有限公司 云计算服务评测系统及评测方法
CN104331477A (zh) * 2014-11-04 2015-02-04 哈尔滨工业大学 基于联邦式检索的云平台并发性能测试方法
US20150339628A1 (en) * 2014-05-23 2015-11-26 Electronics And Telecommunications Research Institute Online software service system and method
CN105718805A (zh) * 2016-01-25 2016-06-29 福建北卡科技有限公司 基于评价可信度的云计算信任管理方法

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5714866A (en) * 1994-09-08 1998-02-03 National Semiconductor Corporation Method and apparatus for fast battery charging using neural network fuzzy logic based control
US5767460A (en) * 1995-11-30 1998-06-16 Otis Elevator Company Elevator controller having an adaptive constraint generator
US6317722B1 (en) 1998-09-18 2001-11-13 Amazon.Com, Inc. Use of electronic shopping carts to generate personal recommendations
US7069234B1 (en) 1999-12-22 2006-06-27 Accenture Llp Initiating an agreement in an e-commerce environment
US6569012B2 (en) 2001-01-09 2003-05-27 Topcoder, Inc. Systems and methods for coding competitions
EP1704492A1 (en) * 2003-11-27 2006-09-27 Quinetiq Limited Automated anomaly detection
US7509406B2 (en) * 2004-09-30 2009-03-24 Microsoft Corporation Managing terminal services accounts and sessions for online utilization of a hosted application
US9823737B2 (en) * 2008-04-07 2017-11-21 Mohammad A Mazed Augmented reality personal assistant apparatus
US8090621B1 (en) 2007-06-27 2012-01-03 Amazon Technologies, Inc. Method and system for associating feedback with recommendation rules
US8027981B2 (en) * 2008-12-10 2011-09-27 International Business Machines Corporation System, method and program product for classifying data elements into different levels of a business hierarchy
CN102065057B (zh) * 2009-11-18 2014-07-16 华为技术有限公司 一种应用于Widget的代理服务的方法及服务器
US20110208606A1 (en) 2010-02-19 2011-08-25 Computer Associates Think, Inc. Information Technology Services E-Commerce Arena for Cloud Computing Environments
EP2539861A4 (en) * 2010-02-24 2013-08-07 Univ Columbia METRIC MONITORING AND FINANCIAL VALIDATION SYSTEM FOR PURSUIT OF PERFORMANCE IN IMPROVING INFRASTRUCTURE
US20110307304A1 (en) 2010-06-11 2011-12-15 Microsoft Corporation Crowd-sourced competition platform
US8875131B2 (en) 2010-11-18 2014-10-28 International Business Machines Corporation Specification of environment required for crowdsourcing tasks
JP5821417B2 (ja) * 2011-08-30 2015-11-24 コニカミノルタ株式会社 サービス評価システム、画像形成装置およびプログラム
CN103136626B (zh) * 2011-11-29 2016-08-03 北京建龙重工集团有限公司 工程项目的在线管理方法
CN102591778B (zh) 2012-01-09 2015-04-29 福建师范大学 一种基于服务的可扩展程序竞赛评测系统
US8738459B2 (en) 2012-05-30 2014-05-27 International Business Machines Corporation Product recommendation
US9135320B2 (en) 2012-06-13 2015-09-15 Opera Solutions, Llc System and method for data anonymization using hierarchical data clustering and perturbation
US9225621B2 (en) * 2013-06-25 2015-12-29 Netflix, Inc. Progressive deployment and termination of canary instances for software analysis
JP6273773B2 (ja) * 2013-10-30 2018-02-07 富士ゼロックス株式会社 情報処理装置、情報処理システムおよびプログラム
CN104683378A (zh) * 2013-11-27 2015-06-03 上海墨芋电子科技有限公司 新技术的一种新型云计算服务平台的计算调试系统
US9942265B2 (en) * 2014-01-06 2018-04-10 International Business Machines Corporation Preventing application-level denial-of-service in a multi-tenant system
US10007701B2 (en) * 2014-07-16 2018-06-26 Oracle International Corporation Database consolidation advisor
US20160110789A1 (en) * 2014-10-20 2016-04-21 Brian Michael Gilb Cumulative Evaluation and Review System and Methods
US10009416B2 (en) * 2015-04-12 2018-06-26 Alcatel-Lucent Usa Inc. Perfect application capacity analysis for elastic capacity management of cloud-based applications

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880542A (zh) * 2011-07-14 2013-01-16 易云捷讯科技（北京）有限公司 云计算服务评测系统及评测方法
US20150339628A1 (en) * 2014-05-23 2015-11-26 Electronics And Telecommunications Research Institute Online software service system and method
CN104331477A (zh) * 2014-11-04 2015-02-04 哈尔滨工业大学 基于联邦式检索的云平台并发性能测试方法
CN105718805A (zh) * 2016-01-25 2016-06-29 福建北卡科技有限公司 基于评价可信度的云计算信任管理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108415811A (zh) * 2018-03-23 2018-08-17 广发证券股份有限公司 一种监测业务逻辑的方法及装置

Also Published As

Publication number Publication date
CN108230005B (zh) 2022-05-24
TW201824009A (zh) 2018-07-01
CN108230005A (zh) 2018-06-29
US10791038B2 (en) 2020-09-29
US20180176099A1 (en) 2018-06-21

Similar Documents

Publication Publication Date Title
TWI606349B (zh) 線上雲端服務處理系統與線上評測方法及其電腦程式產品
Hu et al. A blockchain-based trading system for big data
WO2020220763A1 (zh) 基于区块链的信用记录、查询方法及装置和电子设备
US11245536B2 (en) Secure multi-party computation attribution
US10051082B2 (en) Cost determination to provide software as a service
US20100153329A1 (en) Estimating influence
US10521795B2 (en) Managing deferred account creation and software access
US9652812B2 (en) Obtaining software asset insight by analyzing collected metrics using analytic services
US11120157B2 (en) System and method for safe usage and fair tracking of user profile data
EP3776434B1 (en) Methods and apparatus to determine informed holdouts for an advertisement campaign
KR102448618B1 (ko) 화장품 내용물 및 포장재에 대한 탄소배출량 산출 및 보고서 제공 방법, 장치 및 시스템
Shirazi et al. Community clouds within M-commerce: a privacy by design perspective
Helsloot et al. Badass: Preserving privacy in behavioural advertising with applied secret sharing
Odiete et al. Using blockchain to support data and service management in IoV/IoT
US20220058664A1 (en) Methods and apparatus for audience measurement analysis
CN111062594A (zh) 一种供应商运营能力的评估方法、装置和电子设备
Park et al. Collaborative filtering recommendation system based on improved Jaccard similarity
US20190080360A1 (en) Technologies for propogating advertisements
Olokunde et al. Quality model for evaluating platform as a service in cloud computing
JP2020064523A (ja) 提供装置、提供方法および提供プログラム
Easwaran et al. Bitcoin dynamics: the inverse square law of price fluctuations and other stylized facts
CN105488684A (zh) 交易系统中的推荐关系确定方法及装置
JP2020518067A (ja) 消費者が複数の発行者サイトにて同じペイメントカードを同じオファーにリンクすることを可能にするカードリンクトオファーネットワークを提供するためのシステム、方法、及びコンピュータプログラム
US20190258827A1 (en) Authentication servers that authenticate items provided by source computer servers
WO2020145964A1 (en) Secure transactions