TW201405339A - Web作業共用thread pool與jdbc pool下之作業關係鏈結模組 - Google Patents

Web作業共用thread pool與jdbc pool下之作業關係鏈結模組 Download PDF

Info

Publication number
TW201405339A
TW201405339A TW101141721A TW101141721A TW201405339A TW 201405339 A TW201405339 A TW 201405339A TW 101141721 A TW101141721 A TW 101141721A TW 101141721 A TW101141721 A TW 101141721A TW 201405339 A TW201405339 A TW 201405339A
Authority
TW
Taiwan
Prior art keywords
module
information
pool
jdbc
data
Prior art date
Application number
TW101141721A
Other languages
English (en)
Other versions
TWI480750B (zh
Inventor
Bei-Fen Ji
Jing-Yi Hong
ming-xiu Wu
Min-Xian Chen
qing-wei Meng
Original Assignee
Chunghwa Telecom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chunghwa Telecom Co Ltd filed Critical Chunghwa Telecom Co Ltd
Priority to TW101141721A priority Critical patent/TW201405339A/zh
Publication of TW201405339A publication Critical patent/TW201405339A/zh
Application granted granted Critical
Publication of TWI480750B publication Critical patent/TWI480750B/zh

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Stored Programmes (AREA)

Abstract

一種WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,使作業於前、後伺服器上執行時,即時產生鏈結關係。作業關係鏈結模組的運作機制是將web作業的可辨識資訊加到將在資料庫伺服器上執行的SQL上,讓作業SQL於資料庫伺服器上執行時同時含有前端web作業的可辨識資訊,此時管理人員即可配合運用資料庫伺服器管理功能,即時掌握每一作業執行的前、後端對應關係,達到end-to-end關連效果,滿足管理人員進行系統資源調度與異常作業程式的查找,及提升系統整體運作的效能以及系統穩定性。此機制使用時不限定特定廠牌的應用程式伺服器及資料庫伺服器,且占用系統資源小。

Description

WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組
本發明係關於一種作業關係鏈結模組,主要將作業程式執行的可辨識資訊透過關係關聯鏈結模組加工到原作業SQL上讓web作業和資料庫存取的SQL操作建立即時關聯,藉此提供管理人員即時掌握各作業程式對資料庫的所有影響情形,並藉由本發明進行作業障礙查找與修正、系統環境的管理、資源調度等,達到系統整體運作的穩定性。
按,目前Java2平台企業版(Java 2 Platform Enterprise Edition)J2EE作業程式之監控產品,在功能上雖然可提供作業執行時,從前端應用程式伺服器到後端資料庫伺服器上端到端(End-to-End)的監控紀錄機制,但都是在較嚴苛的限制或滿足某些條件前提下才能生效。以HP Diagnostic為例,因監控效能考量,回應時間很短的程式作業操作(request)及未完成的程式作業操作將不被紀錄監控,這將過濾掉許多系統運轉的實際作業”行為”資訊,造成維運人員在資訊系統發生障礙時,因無法全盤掌控系統運轉資訊,造成障礙原因查找困難;以另一個監控產品Foglight為例,該產品可以監控回應時間很短的作業操作,並且未完成的作業操作也會被紀錄,但是消耗的記憶體資源過多,是HP Diagnostic所需系統記憶體資源的1.5倍,並且程式必須滿足標準RMI規格進行遠端呼叫,對於資源有限或非標準遠端呼叫方式的系統將無法提供End-to-End監控紀錄。
請參考圖1,在J2EE S2等Multi-tier的系統架構下,系統可能存在一個或多個操作員S21(如操作員S1a、操作員S1b等),操作員S1從各自的電腦於相同或不同的時間登入系統 執行相同或不同的作業程式S21(如作業代程式A及作業程式B等),接著作業程式S21依業務邏輯執行相同或不同的功能模組並透過JDBC S22存取系統資料庫伺服器S3。當多位操作員S1同時執行相同或不同的作業程式S21時,其各執行結果可能為成功或失敗,當資料庫資源滿載或網路異常等可能導致部分SQL執行S31過久,甚至執行失敗無回應,此時管理人員僅能查詢SQL目前狀態,無法即時追蹤SQL來源資訊(如作業程式、操作員、操作時間等),導致管理人員無法即時判斷問題根源是因作業程式異常、操作員操作行為錯誤、或是資料庫本身之問題等。因此在J2EE S2等Multi-tier的系統架構下,管理人員面對系統維運及異常程式查找時,如何即時掌握web作業與資料庫伺服器上存取操作的對應關係是非常重要且必要。
目前管理人員為了瞭解從web端的應用程式伺服器到後端資料庫伺服器上端到端(End-to-End)的資訊以實行適當的維運作業,必須安裝會消耗大量效能的監控軟體,而這些監控軟體因為降低主機系統資源的消耗,一般設計是將執行時間較短(request)及未完成的程式作業操作不列入監控;而此種設計考量當遇到作業程式因故無法正常結束,變成長作業或因故產生大量連線行為時都將導致系統異常,而管理人員因無法確實掌握關連資訊,無法適時的排除異常作業,甚至造成系統無法維運的困難。
異常耗用運算資源的監控及技術已見於先的中華民國公開第200917019號「主電腦批次作業異常耗用運算資源之自動監控方法及系統」一案中。惟其自動於批次作業啟動時,利用自動監控系統和資源耗用值進行追蹤管理,若發生異常時,會提出警示。該方法主要先針對自動監控系統針對一主電腦之複數批次作業進行警示指標的設定,接著設定監控警 示,即可利用該自動監控系統對該等批次作業程式進行監控,並分析該主電腦於執行該等批次作業程式時的資源耗用值是否有達到警示指標值。若達到即判定作業異常,並執行一警示處置,但如果未達到警示指標值,就持續監控。
但上述僅適用於批次作業程式的異動,且執行作業前尚需先手動設定警示指標和監控警示,且若非批次作業程式若引起異常,要快速追蹤數百支作業程式中找出引起效能問題的作業程式,實非簡單的事。由此可見,上述習用物品仍有諸多缺失,實非一良善之設計者,而亟待加以改良。
本案發明人鑑於上述習用技術所衍生的各項缺點,乃亟思加以改良創新,並經多年苦心孤詣潛心研究後,終於成功研發完成本件WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組。
本發明之目的即在於提供一種WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,將作業與操作者的可辨識資訊及作業存取條件進行加工,並帶到資料庫伺服器上,藉此提供管理人員瞭解各作業程式對資料庫的影響情形,並且即時獲取前、後端的作業鏈結軌跡透明化的即時資訊,透過即時資訊的搜集,可後續進行系統資源調度與異常作業程式的查找,及提升系統整體運作的效能以及系統穩定性。
可達成上述發明目的之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,應用於作業程式處理,該作業關係鏈結模組包含:一接收資訊模組,負責接收作業程式傳送的資訊;一組裝模組,負責將上述模組所接收的資料進行組裝;一資料回 傳模組,負責將組裝模組完成後的資料回傳;一使用者管理介面,提供使用者一個輸入的畫面;一SQL加工設定管理資料庫,儲存資料庫設定資訊。
使用本發明時,使用者可透過使用者管理介面,新增、異動、刪除及查詢等方式管理SQL加工設定管理資料庫之資料,作業程式取得可辨識資訊,接著透過作業關係鏈結模組,將取得的可辨識資訊以及資料庫存取條件(SQL語法),接著交由組裝模組進行存取條件的加工組裝,再由資料回傳模組將組裝後的存取條件傳送到執行存取條件,因可辨識資訊係組裝在該存取條件中,故透過Java資料庫連接(Java Database Connectivity,JDBC)存取系統資料庫伺服器後,仍可將辦識資訊帶入系統資料庫伺服器中。
如此,作業程式的可辨識資訊將可透過JDBC的資料庫連結(database connection)帶到後端資料庫伺服器上。不論系統效能是否產生任何異常情況,也毋須等待存取條件執行結束與否,此時管理人員即可配合運用資料庫伺服器管理功能,即時掌握每一作業執行的前、後端對應關係,達到end-to-end關連效果,藉此提供系統資源調度與異常作業程式的查找,及提升系統整體運作的效能以及系統穩定性。
進一步的透過本發明可應用在各廠牌資料庫伺服器及各廠牌的J2EE應用伺服器(Application Server)上進行作業的鏈結(link)。
一種WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,應用於作業程式處理,該作業關係鏈結模組包含:一接收資訊模組,負責接收作業程式傳送的資訊;一組裝模組,負責將上述模組所接收的資料進行組裝;一資料回傳模組,負責將組裝模組完成後的資料回傳;一使用者管理介面,提供使用者一個輸入的畫面;一SQL加工設定管理 資料庫,儲存資料庫設定資訊;藉此,使用者可透過使用者管理介面,新增、異動、刪除及查詢等方式管理SQL加工設定管理資料庫之資料,作業程式取得可辨識資訊,接著透過作業關係鏈結模組,將取得的可辨識資訊以及資料庫存取條件(SQL語法),接著交由組裝模組進行存取條件的加工組裝,再由資料回傳模組將組裝後的存取條件傳送到執行存取條件,因可辨識資訊係組裝在該存取條件中,故透過JDBC存取系統資料庫伺服器後,仍可將辦識資訊帶入系統資料庫伺服器。
其中該接收資訊模組負責接收作業程式的可辨識資訊及產製資料庫存取條件,該可辨識資訊,負責提供管理人員於追蹤之用,可辨識資訊至少包含一個資訊,例如:操作員ID、作業代碼、操作時間、IP或主機埠號,該產製資料庫存取條件,至少包含一個SQL語法,該組裝模組係將可辨識資訊組裝於SQL語法上,該資料回傳模組將組裝模組產生的SQL語法資料回傳予作業程式,後續作業程式執行含有可辨識資訊的SQL語法,並透過JDBC的資料庫連結(database connection)傳送至系統資料庫伺服器上,該於系統資料庫伺服器上可查詢SQL執行狀態及可辦識資訊。
請參閱圖2,本發明所提供之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,應用於作業程式1處理,該作業關係鏈結模組2主要包括有:一接收資訊模組21、一組裝模組22、一資料回傳模組23、一使用者管理介面24及一SQL加工設定管理資料庫25所組構而成。
該接收資訊模組21,負責接收作業程式1傳送的資訊;該組裝模組22,負責將接收資訊模組21所接收的資料進 行組裝;該資料回傳模組23,負責將組裝模組22完成後的資料回傳;該使用者管理介面24,提供使用者一個輸入的畫面;使用者可透過使用者管理介面24,新增、異動、刪除及查詢等方式管理SQL加工設定管理資料庫25之資料,以供該作業關係鏈結模組2可適用於各廠牌資料庫。
該SQL加工設定管理資料庫25,儲存資料庫設定資訊。
藉此,使用者可透過使用者管理介面24,新增、異動、刪除及查詢等方式管理SQL加工設定管理資料庫25之資料,作業程式1運用本發明,作業程式1使用原有連線及資源,將可辨識資訊11加到原有資料庫查詢條件中,透過JDBC 4存取系統資料庫伺服器,管理人員亦利用可辨識資訊11及原有的資料庫伺服器管理功能查詢從web端的應用程式伺服器到後端資料庫伺服器上端到端(End-to-End)的資訊,故不會消耗大量效能,且執行時間較短(request)及未完成的程式作業操作皆會被紀錄。
如此,為了瞭解從web端的應用程式伺服器到後端資料庫伺服器上端到端(End-to-End)的資訊,例如:追蹤出該執行該存取條件之操作員ID、作業代碼、操作時間、IP、主機埠號等資訊,管理人員將不必安裝將消耗大量效能的監控軟體,也不必擔心無法完整掌握關連資訊,即可進行系統資源調度與異常作業程式1的查找,可達到全面提升系統整體運作的效能以及系統穩定性。
是以,透過上述即為本發明所提供一較佳實施例WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組各模組功能及關連介紹,接著再將其使用特點介紹如下:
請參閱圖3為本發明之作業處理步驟示意圖,值得注意 的是本發明更與作業程式1、JDBC 4及系統資料庫伺服器相互電性連結。
首先,作業程式1會先取得可辨識資訊11及產製資料庫存取條件12;可辨識資訊11及產製資料庫存取條件12皆為追蹤作業程式1問題的依據,透過較佳實施例可取得之可辨識資訊11包括:操作員ID、作業代碼、操作時間、IP、主機IP埠號;而產製資料庫存取條件12至少包含一個SQL語法。
接著,透過作業關係鏈結模組2的接收資訊模組21,接收作業程式1的可辨識資訊11及資料庫存取條件,並交由組裝模組22進行SQL的加工組裝,再由回傳模組將組裝後的SQL回傳給執行SQL3,因可辨識資訊11係組裝在該SQL中,故透過JDBC 4存取系統資料庫伺服器後,仍可將辦識資訊帶入系統資料庫伺服器中。
如此,使用作業程式1原有連線及資源,不須安裝消耗大量效能的監控軟體、亦不須等待SQL執行結束與否,管理人員即可利用原有的資料庫伺服器管理功能查詢資料軌跡51,有效追蹤作業程式1所對應之人(操作員ID)、事(作業代碼)、時(操作時間)、地(IP、主機IP埠號)、物(SQL語法)。
本發明所提供之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,與其他習用技術相互比較時,更具有下列之優點:
1.本發明提出一套web作業共用thread pool與JDBC pool下作業處理之作業關係鏈結模組,提供作業程式在J2EE等Multi-tier的系統架構下End-to-End的關連資訊,包含從操作員、Web作業程式在Web伺服器上到資料庫伺服器端所有鏈結與關鍵資訊。
2.本發明提及到當多位操作員執行相同或不同的作業 程式時,皆可利用此機制快速查找作業在前、後端伺服器上的對應關連資訊。
3.本發明以light-weight方式提供追蹤及管理服務,使用作業程式原有連線及資源,並且沒有增加作業程式額外連線需求,對於系統資源消耗甚小。
4.本發明以Java函式庫方式實踐,只需修改作業程式即可使用,並不侷限任何特殊使用環境,具有跨各廠牌的J2EE應用伺服器(Application Server)能力。
5.本發明之SQL加工設定管理資料庫負責管理各種廠牌資料庫伺服器的加工設定邏輯資訊,使紀錄End-to-End資訊之SQL具有適應各廠牌資料庫伺服器,提供本發明跨各資料庫伺服器廠牌的能力。
上列詳細說明乃針對本發明之一可行實施例進行具體說明,惟該實施例並非用以限制本發明之專利範圍,凡未脫離本發明技藝精神所為之等效實施或變更,均應包含於本案之專利範圍中。
綜上所述,本案不僅於技術思想上確屬創新,並具備習用之傳統方法所不及之上述多項功效,已充分符合新穎性及進步性之法定發明專利要件,爰依法提出申請,懇請 貴局核准本件發明專利申請案,以勵發明,至感德便。
1‧‧‧作業程式
11‧‧‧可辨識資訊
12‧‧‧產製資料庫存取條件
2‧‧‧作業關係鏈結模組
21‧‧‧接收資訊模組
22‧‧‧組裝模組
23‧‧‧資料回傳模組
24‧‧‧使用者管理介面
25‧‧‧SQL加工設定管理資料庫
3‧‧‧執行SQL
4‧‧‧Java資料庫連接(JDBC)
5‧‧‧系統資料庫伺服器
51‧‧‧資料軌跡
S1‧‧‧操作員
S2‧‧‧Java2平台企業版(J2EE)
S21‧‧‧習知作業程式
S22‧‧‧習知JDBC
S3‧‧‧習知資料庫伺服器
請參閱有關本發明之詳細說明及其附圖,將可進一步瞭解本發明之技術內容及其目的功效;有關附圖為:圖1為習用技術示意圖;圖2為本發明之作業處理步驟示意圖;圖3為本發明之作業關係鏈結模組圖。
2‧‧‧作業關係鏈結模組
21‧‧‧接收資訊模組
22‧‧‧組裝模組
23‧‧‧資料回傳模組
24‧‧‧使用者管理介面
25‧‧‧SQL加工設定管理資料庫

Claims (7)

  1. 一種WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,應用於作業程式處理,該作業關係鏈結模組包含:一接收資訊模組,負責接收作業程式傳送的資訊;一組裝模組,負責將上述模組所接收的資料進行組裝;一資料回傳模組,負責將組裝模組完成後的資料回傳;一使用者管理介面,提供使用者一個輸入的畫面;一SQL加工設定管理資料庫,儲存資料庫設定資訊;藉此,使用者可透過使用者管理介面,新增、異動、刪除及查詢等方式管理SQL加工設定管理資料庫之資料,作業程式取得可辨識資訊,接著透過作業關係鏈結模組將取得的可辨識資訊以及資料庫存取條件(SQL語法),接著交由組裝模組進行存取條件的加工組裝,再由資料回傳模組將組裝後的存取條件傳送到執行存取條件,因可辨識資訊係組裝在該存取條件中,故透過JDBC存取系統資料庫伺服器後,仍可將辦識資訊帶入系統資料庫伺服器。
  2. 如申請專利範圍第1項所述之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,其中該接收資訊模組負責接收作業程式的可辨識資訊及產製資料庫存取條件。
  3. 如申請專利範圍第1項所述之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,其中該可辨識資訊,負責提供管理人員於追蹤之用,可辨識資訊至少包含一個資訊,例如:操作員ID、作業代碼、操作時間、IP或主機埠號。
  4. 如申請專利範圍第2項所述之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,其中該產製資料庫存取條件,至少包含一個SQL語法。
  5. 如申請專利範圍第1項所述之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,其中該組裝模組係將可辨識資訊組裝於SQL語法上。
  6. 如申請專利範圍第1項所述之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,其中該資料回傳模組將組裝模組產生的SQL語法資料回傳予作業程式,後續作業程式執行含有可辨識資訊的SQL語法,並透過JDBC的資料庫連結(database connection)傳送至系統資料庫伺服器上。
  7. 如申請專利範圍第1項所述之WEB作業共用THREAD POOL與JDBC POOL下之作業關係鏈結模組,其中該於系統資料庫伺服器上可查詢SQL執行狀態及可辦識資訊。
TW101141721A 2012-07-24 2012-07-24 Web作業共用thread pool與jdbc pool下之作業關係鏈結模組 TW201405339A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW101141721A TW201405339A (zh) 2012-07-24 2012-07-24 Web作業共用thread pool與jdbc pool下之作業關係鏈結模組

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW101141721A TW201405339A (zh) 2012-07-24 2012-07-24 Web作業共用thread pool與jdbc pool下之作業關係鏈結模組

Publications (2)

Publication Number Publication Date
TW201405339A true TW201405339A (zh) 2014-02-01
TWI480750B TWI480750B (zh) 2015-04-11

Family

ID=50550022

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101141721A TW201405339A (zh) 2012-07-24 2012-07-24 Web作業共用thread pool與jdbc pool下之作業關係鏈結模組

Country Status (1)

Country Link
TW (1) TW201405339A (zh)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003278862A1 (en) * 2002-06-25 2004-01-06 International Business Machines Corporation Method and system for monitoring performance of application in a distributed environment
US20040249792A1 (en) * 2003-06-04 2004-12-09 Salman Halim Automated query file conversions upon switching database-access applications
CN102541718B (zh) * 2010-12-30 2015-11-11 恒生电子股份有限公司 应用软件监视系统的配置方法和数据流转方法

Also Published As

Publication number Publication date
TWI480750B (zh) 2015-04-11

Similar Documents

Publication Publication Date Title
US10747591B2 (en) Endpoint process state collector
US11308092B2 (en) Stream processing diagnostics
US7065566B2 (en) System and method for business systems transactions and infrastructure management
US8464279B2 (en) Domain event correlation
US8667334B2 (en) Problem isolation in a virtual environment
US9613080B1 (en) Database cost tracing and analysis
US8428983B2 (en) Facilitating availability of information technology resources based on pattern system environments
US9459942B2 (en) Correlation of metrics monitored from a virtual environment
US10177984B2 (en) Isolation of problems in a virtual environment
US7949673B2 (en) Correlating cross process and cross thread execution flows in an application manager
US8316354B2 (en) Execution flow shape compression for aggregate data reporting in an application manager
US10489711B1 (en) Method and apparatus for predictive behavioral analytics for IT operations
US20130132778A1 (en) Isolation of problems in a virtual environment
US20070143743A1 (en) Use of execution flow shape to allow aggregate data reporting with full context in an application manager
KR20120115476A (ko) 복합 트랜잭션들에 대한 구조적 및 행동적 디스크립션을 사용하는 트랜잭션 모델
US20100235349A1 (en) Progress analyzer for database queries
US10528456B2 (en) Determining idle testing periods
US8260761B2 (en) Detecting performance degrading design and algorithm issues in database applications
US20220027365A1 (en) Enterprise resource planning system, server and supervision method of sql queries in such a system or server
JP2009245154A (ja) シンプトンを評価するためのコンピュータ・システム、並びにその方法及びコンピュータ・プログラム
Abe et al. Business monitoring framework for process discovery with real-life logs
TW201405339A (zh) Web作業共用thread pool與jdbc pool下之作業關係鏈結模組
CN112181759A (zh) 一种微服务性能监视及异常诊断的方法
LaRock et al. Querying SQL Server Wait Statistics
Aa et al. Complex event processing methods for process querying

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees