企業級應用日志基礎設施實戰：solidDB 緩存 + WMB 路由轉換 + DB2 pureXML 存儲

架構全景

生產端：應用寫日志 → solidDB（內存緩存，高吞吐、解耦） → Java Load Tool 讀取推送 → WebSphere MQ（持久隊列、事務傳輸） → WebSphere Message Broker (WMB)（XML 解析、路由、映射、分離） → DB2 pureXML（原生 XML 存儲、索引、查詢）。全鏈路事務性保證零丟失。

核心組件角色

數據模型

-- solidDB 前端緩存表
CREATE TABLE LOGS (LOGTIME TIMESTAMP, DOC CLOB);

-- DB2 後端存儲表
CREATE TABLE LOGAPP.LOGS (LOGTIME TIMESTAMP, DOC XML);

WebSphere MQ 隊列拓撲

WMB 消息流開發實戰

流 1：按內容路由 + 格式轉換

MQInput(AL_INQUEUE1) → ResetContentDescriptor(XMLNSC, logAppMessages) → Route（依 $Body/Record/Header/Id mod 2 分流 Odd/Even） → Map（Odd 支轉換為 LogSummary） → MQOutput（Odd→AL_SUMMARYQUEUE, Even→AL_OUTQUEUE）

流 2：File 拆分為 Record + Summary

MQInput(AL_INQUEUE2) → ResetContentDescriptor → Map (Split)：
輸入 File，輸出兩類：
① 迭代 for $r in $Body/File/Record return $r 生成多條 Record
② 同步生成 LogSummary（聚合字段）
→ JavaCompute：檢查 ./Record 或 ./LogSummary 分流至 Out/Alternate 終端
→ MQOutput（Record→AL_XMLFILES, Summary→AL_SUMMARYQUEUE）

流 3：持久化入庫 DB2

MQInput(AL_XMLFILES) → ResetContentDescriptor → DatabaseInsert（ODBC 連接 LOGAPPDB，映射 esql:asbitstream($source/Record) 整個 XML 片段寫入 DOC XML 列）

關鍵技術細節

1. Java 讀 solidDB 推 MQ：JDBC 連接 solidDB，SELECT doc FROM LOGS，逐行 MQMessage.write(bytes) → queue.put()。注意 solidDB JDBC 不支持 XA，故應用層保譪冪等。
2. WMB 導入 XML Schema：Message Set 選 XML Document，導入 LogFile.xsd、LogSummary.xsd，重命名 RecordType→Record 使根元素名匹配。
3. DatabaseInsert 映射 XML 列：WMB 不識別 pureXML，需用 esql:asbitstream() 序列化整個節點為位流寫入 XML 列。
4. ODBC 配置：Windows 控制面板添加 System DSN LOGAPPDB（IBM DB2 ODBC DRIVER），勾選 Save Password，WMB DatabaseInsert 節點引用該 DSN。

部署與驗證

1. 生成 BAR 文件，部署至 WMB Broker
2. 運行 Java Load Generator 向 solidDB 灌入測試 XML
3. 觀察 MQ 隊列深度、WMB 統計、DB2 表行數
4. DB2 查詢驗證：

   SELECT XMLQUERY('$d/Record/Header/Time' PASSING doc AS "d") FROM LOGAPP.LOGS;

擴展建議

• WMB 流增加異常處理子流，捕獲錯誤寫入死信隊列
• DB2 啟用 XML 索引（CREATE INDEX ... GENERATE KEY USING XMLPATTERN ...）加速查詢
• solidDB 集群模式提升邊緣可用性
• 引入 IBM Cognos/DataQuant 對 pureXML 數據進行多維分析