微軟於 SQL Azure Labs 發布代號為 Data Explorer 的預覽版工具,旨在解決「資料孤島」與「分析師 80% 時間花在找資料/清資料」的痛點。它是一個雲端原生的自助式資料準備平台,連接結構化/半結構化來源,提供視覺化整合、豐富化、發布與團隊協作能力。
核心能力五步曲
- 識別:連接 Excel、CSV、SQL Server、Azure Blob、OData、SharePoint 清單等本地/雲端來源。
- 發現:整合 Windows Azure Marketplace 公共資料集 (人口統計、地理、金融、天氣等),自動推薦相關資料豐富分析維度。
- 豐富:視覺化介面進行合併、追加、樞紐、分欄、型別轉換、自訂公式 (M 語言前身);即時預覽結果分佈。
- 協作:查詢步驟即「腳本」,可分享、版本控管、團隊共同編輯、加註釋,形成組織知識資產。
- 發布:一鍵發布至 Excel、Power Pivot、Power View、SharePoint、OData Feed、Azure 表格儲存,供下游報表/應用消費。
技術架構亮點
- M 語言 (Power Query Formula Language): 函數式、不可變、逐步轉換腳本,保證可重現、可審計、可優化。
- 雲端執行引擎: 大規模資料轉換下推至 Azure 計算資源,本地僅呈現預覽樣本,突破 Excel 記憶體限制。
- Marketplace 整合: 將公共/商業資料集視為一等公民,搜尋即用,自動處理授權與格式轉換。
- 安全與治理: Azure AD 整合、行層級安全性 (RLS)、資料分類標記、審計日誌。
定位與演進
| 階段 | 產品形態 | 關鍵特性 |
| 2011 Data Explorer (Lab) | 獨立 Web 應用 + Excel 增益集 | M 語言雛形、Marketplace 整合、OData 發布 |
| 2013 Power Query for Excel | Excel 2010/2013 增益集 | 功能區整合、查詢編輯器、企業級部署 (MSI/GPO) |
| 2015 Power BI Desktop | 獨立免費桌面應用 | Power Query + Power Pivot + Power View 整合、PBIX 檔案格式 |
| 2016 Excel 2016 內建 | 「取得與轉換」資料區 | 無需安裝增益集、M 功能對齊 Power BI |
| 2019 Power BI Dataflows | 雲端資料準備服務 | CDM (Common Data Model)、增量重新整理、計算實體、Azure Data Lake Gen2 儲存 |
| 2023 Microsoft Fabric | OneLake + Data Factory + Power BI 整合平台 | Data Explorer 概念全面內生化:Shortcuts、Data Pipelines、Notebooks、Real-Time Intelligence |
對資料分析師的價值重塑
- 從「找資料」到「問問題」: 來源目錄化、血緣可視化、認證標記 (Certified/Promoted) 建立信任資料層。
- 從「手工清洗」到「腳本化治理」: M 腳本可參數化、模組化、單元測試、CI/CD 部署,變更影響分析一鍵完成。
- 從「個人英雄」到「團隊資產」: 共享查詢、組織資料目錄、使用量遙測識別高價值資料集。
- 從「靜態快照」到「即時/近即時」: DirectQuery、增量重新整理、CDC 來源、Real-Time Intelligence 打破批次窗口。
給現代資料團隊的啟示
- 投資「資料產品」思維: 每個查詢/資料集視為產品,有 Owner、SLA、文檔、版本、生命週期。
- 統一語義層: 推廣 DAX/MDX/計算群組/度量值目錄,避免「同一指標 N 種算法」的混亂。
- 擁抱開放格式: Parquet/Delta Lake/Iceberg + OneLake/ADLS Gen2,讓資料一次寫入、多引擎讀取 (Spark/SQL/BI/AI)。
- 技能轉型: M/Power Query、DAX、PySpark、SQL、Git、CI/CD、資料治理框架 (Purview) 成為分析師標配。
Data Explorer 雖以 Lab 專案起步,卻精準預判了「自助式資料準備 + 雲端協作 + 開放生態」的十年演進主線。今天在 Microsoft Fabric 中體驗 Data Factory 複製活動、Notebook 資料工程、Power BI 語義模型無縫切換時,正是 Data Explorer 基因的延續與綻放。