首頁
編程語言
C語言|JAVA編程
Python編程
網頁編程
ASP編程|PHP編程
JSP編程
數據庫
MYSQL數據庫|SqlServer數據庫
Oracle數據庫|DB2數據庫
您现在的位置: 程式碼之家 >> 數據庫知識 >  >> SQL Server 資料庫 >> 關於SqlServer

微軟推出 Data Explorer:雲端驅動的資料發現、整合與協作新工具

     編輯:關於SqlServer

微軟於 SQL Azure Labs 發布代號為 Data Explorer 的預覽版工具,旨在解決「資料孤島」與「分析師 80% 時間花在找資料/清資料」的痛點。它是一個雲端原生的自助式資料準備平台,連接結構化/半結構化來源,提供視覺化整合、豐富化、發布與團隊協作能力。

核心能力五步曲

  1. 識別:連接 Excel、CSV、SQL Server、Azure Blob、OData、SharePoint 清單等本地/雲端來源。
  2. 發現:整合 Windows Azure Marketplace 公共資料集 (人口統計、地理、金融、天氣等),自動推薦相關資料豐富分析維度。
  3. 豐富:視覺化介面進行合併、追加、樞紐、分欄、型別轉換、自訂公式 (M 語言前身);即時預覽結果分佈。
  4. 協作:查詢步驟即「腳本」,可分享、版本控管、團隊共同編輯、加註釋,形成組織知識資產。
  5. 發布:一鍵發布至 Excel、Power Pivot、Power View、SharePoint、OData Feed、Azure 表格儲存,供下游報表/應用消費。

技術架構亮點

  • M 語言 (Power Query Formula Language): 函數式、不可變、逐步轉換腳本,保證可重現、可審計、可優化。
  • 雲端執行引擎: 大規模資料轉換下推至 Azure 計算資源,本地僅呈現預覽樣本,突破 Excel 記憶體限制。
  • Marketplace 整合: 將公共/商業資料集視為一等公民,搜尋即用,自動處理授權與格式轉換。
  • 安全與治理: Azure AD 整合、行層級安全性 (RLS)、資料分類標記、審計日誌。

定位與演進

階段產品形態關鍵特性
2011 Data Explorer (Lab)獨立 Web 應用 + Excel 增益集M 語言雛形、Marketplace 整合、OData 發布
2013 Power Query for ExcelExcel 2010/2013 增益集功能區整合、查詢編輯器、企業級部署 (MSI/GPO)
2015 Power BI Desktop獨立免費桌面應用Power Query + Power Pivot + Power View 整合、PBIX 檔案格式
2016 Excel 2016 內建「取得與轉換」資料區無需安裝增益集、M 功能對齊 Power BI
2019 Power BI Dataflows雲端資料準備服務CDM (Common Data Model)、增量重新整理、計算實體、Azure Data Lake Gen2 儲存
2023 Microsoft FabricOneLake + Data Factory + Power BI 整合平台Data Explorer 概念全面內生化:Shortcuts、Data Pipelines、Notebooks、Real-Time Intelligence

對資料分析師的價值重塑

  • 從「找資料」到「問問題」: 來源目錄化、血緣可視化、認證標記 (Certified/Promoted) 建立信任資料層。
  • 從「手工清洗」到「腳本化治理」: M 腳本可參數化、模組化、單元測試、CI/CD 部署,變更影響分析一鍵完成。
  • 從「個人英雄」到「團隊資產」: 共享查詢、組織資料目錄、使用量遙測識別高價值資料集。
  • 從「靜態快照」到「即時/近即時」: DirectQuery、增量重新整理、CDC 來源、Real-Time Intelligence 打破批次窗口。

給現代資料團隊的啟示

  1. 投資「資料產品」思維: 每個查詢/資料集視為產品,有 Owner、SLA、文檔、版本、生命週期。
  2. 統一語義層: 推廣 DAX/MDX/計算群組/度量值目錄,避免「同一指標 N 種算法」的混亂。
  3. 擁抱開放格式: Parquet/Delta Lake/Iceberg + OneLake/ADLS Gen2,讓資料一次寫入、多引擎讀取 (Spark/SQL/BI/AI)。
  4. 技能轉型: M/Power Query、DAX、PySpark、SQL、Git、CI/CD、資料治理框架 (Purview) 成為分析師標配。

Data Explorer 雖以 Lab 專案起步,卻精準預判了「自助式資料準備 + 雲端協作 + 開放生態」的十年演進主線。今天在 Microsoft Fabric 中體驗 Data Factory 複製活動、Notebook 資料工程、Power BI 語義模型無縫切換時,正是 Data Explorer 基因的延續與綻放。

  1. 上一篇文章:
  2. 下一篇文章:
Copyright © 程式碼之家 All Rights Reserved