使用Azure Synapse Link for Azure Cosmos DB進行大規(guī)模實時的無ETL分析

在如今的環(huán)境中，采用數(shù)據(jù)驅動的文化已成為跨行業(yè)企業(yè)的關鍵。這種文化的核心是需要以近乎實時的方式對運營數(shù)據(jù)進行分析，從而優(yōu)化業(yè)務流程并發(fā)掘新的機會。多年以來，許多客戶都選擇Azure Cosmos DB作為完全托管的、超快的NoSQL數(shù)據(jù)庫來進行任意規(guī)模的現(xiàn)代應用程序開發(fā)。隨著運營數(shù)據(jù)量的增長以及從這些數(shù)據(jù)中獲得強大洞見的機會的增加，大規(guī)模處理和分析這些數(shù)據(jù)也面臨各種挑戰(zhàn)。

傳統(tǒng)上，為確保不影響運行工作負載的性能，企業(yè)會維護單獨的聯(lián)機事務處理(OLTP)系統(tǒng)和聯(lián)機分析處理(OLAP)系統(tǒng)。雖然OLTP系統(tǒng)可針對任務關鍵型事務性工作負載進行優(yōu)化，但OLAP系統(tǒng)可針對大量數(shù)據(jù)的分析工作負載進行獨立優(yōu)化。從OLTP系統(tǒng)獲取數(shù)據(jù)到OLAP系統(tǒng)的摩擦和時間可能會導致數(shù)小時、數(shù)天甚至數(shù)周的顯著延遲，進而導致基于過時數(shù)據(jù)做出非最優(yōu)決策。

發(fā)布Azure Synapse Link for Azure Cosmos DB以用于云原生HTAP

Azure Synapse Link for Azure Cosmos DB的公開預覽版，這是一項云原生混合事務和分析處理(HTAP)功能，它支持對Azure Cosmos DB中的運營數(shù)據(jù)進行近乎實時的分析。Azure Synapse Link最終打破了OLTP與OLAP系統(tǒng)之間長期存在的障礙。Azure Synapse Link在Azure中將您的Azure Cosmos DB鏈接到Synapse Analytics，為您的業(yè)務提供即時的洞見。

Azure Synapse Link for Azure Cosmos DB:https://aka.ms/cosmosdb-synapselink

現(xiàn)在，您只需“單擊一下”，即可以近乎實時的方式在Azure中分析大量的運營數(shù)據(jù)，無需ETL管道且不會影響事務處理工作負載的性能。

此功能可解鎖新的業(yè)務場景，以根據(jù)實時趨勢發(fā)出警報，構建近乎實時的儀表板以及基于用戶行為的業(yè)務體驗。業(yè)務分析師、數(shù)據(jù)工程師和數(shù)據(jù)科學家現(xiàn)在可以使用Azure Synapse Analytics大規(guī)模地對Azure Cosmos DB中的運營數(shù)據(jù)進行近乎實時的BI、AI和其他大數(shù)據(jù)分析。

搶先了解Azure Synapse Link的魔力

Azure Synapse Link主要由兩部分構成：

Azure Cosmos DB分析存儲：容器中除現(xiàn)有行式“事務存儲”外，還增加了完全托管的列式“分析存儲”。分析存儲與事務存儲完全隔離，因此對分析存儲的查詢不會影響您的事務處理工作負載。在幾分鐘內近乎實時地將運營數(shù)據(jù)的更新從事務存儲自動同步到分析存儲。詳細了解:https://aka.ms/analytical-store-overview

Azure Synapse Analytics運行時支持：Azure Cosmos DB分析存儲可與Azure Synapse Analytics支持的各種分析運行時進行本機集成，這樣可以直接查詢分析存儲。無需進一步的數(shù)據(jù)轉換即可分析來自分析存儲的數(shù)據(jù)。到目前為止，Azure Synapse Analytics通過Azure Cosmos DB分析存儲支持Apache Spark和Synapse SQL無服務器模式。

下面是一些Azure Synapse Link強大功能的示例：

使用簡化的編程模型基于Azure Cosmos DB容器創(chuàng)建Synapse Spark表。然后利用Spark的分布式處理功能在Spark表之間執(zhí)行聯(lián)接和其他復雜的聚合。這使您可以直接通過Synapse Spark轉換和豐富Azure Cosmos DB中的運營數(shù)據(jù)。

通過Azure Synapse Analytics與Azure機器學習和Apache Spark ML的本機集成，直接在Azure Cosmos DB中基于運營數(shù)據(jù)構建ML模型。然后部署這些模型以在應用程序中進行實時評分。

利用與Synapse SQL無服務器模式的本機集成及其T-SQL語言的完整表達能力，從Azure Cosmos DB查詢運營數(shù)據(jù)并構建SQL視圖。直接使用熟悉的BI工具（例如Power BI）基于Azure Cosmos DB建模和發(fā)布自動刷新的BI儀表板。

以下是垂直行業(yè)中受益于Azure Synapse Link的一些常見用例：

供應鏈分析、預測和報告

實時個性化

物聯(lián)網(wǎng)應用場景中的預測性維護和異常檢測

現(xiàn)在，借助Azure Synapse Link Azure Cosmos DB，企業(yè)可以集中精力以近乎實時的速度大規(guī)模地從其運營數(shù)據(jù)中解鎖寶貴的洞見。通過利用近乎實時的數(shù)據(jù)來支持預測分析，企業(yè)可以識別新出現(xiàn)的商機，并在獲得數(shù)據(jù)時盡快做出業(yè)務決策。在正在進行的數(shù)字化轉型過程中，這將使真正的領導者從追隨者中脫穎而出。