Microsoft oznamuje Azure Databricks pre najvýkonnejšie analytické projekty streamovania

Databricks poskytuje platformu Unified Analytics Platform pre tímy v oblasti údajov, aby mohli spolupracovať s dátovým inžinierstvom a odbormi pri vytváraní dátových produktov. Na dnešnom podujatí pre vývojárov Connect() spoločnosť Microsoft oznámila, nové Služba Azure Databricks pre najvýkonnejšie projekty analýzy streamovania. Microsoft na tejto novej službe spolupracoval so zakladateľmi Apache Spark. Azure Databricks je analytická platforma založená na Apache Spark, ktorá poskytuje nastavenie jedným kliknutím, zjednodušené pracovné postupy a interaktívny pracovný priestor. Azure Databricks prichádza aj s natívnou integráciou s Azure SQL Data Warehouse, Azure Storage, Azure Cosmos DB, Azure Active Directory a Power BI. Prečítajte si o tejto integrácii nižšie.

• Rozmanitosť typov VM: Zákazníci môžu používať všetky existujúce VM vrátane F-series pre scenáre strojového učenia, M-series pre scenáre s veľkou pamäťou, D-series na všeobecné účely atď.
• Bezpečnosť a súkromie: V Azure je vlastníctvo a kontrola údajov na zákazníkovi. Azure Databricks sme vytvorili tak, aby dodržiavali tieto štandardy. Naším cieľom je, aby Azure Databricks poskytoval všetky certifikácie zhody, ktoré zvyšok Azure dodržiava.
• Flexibilita v topológii siete: Zákazníci majú rôznorodé potreby sieťovej infraštruktúry. Azure Databricks podporuje nasadenia v zákazníckych VNET, ktoré môžu riadiť, ku ktorým zdrojom a umývadlám je možné pristupovať a ako k nim pristupovať.
• Integrácia Azure Storage a Azure Data Lake: Tieto služby úložiska sú k dispozícii používateľom Databricks prostredníctvom DBFS, aby poskytovali ukladanie do vyrovnávacej pamäte a optimalizovanú analýzu existujúcich údajov.
• Azure Power BI: Používatelia môžu pripojiť Power BI priamo k svojim klastrom Databricks pomocou JDBC, aby mohli interaktivne vyhľadávať údaje vo veľkom meradle pomocou známych nástrojov.
• Azure Active Directory poskytuje kontrolu prístupu k prostriedkom a už sa používa vo väčšine podnikov. Pracovné priestory Azure Databricks sa nasadzujú v zákazníckych predplatných, takže AAD možno prirodzene použiť na riadenie prístupu k zdrojom, výsledkom a úlohám.
• Azure SQL Data Warehouse, Azure SQL DB a Azure CosmosDB: Azure Databricks jednoducho a efektívne nahráva výsledky do týchto služieb na ďalšiu analýzu a poskytovanie v reálnom čase, čo zjednodušuje vytváranie komplexných dátových architektúr v Azure.
• Interne používame služby Azure Container Services na spustenie riadiacej roviny a dátových rovín Azure Databricks prostredníctvom kontajnerov.
• Accelerated Networking poskytuje najrýchlejšiu virtualizovanú sieťovú infraštruktúru v cloude. Azure Databricks to využíva na ďalšie zlepšenie výkonu Spark.
• Najnovšia generácia hardvéru Azure (Dv3 VM) s NvMe SSD schopnými dosiahnuť 100us latenciu na IO. Vďaka nim je výkon I/O Databricks ešte lepší.

V súvislosti s tým spoločnosť Microsoft dnes oznámila, že sa pripája k MariaDB Foundation ako platinový člen. Čoskoro vydajú ukážku databázy Azure pre MariaDB pre plne spravovanú službu MariaDB v cloude. Tiež oznámili, že Apache Cassandra API podporuje Cosmos DB. Ponúknu Cassandru ako službu v rámci globálnej distribúcie na kľúč, viacerých úrovní konzistencie a špičkových SLA.