Microsoft, en yüksek performanslı akış analizi projeleri için Azure Databricks'i duyurdu

Databricks, veri bilimi ekiplerinin veri ürünleri oluşturmak için veri mühendisliği ve iş kollarıyla işbirliği yapması için Birleşik Analitik Platformu sağlar. Bugün Connect() geliştirici etkinliğinde, Microsoft açıkladı yeni Azure Databricks hizmeti en yüksek performanslı akış analizi projeleri için. Microsoft, bu yeni hizmet için Apache Spark'ın kurucularıyla birlikte çalıştı. Azure Databricks, tek tıklamayla kurulum, kolaylaştırılmış iş akışları ve etkileşimli bir çalışma alanı sunan Apache Spark tabanlı bir analiz platformudur. Azure Databricks ayrıca Azure SQL Veri Ambarı, Azure Depolama, Azure Cosmos DB, Azure Active Directory ve Power BI ile yerel entegrasyonla birlikte gelir. Aşağıdaki bu entegrasyon hakkında bilgi edinin.

• VM türlerinin çeşitliliği: Müşteriler, makine öğrenimi senaryoları için F serisi, büyük bellek senaryoları için M serisi, genel amaçlı D serisi vb. dahil olmak üzere mevcut tüm VM'leri kullanabilir.
• Güvenlik ve Gizlilik: Azure'da verilerin mülkiyeti ve kontrolü müşteriye aittir. Bu standartlara uymak için Azure Databricks oluşturduk. Azure Databricks'in, Azure'un geri kalanının bağlı olduğu tüm uyumluluk sertifikalarını sağlamasını amaçlıyoruz.
• Ağ topolojisinde esneklik: Müşterilerin çeşitli ağ altyapısı ihtiyaçları vardır. Azure Databricks, hangi kaynaklara ve havuzlara erişilebileceğini ve bunlara nasıl erişildiğini denetleyebilen müşteri VNET'lerindeki dağıtımları destekler.
• Azure Depolama ve Azure Data Lake tümleştirmesi: Bu depolama hizmetleri, mevcut veriler üzerinde önbelleğe alma ve optimize edilmiş analiz sağlamak için DBFS aracılığıyla Databricks kullanıcılarına sunulur.
• Azure Power BI: Kullanıcılar, tanıdık araçları kullanarak verileri büyük ölçekte etkileşimli olarak sorgulamak için Power BI'ı JDBC kullanarak doğrudan Databricks kümelerine bağlayabilir.
• Azure Active Directory, kaynaklara erişim denetimleri sağlar ve çoğu kuruluşta zaten kullanılmaktadır. Azure Databricks çalışma alanları müşteri aboneliklerinde dağıtılır, böylece doğal olarak AAD kaynaklara, sonuçlara ve işlere erişimi denetlemek için kullanılabilir.
• Azure SQL Veri Ambarı, Azure SQL DB ve Azure CosmosDB: Azure Databricks, sonuçları daha fazla analiz ve gerçek zamanlı hizmet için bu hizmetlere kolayca ve verimli bir şekilde yükleyerek Azure üzerinde uçtan uca veri mimarileri oluşturmayı kolaylaştırır.
• Dahili olarak, Azure Databricks kontrol düzlemini ve veri düzlemlerini kapsayıcılar aracılığıyla çalıştırmak için Azure Container Services kullanıyoruz.
• Hızlandırılmış Ağ, buluttaki en hızlı sanallaştırılmış ağ altyapısını sağlar. Azure Databricks, Spark performansını daha da iyileştirmek için bunu kullanır.
• IO'da inanılmaz 3us gecikme süresi sağlayabilen NvMe SSD'lere sahip en yeni nesil Azure donanımı (Dv100 VM'leri). Bunlar, Databricks G/Ç performansını daha da iyi hale getirir.

İlgili bir notta, Microsoft bugün MariaDB Vakfı'na platin üye olarak katıldıklarını duyurdu. Yakında bulutta tam olarak yönetilen bir MariaDB hizmeti için MariaDB için Azure Veritabanı'nın bir önizlemesini yayınlayacaklar. Ayrıca Cosmos DB için Apache Cassandra API desteğini duyurdular. Cassandra'yı anahtar teslimi küresel dağıtım, çoklu tutarlılık seviyeleri ve endüstri lideri SLA'lar üzerinden bir hizmet olarak sunacaklar.