Η Microsoft ανακοινώνει τα Azure Databricks για έργα ανάλυσης ροής υψηλότερης απόδοσης

Το Databricks παρέχει μια Ενοποιημένη Πλατφόρμα Analytics για ομάδες επιστήμης δεδομένων για συνεργασία με τη μηχανική δεδομένων και τους επιχειρηματικούς τομείς για τη δημιουργία προϊόντων δεδομένων. Στην εκδήλωση προγραμματιστή Connect() σήμερα, η Microsoft ανακοίνωσε το νέο Υπηρεσία Azure Databricks για έργα ανάλυσης ροής υψηλότερης απόδοσης. Η Microsoft συνεργάστηκε με τους ιδρυτές του Apache Spark για αυτή τη νέα υπηρεσία. Το Azure Databricks είναι μια πλατφόρμα αναλυτικών στοιχείων που βασίζεται στο Apache Spark που προσφέρει ρύθμιση με ένα κλικ, βελτιστοποιημένες ροές εργασίας και έναν διαδραστικό χώρο εργασίας. Το Azure Databricks έρχεται επίσης με εγγενή ενοποίηση με το Azure SQL Data Warehouse, το Azure Storage, το Azure Cosmos DB, το Azure Active Directory και το Power BI. Διαβάστε για αυτήν την ενσωμάτωση παρακάτω.

• Ποικιλία τύπων εικονικής μηχανής: Οι πελάτες μπορούν να χρησιμοποιήσουν όλα τα υπάρχοντα εικονικά μηχανήματα, συμπεριλαμβανομένων της σειράς F για σενάρια μηχανικής εκμάθησης, της σειράς M για σενάρια μαζικής μνήμης, της σειράς D για γενικούς σκοπούς κ.λπ.
• Ασφάλεια και απόρρητο: Στο Azure, η ιδιοκτησία και ο έλεγχος των δεδομένων είναι στον πελάτη. Κατασκευάσαμε τα Azure Databricks για να τηρούμε αυτά τα πρότυπα. Στόχος μας είναι η Azure Databricks να παρέχει όλες τις πιστοποιήσεις συμμόρφωσης με τις οποίες τηρεί το υπόλοιπο Azure.
• Ευελιξία στην τοπολογία δικτύου: Οι πελάτες έχουν ποικίλες ανάγκες υποδομής δικτύου. Το Azure Databricks υποστηρίζει αναπτύξεις σε VNET πελατών, τα οποία μπορούν να ελέγχουν ποιες πηγές και καταβόθρες είναι προσβάσιμες και πώς γίνεται η πρόσβαση σε αυτές.
• Ενσωμάτωση Azure Storage και Azure Data Lake: Αυτές οι υπηρεσίες αποθήκευσης εκτίθενται στους χρήστες του Databricks μέσω του DBFS για την παροχή προσωρινής αποθήκευσης και βελτιστοποιημένη ανάλυση των υπαρχόντων δεδομένων.
• Azure Power BI: Οι χρήστες μπορούν να συνδέσουν το Power BI απευθείας στα συμπλέγματα Databricks τους χρησιμοποιώντας το JDBC προκειμένου να υποβάλουν ερωτήματα σε δεδομένα διαδραστικά σε μαζική κλίμακα χρησιμοποιώντας γνωστά εργαλεία.
• Το Azure Active Directory παρέχει ελέγχους πρόσβασης σε πόρους και χρησιμοποιείται ήδη στις περισσότερες επιχειρήσεις. Οι χώροι εργασίας του Azure Databricks αναπτύσσονται σε συνδρομές πελατών, επομένως φυσικά το AAD μπορεί να χρησιμοποιηθεί για τον έλεγχο της πρόσβασης σε πηγές, αποτελέσματα και εργασίες.
• Azure SQL Data Warehouse, Azure SQL DB και Azure CosmosDB: Τα Azure Databricks ανεβάζουν εύκολα και αποτελεσματικά αποτελέσματα σε αυτές τις υπηρεσίες για περαιτέρω ανάλυση και εξυπηρέτηση σε πραγματικό χρόνο, καθιστώντας εύκολη τη δημιουργία αρχιτεκτονικών δεδομένων από άκρο σε άκρο στο Azure.
• Εσωτερικά, χρησιμοποιούμε τις Υπηρεσίες κοντέινερ Azure για την εκτέλεση του επιπέδου ελέγχου Azure Databricks και των επιπέδων δεδομένων μέσω κοντέινερ.
• Το Accelerated Networking παρέχει την ταχύτερη εικονική υποδομή δικτύου στο cloud. Το Azure Databricks το χρησιμοποιεί για να βελτιώσει περαιτέρω την απόδοση του Spark.
• Η τελευταία γενιά υλικού Azure (Dv3 VMs), με NvMe SSD που μπορούν να εκτινάξουν 100us latency σε IO. Αυτά κάνουν την απόδοση εισόδου/εξόδου του Databricks ακόμα καλύτερη.

Σε σχετική σημείωση, η Microsoft ανακοίνωσε σήμερα ότι εντάσσεται στο MariaDB Foundation ως πλατινένιο μέλος. Σύντομα θα κυκλοφορήσουν μια προεπισκόπηση της βάσης δεδομένων Azure για το MariaDB για μια πλήρως διαχειριζόμενη υπηρεσία MariaDB στο cloud. Ανακοίνωσαν επίσης ότι το Apache Cassandra API υποστηρίζει το Cosmos DB. Θα προσφέρουν την Cassandra ως υπηρεσία μέσω της παγκόσμιας διανομής με το κλειδί στο χέρι, πολλαπλά επίπεδα συνέπειας και κορυφαίες στον κλάδο SLA.