MATLAB Interface for Databricks® (interface MATLAB pour Databricks) vous permet de vous connecter aux données et aux capacités de calcul dans le cloud. Vous pouvez accéder à des jeux de données volumineux et les interroger à distance, ou déployer du code MATLAB pour l'exécuter sur un cluster Databricks.
- Utiliser SQL pour travailler avec des données dans Databricks
- Travailler avec Spark™ de manière interactive dans MATLAB
- Exécuter des algorithmes MATLAB compilés sur Databricks
- Partager des algorithmes MATLAB avec d'autres utilisateurs de Databricks travaillant avec Python®
Accéder au Big Data avec SQL
Accédez aux sources de données cloud via un cluster Databricks en le connectant à MATLAB avec Database Toolbox. Manipulez les données à distance et utilisez SQL pour accéder aux données tabulaires dans Databricks. Utilisez Apache® Spark™ SQL pour interroger des données dans les workflows Spark.
Utiliser Spark avec MATLAB et Simulink
Intégrez des commandes API Apache Spark dans des algorithmes MATLAB en utilisant Databricks Connect. Les commandes API Spark s'exécutent sur un cluster Databricks, même sans serveur.
Déployer MATLAB sur les données
Utilisez MATLAB Compiler SDK et Simulink Compiler afin de packager vos algorithmes pour un déploiement sur cluster Databricks avec MATLAB Runtime. Les algorithmes déployés peuvent être exécutés dans des blocs-notes ou en tant que tâches à la demande ou programmées. Vous pouvez utiliser ces algorithmes et intégrer des pipelines de traitement de données.
Interagir de manière programmatique avec Databricks
L'API REST vous permet d'interagir de manière programmatique avec l’environnement Databricks à partir de MATLAB, par exemple pour contrôler des tâches ou des clusters dans Databricks.
Ressources
Blogs
- Des informations exploitables pour les ingénieurs et les scientifiques à l'échelle du Big Data avec Databricks et MathWorks
- Tout ce que vous avez toujours voulu savoir sur le traitement du Big Data (sans jamais oser le demander)
- Mise à l'échelle des modèles MATLAB et Simulink avec Databricks et MathWorks
Télécharger l'interface MATLAB pour Databricks
Version 5.3.6
Prêt pour en discuter ?
Comment pouvons-nous vous aider ?
Utiliser SQL pour travailler avec des données Databricks
Envoyez des requêtes et manipulez des données dans le cloud avec SQL. Utilisez MATLAB Database Toolbox™ ou Spark SQL pour lire des données issues de tables Databricks, de sources de données connectées à Databricks et de divers types de fichiers. Créez vos propres tables dans plusieurs formats de fichiers ou utilisez des tables Databricks Delta Lake et Delta Lake. Les résultats des requêtes sont convertis en tables MATLAB, directement utilisables dans les toolboxes et les algorithmes MATLAB. Créez également votre propre algorithme pour le cloud.
Travailler avec des données cloud de manière interactive dans MATLAB avec Databricks Connect et DBFS
Explorez vos données sur le cloud avec DBFS. Créez, chargez, téléchargez et organisez des fichiers comme vous le feriez localement, le tout à partir de MATLAB. Avec Databricks Connect, travaillez directement avec Spark dans le cloud à partir de votre desktop. Travaillez avec des jeux de données volumineux et exploitez l'évolutivité et la vitesse de Spark. Téléchargez des échantillons de données au fur et à mesure que vous affinez votre algorithme, et entraînez puis testez vos modèles d'IA localement, avant de les déployer pour les exécuter sur des jeux de données complets dans le cloud.
Exécuter des algorithmes MATLAB nativement sur des clusters Databricks Spark
Grâce à MATLAB Compiler et MATLAB Compiler SDK, exécutez votre code MATLAB en tant que tâche Spark Submit. Lorsqu'il est déployé sur un cluster Databricks compatible avec MATLAB Runtime, votre algorithme MATLAB peut évoluer sur n'importe quel nombre de nœuds. Exécutez vos tâches MATLAB à la demande ou selon un calendrier automatisé. Donnez à vos algorithmes MATLAB la possibilité d’exploiter la puissance de calcul parallèle de Spark et d'accélérer le traitement des données dans le cloud.
Partager des algorithmes MATLAB avec d'autres utilisateurs de Databricks
Une fois les algorithmes MATLAB déployés sur Databricks, partagez-les avec d'autres utilisateurs et intégrez-les dans des workflows à plusieurs étapes. Déployez et exécutez des algorithmes MATLAB nativement sous forme de tâches, à grande échelle ou sur des clusters compatibles avec MATLAB Runtime.
Déployez du code MATLAB en tant que bibliothèque ou fonction définie par l'utilisateur pour une utilisation dans n'importe quel langage, notamment les scripts SQL. Les blocs-notes et les bibliothèques Java ou Python peuvent également utiliser ce code.
