
DeepChecks est une bibliothèque Python open source dédiée à la validation continue, aux tests et à la surveillance des modèles et des données en apprentissage automatique.
Elle aide à détecter automatiquement les problèmes de qualité des données (valeurs manquantes, valeurs aberrantes) et les défauts du modèle (baisse de performance, biais), améliorant la fiabilité des systèmes d'apprentissage automatique.
Principalement destiné aux data scientists, ingénieurs ML et aux équipes de développement qui doivent construire et maintenir des systèmes d'IA fiables.
Généralement, il faut des données brutes non prétraitées, des données d’entraînement étiquetées et un sous-ensemble de données de test jamais vues auparavant.
Prend en charge les données tabulaires et étend son support à l'observabilité des NLP, vision par ordinateur et grands modèles de langage (LLM).
Ses fonctionnalités de test et de validation principales sont open source. La surveillance en production et d'autres fonctionnalités avancées peuvent nécessiter une licence commerciale.
Il offre une API Python simple et peut être facilement intégré dans les pipelines de développement ML ou les pipelines CI/CD.
Oui, il propose une surveillance en production pour suivre les variations de distribution des données et les dérives de performance du modèle.
Deepnote AI est une plateforme de notebook de science des données dans le cloud facilitant la collaboration, intégrant des fonctionnalités IA natives et prenant en charge plusieurs langages dont Python, SQL et R. Elle permet la collaboration en temps réel, l’assistance IA au code et l’analyse automatisée, aidant les équipes de données et les utilisateurs individuels à explorer les données, modéliser l'apprentissage automatique et générer des rapports visuels plus efficacement.

Evidently AI est une plateforme open source dédiée à l’évaluation, aux tests et à la surveillance des modèles d'apprentissage automatique et des grands modèles de langage, aidant les scientifiques des données et les ingénieurs à garantir la qualité et la fiabilité des systèmes d'IA en production.