
DeepChecks es una biblioteca de Python de código abierto orientada a la validación, pruebas y monitorización continuas de modelos y datos de aprendizaje automático.
Ayuda a detectar de forma automatizada problemas de calidad de datos (valores faltantes, valores atípicos) y deficiencias de modelos (pérdida de rendimiento, sesgo), mejorando la fiabilidad de los sistemas de aprendizaje automático.
Principalmente dirigido a científicos de datos, ingenieros de aprendizaje automático y equipos de desarrollo que necesitan construir y mantener sistemas de IA confiables.
Normalmente se requieren datos crudos sin procesar, datos de entrenamiento etiquetados y subconjuntos de prueba que no se han visto.
Soporta datos tabulares y se extiende para cubrir necesidades de observabilidad en NLP, visión por computadora y modelos de lenguaje grande (LLM).
Sus características centrales de pruebas y validación son de código abierto. Funcionalidades avanzadas de monitorización en producción pueden requerir una licencia comercial.
Ofrece una API de Python simple que se puede integrar fácilmente en flujos de desarrollo de ML o en pipelines CI/CD.
Sí, ofrece capacidades de monitorización en producción para seguir cambios en la distribución de datos y deriva del rendimiento del modelo.
Deepnote AI es una plataforma de notebooks de ciencia de datos en la nube con funciones de IA nativas integradas, que admite Python, SQL, R y otros entornos. A través de la colaboración en tiempo real, asistencia de IA en el código y análisis automatizado, ayuda a equipos de datos y a usuarios individuales a explorar datos, construir modelos de aprendizaje automático y generar informes y visualizaciones de forma más eficiente.

Evidently AI es una plataforma de código abierto centrada en la evaluación, prueba y monitoreo de modelos de aprendizaje automático y de grandes modelos de lenguaje (LLM), diseñada para garantizar la calidad, seguridad y fiabilidad de los sistemas de IA en entornos de producción.