01 De quoi s'agit-il ?
Arize Phoenix est un outil open source d'observabilité et d'évaluation pour applications LLM et agents, avec tracing OpenTelemetry complet. TruLens fournit des primitives d'évaluation programmables pour les applications RAG et agents. Ensemble ils couvrent de bout en bout l'observabilité et l'évaluation LLM open source.
02 Pourquoi l'implémenter ?
- Open source et self-hostable
- Support natif OpenTelemetry pour les traces
- Évaluateurs programmables pour la qualité RAG et agents
- Intégrations avec LangChain, LlamaIndex, OpenAI Agents
- Se combine bien avec Langfuse et d'autres couches d'observabilité
03 Comment je vous aide
J'intègre Phoenix et TruLens dans votre stack LLM existante, je conçois le harness d'évaluation, je configure des évaluateurs personnalisés pour votre domaine et je connecte les traces à votre plateforme d'observabilité plus large.
04 Livrables attendus
- Conception du déploiement Phoenix et TruLens
- Harness d'évaluation avec évaluateurs personnalisés
- Intégration des traces OpenTelemetry
- Alerting sur dérive et qualité
- Modèle opérationnel et montée en compétence des équipes