Langfuse est un outil open-source d'observabilité LLM avec de solides fonctions développeur : gestion de prompts, playground, évals, datasets. monsys.ai s'attaque à une autre partie du problème : observabilité passive de niveau audit avec rédaction PII à la source et evidence packs signés pour l'AI Act et NIS2. Chacun a sa place.
| Dimension | monsys.ai | Langfuse |
|---|---|---|
| Cas d'usage principal | ✓Audit, conformité, gouvernance : preuves du comportement | ✓Boucle développeur : debug, éval, itération prompts |
| Rédaction PII à la source | ✓Imposée : IBAN-BE, RRN, BTW, KBO, email, téléphone (validés par checksum) | ~Possible via prétraitement SDK ou plugin self-hosted |
| Export evidence pack signé Ed25519 | ✓Un clic : tarball + manifeste + vérifieur offline, pour AI Act art.12 / NIS2 | ✗Absent : exports CSV/JSON, non signés |
| Gestion de prompts & playground | ✗Volontairement absent : monsys est passif, pas un outil d'itération | ✓Prompts versionnés, playground, comparaison A/B |
| Évals & datasets | ✗Absent : hors périmètre | ✓Runners d'évals, datasets, LLM-as-judge intégrés |
| Suivi coûts et tokens | ✓Tarifs versionnés par modèle : OpenAI/Anthropic/Google/Mistral/Azure | ✓Tables de coûts par trace et par utilisateur |
| Hébergement | ~Géré uniquement : UE seule, Belgique (GoTrust BV). Pas d'auto-hébergement. | ✓Géré (régions UE + US) ou auto-hébergé |
| Format de transport | ~Enveloppe JSON custom : petit SDK (Python/Node/Go ~150 LOC) | ✓Compatible OpenTelemetry GenAI + SDKs propres |
| Alertes d'anomalies (coût/refus/PII) | ✓Intégré : baseline z-score 7j, ntfy push + webhook (hash-only) | ~Via évals custom ou intégrations alerting externes |
| Licence open-source | ✗Source-available, pas open source : hébergement commercial | ✓MIT (core) + abonnement Cloud pour le géré |
Langfuse est une plateforme d'observabilité LLM mature avec ~3 ans d'avance et une communauté open-source vivante. La couche IA de monsys.ai est nouvelle (2026) et délibérément plus étroite, pas de gestion de prompts ni d'évals, mais des preuves de niveau audit et une détection PII spécifique UE/BE. Pour beaucoup d'équipes : Langfuse pour itérer + monsys pour les preuves de conformité.