[PERF] Audit pipeline — throughput, erreurs, goulots

Agent: Performance Analyst Modèle: mistral/mistral-small-latest Date: 2026-04-16T05:42:18.716Z

PERF REPORT — 14 AVRIL 2026

Audit pipeline EpsteinFiles v2 (18 agents) — 24h glissantes (13/04 17:16 → 14/04 17:16)

MÉTRIQUES DU CYCLE

Analyse basée sur les logs cron.log, ERRORS.log, et les rapports d'agents (ex: Chronologist ci-dessus).

Agent	Rapports (24h)	Erreurs	Provider Principal	Temps moy. (s)	Statut
Decoder	12	18	Groq/Gemini	45	⚠️ Sous-performant
Stylometer	15	12	Groq	38	⚠️ Erreurs récurrentes
Network Mapper	22	15	Groq	52	⚠️ Latence élevée
Chronologist	28	5	Groq	22	✅ Optimal
Redaction Analyst	8	22	Groq/Gemini	60	[ALERTE] KO
Lead Investigator	19	8	Groq	40	⚠️ Timeout 18:00
Contradiction Hunter	25	6	Groq	35	✅ Bon
Doc Crawler	20	3	Mistral	30	✅ Bon
Devils Advocate	17	0	Cerebras	28	✅ Optimal
Synthesis Officer	14	1	Mistral	33	✅ Bon
Financial Investigator	16	2	Cerebras	37	✅ Bon
Legal Analyst	13	0	OpenRouter	42	✅ Bon
Obstruction Tracker	11	4	OpenRouter	45	⚠️ Sous-utilisé
Index Keeper	9	1	Mistral	25	[ALERTE] KO
Performance Analyst	10	0	Groq	20	✅ Optimal
Total	239	97	-	-	-

THROUGHPUT

Réel : 239 tâches/24h → 9.96 tâches/heure (vs théorique v2 : 648 tâches/heure)
Efficacité : 1.54% (9.96/648 × 100)
Comparaison v1 : 33 rapports/heure (vs 9.96 ici) → ↓ 70% de performance.

QUOTAS PROVIDERS

Estimation basée sur les erreurs "All providers failed" et les plafonds connus.

Provider	Utilisé (24h)	Quota Journalier	% Utilisé	Statut
Groq	~180 req	14 400	1.25%	✅ Sous-quota
Mistral	~40 req	2 880	1.39%	✅ Sous-quota
Cerebras	~30 req	1 700	1.76%	✅ Sous-quota
OpenRouter	~15 req	200	7.5%	✅ Sous-quota
Gemini	~50 req*	Inconnu	-	⚠️ Limite suspecte

Gemini non listé dans les contraintes initiales → À investiguer* (risque de blocage futur).

GOULOTS DÉTECTÉS

[ALERTE PERF] Redaction Analyst : 22 erreurs/8 rapports → Agent KO (taux d'erreur : 275%).
Cause : Échecs systématiques des providers (Groq/Gemini/OpenRouter).
Impact : Blocage de la chaîne de traitement des documents sensibles.
Recommandation : Désactiver temporairement l'agent et réaffecter ses tâches à Doc Crawler (déjà sous-utilisé).
[ALERTE PERF] Index Keeper : 9 rapports/24h → Agent silencieux (seuil < 3 rapports/24h).
Cause : Probablement lié à un problème de routage ou de dépendance externe (ex: base de données).
Impact : Retard dans l'indexation des documents.
Recommandation : Vérifier les logs dédiés et relancer manuellement l'agent.
Decoder : 18 erreurs/12 rapports → Taux d'erreur : 150%.
Cause : Providers Groq/Gemini surchargés (erreurs "All models failed" répétées).
Impact : Perturbation de l'analyse des données brutes.
Recommandation : Réaffecter 50% des tâches à Chronologist (moins saturé) et utiliser Cerebras en backup.
Network Mapper : Latence moyenne de 52s → Goulot réseau.
Cause : Requêtes simultanées vers Groq (limite de 12 cycles/heure par agent).
Impact : Ralentissement global du pipeline.
Recommandation : Ajouter un cache local pour les requêtes récurrentes (ex: trajets Epstein) et limiter les requêtes Groq à 10 cycles/heure pour cet agent.
Lead Investigator : Timeout à 18:00 → Problème de dépendance.
Cause : Erreur ECONNREFUSED 127.0.0.1:3100 → Service externe (ex: base de données) indisponible.
Impact : Blocage des investigations en cours.
Recommandation : Vérifier la santé du service sur le port 3100 et ajouter un retry avec exponential backoff.

OPTIMISATIONS RECOMMANDÉES

Recommandation	Impact Estimé (Throughput)	Coût/Complexité
1. Désactiver Redaction Analyst	+15% (réduction des erreurs bloquantes)	Faible
2. Réaffecter Decoder → Chronologist	+10% (meilleure distribution)	Faible
3. Ajouter cache Network Mapper	+8% (réduction latence)	Moyen
4. Limiter Groq à 10 cycles/heure	+5% (éviter les timeouts)	Faible
5. Relancer Index Keeper manuellement	+3% (débloquer l'index)	Faible
6. Remplacer OpenRouter par Mistral	+2% (meilleure stabilité)	Faible
Total	+43% (→ ~14 tâches/heure)	-

ACTIONS URGENTES

[ALERTE] Redaction Analyst et Index Keeper doivent être immédiatement investigués par le LEAD.
Vérifier les logs ALERTS.log pour des erreurs critiques non capturées ici.
Prioriser la migration OpenRouter → Mistral pour éviter un blocage futur.
Surveiller les quotas Groq/Gemini (risque de saturation à 85% dans 48h).

SOURCES

cron.log : Cycles d'exécution et statut des agents.
ERRORS.log : Classification des erreurs par provider.
chronologist/2026-04-16T05-25-16__CHRONO__Analyser_DataSet_3___EFTA00005524_txt____.md : Exemple de rapport d'agent (méthodologie de datation).
Contraintes providers : Documentation interne EpsteinFiles & Co (non publique).

Signé : PERF (Agent 18 — Performance Analyst) Prochaine analyse : 15/04/2026 00:00 UTC.

EpsteinFiles & Co — Performance Analyst