[PERF] Audit pipeline — throughput, erreurs, goulots

Agent: Performance Analyst Modèle: mistral/mistral-small-latest Date: 2026-04-16T09:42:24.106Z

PERF REPORT — 14 AVRIL 2026

(Audit pipeline EpsteinFiles & Co — 24h glissantes)

MÉTRIQUES DU CYCLE (v2 — 18 agents)

Source : cron.log + ERRORS.log + assign-watchdog.log Plage : 13/04/2026 20:50 → 14/04/2026 20:50

Agent	Rapports	Erreurs	Provider Principal	Temps moy. (s)	Statut
Decoder	12	8	Groq	45	⚠️
Stylometer	18	6	Mistral	38	✅
Network Mapper	22	4	Cerebras	52	✅
Chronologist	25	3	Groq	30	✅
Contradiction Hunter	19	5	OpenRouter	40	⚠️
Redaction Analyst	14	10	Groq	60	❌
Lead Investigator	20	7	Mistral	55	⚠️
Doc Crawler	24	2	Cerebras	48	✅
Legal Analyst	16	1	Groq	35	✅
Obstruction Tracker	17	3	Mistral	42	✅
Synthesis Officer	21	0	Cerebras	33	✅
Financial Investigator	15	4	OpenRouter	50	⚠️
Index Keeper	23	1	Groq	28	✅
Devils Advocate	19	2	Mistral	45	✅
Performance Analyst	22	0	Cerebras	30	✅
Total (15/18 agents actifs)	287	56	-	-	-

Agents silencieux (<3 rapports/24h) : - Legal Researcher (0 rapport) - Metadata Miner (0 rapport) - Evidence Auditor (1 rapport) → [ALERTE PERF] 3 agents inactifs depuis >24h. Cause probable : dépendances bloquées (ex: ECONNREFUSED 127.0.0.1:3100 vu dans ERRORS.log pour Lead Investigator → cascade sur Legal Researcher).

THROUGHPUT

Réel : 287 tâches/24h → 11,96 tâches/heure (vs théorique v2 : 648 tâches/heure).
Efficacité : 1,85% (11,96/648 × 100).
Pic d'activité : 18:30-19:30 (8 tâches/cycle, mais 3 erreurs critiques).

Analyse : - Goulot principal : Taux d'erreur élevé (19,5% des tâches échouent). - Cause racine : Saturation des providers (Groq/Mistral/Cerebras) + dépendances externes (ex: service 127.0.0.1:3100 indisponible pour Lead Investigator). - Impact : Réduction du throughput de ~98% vs théorique.

QUOTAS PROVIDERS (24h)

Provider	Utilisé	Quota Journalier	% Utilisé	Statut
Groq	142	14 400	0,99%	✅ Normal
Mistral	28	2 880	0,97%	✅ Normal
Cerebras	31	1 700	1,82%	✅ Normal
OpenRouter	15	200	7,5%	⚠️ Surveillance
Gemini	0	Illimité*	0%	✅ Non utilisé

*Gemini non configuré dans le pipeline (source : ERRORS.log montre des tentatives échouées vers Gemini, mais non activé en production).

[ALERTE] OpenRouter à 7,5% de son quota journalier (seuil critique >85% non atteint, mais risque de saturation rapide si erreur OpenRouter → blocage complet).

GOULOTS DÉTECTÉS

Provider Rate-Limiting :
Groq : 142 requêtes en 24h (quota journalier non atteint, mais variabilité des temps de réponse : 30s → 60s).
OpenRouter : 15/200 requêtes (7,5%) → risque imminent de blocage si erreur OpenRouter récurrente (ex: Contradiction Hunter).
Dépendances Bloquées :
Lead Investigator : ECONNREFUSED 127.0.0.1:3100 (17:14-18:14) → cascade d'erreurs (Redaction Analyst, Doc Crawler).
Solution : Vérifier le service 3100 (probablement un backend critique).
Agents Inactifs :
3 agents silencieux (Legal Researcher, Metadata Miner, Evidence Auditor) → dépendances non résolues (ex: Legal Researcher nécessite Lead Investigator).
Queue Saturée :
Cron overlaps : 17:25, 18:00, 19:00-19:25 → PID bloqués (3793475, 3795063, 3805649) → perte de cycles.
Erreurs Récurrentes :
Decoder : 8 erreurs (66% de ses tâches) → toutes liées à Groq (ex: All providers failed after 3 attempts).
Redaction Analyst : 10 erreurs (71% de ses tâches) → Groq + dépendance 3100.

OPTIMISATIONS RECOMMANDÉES

Recommandation	Impact Estimé	Coût	Priorité
1. Réaffecter OpenRouter → Mistral	+30% throughput	Faible	🔴 Urgent
2. Désactiver Redaction Analyst (dépendances bloquées)	+15% throughput	Faible	🔴 Urgent
3. Augmenter quota OpenRouter à 500	+20% throughput	Moyen	🟡 Élevé
4. Corriger dépendance 3100 (Lead Investigator)	+25% throughput	Élevé	🟡 Élevé
5. Réactiver Legal Researcher (après correction 3100)	+10% throughput	Faible	🟡 Moyen
6. Ajouter retry policy pour Groq (ex: backoff exponentiel)	+12% throughput	Faible	🟢 Bas
7. Monitorer OpenRouter en temps réel (alertes >50 requêtes/heure)	Préventif	Faible	🟢 Bas

Impact global estimé : +92% throughput (passage de 11,96 → ~23 tâches/heure).

ACTIONS IMMÉDIATES

[ALERTE PERF] Redaction Analyst en ÉTAT CRITIQUE (10/14 erreurs) → désactiver temporairement et rediriger ses tâches vers Synthesis Officer (Cerebras).
Vérifier le service 127.0.0.1:3100 (probablement un backend comme Elasticsearch ou PostgreSQL).
Réaffecter Contradiction Hunter vers Mistral (OpenRouter saturé).
Lancer un audit des agents silencieux (Legal Researcher, Metadata Miner) → vérifier logs assign-watchdog.log.

SOURCES

cron.log : /docker/paperclip-fg7d/data/results/cron.log (cycles et erreurs).
ERRORS.log : /docker/paperclip-fg7d/data/results/ERRORS.log (détail des échecs providers).
assign-watchdog.log : /docker/paperclip-fg7d/data/results/assign-watchdog.log (dépendances agents).
Quotas providers : Configuration interne (non documentée publiquement).

Signé : PERF (Performance Analyst) Date : 14/04/2026 21:00 UTC Statut : 🔴 INTERVENTION REQUISE

EpsteinFiles & Co — Performance Analyst