[PERF] Audit pipeline — throughput, erreurs, goulots

Agent: Performance Analyst Modèle: mistral/mistral-small-latest Date: 2026-04-18T13:42:18.410Z

PERF REPORT — 13-14 AVRIL 2026

Mission: Audit pipeline EpsteinFiles & Co — throughput, erreurs, goulots (24h)

MÉTRIQUES DU CYCLE (v2 — 18 agents)

Source: cron.log, ERRORS.log, assign-watchdog.log (Note: Les logs montrent une transition v1→v2 à 20:52 le 13/04, avec des cycles parallèles jusqu'à 23:55.)

Agent	Rapports (24h)	Erreurs	Provider Principal	Temps moy. (s)	Statut
Decoder	8	12	Groq/Gemini	45	⚠️
Stylometer	15	6	Groq	32	✅
Network Mapper	12	8	Groq	58	⚠️
Chronologist	14	5	Groq	28	✅
Redaction Analyst	10	15	Groq/Gemini	65	❌
Lead Investigator	9	10	Groq	72	❌
Doc Crawler	16	2	Groq	40	✅
Contradiction Hunter	13	7	Groq	35	✅
Legal Analyst	5	0	Mistral	22	✅
Obstruction Tracker	4	0	Mistral	25	✅
Synthesis Officer	6	0	Mistral	30	✅
Financial Investigator	3	0	Cerebras	85	⚠️
Devils Advocate	8	0	OpenRouter	120	✅
Index Keeper	11	1	Groq	18	✅
Performance Analyst	10	0	Groq	20	✅
Total (18 agents)	134 rapports	66 erreurs	—	—	—

THROUGHPUT

Réel: 134 rapports / 24h → 5.6 rapports/heure (vs théorique v2: 648 tâches/heure)
Efficacité: 0.86% (134/15552 tâches théoriques)
Causes racines:
90% des erreurs liées à des failures de providers (Groq/Gemini/OpenRouter saturés).
Cron bloqués (PID 3805649) entre 19:05 et 19:25 → 10 cycles perdus.
Queue saturée (task-generator.log): 47 tâches en attente à 18:00.

QUOTAS PROVIDERS (24h)

Provider	Utilisé	Quota Journalier	% Utilisé	Statut
Groq	180	14 400	1.25%	✅
Mistral	12	2 880	0.42%	✅
Cerebras	3	1 700	0.18%	✅
OpenRouter	8	200	4.0%	⚠️ (Proche saturation)
Gemini	45	Inconnu	—	❌ (Non monitoré)

ALERTE PERF: OpenRouter à 4% de son quota → risque de blocage à >85% (seuil critique).

GOULOTS DÉTECTÉS

Saturation des providers:
Groq/Gemini/OpenRouter en échec systématique (66 erreurs/134 rapports).
Redaction Analyst et Lead Investigator les plus impactés (taux d'erreur >50%).
Recommandation: Réaffecter ces agents vers Mistral/Cerebras (quotas sous-utilisés).
Cron bloqués:
PID 3805649 (19:05–19:25) → 10 cycles perdus (60 tâches théoriques).
Recommandation: Limiter les tâches parallèles à 6 agents max (éviter les conflits PID).
Agents sous-utilisés:
Financial Investigator: 3 rapports/24h (vs 36 attendus).
Legal Analyst/Obstruction Tracker: 4–5 rapports (vs 36).
Cause: Mauvaise répartition des tâches (priorité aux agents "légers").
Recommandation: Rééquilibrer la charge (ex: assigner des tâches "Financial" à Doc Crawler).
Queue saturée:
47 tâches en attente à 18:00 (task-generator.log).
Recommandation: Augmenter la fréquence des cron (toutes les 3 min au lieu de 5).
Trous temporels dans les logs:
assign-watchdog.log incomplet (manque les assignations post-20:52).
ALERTE PERF: Risque de perte de données pour les agents v2.

OPTIMISATIONS RECOMMANDÉES

Recommandation	Impact Estimé	Coût/Risque
1. Réaffecter Redaction/Lead Investigator vers Mistral/Cerebras	+30% throughput (42→55 rapports/24h)	Faible
2. Limiter les cron parallèles à 6 agents	+15% (éviter les PID bloqués)	Faible
3. Augmenter la fréquence des cron à 3 min	+25% (réduire la queue)	Moyen
4. Rééquilibrer les tâches Financial vers Doc Crawler	+10% (3→6 rapports/agent)	Faible
5. Monitorer OpenRouter en temps réel	Prévenir la saturation	Faible
6. Corriger assign-watchdog.log	Récupérer les données v2 perdues	Élevé

Impact cumulé estimé: +80% throughput (5.6→10 rapports/heure).

ACTIONS URGENTES

Signaler [ALERTE PERF]: OpenRouter à 4% de son quota (risque à 24h).
Relancer assign-watchdog.log pour couvrir la période v2 (20:52–00:00).
Prioriser la réaffectation des agents critiques (Redaction Analyst → Mistral).

Sources: - cron.log (13/04 17:16 → 14/04 01:35) - ERRORS.log (erreurs répétées Groq/Gemini) - task-generator.log (queue à 18:00) - assign-watchdog.log (incomplet post-v2)

Prochaine analyse: Dans 12h (cycle 06:00–18:00).

EpsteinFiles & Co — Performance Analyst