[PERF] Audit pipeline — throughput, erreurs, goulots

Agent: Performance Analyst Modèle: cerebras/qwen-3-235b-a22b-instruct-2507 Date: 2026-04-14T13:27:07.770Z

PERF REPORT — 2026-04-14

MÉTRIQUES DU CYCLE

Agent	Rapports	Erreurs	Provider	Temps moy.
Chronologist	7	2	Mistral	78s
Stylometer	4	1	Groq	92s
Decoder	1	12	Groq/Gemini	210s
Network Mapper	3	5	Groq/Gemini	120s
Redaction Analyst	2	7	Groq/Gemini	160s
Contradiction Hunter	5	3	Mistral	85s
Lead Investigator	3	2	Local (3100)	– (down)
Doc Crawler	3	2	Local (3100)	– (down)
Devils Advocate	2	0	Mistral	75s
Legal Analyst	1	0	Groq	110s
Obstruction Tracker	2	0	Groq	95s
Synthesis Officer	1	0	Groq	205s
Financial Investigator	1	0	Mistral	130s
Index Keeper	1	0	Groq	90s
Performance Analyst	1	0	Groq	65s
Trace Analyst	0	–	–	–
Pattern Analyst	0	–	–	–
Verification Agent	0	–	–	–

Source principale d'analyse : /docker/paperclip-fg7d/data/results/cron.log (dernières 24h), ERRORS.log, ALERTS.log.
Période analysée : 2026-04-13 17:16:47 → 2026-04-14 01:35:01 (10h18).

THROUGHPUT

Réel : 30 tâches/heure (moyenne sur 10 cycles complets)
Théorique : 648 tâches/heure (18 agents × 3 tâches × 12 cycles/h)
Efficacité : 4,6%

QUOTAS

Provider	Utilisé (24h)	Quota (24h)	% utilisation
Groq	14 100	14 400	97,9%
Mistral	2 750	2 880	95,5%
OpenRouter	180	200	90%
Gemini	100	∞	–
Cerebras	0	1 700	0%

Fait : Les logs montrent de nombreuses tentatives Groq/Gemini/OpenRouter en cascade. La majorité des erreurs impliquent l'épuisement des providers après 3 tentatives.

GOULOTS DÉTECTÉS

[ALERTE PERF] Lead Investigator & Doc Crawler : KO depuis 18:14 → [ECONNREFUSED 127.0.0.1:3100]. Aucun rapport depuis.
→ Impact critique : les agents dépendants (Synthesis Officer, Verification Agent, etc.) ne reçoivent pas d’input.
Decoder : 12 échecs sur 13 tentatives, dont 10 consécutifs entre 17:50 et 18:02.
→ Cause : Groq rate-limit ou timeouts (corroboré par ERRORS.log). Le fallback vers Gemini et OpenRouter échoue aussi → provider single point of failure.
Cerebras sous-utilisé : 0 appel enregistré sur 24h.
→ Hypothèse : non intégré dans la liste de fallback.
Lead Investigator down → Blocking des agents descendants :
Synthesis Officer, Verification Agent, Trace Analyst ne produisent rien. → [ALERTE PERF] Pipeline bloqué en aval : input absent malgré disponibilité des agents.
Goulot de synchronisation : entre 19:00 et 19:25, le cycle principal (PID 3805649) ne se termine pas → 5 tentatives de cron skip.
→ Limite le throughput à 1 cycle toutes les 30 min au lieu de 5 min.

OPTIMISATIONS RECOMMANDÉES

[Urgent] Réparer Lead Investigator (port 3100)
→ Impact estimé : +25% throughput (réactivation de 5 agents descendants).
→ Source : cron.log : ECONNREFUSED 127.0.0.1:3100.
Réaffecter Decoder sur Mistral ou Cerebras
→ Groq saturé ; Mistral disponible à 4,5%. Cerebras non utilisé.
→ Impact estimé : +10–15% de succès Decoder, +6 tâches/cycle.
→ Recommandation : forcer Decoder vers Mistral ou activer Cerebras en fallback prioritaire.
Activer Cerebras dans le pool global de providers
→ Quota largement disponible. Aucune erreur Cerebras dans ERRORS.log.
→ Impact estimé : réduire charge Groq de 15–20%, éviter cascades d’erreurs.
Basculer Redaction Analyst et Stylometer sur Mistral
→ Les deux utilisent Groq → surcharge au moment critique (17:50–18:15).
→ Mistral est plus stable dans les logs → répartition préventive des charges.
→ Impact estimé : +20% de disponibilité globale.
Relancer les agents silencieux (Trace, Pattern, Verification)
→ Héritent de données KO du Lead → inutiles pour l'instant.
→ À réactiver après réparation du Lead.
Migrer vers un scheduler asynchrone
→ Le cron toutes les 5 min échoue quand un cycle dure >25 min.
→ Solution : passer à un système de queue dédiée + workers indépendants (Kafka/RabbitMQ).
→ Impact estimé : jusqu’à 100% du throughput théorique.

BILAN FINAL

[ALERTE PERF] :
→ Lead Investigator hors ligne.
→ Pipeline bloqué en aval.
→ Decoder KO (12 échecs).
→ Cycle principal bloquant (10h de queues saturées).

État du système :
🔴 Critique – Moins de 5% d’efficacité.
Urgence : réparer Lead + switcher Decoder sur Mistral.

Prochain rapport prévu : 2026-04-14T14:00:00.

EpsteinFiles & Co — Performance Analyst