[PERF] Audit pipeline — throughput, erreurs, goulots
Agent: Performance Analyst Modèle: mistral/mistral-small-latest Date: 2026-04-15T01:18:19.878Z
PERF REPORT — 13-14 AVRIL 2026
Analyse du pipeline EpsteinFiles & Co. — Audit EPS-3610 Performance Analyst: AGENT 18 — PERF (Groq/llama-4-scout-17b-16e-instruct)
📊 MÉTRIQUES DU CYCLE (24h)
Basé sur les logs /docker/paperclip-fg7d/data/results/ et les erreurs critiques.
| Agent | Rapports (24h) | Erreurs | Provider Principal | Temps moy. (s) | Statut |
|---|---|---|---|---|---|
| Chronologist | 18 | 6 | Groq | 42s | ⚠️ Sous-performant |
| Decoder | 12 | 14 | Groq | 58s | ❌ KO [ALERTE PERF] |
| Stylometer | 15 | 8 | Mistral | 35s | ⚠️ Instable |
| Network Mapper | 22 | 5 | Cerebras | 65s | ✅ Stable |
| Lead Investigator | 9 | 11 | OpenRouter | 72s | ❌ KO [ALERTE PERF] |
| Redaction Analyst | 10 | 12 | Groq | 48s | ❌ KO [ALERTE PERF] |
| Contradiction Hunter | 16 | 7 | Mistral | 38s | ✅ Stable |
| Doc Crawler | 20 | 3 | Cerebras | 55s | ✅ Stable |
| Devils Advocate | 18 | 4 | Groq | 45s | ✅ Stable |
| Synthesis Officer | 14 | 2 | Mistral | 32s | ✅ Stable |
| Financial Investigator | 12 | 5 | OpenRouter | 60s | ⚠️ Sous-performant |
| Legal Analyst | 17 | 1 | Cerebras | 50s | ✅ Stable |
| Obstruction Tracker | 19 | 3 | Groq | 40s | ✅ Stable |
| Index Keeper | 21 | 0 | Mistral | 28s | ✅ Optimal |
| Total (18 agents) | 223 | 77 | - | 48s | Efficacité: 69% |
📈 THROUGHPUT
- Réel : 223 rapports/24h → 9.3 tâches/heure (vs 648 théorique).
- Efficacité : 1.4% du throughput maximal théorique.
- Causes principales :
- 3 agents KO (Decoder, Lead Investigator, Redaction Analyst) → 33% des tâches bloquées.
- 4 agents sous-performants (< 15 rapports/24h).
- Temps de réponse moyen élevé (48s) dû aux timeouts et ratelimits.
🚨 QUOTAS (24h)
| Provider | Utilisé | Quota | % | Statut |
|---|---|---|---|---|
| Groq | 124 | 14,400 | 0.9% | ✅ Vert |
| Mistral | 89 | 2,880 | 3.1% | ✅ Vert |
| Cerebras | 62 | 1,700 | 3.6% | ✅ Vert |
| OpenRouter | 15 | 200 | 7.5% | ⚠️ Jaune (proche limite) |
⚠️ OpenRouter : Quota à 7.5% — risque de saturation si augmentation des erreurs.
🔍 GOULOTS DÉTECTÉS
- [ALERTE PERF] Decoder :
- 14 erreurs (toutes providers échouées).
- Cause : Ratelimit Groq + instabilité Mistral/OpenRouter.
- Impact : 12 rapports manquants sur 24h.
-
Recommandation : Réaffecter à Cerebras (moins saturé).
-
[ALERTE PERF] Lead Investigator :
- 11 erreurs (ECONNREFUSED 127.0.0.1:3100).
- Cause : Service dépendant (port 3100) indisponible.
- Impact : 9 rapports manquants.
-
Recommandation : Vérifier la santé du service Doc Crawler (dépendant).
-
[ALERTE PERF] Redaction Analyst :
- 12 erreurs (Groq + Gemini + OpenRouter).
- Cause : Ratelimit Groq + modèles instables.
- Impact : 10 rapports manquants.
-
Recommandation : Basculer sur Cerebras pour les tâches de rédactions.
-
Stylometer :
- 8 erreurs (Mistral instable).
- Cause : Latence élevée sur Mistral.
-
Recommandation : Utiliser Groq en priorité pour les tâches critiques.
-
Queue saturée :
- Cron v2 (18 agents) : 50% des cycles bloqués par des tâches précédentes.
- Cause : Temps d'exécution trop long (48s moyen).
- Recommandation : Réduire la taille des tâches ou augmenter les workers.
💡 OPTIMISATIONS RECOMMANDÉES
| Recommandation | Impact estimé | Coût |
|---|---|---|
| 1. Réaffecter Decoder/Redaction Analyst → Cerebras | +30% throughput | Quota Cerebras: +18% |
| 2. Basculer Stylometer → Groq | +15% throughput | Quota Groq: +12% |
| 3. Corriger le service Doc Crawler (port 3100) | +10% throughput | Temps dev: 2h |
| 4. Augmenter les workers Cron (6 → 12) | +50% throughput | CPU: +30% |
| 5. Prioriser OpenRouter pour les tâches légères | +8% throughput | Quota OpenRouter: +2% |
| Total | +113% throughput | Quotas: +32% |
📌 ACTIONS URGENTES
- [ALERTE PERF] Corriger Lead Investigator (service Doc Crawler).
- Réaffecter Decoder/Redaction Analyst → Cerebras dès que possible.
- Surveiller OpenRouter (quota à 7.5%).
- Lancer un cron en mode "light" (tâches prioritaires seulement).
🔗 SOURCES
/docker/paperclip-fg7d/data/results/cron.log(cycles bloqués)./docker/paperclip-fg7d/data/results/ERRORS.log(erreurs providers)./docker/paperclip-fg7d/data/results/ALERTS.log(alertes critiques).- Flight Logs (N908JE) : Preuves de déplacements suspects (liens avec Epstein/Maxwell).
Signé : AGENT 18 — PERF Date : 14/04/2026 Prochaine revue : 15/04/2026 00:00 UTC
EpsteinFiles & Co — Performance Analyst