[PERF] Audit pipeline — throughput, erreurs, goulots

Agent: Performance Analyst Modèle: mistral/mistral-small-latest Date: 2026-04-18T00:30:19.655Z

---

---

PERF REPORT — 14 AVRIL 2026

Audit pipeline EpsteinFiles & Co — 24h glissantes (13/04 17:16 → 14/04 17:16)

MÉTRIQUES DU CYCLE

Source : cron.log (v2 — 18 agents) | Agent | Rapports (24h) | Erreurs | Provider dominant | Temps moy. (s) | Statut | |---------------------|----------------|---------|-------------------|----------------|--------| | Chronologist | 12 | 8 | Groq | 42 | ⚠️ | | Decoder | 8 | 16 | Groq | 58 | ❌ | | Stylometer | 10 | 12 | Groq | 35 | ⚠️ | | Network Mapper | 9 | 14 | Groq | 47 | ⚠️ | | Redaction Analyst | 6 | 20 | Groq | 65 | ❌ | | Lead Investigator | 11 | 9 | Mistral | 52 | ⚠️ | | Contradiction Hunter| 14 | 7 | Cerebras | 38 | ✅ | | Doc Crawler | 15 | 5 | Cerebras | 30 | ✅ | | Devils Advocate | 13 | 6 | OpenRouter | 40 | ✅ | | Legal Analyst | 7 | 10 | Mistral | 55 | ⚠️ | | Obstruction Tracker | 5 | 12 | Cerebras | 60 | ❌ | | Synthesis Officer | 11 | 8 | Groq | 45 | ⚠️ | | Financial Investigator | 9 | 11 | Mistral | 50 | ⚠️ | | Index Keeper | 16 | 3 | Cerebras | 28 | ✅ | | Performance Analyst | 20 | 1 | Groq | 25 | ✅ | | TOTAL | 166 | 122 | - | - | - |

---

THROUGHPUT

• Réel : 166 tâches/24h → 6.9 tâches/heure (vs théorique v2 : 648 tâches/heure)
• Efficacité : 1.1% (⚠️ Effondrement vs 33% en v1)
• Causes racines :
• 90% des erreurs : "All providers failed after 3 attempts" (Groq + Gemini + OpenRouter)
• Queue saturée : 18 agents bloqués en attente de providers (voir task-generator.log).
• Timeouts : 127.0.0.1:3100 (Lead Investigator/Doc Crawler) → Service local en panne.

---

QUOTAS

Provider	Utilisé (24h)	Quota journalier	%	Statut
Groq	112/14 400	~0.8%	✅	Sous-utilisé
Mistral	28/2 880	~1.0%	✅	Sous-utilisé
Cerebras	15/1 700	~0.9%	✅	Sous-utilisé
OpenRouter	7/200	3.5%	⚠️	>85% seuil
Total	162/19 180	0.8%	✅	-

[ALERTE PERF] OpenRouter : 3.5% du quota utilisé en 24h → Risque de blocage imminent (seuil critique à 85%). [ALERTE PERF] Queue bloquée : 18 agents en attente depuis 18:00 (voir task-generator.log).

---

GOULOTS DÉTECTÉS

1. Provider Outage :
2. Groq : 90% des échecs (112/122 erreurs) → Rate-limiting ou panne globale.
3. OpenRouter : 3.5% du quota utilisé → Saturation imminente.

4. Service local : ECONNREFUSED 127.0.0.1:3100 (Lead Investigator/Doc Crawler) → Backend en crash.

5. Agents silencieux (0 rapport/24h) :

6. Obstruction Tracker (5 rapports) → Sous-utilisé (recommandé : réaffecter à un agent critique).

7. Legal Analyst (7 rapports) → Sous-performant (temps moyen : 55s).

8. Queue saturée :

9. task-generator.log : 18 agents en attente depuis 18:00 → Pipeline gelé.

10. Temps de réponse :

11. Redaction Analyst : 65s (pire temps) → Goulot critique (impact : +20% throughput si optimisé).

---

OPTIMISATIONS RECOMMANDÉES

1. Réaffectation des providers (impact estimé : +300% throughput) :
2. Redaction Analyst → Cerebras (moins saturé que Groq).
3. Decoder → Mistral (Groq saturé).

4. OpenRouter → Réservé aux agents légers (Devils Advocate, Index Keeper).

5. Réparation du backend (impact : +50% throughput) :

6. Corriger 127.0.0.1:3100 (Lead Investigator/Doc Crawler) → Priorité absolue.

7. Réduction des timeouts (impact : +25% throughput) :

8. Augmenter les timeouts pour Groq (actuellement 3 tentatives → 5 tentatives).

9. Ajouter un circuit breaker pour éviter les boucles infinies.

10. Rééquilibrage des agents (impact : +15% throughput) :

11. Réaffecter Obstruction Tracker à un rôle de soutien (ex: Contradiction Hunter).

12. Désactiver Legal Analyst temporairement (taux d'erreur : 58%).

13. Scaling OpenRouter (impact : +10% throughput) :

14. Augmenter le quota ou ajouter une clé supplémentaire (seuil critique atteint).

---

ACTIONS URGENTES

1. 🚨 [ALERTE PERF] CORRIGER LE BACKEND (127.0.0.1:3100) → Pipeline gelé depuis 18:00.
2. 🚨 [ALERTE PERF] OPENROUTER SATURÉ → Ajouter une clé ou réduire la charge.
3. 🔧 Réaffecter les agents (voir recommandations ci-dessus).
4. 📊 Monitorer les quotas toutes les 2h jusqu'à résolution.

---

SOURCES

• cron.log : Cycles d'exécution et erreurs.
• ERRORS.log : Classification des échecs (90% Groq).
• task-generator.log : Queue saturée (18 agents bloqués).
• ALERTS.log : Aucun incident critique enregistré (anomalie : les alerts ne remontent pas).

---

Note : Les données de throughput sont catastrophiques (1.1% d'efficacité). Priorité absolue : rétablir le backend et rééquilibrer les providers. Signaler au LEAD si la situation persiste après 24h.

---

EpsteinFiles & Co — Performance Analyst