feat: chat unifié, GestureCatalog, Copilot, Léa UI, extraction données, vérification replay

Refonte majeure du système Agent Chat et ajout de nombreux modules :

- Chat unifié : suppression du dual Workflows/Agent Libre, tout passe par /api/chat
  avec résolution en 3 niveaux (workflow → geste → "montre-moi")
- GestureCatalog : 38 raccourcis clavier universels Windows avec matching sémantique,
  substitution automatique dans les replays, et endpoint /api/gestures
- Mode Copilot : exécution pas-à-pas des workflows avec validation humaine via WebSocket
  (approve/skip/abort) avant chaque action
- Léa UI (agent_v0/lea_ui/) : interface PyQt5 pour Windows avec overlay transparent
  pour feedback visuel pendant le replay
- Data Extraction (core/extraction/) : moteur d'extraction visuelle de données
  (OCR + VLM → SQLite), avec schémas YAML et export CSV/Excel
- ReplayVerifier (agent_v0/server_v1/) : vérification post-action par comparaison
  de screenshots, avec logique de retry (max 3)
- IntentParser durci : meilleur fallback regex, type GREETING, patterns améliorés
- Dashboard : nouvelles pages gestures, streaming, extractions
- Tests : 63 tests GestureCatalog, 47 tests extraction, corrections tests existants
- Dépréciation : /api/agent/plan et /api/agent/execute retournent HTTP 410,
  suppression du code hardcodé _plan_to_replay_actions

Co-Authored-By: Claude Opus 4.6 <noreply@anthropic.com>
This commit is contained in:
Dom
2026-03-15 10:02:09 +01:00
parent 74a1cb4e03
commit cf495dd82f
93 changed files with 12463 additions and 1080 deletions

View File

@@ -27,6 +27,16 @@ class Workflow(db.Model):
updated_at = db.Column(db.DateTime, default=datetime.utcnow, onupdate=datetime.utcnow)
is_active = db.Column(db.Boolean, default=True)
# Review/Validation — workflows importés depuis le streaming
# source: origine du workflow ('manual', 'graph_to_visual_converter', etc.)
source = db.Column(db.String(64), default='manual')
# review_status: 'pending_review', 'approved', 'rejected', 'needs_edit', None (pas de review)
review_status = db.Column(db.String(32), nullable=True, default=None)
# review_feedback: commentaire de l'utilisateur lors de la review
review_feedback = db.Column(db.Text, nullable=True)
# reviewed_at: date de la review
reviewed_at = db.Column(db.DateTime, nullable=True)
# Relations
steps = db.relationship('Step', backref='workflow', lazy='dynamic',
order_by='Step.order', cascade='all, delete-orphan')
@@ -65,7 +75,7 @@ class Workflow(db.Model):
def to_dict(self) -> Dict[str, Any]:
"""Sérialise le workflow complet"""
return {
result = {
'id': self.id,
'name': self.name,
'description': self.description,
@@ -74,8 +84,13 @@ class Workflow(db.Model):
'created_at': self.created_at.isoformat() if self.created_at else None,
'updated_at': self.updated_at.isoformat() if self.updated_at else None,
'steps': [step.to_dict() for step in self.steps.order_by(Step.order).all()],
'step_count': self.steps.count()
'step_count': self.steps.count(),
'source': self.source or 'manual',
'review_status': self.review_status,
'review_feedback': self.review_feedback,
'reviewed_at': self.reviewed_at.isoformat() if self.reviewed_at else None,
}
return result
def __repr__(self):
return f'<Workflow {self.id}: {self.name}>'