Pipeline replay visuel : - VLM-first : l'agent appelle Ollama directement pour trouver les éléments - Template matching en fallback (seuil strict 0.90) - Stop immédiat si élément non trouvé (pas de clic blind) - Replay depuis session brute (/replay-session) sans attendre le VLM - Vérification post-action (screenshot hash avant/après) - Gestion des popups (Enter/Escape/Tab+Enter) Worker VLM séparé : - run_worker.py : process distinct du serveur HTTP - Communication par fichiers (_worker_queue.txt + _replay_active.lock) - Le serveur HTTP ne fait plus jamais de VLM → toujours réactif - Service systemd rpa-worker.service Capture clavier : - raw_keys (vk + press/release) pour replay exact indépendant du layout - Fix AZERTY : ToUnicodeEx + AltGr detection - Enter capturé comme \n, Tab comme \t - Filtrage modificateurs seuls (Ctrl/Alt/Shift parasites) - Fusion text_input consécutifs, dédup key_combo Sécurité & Internet : - HTTPS Let's Encrypt (lea.labs + vwb.labs.laurinebazin.design) - Token API fixe dans .env.local - HTTP Basic Auth sur VWB - Security headers (HSTS, CSP, nosniff) - CORS domaines publics, plus de wildcard Infrastructure : - DPI awareness (SetProcessDpiAwareness) Python + Rust - Métadonnées système (dpi_scale, window_bounds, monitors, os_theme) - Template matching multi-scale [0.5, 2.0] - Résolution dynamique (plus de hardcode 1920x1080) - VLM prefill fix (47x speedup, 3.5s au lieu de 180s) Modules : - core/auth/ : credential vault (Fernet AES), TOTP (RFC 6238), auth handler - core/federation/ : LearningPack export/import anonymisé, FAISS global - deploy/ : package Léa (config.txt, Lea.bat, install.bat, LISEZMOI.txt) UX : - Filtrage OS (VWB + Chat montrent que les workflows de l'OS courant) - Bibliothèque persistante (cache local + SQLite) - Clustering hybride (titre fenêtre + DBSCAN) - EdgeConstraints + PostConditions peuplés - GraphBuilder compound actions (toutes les frappes) Agent Rust : - Token Bearer auth (network.rs) - sysinfo.rs (DPI, résolution, window bounds via Win32 API) - config.txt lu automatiquement - Support Chrome/Brave/Firefox (pas que Edge) Co-Authored-By: Claude Opus 4.6 (1M context) <noreply@anthropic.com>
55 lines
1.7 KiB
Batchfile
55 lines
1.7 KiB
Batchfile
@echo off
|
|
chcp 65001 >nul 2>&1
|
|
title Lea - Assistante IA
|
|
|
|
:: ---------------------------------------------------------------
|
|
:: Se placer dans le dossier du script (important pour les chemins)
|
|
:: ---------------------------------------------------------------
|
|
cd /d "%~dp0"
|
|
|
|
:: ---------------------------------------------------------------
|
|
:: Verifier que l'installation a ete faite
|
|
:: ---------------------------------------------------------------
|
|
if not exist ".venv\Scripts\python.exe" (
|
|
echo.
|
|
echo Lea n'est pas encore installee.
|
|
echo Lancez d'abord "install.bat" puis revenez ici.
|
|
echo.
|
|
pause
|
|
exit /b 1
|
|
)
|
|
|
|
:: ---------------------------------------------------------------
|
|
:: Charger la configuration depuis config.txt
|
|
:: Les lignes commencant par # sont ignorees (commentaires)
|
|
:: Format attendu : NOM_VARIABLE=valeur
|
|
:: ---------------------------------------------------------------
|
|
if exist "config.txt" (
|
|
for /f "usebackq eol=# tokens=1,* delims==" %%a in ("config.txt") do (
|
|
if not "%%a"=="" if not "%%b"=="" set "%%a=%%b"
|
|
)
|
|
) else (
|
|
echo ATTENTION : config.txt introuvable, utilisation des valeurs par defaut.
|
|
)
|
|
|
|
:: ---------------------------------------------------------------
|
|
:: Lancer Lea
|
|
:: ---------------------------------------------------------------
|
|
echo.
|
|
echo Demarrage de Lea...
|
|
echo (Lea apparait dans la barre des taches, en bas a droite)
|
|
echo.
|
|
echo Pour arreter Lea : clic droit sur l'icone ^> "Quitter Lea"
|
|
echo Vous pouvez fermer cette fenetre.
|
|
echo.
|
|
|
|
.venv\Scripts\pythonw.exe run_agent_v1.py
|
|
if errorlevel 1 (
|
|
echo.
|
|
echo Lea a rencontre un probleme au demarrage.
|
|
echo Tentative avec affichage des erreurs...
|
|
echo.
|
|
.venv\Scripts\python.exe run_agent_v1.py
|
|
pause
|
|
)
|