Reviews et évaluation Ghost
Ce que c'est
La couche qualité :
- Reviews — des portes d'approbation humaines / agents sur les changements.
- Le Review Engine — un analyseur automatisé, domaine par domaine.
- L'évaluation Ghost — des tests A/B hors ligne de prompts et de modèles face à des candidats fantômes (shadow candidates).
Surface opérateur
- Reviews —
review_create(CodeReview, DesignReview, SecurityReview, ComplianceReview, TaskReview, General),review_list,review_get,review_pending,review_assign,review_approve,review_reject,review_cancel,review_report_generate. - Review Engine —
review_engine_start,review_engine_domains,review_engine_status,review_engine_findings,review_engine_run_sweep,review_engine_full_system, plus les outils de planification et de soumission ; et la review UX (ux_review_*). - Ghost —
ghost_evaluation_list/_get/_stats,ghost_evaluation_trigger,ghost_evaluate_from_history,ghost_promotion_candidates,ghost_prompt_history.
REST : ReviewsController, ReviewEngineController, UxReviewController, GhostEvaluationController.
Comment ça fonctionne
Les Reviews sont persistées sous forme de ReviewRecords liés à l'entité examinée et peuvent bloquer l'achèvement d'une Mission à une porte de contrainte (constraint gate). Le Review Engine exécute une ReviewEngineSession qui énumère les cibles du Project et produit des ReviewEngineFindings via une analyse LLM cible par cible, chaque domaine étant routé à travers son Preset de call site ReviewEngine:{Domain} (avec des planifications pour les balayages récurrents). L'évaluation Ghost rejoue des prompts réels ou synthétiques face à des modèles fantômes (shadow models), en les notant (GhostEvaluation, PromptEvolution, LearningPrompt) afin que de meilleurs prompts / modèles puissent être remontés comme candidats à la promotion (promotion candidates) sans toucher au trafic en direct.