dpo

Soup CLI

Soup CLI es la herramienta de ajuste fino de Soup para entrenar y alinear Llama-3.1-8B en una GPU de portátil con solo 4 GB. Compatible con DPO, ORPO y más, ofrece inferencia en streaming, eficiencia de VRAM y soporte multi-backend.