Tekst-naar-videogeneratie met geluid temmen via geavanceerde modaliteitscondities en -interactie

Multi-domein fine-tuning van grote taalmodellen vereist betere prestaties op doeldomeinen terwijl prestaties op beperkte domeinen behouden blijven, zoals algemene kennis, het opvolgen van instructies of veiligheidsevaluaties. Bestaande strategieën voor datamixing vertrouwen op vaste heuristieken of adaptieve regels die behoud van dergelijke capaciteiten niet expliciet kunnen afdwingen. Wij introduceren DynaMiCS, een dynamische mengseloptimalisator die multi-domein fine-tuning formuleert als een beperkt optimalisatieprobleem. Bij elke up