Advancing Multimodal Knowledge-Enhanced Large Language Models: Novel Methods and Innovative Applications.

La ricerca sviluppa avanzamenti per knowledge-enhanced large language models multimodali per migliorare il reasoning su problemi decisionali complessi partendo da informazioni incomplete, ambigue o incoerenti. Tramite il dialogo con l'utente e la revisione di una rappresentazione simbolica esterna della conoscenza, il modello pone domande mirate e guida la progressiva chiarificazione e riformulazione di obiettivi, vincoli e preferenze. Evidenze, ipotesi, formulazioni, chiamate a tool e risultati intermedi saranno collegati a provenienza, dipendenze e condizioni di validità, usate per decidere cosa approfondire, verificare, riutilizzare o ricalcolare, evitando elaborazioni ridondanti. Si verificherà se ciò consenta a piccoli modelli open-weight su hardware commodity di avvicinarsi ai modelli commerciali, misurando correttezza, rispetto dei vincoli e qualità a parità di budget, con confronti e ablation study. Benchmark: la progettazione di sistemi energetici nel progetto europeo valwarp.