Thesis Description & Objectives
Il progetto di tesi prevede l’integrazione di un LLM in un banco di lavoro sensorizzato che permetta ad un operatore di effettuare alcuni task industriali (e.g., assemblaggio, misurazione, etc.) utilizzando un sistema di Realtà Aumentata (AR) proiettata.
Si partirà da un modello LLM già esistente che dovrà essere addestrato sui dati relativi al task che dovrà compiere l’operatore (fine tuning). Inoltre, LLM dovrà funzionare su un dispositivo installato su rete locale e non si potranno usare servizi funzionanti su server pubblici. Il ruolo del LLM sarà di supporto all’operatore che potrà interagirci tramite un’interfaccia vocale.
Una volta completata la parte di integrazione LLM, si integrerà un sistema di AR proiettato in grado di proiettare i contenuti virtuali sul banco di lavoro evitando occlusioni ed ottimizzando gli spazi. Inoltre, l’operatore dovrà poter interagire con in contenuti virtuali usando un’interazione basati su gesti e vocale.
