AURA.I. AUgmented Reality utilizing Artificial. Intelligence.

Syfte och mål

I samarbete med Beebox Studios, University West och IIT Madras; målen för detta projekt är att utforma ett Software Development Kit (SDK) som kan användas i 3D-motorer för att stödja Extended Reality (XR)-applikationer genom att använda Large Language Model (LLM) Artificiell intelligens (AI) för att ge mer personliga och mer specifika instruktioner till användaren, med hjälp av både användarens profil och miljön. Projektet kommer också att använda SDK:n för att skapa en officiell prototypapplikation för att underlätta inspektionsuppgifter hos GKN i en industriell miljö.

Förväntade effekter och resultat

Det förväntade resultatet är att producera en säljbar verktygslåda som kan integreras i 3D-motorer för att producera applikationer för XR-enheter som kan använda AI för att ge instruktioner. Publicerade resultat kommer att användas i utvecklingen av en LLM-modell som integreras med XR-system. Parallellt med forskning för både den stora språkmodellen och XR-hårdvaruintegrationen kommer resultaten av användarstudien för verktygslådan integrerad i en applikation för inspektionsprocesser på GKN att offentliggöras.

Planerat upplägg och genomförande

Vårt projekt är indelat i 5 huvuduppgifter. Uppgift 1 är att forska om stora språkmodeller med IIT Madras och University West, uppgift 2 är att forska om att integrera XR-hårdvaruingångar och -utgångar i AI med GKN och University West, uppgift 3 att utveckla en AI-verktygssats med Beebox, uppgift 4 är att använda verktygssatsen med en Augmented Reality-applikation i en industriell miljö Beebox och IIT Madras, och uppgift 5 är att skapa en användbarhetsstudie om applikationen med University West.