Hologrambasert konferanseløsning med maskinlæringsassistert volumetrisk video.

Offentlig prosjektsammendrag

HoloCap har utviklet en ledende programvareteknologi som i sanntid kan ta opp, strømme, og vise volumetrisk video i virtuell- og utvidet virkelighet (VR/AR). En slik naturtro 3D representasjon av mennesker, populært omtalt som “hologrammer”, er et aktivt forskningsfelt. Digitale plattformer for samhandling over Internett basert på 3D og VR/AR teknologi er i kraftig vekst, en vekst akselerert av den pågående pandemien og økt digitalisering i samfunnet. Slike plattformer omtales som “The MetaVerse”, det vil si et persistent, virtuelt univers der arbeid og sosiale sammenkomster kan foregå. De mest utbredte plattformene i dag, som Mozilla Hubs, VRChat, AltSpaceVR, Virbela m.m, har ulik fokus og funksjonalitet. Fellesnevneren er imidlertid at brukerne representeres ved hjelp animerte avatarer. I flere sammenhenger er det et behov for å presentere brukerne på en naturtro måte. Det kan være en foredragsholder, en daglig leder eller en artist, der en naturtro gjengivelse vil øke verdien og nytten av opplevelsen. Teknologien til HoloCap har dette potensialet, og selskapet mottatt forespørsler, og er i dialog med ledende aktører, om hvordan HoloCap teknologien kan benyttes på disse plattformene. En slik “hologram-basert konferanseløsning” finnes ikke på markedet i dag, og vil representere en teknologisk nyhet. For at HoloCap teknologien skal kunne bli tilgjengelig på de aktuelle plattformene, må selskapet finne metoder og utvikle komponenter som gjør dette mulig på en god måte, innenfor de tekniske, sikkerhetsmessige, og brukermessige rammene de ulike plattformene opererer under. Et annet markert behov i markedet er å senke barrierene for produksjon og bruk av volumetrisk video så mye som mulig. Idag kreves det spesielle dybdesensorer, og/eller svært omfattende postprosessering for å generere volumetrisk video. HoloCap har derfor som mål å utforske muligheten i å benytte avansert maskinlæring sammen med vanlige kamera, som et supplement eller erstatning for dagens krav.