Hva er fordelene med å bringe nevrale nettverk for film -, tv-spill og virtuell virkelighet

Med utvikling av teknologier av nevrale nettverk og maskinlæring, og utvide sitt virkeområde. Dersom tidligere nevrale nettverk ble brukt utelukkende til å utføre kompliserte matematiske, medisinske, fysiske, biologiske, beregninger og prognoser, men nå disse teknologiene er å få bred popularitet i mer "dagligdagse" miljøer innen underholdning. Gjør bare det første skritt i denne retningen, de er i stand til å demonstrere overraskende og noen ganger til og med fremragende resultater. I dag la oss se på et par illustrerende eksempler.

Prosessen med å bygga videoen er så kompleks og tidkrevende at mange av de mesterverk av verden classics kan vi aldri har sett med nye, moderne, klar og saftig bilde. Men, verden er full av intelligent fans og entusiaster som er godt bevandret i ny teknologi, spesielt teknologier av nevrale nettverk og maskinlæring, med hjelp som du kan oppnå fantastiske resultater selv hjemme. For eksempel, en YouTube-bruker Stefan vommen alias CaptRobau bestemte seg for å demonstrere noen av de evner som er av nevrale nettverk i behandling video av den gamle sci-Fi-serien.

Tidligere arbeidet hans er Remako Mod — "HD-remake" av den klassiske og svært populære Japanske ROLLESPILLET Final Fantasy VII kalt. For dette har han brukt AI-algoritmen AI Gigapixel, som var i stand til å skalere bildet av det opprinnelige bildet 4 ganger, flytte den i HD-oppløsning uten eventuelle vesentlige endringer til den opprinnelige art design. Derfor, mens du er nødt til å vente et tiår til den tiden da Japanske utvikler og utgiver av dataspill Square Enix vil offisielt utgivelsen av remaster, som er trolig en av de beste delene av dette spillet serien, kan du prøve en mod Stefan vommen deg selv ved å laste den ned .

Forresten, nylig teknologien av nevrale nettverk for å bygga gamle spill og bringe dem til en mer relevant og moderne uten å endre den generelle opprinnelige konseptet har blitt en reell trend blant de ulike moddere. For eksempel, for ikke så lenge siden vi fortalte deg om ESRGAN-teknologi (Enhanced Super Resolution Generativ Alternative Nettverk), som har implementert teknologi for å skalere bilder med 2-8-fold økning i kvalitet. Algoritmen "mate" den opprinnelige bilde med lav oppløsning, så er det ikke bare øker oppløsningen av de nyeste, men også øker bildekvaliteten, Podrezova livaktige detaljer og gjør tekstur "mer naturlig".

å Sammenligne kvalitet på teksturer: til venstre er den opprinnelige strukturen fra spillet Morrowind, til høyre er behandlet av nevrale nettverk

Tegn fra Doom (venstre — det rett — var)

bakgrunn Behandling i spillet Resident Evil 3

For å Lese mer og se eksempler du kan følge .

Uansett, i mellom remastered "Syvende Finalen" Stefan vommen bestemte meg for å gjøre et annet prosjekt ved hjelp av den samme teknologien for maskinlæring, men for håndtering rammer klassiske sci-Fi-serien av 90-tallet. Som gjenstand for eksperimenter vommen valgt ": deep space nine."

Skalering den "levende bilde" av en TV-serie om kompleksitet svært ulik skalering på forhånd ofrendering bilde av Final Fantasy VII, forfatteren bemerker, så det endelige resultatet ser mye bedre kilde materiale i lav oppløsning, men dette bildet er fortsatt langt fra ideelt at du kan drømme om helt siden utseendet på markedet første Blu-ray-spillere. Noen ganger vises på skjermen en liten "gjenstander". Men, igjen, samlet det ser mer enn verdig. Og, Generelt, se for deg selv.

For dette prosjektet vommen også brukes algoritmen AI Gigapixel, som var opplært til å redigere bilder som er basert på virkelige bilder. Forfatteren bemerker at det nye bildet ble innhentet i 1080p og 4k, men siden jeg har for øyeblikket ingen TV eller monitor med innfødte 4K-oppløsning, til tilstrekkelig vurdere 4K alternativet, kan han ikke.

Beklager å se showet i Full HD er umulig. Behandling av alle kildematerialet vil det ta svært lang tid, så vom for demonstrasjon brukes bare de individuelle rammene av forskjellige serier. Ifølge ham, han startet dette prosjektet for en grunn – for å vise at det er faktisk mulig. Ifølge ham, er et helt team av fagfolk som arbeider for en stor tv-selskapet, og som har et mer egnet og kraftig slike datamaskinen utstyr vil være i stand til å takle denne oppgaven mye bedre.

Ved Hjelp av nevrale nettverk for å forenkle behandlingen av gamle bilder fra video spill og filmer er ikke de eneste områdene hvor slike teknologier er i stand til å vise sine talenter. I den moderne verden, der stadig mer populært panoramautsikt over kameraet, som kan produsere en 360-graders vinkel, og headsettet av virtuell virkelighet, utviklere begynte å aktivt utforske potensialet i panorama fotografering.

En ny utvikling i denne retningen er det nevrale nettverket i stand til å stemme med panoramautsikt statiskbilde. Forfatterne er eksperter på machine learning fra mit, Columbia University og George Mason-Universitetet.

Denne algoritmen angir type miljø og objekter i bilder og deretter velger og arrangerer lyder fra brukt database i samsvar med en romlig beregning av avstand til sine kilder i dette bildet. Takket være denne panoramabilde vises realistisk og tredimensjonal lyd, slik at en helt ny måte å evaluere presentert bilde.

Ifølge utviklerne av dette nevrale nettverk, teknologi kan finne interesse blant utviklere av VR innhold (filmer og spill). Sistnevnte i dette tilfellet ikke nødt til å sette alle lydene på en panoramisk bilde manuelt, nevrale nettverket vil være i stand til å gjøre det alene.

Abonner på vårt . Her finner du materialer som ikke er publisert på nettstedet.