Jakie korzyści mogą przynieść нейросети do filmów, gier i wirtualnej rzeczywistości

Data:

2019-03-18 23:30:09

Przegląd:

1350

Ranking:

1Kochać 0Niechęć

Udział:

Jakie korzyści mogą przynieść нейросети do filmów, gier i wirtualnej rzeczywistości Source:

Wraz Z rozwojem technologii нейросетей i maszynowego uczenia się, rozwija i zakres ich stosowania. Jeśli wcześniej нейросети wykorzystywane wyłącznie do prowadzenia skomplikowanych matematycznych, medycznych, fizycznych, biologicznych obliczenia i przewidywania, to teraz te technologie zdobywają szeroką popularność w bardziej "приземленной" środowisku – w dziedzinie rozrywki. Robi dopiero pierwsze kroki w tym kierunku są już w stanie wykazać niesamowite i czasami nawet wybitne wyniki. Dziś przyjrzyjmy się kilku oczywistych przykładów.

Proces ремастеринга wideo jest tak skomplikowana i времязатратный, że wiele arcydzieła klasyki światowej może i nie zobaczyli z nowej, nowoczesnej, sprawnej i soczysty obraz. Jednak w świecie w pełni przekonujące fanów i entuzjastów, którzy doskonale znają się na nowych technologiach, a w szczególności technologii нейросетей i uczenia maszynowego, za pomocą których można osiągnąć zadziwiające rezultaty nawet w warunkach domowych. Na przykład, użytkownik YouTube Stefan Румен z pseudonimem CaptRobau postanowił zaprezentować niektóre możliwości нейросетей w obróbce wideo starego fantastycznego serialu.

Wcześniejszej jego pracą jest Remako Mod — "HD-remake" klasycznego i bardzo popularnego japońskiego RPG Final Fantasy VII pod nazwą. Do tego użył AI-algorytm AI Gigapixel, za pomocą którego mógł skalować obraz oryginalnego obrazu 4 razy, przekręcając ją w rozdzielczości HD, bez żadnych istotnych zmian w pierwotnym art-design. W ten sposób, aż będzie czekać na kolejne dekady, aż do chwili, kiedy japoński producent i wydawca gier komputerowych Square Enix oficjalnie wyda remaster chyba jedną z najlepszych części tej serii gier, możesz spróbować mod Stefana Румена samemu, pobierając go .

Nawiasem mówiąc, w ostatnim czasie technologie нейросетей dla ремастеринга starych gier i dostosowania ich do bardziej aktualnej i nowoczesnej myśli bez zmiany ogólnej oryginalnej koncepcji stało się prawdziwym trendem wśród różnych moderów. Na przykład, nie tak dawno mówiliśmy o technologii ESRGAN (Enhanced Super Resolution Generative Adversarial Networks), za pomocą której realizowane są w technologii powiększania obrazu z 2-8-krotnym wzrostem jakości. Algorytm "скармливают" oryginalny obraz o niskiej rozdzielczości, po co nie tylko zwiększa rozdzielczość ostatniego, ale i zwiększa jakość obrazu, подрисовывая realistyczne szczegóły i robi tekstury "bardziej naturalne".

Porównanie jakości tekstur: z lewej oryginalne tekstury z gry Morrowind, po prawej – obrobiona нейросетью

Postać z Doom (po lewej stronie — było, po prawej stronie — stało)

Obróbka tła w grze Resident Evil 3

Dowiedz się więcej szczegółów i zobacz przykłady można przechodząc .

Jak by nie było, w przerwach między ремастерингом "Siódmy Финалки" Stefan Румен postanowił zająć się innym projektem – korzystać z tej samej technologii uczenia maszynowego, ale już do obróbki zdjęć klasycznego fantastycznego serialu lat 90-tych. Jako obiekt do eksperymentów Румен wybrał ": deep space nine".

Powiększanie "żywego obrazu TELEWIZYJNEGO serialu na trudności bardzo różni się od powiększenia z góry отрендеренного obrazu Final Fantasy VII, zauważa autor, więc końcowy wynik, choć wygląda znacznie lepiej materiałów źródłowych w niskiej rozdzielczości, ale ten obraz wciąż jest daleka od ideału, o którym można marzyć jeszcze od momentu pojawienia się na rynku pierwszych Blu-ray odtwarzacze. Od czasu do czasu na ekranie pojawiają się małe "artefakty". Ale znowu, w ogóle wszystko wygląda więcej niż przyzwoicie. A w ogóle, zobaczcie sami.

Dla tego projektu Румен również używany algorytm AI Gigapixel, który został przeszkolony do edycji obrazów na podstawie rzeczywistych zdjęć. Autor zauważa, że nowy obraz uzyskano w formacie 1080p i 4k, ale tak jak u Румена nie ma telewizora lub monitora z rozdzielczością 4K, by właściwie ocenić 4K-opcja nie może.

Niestety, zobaczyć serial w całości w Full HD nie można. Proces przetwarzania całego materiału zajął bardzo dużo czasu, dlatego Румен do prezentacji użyłem tylko kilka zdjęć z różnych serii. Według jego słów, on zajął się tym projektem tylko z jednego powodu – pokazać, że to naprawdę możliwe. Jego zdaniem, cały zespół specjalistów pracujący w wielkiej telewizyjnej firmy i ma do dyspozycji bardziej odpowiednie i wydajne dla takiej pracy sprzęt komputerowy będzie w stanie poradzić sobie z tym zadaniem znacznie lepiej.

Korzystanie z нейросетей w celu ułatwienia pracy w zakresie obróbki starych zdjęć z gier wideo i filmów nie są jedynymi obszarami, gdzie takie technologie są w stanie pokazać swoje talenty. W dzisiejszym świecie, gdzie coraz większą popularność zyskują wycieczki panoramiczne kamery, zdolne produkować o kącie 360 stopni, a także zestawu wirtualnej rzeczywistości, deweloperzy zaczęli aktywnie badać potencjał panoramy.

Jednym z najnowszych osiągnięć w tym kierunku jest sieć neuronową, która głosiła panoramiczne statyczneobrazu. Jej autorami są eksperci w dziedzinie uczenia maszynowego z Massachusetts, uniwersytetów Columbia i Uniwersytet George ' a Masona.

Stworzony algorytm określa typ otoczenia i obiektów na zdjęciu, a następnie dobiera i ustawia dźwięki z używanej bazy danych, zgodnie z przestrzennym obliczeniem odległości od ich źródeł, w tym obrazie. Dzięki temu panoramiczny obraz staje się realistyczny i przestrzenny dźwięk, który umożliwia zupełnie nowy sposób ocenić przedstawione zdjęcie.

Zdaniem twórców tej нейросети, technologia może znaleźć zainteresowanie wśród deweloperów VR-treści (filmów i gier). Ostatni w tym przypadku nie trzeba nakładać wszystkie dźwięki na panoramiczny obraz ręcznie, sieć neuronową w stanie zrobić to samodzielnie.

Zapisz się na nasz . Można tam znaleźć materiały, które nie są publikowane na stronie internetowej.

Bardziej:

Jak malują stare filmy i ile to kosztuje

Jak malują stare filmy i ile to kosztuje

uważa się, że wcześniej cukier był słodszy, trawa jest bardziej zielona, a dziewczyny piękniejsze. Również wiele z wielkim sentymentem wspominają, jak oglądali czarno-biały film z rodziną i otrzymywali od tego ogromną przyjemność. "Uważaj na samochód...

Elon Musk życzę szczęśliwego nowego 2020 roku!

Elon Musk życzę szczęśliwego nowego 2020 roku!

Elon Musk z ufnością patrzy w 2020 roku Drodzy czytelnicy ! W imieniu własnym, a także firm Tesla i SpaceX, pozwolę sobie na chwilę oderwać się od świątecznego stołu i z całego serca pogratulować nowym 2020 roku! W tym roku w świecie wysokich technol...

Ta sieć neuronową wie, jak będziesz wyglądać za 50 lat. Jak to działa?

Ta sieć neuronową wie, jak będziesz wyglądać za 50 lat. Jak to działa?

Nie jest tajemnicą, że teraz нейросети najczęściej są używane w fotografii. Widzieliśmy już, jak są one w stanie pracować z animacją na zwykłym komputerze, a obrazy, odchodzą z młotkiem droższe dzieł znanych artystów. Nic dziwnego, że to właśnie нейр...

Uwaga (0)

Ten artykuł nie ma komentarzy, bądź pierwszy!

Dodaj komentarz

Nowości

Zwiedzających muzeum Dali będzie spotykać AI-klon hiszpańskiego artysty

Zwiedzających muzeum Dali będzie spotykać AI-klon hiszpańskiego artysty

wiosną zwiedzających muzeum Salvadora Dali w amerykańskim mieście St. petersburg (Floryda), STANY zjednoczone) będzie czekać na wyjątkowy gość. W ramach wystawy "Dalí Lives", która отроет swoje podwoje w kwietniu, wszystkich gości...

Нейросети w stanie

Нейросети w stanie "reanimować" stare gry. Wynik niewyobrażalny

Coraz większą popularność wśród graczy zyskuje technologia ESRGAN (Enhanced Super Resolution Generative Adversarial Networks). Najnowsza stanowi sieć neuronową, za pomocą której realizowane są w technologii powiększania obrazu z 2...

Przełom w branży: NVIDIA nauczyła SI przetwarzanie grafiki do gier

Przełom w branży: NVIDIA nauczyła SI przetwarzanie grafiki do gier

Firma NVIDIA od dłuższego czasu pozostaje prawdziwym "motorem postępu" w projektowaniu rozwiązań graficznych. Jej karty graficznej pozostają do tej pory jednymi z najlepszych rozwiązań na rynku. Ale do nieskończoności "budować gig...

Sieć neuronową

Sieć neuronową "Yandex" poprawiła jakość radzieckich kreskówek

Ręczne renowacja filmów i kreskówek — to długa i żmudna praca. Na szczęście, sieci neuronowe już nauczyli się podnosić jakość obrazu w czasie rzeczywistym. Na przykład, z tym dobrze radzi sobie technologia DeepHD od "Yandex". Jej ...

Gracze baseballa chcą, aby sędziami w grze zostały roboty

Gracze baseballa chcą, aby sędziami w grze zostały roboty

Świat sportu miał do czynienia z błędem człowieka sędziów, arbitrów i sędziów dziesiątki lat — w przeważającej części, to już stało się tradycją. Ale wraz z pojawieniem się technologii, które mogą oceniać grę bardziej dokładnie, n...

Ile rodzice płacą trenerom w Fortnite dla swoich dzieci

Ile rodzice płacą trenerom w Fortnite dla swoich dzieci

podczas Gdy sami rodzice płacą prywatnym репетиторам i trenerom, aby ich dziecko udawał się w szachach, tenisie lub, na przykład, w znajomości języka angielskiego, inni płacą za usługi trenerów z gier komputerowych. Tendencję tę z...

Dlaczego Ziemia się kręci, a my tego nie zauważamy?

Dlaczego Ziemia się kręci, a my tego nie zauważamy?

Pozwolę sobie pogratulować: obecnie spin prędkością 1500 km/h, nawet nie starając się za bardzo. Mniej więcej z taką prędkością obraca się Ziemia, dokonując pełnego obrotu. Dlaczego my tego nie odczuwamy? Na roller coaster żołądek...

Przegląd квадрокоптера Utoghter 69601 — tania opcja dla początkujących

Przegląd квадрокоптера Utoghter 69601 — tania opcja dla początkujących

no Cóż, znowu nadszedł czas, aby zrobić sobie przerwę od słuchawek i trochę pojeździć. Szukałem w sieci jakiś ciekawy model z segmentu budżetowego i zatrzymał się na Utoghter 69601: tani, долголетающий коптер z czujnikiem wysokośc...

Siedem ciekawych rzeczy, które można zrobić ze swoim ciałem po śmierci

Siedem ciekawych rzeczy, które można zrobić ze swoim ciałem po śmierci

Wiele aspektów naszego życia w przyszłości będą inne. Nasze samochody mogą latać. Możliwe, że będziemy żyć na Marsie. Może odnawiać wymarłych gatunków. Brzmi ciekawie, prawda? Cóż, dla kogoś może i tak, ale wszyscy w końcu umrzemy...

The Moment: pierwszy film, którego fabuła widz jest w stanie kontrolować za pomocą fal mózgowych impulsów

The Moment: pierwszy film, którego fabuła widz jest w stanie kontrolować za pomocą fal mózgowych impulsów

na Pewno każdy z nas podczas oglądania filmu była sytuacja, kiedy bohater na ekranie popełnia wręcz głupota, a myślimy: "No właśnie po co? Lepiej by zrobił tak i tak". A teraz wyobraź sobie, że po tym bohater naprawdę akceptuje to...

Google uruchamia w Rosji odpowiednik YouTube Red

Google uruchamia w Rosji odpowiednik YouTube Red

Google postanowił uruchomić usługę płatnej subskrypcji YouTube Red i w Rosji, ale pod inną nazwą — YouTube Premium. Jak donosi TechCrunch, wkrótce aplikacja zacznie działać w nowych krajach, wśród których Rosja, a w dodatku do eks...

Oficjalnie ogłoszona opracowanie S. T. A. L. K. E. R. 2

Oficjalnie ogłoszona opracowanie S. T. A. L. K. E. R. 2

nadszedł Ten dzień! Szef ukraińskiego studia-deweloper gier wideo z GSC Game World Siergiej Grigorowicz poinformował o tym, że kontynuacja kultowej post-apokaliptycznej serii gier S. T. A. L. K. E. R. być. "oficjalnie oświadczam...

Sieć neuronową

Sieć neuronową "Yandex" poprawiła jakość starych filmów o wojnie

"Dzień Zwycięstwa — to powód, by przejrzeć stare filmy o Wielkiej wojnie Ojczyźnianej. Wykonane w доцифровую czasach, są one dostępne w Internecie, ale często tylko w niskiej rozdzielczości. Obejrzeć można, ale jakość pozostawia w...

RUVDS zebrał geeków wraz z Geektimes i Habrahabr

RUVDS zebrał geeków wraz z Geektimes i Habrahabr

Rosyjski dostawca hostingu wspólnie z największym w Europie źródłem informacji dla specjalistów IT Habrahabr i jego towarzysz Geektimes zorganizowali wydarzenie poświęcone temu, jak mówić o technologii i gadżetów proste i jasne. "...

Wyszło aktualizacja Hearthstone

Wyszło aktualizacja Hearthstone "Ведьмин las"

Rok Kruk w grze karcianej Hearthstone rozpoczął, i pierwszy dodatek do 2018 roku, «Ведьмин las» już można spróbować zaktualizować klienta gry. Wprowadzona w marcu, dodatek zawiera 135 nowych kart, z których wiele z nowym...

Przegląd квадрокоптера MJX Bugs 3 Mini — бесколлекторные silniki i szybkość

Przegląd квадрокоптера MJX Bugs 3 Mini — бесколлекторные silniki i szybkość

No to ja i dotarł do prawie poważnej techniki. No, dokładniej, stosunkowo poważne, ponieważ, jak i wcześniej, głównym kryterium wyboru u mnie cena, a ja nadal staram się traktować modelu początkowego segmentu cenowego. Ale tym raz...

Uczyć się język klingoński z Star Trek teraz każdy może

Uczyć się język klingoński z Star Trek teraz każdy może

Jeśli jesteś fanem science fiction i choć краешком oczy patrzyły słynny serial , to na pewno wiesz o istnieniu wymyślonego języka klingońskiego. Język ten tak przypadł do gustu widzom, że powoli opuścił ekrany i wzrósł do poziomu ...

Robot-гироскутер pojawi się w sprzedaży wiosną tego roku

Robot-гироскутер pojawi się w sprzedaży wiosną tego roku

Miniaturowe i bardzo uroczy robot-гироскутер Loomo od Segway ma własnej strony na Indiegogo i obiecuje zrobić w sprzedaży już na wiosnę — wysyłka pierwszych partii planowane jest na maj 2018 roku. Loomo — nie jest zw...

#filmy | Niesamowite dynamiczna projekcja, którą trudno odróżnić od rzeczywistości

#filmy | Niesamowite dynamiczna projekcja, którą trudno odróżnić od rzeczywistości

już wielokrotnie mówiłem o tym, jak artyści i muzycy wykorzystują projekcje do tego, aby tworzyć swoje niezwykłe . Niejednokrotnie miłośnicy używali rozpoznawanie ruchów i projektor do tego, aby na twarzy człowieka imponujące obra...

#filmy | Jak powstawały efekty specjalne do filmu

#filmy | Jak powstawały efekty specjalne do filmu "Gwiezdne wojny: Ostatnie jedi"

Ósmy odcinek kosmicznej sagi "Gwiezdne wojny" już udało się zebrać w kinach na całym świecie ponad 1,3 miliarda dolarów. Jak by fani oryginalnych filmów George ' a Lucasa ani rozmawiali na temat franczyzy po tym, jak trafiła w ręc...