Mówi: | dr hab. inż. Tomasz Trzciński, adiunkt na Wydziale Elektroniki i Technik Informacyjnych, Politechnika Warszawska Kacper Kania, doktorant, Politechnika Warszawska |
Polacy chcą zrewolucjonizować proces tworzenia animacji 3D w filmach czy grach. Dzięki uczeniu maszynowemu będzie on tańszy i prostszy niż do tej pory
To może być przełom w renderowaniu, czyli automatycznej konwersji modeli szkieletowych na komputerze. Wysokiej jakości animacje są koniecznością w grach wideo czy filmach. Rozwiązania wykorzystywane w wirtualnej czy rozszerzonej rzeczywistości, obrazy generowane komputerowo zajmują dużo czasu, są przy tym drogie. Polacy chcą ułatwić powstawanie awatarów, wykorzystując do tego metodę uczenia się przy niskim poziomie zaawansowania. Z częściowych informacji uda się wówczas wygenerować realistycznie wyglądające wizualizacje.
– Projekt „Realistyczne renderowanie postaci ludzi na podstawie niepełnej informacji” ma rozwiązać problem renderowania, czyli tworzenia grafiki komputerowej. Chcielibyśmy ten obraz generować metodami uczenia maszynowego, generatywnymi sieciami neuronowymi i kontrolować ten obraz – mówi agencji Newseria Innowacje dr hab. inż. Tomasz Trzciński, adiunkt na Wydziale Elektroniki i Technik Informacyjnych z Politechniki Warszawskiej.
Wymagania świata filmu czy gier są coraz większe. Oznacza to konieczność wygenerowania lepszych jakości trójwymiarowych obrazów. Tradycyjnie wykorzystuje się przy tym techniki wirtualnej i rozszerzonej rzeczywistości, także obrazy generowane komputerowo. Wszystkie te techniki są jednak drogie, trudne do skalowania, a przy tym zajmują bardzo dużo czasu. Projekt Politechniki Warszawskiej „Low Shot Realistic Human Rendering from Partial Information” („Realistyczne renderowanie postaci ludzi na podstawie niepełnej informacji”), finansowany przez Microsoft Research Cambridge, może całkowicie zrewolucjonizować renderowanie.
– Niepełna informacja, którą wykorzystujemy, polega na tym, że często podczas np. uchwytywania jakiejś klatki ze zdjęciem osoby nie mamy dostępu do jej pełnej sylwetki. Widzimy tylko część – od pasa w dół albo od pasa w górę, albo tylko ramiona – i w związku z tym chcielibyśmy rozwiązać ten problem przy wykorzystaniu generatywnych sieci neuronowych, takich jak wariacyjne autoenkodery czy architektury pozwalające na pewnego rodzaju domyślanie się reszty postaci przy wykorzystaniu danych, które już wcześniej miały tego typu ujęcia – tłumaczy dr hab. inż. Tomasz Trzciński.
Polacy chcą do renderowania wykorzystać metody Partial Information (częściowe informacje) i Low-shot learning (uczenie się przy niskim poziomie zaawansowania) i w ten sposób tworzyć awatary. Generatywne modele sieci neuronowych pozwolą stworzyć wysokiej jakości wizualizacje postaci oraz animację ich ruchu.
– Moim celem badawczym jest w tym momencie zaproponowanie takiego algorytmu, który byłby w stanie np. wyrenderować całą postać na podstawie tylko częściowych informacji. Lub np. inne zastosowanie w filmach, kiedy zadajemy jakąś trajektorię ruchu postaci, modelu trójwymiarowego i ta postać podąża za nią – wskazuje Kacper Kania, doktorant na Politechnice Warszawskiej.
Według założeń, jak podaje Politechnika Warszawska, z częściowych informacji (np. fragmentu twarzy) i podstawowych, łatwych do zebrania danych, bez wykorzystywania skomplikowanych systemów wymagających wielu powtórzeń (w jednej z opisanych metod człowiek musi użyć 122 wyrażeń i 50 zdań oraz być rejestrowanym przez 40 kamer) – można wygenerować realistycznie wyglądające filmy (np. z pełną twarzą i mimiką oraz naturalnym sposobem mówienia).
– Moje wstępne badania pokazały, że w tej działce brakuje rozwiązań, gdzie zadajemy jakiś ruch i postać podąża za tą trajektorią – to jest jedno. Drugie, okazuje się, że często widząc kogoś idącego na ulicy, jeśli to jest ktoś, kogo znamy, jesteśmy w stanie rozpoznać, że to jest nasz znajomy, po samym ruchu. I staram się też w tych badaniach wykorzystać te informacje – tłumaczy Kacper Kania.
Zazwyczaj praca nad cyfrową postacią rozpoczyna się od skanu 3D twarzy czy ciała prawdziwej osoby wykonującej różne czynności przy wykorzystaniu specjalistycznego sprzętu, który następnie przetwarza grafik. Wymaga to studia przechwytywania ruchu. Tak powstał np. Gollum we Władcy Pierścieni. Rozwiązanie Polaków będzie tańsze, prostsze i szybsze. Pomoże też w sytuacji, gdy np. aktor nie może dokończyć filmu.
– Za pomocą tego rozwiązania będzie można również odzwierciedlić w grach lub filmach, w jaki sposób np. zachowywałyby się postacie historyczne – mówi doktorant na Politechnice Warszawskiej.
Czytaj także
- 2024-04-16: Polskie uczelnie są coraz bliższe wprowadzenia mikropoświadczeń. Dla studentów takie certyfikaty to szansa na wzmocnienie pozycji na rynku pracy
- 2024-03-07: Polski Czerwony Krzyż: Ponad 8 tys. zgłoszeń zaginionych osób w związku z wojną w Ukrainie. W toku jest ok. 300 postępowań
- 2024-01-30: Zatajanie negatywnych informacji o sobie może być dużym obciążeniem psychicznym. Reakcja odbiorcy na wyjawiony sekret zwykle jest łagodniejsza niż oczekiwana
- 2024-02-08: Młode pokolenie odczuwa dużą presję w związku z walką o klimat. W tej chwili najważniejsza jest dla nich godziwa przyszłość ekonomiczna
- 2024-01-10: Ewa Minge: W moich książkach pokazuję, jak tworzy się celebrytów. Właściciele farm hodujących takie postaci zarabiają potężne pieniądze
- 2024-02-09: Ewa Minge: Są już pewne ruchy filmowców wokół trylogii „Gra w ludzi”. Mam więc nadzieję, że doczekam się ekranizacji moich książek, bo jest to chyba marzeniem każdego pisarza
- 2024-01-09: Nadmierny kontakt dziecka z urządzeniami cyfrowymi negatywnie wpływa na rozwój mózgu. Mogą się pojawić problemy z opanowaniem mowy, kontrolą emocji i koncentracją
- 2023-12-12: Cyfryzacja procesów budowlanych przyspiesza. Efektem są lepszej jakości projekty i mniej błędów na budowach
- 2023-10-23: Firmy inwestują w zabezpieczanie danych, ale wiele z nich wciąż robi to źle. Często nie trzymają się nawet podstawowych zasad bezpieczeństwa
- 2023-11-02: DNA może rozwiązać problem masowego przechowywania danych. Główne zalety to ogromna pojemność, trwałość i bezpieczeństwo zapisu
Kalendarium
Więcej ważnych informacji
Jedynka Newserii
Jedynka Newserii
Konsument
T-Mobile startuje w Polsce z nowym konceptem. Pozwoli klientom przetestować i doświadczyć najnowocześniejszych technologii
T-Mobile już od kilku lat realizuje strategię, która mocno skupia się na innowacjach i doświadczeniach klienta związanych z nowymi technologiami. Połączeniem obu tych elementów jest Magenta Experience Center – nowoczesny koncept, który ma zapewnić klientom możliwość samodzielnego przetestowania najnowszych technologii. Format, z sukcesem działający już na innych rynkach zachodnioeuropejskich, właśnie zadebiutował w Warszawie. Będą z niego mogli korzystać zarówno klienci indywidualni, jak i biznesowi.
Konsument
Od 28 kwietnia Polacy żyją na ekologiczny kredyt. Zmiana zachowań konsumentów może odwrócić negatywny trend
Dzień Długu Ekologicznego, czyli data, do której zużyliśmy wszystkie zasoby, jakie w ciągu roku może zapewnić Ziemia, w tym roku w Polsce przypada 28 kwietnia, kilka dni wcześniej niż rok temu. Coroczne przyspieszenie tego terminu to sygnał, że czerpiemy bez umiaru z naturalnych systemów, nie dając im czasu na odbudowę. – Polskie społeczeństwo staje się coraz bardziej konsumpcyjne, kupujemy i wyrzucamy coraz więcej. Ale też nie mamy tak naprawdę efektywnego narzędzia, żeby temu zapobiec – ocenia Filip Piotrowski, ekspert ds. gospodarki obiegu zamkniętego z UNEP/GRID-Warszawa.
Transport
Chiny przyspieszają inwestycje w odnawialne źródła. Nie przestają jednak rozbudowywać mocy węglowych
Coraz dotkliwsze skutki zmian klimatycznych, ale przede wszystkim chęć zbudowania bezpieczeństwa energetycznego i uniezależnienia się od zewnętrznych dostaw surowców skłoniły rząd w Pekinie do ekspresowych inwestycji w nowe moce odnawialnej energii. W efekcie Chiny wyrastają na globalnego lidera transformacji energetycznej – odpowiadają dziś za największy na świecie przyrost mocy zainstalowanych w fotowoltaice i wiatrakach. Co ciekawe, nie rezygnują jednak przy tym również z inwestycji w energetykę węglową.
Szkolenia
Akademia Newserii
Akademia Newserii to projekt, w ramach którego najlepsi polscy dziennikarze biznesowi, giełdowi oraz lifestylowi, a także szkoleniowcy z wieloletnim doświadczeniem dzielą się swoją wiedzą nt. pracy z mediami.