Sztuczna inteligencja pomoże Meta osiągnąć realistyczny dźwięk w wirtualnych światach. Bezpłatne wiadomości z biblioteki technicznej

NOWOŚCI NAUKI I TECHNOLOGII, NOWOŚĆ W ELEKTRONIKI
Bezpłatna biblioteka techniczna / Kanał wiadomości

AI pomoże Meta osiągnąć realistyczny dźwięk w wirtualnych światach

29.06.2022

Meta Company mówiła o pracach nad realistycznymi technologiami dźwięku dla wirtualnych światów – projekt realizowany jest przy pomocy naukowców z University of Texas w Austin. W ramach projektu opracowano trzy modele sztucznej inteligencji, które są dostępne dla zewnętrznych programistów.

Jak wyjaśniła Kristen Garuman, profesor informatyki na Uniwersytecie Teksańskim i dyrektor ds. badań w Meta AI, rzeczywistości rozszerzonej i wirtualnej nie można sprowadzić tylko do elementu wizualnego – dźwięk odgrywa ważną rolę w ożywianiu świata. Na jego jakość wpływają różne czynniki: geometria pomieszczenia, umieszczone w nim przedmioty, a także odległość od źródła. Dlatego narodził się pomysł wykorzystania algorytmów sztucznej inteligencji do przetwarzania dźwięku.

Pierwszy algorytm nazywa się AviTAR, „model dopasowania wizualno-akustycznego”, który przekształca dźwięk w zależności od otoczenia. Aby wyjaśnić, jak działa algorytm, autorzy projektu podali przykład. Matka uczestniczyła w przedstawieniu swojego dziecka i za pomocą okularów rozszerzonej rzeczywistości nagrywała je bezpośrednio z audytorium. Algorytm uruchamia się, gdy kobieta chce odtworzyć nagranie w domu. System skanuje pomieszczenie z uwzględnieniem znajdujących się w nim elementów wnętrza i odtwarza nagranie w taki sposób, jakby młody artysta występował w tej samej sali.

Drugi algorytm nosi nazwę Visually-Informed Dereverberation. Ma to na celu usunięcie z nagrania efektu pogłosu - wielokrotnych ech, które pojawiają się, gdy dźwięk odbija się od ścian i innych obiektów. Wracając do przykładu z koncertu dzieci, mama odtwarzając nagranie w domu nie usłyszy nic poza muzyką.

Wreszcie trzeci model AI nazywa się VisualVoice - oddziela ludzki głos od innych źródeł dźwięku. Na przykład, jeśli nagrasz wideo dwóch kłócących się osób, algorytm podświetli jeden z głosów, zagłuszając wszystkie pozostałe.

Jak wyjaśniono w Meta, sztuczna inteligencja potrzebuje do tego wizualnych wskazówek – musi „zobaczyć”, kto mówi, i na podstawie tych informacji rozróżnić niezbędne niuanse w ogólnym strumieniu.

<< Powrót: Nowy sposób na odmładzanie skóry 30.06.2022

>> Naprzód: Kawa zmniejsza ryzyko chorób wątroby 29.06.2022

Najnowsze wiadomości o nauce i technologii, nowa elektronika:

Udowodniono istnienie reguły entropii dla splątania kwantowego 09.05.2024

Mechanika kwantowa wciąż zadziwia nas swoimi tajemniczymi zjawiskami i nieoczekiwanymi odkryciami. Niedawno Bartosz Regula z Centrum Obliczeń Kwantowych RIKEN i Ludovico Lamy z Uniwersytetu w Amsterdamie przedstawili nowe odkrycie dotyczące splątania kwantowego i jego związku z entropią. Splątanie kwantowe odgrywa ważną rolę we współczesnej nauce i technologii informacji kwantowej. Jednak złożoność jego struktury utrudnia zrozumienie go i zarządzanie nim. Odkrycie Regulusa i Lamy'ego pokazuje, że splątanie kwantowe podlega zasadzie entropii podobnej do tej obowiązującej w układach klasycznych. Odkrycie to otwiera nowe perspektywy w dziedzinie informatyki i technologii kwantowej, pogłębiając naszą wiedzę na temat splątania kwantowego i jego powiązania z termodynamiką. Wyniki badań wskazują na możliwość odwracalności transformacji splątania, co mogłoby znacznie uprościć ich zastosowanie w różnych technologiach kwantowych. Otwarcie nowej reguły ... >>

Mini klimatyzator Sony Reon Pocket 5 09.05.2024

Lato to czas relaksu i podróży, jednak często upały potrafią zamienić ten czas w udrękę nie do zniesienia. Poznaj nowość od Sony - miniklimatyzator Reon Pocket 5, który obiecuje zapewnić użytkownikom większy komfort lata. Sony wprowadziło do oferty wyjątkowe urządzenie – miniodżywkę Reon Pocket 5, która zapewnia schłodzenie ciała w upalne dni. Dzięki niemu użytkownicy mogą cieszyć się chłodem w dowolnym miejscu i czasie, po prostu nosząc go na szyi. Ten mini klimatyzator wyposażony jest w automatyczną regulację trybów pracy oraz czujniki temperatury i wilgotności. Dzięki innowacyjnym technologiom Reon Pocket 5 dostosowuje swoje działanie w zależności od aktywności użytkownika i warunków otoczenia. Użytkownicy mogą łatwo regulować temperaturę za pomocą dedykowanej aplikacji mobilnej połączonej przez Bluetooth. Dodatkowo dla wygody dostępne są specjalnie zaprojektowane koszulki i spodenki, do których można doczepić mini klimatyzator. Urządzenie może och ... >>

Energia z kosmosu dla Starship 08.05.2024

Wytwarzanie energii słonecznej w przestrzeni kosmicznej staje się coraz bardziej wykonalne wraz z pojawieniem się nowych technologii i rozwojem programów kosmicznych. Szef startupu Virtus Solis podzielił się swoją wizją wykorzystania statku kosmicznego SpaceX do stworzenia orbitalnych elektrowni zdolnych zasilić Ziemię. Startup Virtus Solis zaprezentował ambitny projekt stworzenia elektrowni orbitalnych przy użyciu statku Starship firmy SpaceX. Pomysł ten mógłby znacząco zmienić dziedzinę produkcji energii słonecznej, czyniąc ją bardziej dostępną i tańszą. Istotą planu startupu jest obniżenie kosztów wystrzeliwania satelitów w przestrzeń kosmiczną za pomocą Starship. Oczekuje się, że ten przełom technologiczny sprawi, że produkcja energii słonecznej w kosmosie stanie się bardziej konkurencyjna w stosunku do tradycyjnych źródeł energii. Virtual Solis planuje budowę dużych paneli fotowoltaicznych na orbicie, wykorzystując Starship do dostarczenia niezbędnego sprzętu. Jednak jedno z kluczowych wyzwań ... >>

Nowa metoda tworzenia potężnych akumulatorów 08.05.2024

Wraz z rozwojem technologii i coraz większym wykorzystaniem elektroniki, kwestia tworzenia wydajnych i bezpiecznych źródeł energii staje się coraz pilniejsza. Naukowcy z Uniwersytetu w Queensland zaprezentowali nowe podejście do tworzenia akumulatorów cynkowych o dużej mocy, które mogą zmienić krajobraz branży energetycznej. Jednym z głównych problemów tradycyjnych akumulatorów wodnych było ich niskie napięcie, co ograniczało ich zastosowanie w nowoczesnych urządzeniach. Ale dzięki nowej metodzie opracowanej przez naukowców udało się pokonać tę wadę. W ramach swoich badań naukowcy zajęli się specjalnym związkiem organicznym – katecholem. Okazało się, że jest to ważny element, który może poprawić stabilność akumulatora i zwiększyć jego wydajność. Takie podejście doprowadziło do znacznego wzrostu napięcia akumulatorów cynkowo-jonowych, czyniąc je bardziej konkurencyjnymi. Zdaniem naukowców takie akumulatory mają kilka zalet. Mają b ... >>

Zawartość alkoholu w ciepłym piwie 07.05.2024

Piwo, jako jeden z najpopularniejszych napojów alkoholowych, ma swój niepowtarzalny smak, który może zmieniać się w zależności od temperatury spożycia. Nowe badanie przeprowadzone przez międzynarodowy zespół naukowców wykazało, że temperatura piwa ma znaczący wpływ na postrzeganie smaku alkoholu. Badanie prowadzone przez naukowca zajmującego się materiałami Lei Jianga wykazało, że w różnych temperaturach cząsteczki etanolu i wody tworzą różnego rodzaju skupiska, co wpływa na postrzeganie smaku alkoholu. W niskich temperaturach tworzą się bardziej piramidalne skupiska, co zmniejsza ostrość smaku „etanolu” i sprawia, że napój ma mniej alkoholowy smak. Wręcz przeciwnie, wraz ze wzrostem temperatury grona stają się bardziej łańcuchowe, co skutkuje wyraźniejszym alkoholowym posmakiem. To wyjaśnia, dlaczego smak niektórych napojów alkoholowych, takich jak baijiu, może zmieniać się w zależności od temperatury. Uzyskane dane otwierają nowe perspektywy dla producentów napojów, ... >>

Przypadkowe wiadomości z Archiwum

Nowy sposób wytwarzania energii elektrycznej 25.06.2021

Naukowcy z Massachusetts Institute of Technology stworzyli materiał, który pobiera energię elektryczną ze środowiska.

Naukowcy z Massachusetts Institute of Technology opracowali nowy sposób wytwarzania energii elektrycznej. Tak więc wynaleziono cząstki oparte na nanorurkach węglowych, które są zdolne do generowania prądu.

Amerykańscy inżynierowie stworzyli mikroskopijne cząsteczki (250 na 250 mikrometrów) z nanorurek węglowych, które zostały pokryte specjalnie stworzonym do badań materiałem, który właściwościami przypomina teflon. Warto zauważyć, że zdecydowali się pokryć tylko połowę nanorurek, podczas gdy druga pozostała bez zmian. Cząsteczki te zaczęły wytwarzać energię elektryczną po oblaniu acetonitrylem.

Naukowcom udało się nawet zmontować reaktor elektrochemiczny, który mógłby zasilać reakcje rozkładu alkoholu. Ta metoda może całkowicie obejść się bez substancji innych firm.

Naukowcy są przekonani, że w przyszłości ta metoda wytwarzania energii elektrycznej będzie wykorzystywana na większą skalę.

Zobacz całość Archiwum wiadomości z nauki i techniki, nowa elektronika

Wszystkie języki tej strony

Strona główna | biblioteka | Artykuły | Mapa stony | Recenzje witryn