Kamera nagrywa głos bez mikrofonu. Bezpłatne wiadomości z biblioteki technicznej

NOWOŚCI NAUKI I TECHNOLOGII, NOWOŚĆ W ELEKTRONIKI
Bezpłatna biblioteka techniczna / Kanał wiadomości

Kamera nagrywająca głos bez mikrofonu

14.06.2013

Używając szybkiej kamery, która wykonuje tysiące klatek na sekundę, Japończykom udało się zarejestrować nawet najmniejsze wibracje na powierzchni skóry twarzy i szyi człowieka, którym towarzyszą dźwięki wydobywające się z ludzkich strun głosowych.

Na świecie istnieją różne programy, które są szeroko stosowane przez wszelkiego rodzaju służby specjalne i organy ścigania, które dzięki ruchom ust, szczęk i mięśni twarzy są w stanie rozpoznać wypowiadane przez tę osobę słowa. Najbardziej złożone programy potrafią rozpoznawać mowę ludzką w różnych językach, ale w każdym razie komputer może z pewnym prawdopodobieństwem poprawnie odtworzyć tylko słowa, czysty tekst, który nie zawiera żadnych intonacji i składników emocjonalnych.

Korzystając z szybkiej kamery zdolnej do rejestrowania tysięcy klatek na sekundę, naukowcy z Waseda University w Tokio w Tokio byli w stanie zarejestrować nawet najmniejsze wibracje na powierzchni skóry twarzy i szyi osoby, które towarzyszą dźwiękom emitowanym przez struny głosowe osoby. Po wykonaniu zdjęć specjalistyczny program komputerowy, oparty na najbardziej skomplikowanych algorytmach, zamieniał nagrane drgania skóry na odpowiadające im drgania dźwiękowe, na ludzki głos.

„Dzięki naszej technologii możemy uzyskać nie tylko słowa wypowiadane przez człowieka, ale także jego głos z intonacjami, które niosą emocjonalny komponent mowy”, powiedział Yasuhiro Oikawa, szef grupy naukowej, przemawiając na Międzynarodowym Kongresie Akustyki ( International Congress on Acoustics), która odbyła się na początku czerwca w Tokio.

Korzystając z technologii szybkiego filmowania, naukowcy nagrali dwóch uczestników ochotników wypowiadających to samo słowo po japońsku. Kamera kręcona z częstotliwością 10 24 klatek na sekundę (dla porównania w zwykłym filmie stosuje się nagrywanie z częstotliwością 60 klatek na sekundę, a zwłaszcza wideo wysokiej jakości jest kręcone z częstotliwością 80-XNUMX klatek na sekundę ). Ponadto głos ochotników rejestrowano za pomocą konwencjonalnego mikrofonu, a drgania skóry twarzy i gardła rejestrowano za pomocą czujników wibrometrycznych.

Po tym, jak program komputerowy wytworzył sekwencję drgań dźwiękowych obliczoną na podstawie danych wizualnych, naukowcy porównali je z rzeczywistymi danymi zarejestrowanymi za pomocą mikrofonu i wibrometrów. Okazało się, że obliczone dźwięki pokrywały się z dźwiękami rzeczywistymi, różniąc się jedynie drobnymi szczegółami. Odtwarzając powstały plik dźwiękowy, naukowcy byli w stanie dość wyraźnie rozpoznać poszczególne wypowiadane słowa i zidentyfikować intonacje głosu.

Technologia rekonstrukcji mowy ludzkiej i głosu za pomocą szybkiej kamery jest wciąż w fazie eksperymentalnej, udowadniając jedynie skuteczność samego pomysłu. Do końca tego roku naukowcy planują doprowadzić tę technologię do poziomu, na którym będzie mogła działać w czasie rzeczywistym, rozpoznając i odtwarzając nie tylko krótkie słowa, frazy, ale także wystarczająco długie zdania. W tym celu naukowcy poważnie przerobią oprogramowanie systemu i wdrożą funkcję analizy drgań powierzchniowych skóry niektórych innych części ludzkiej twarzy, na przykład policzków, co doda im więcej informacji co pozwala im lepiej odtwarzać mowę, głos i intonację osoby.

<< Powrót: Słuchawki Creative Sound Blaster Series 15.06.2013

>> Naprzód: Procesor 5 GHz 14.06.2013

Najnowsze wiadomości o nauce i technologii, nowa elektronika:

Udowodniono istnienie reguły entropii dla splątania kwantowego 09.05.2024

Mechanika kwantowa wciąż zadziwia nas swoimi tajemniczymi zjawiskami i nieoczekiwanymi odkryciami. Niedawno Bartosz Regula z Centrum Obliczeń Kwantowych RIKEN i Ludovico Lamy z Uniwersytetu w Amsterdamie przedstawili nowe odkrycie dotyczące splątania kwantowego i jego związku z entropią. Splątanie kwantowe odgrywa ważną rolę we współczesnej nauce i technologii informacji kwantowej. Jednak złożoność jego struktury utrudnia zrozumienie go i zarządzanie nim. Odkrycie Regulusa i Lamy'ego pokazuje, że splątanie kwantowe podlega zasadzie entropii podobnej do tej obowiązującej w układach klasycznych. Odkrycie to otwiera nowe perspektywy w dziedzinie informatyki i technologii kwantowej, pogłębiając naszą wiedzę na temat splątania kwantowego i jego powiązania z termodynamiką. Wyniki badań wskazują na możliwość odwracalności transformacji splątania, co mogłoby znacznie uprościć ich zastosowanie w różnych technologiach kwantowych. Otwarcie nowej reguły ... >>

Mini klimatyzator Sony Reon Pocket 5 09.05.2024

Lato to czas relaksu i podróży, jednak często upały potrafią zamienić ten czas w udrękę nie do zniesienia. Poznaj nowość od Sony - miniklimatyzator Reon Pocket 5, który obiecuje zapewnić użytkownikom większy komfort lata. Sony wprowadziło do oferty wyjątkowe urządzenie – miniodżywkę Reon Pocket 5, która zapewnia schłodzenie ciała w upalne dni. Dzięki niemu użytkownicy mogą cieszyć się chłodem w dowolnym miejscu i czasie, po prostu nosząc go na szyi. Ten mini klimatyzator wyposażony jest w automatyczną regulację trybów pracy oraz czujniki temperatury i wilgotności. Dzięki innowacyjnym technologiom Reon Pocket 5 dostosowuje swoje działanie w zależności od aktywności użytkownika i warunków otoczenia. Użytkownicy mogą łatwo regulować temperaturę za pomocą dedykowanej aplikacji mobilnej połączonej przez Bluetooth. Dodatkowo dla wygody dostępne są specjalnie zaprojektowane koszulki i spodenki, do których można doczepić mini klimatyzator. Urządzenie może och ... >>

Energia z kosmosu dla Starship 08.05.2024

Wytwarzanie energii słonecznej w przestrzeni kosmicznej staje się coraz bardziej wykonalne wraz z pojawieniem się nowych technologii i rozwojem programów kosmicznych. Szef startupu Virtus Solis podzielił się swoją wizją wykorzystania statku kosmicznego SpaceX do stworzenia orbitalnych elektrowni zdolnych zasilić Ziemię. Startup Virtus Solis zaprezentował ambitny projekt stworzenia elektrowni orbitalnych przy użyciu statku Starship firmy SpaceX. Pomysł ten mógłby znacząco zmienić dziedzinę produkcji energii słonecznej, czyniąc ją bardziej dostępną i tańszą. Istotą planu startupu jest obniżenie kosztów wystrzeliwania satelitów w przestrzeń kosmiczną za pomocą Starship. Oczekuje się, że ten przełom technologiczny sprawi, że produkcja energii słonecznej w kosmosie stanie się bardziej konkurencyjna w stosunku do tradycyjnych źródeł energii. Virtual Solis planuje budowę dużych paneli fotowoltaicznych na orbicie, wykorzystując Starship do dostarczenia niezbędnego sprzętu. Jednak jedno z kluczowych wyzwań ... >>

Nowa metoda tworzenia potężnych akumulatorów 08.05.2024

Wraz z rozwojem technologii i coraz większym wykorzystaniem elektroniki, kwestia tworzenia wydajnych i bezpiecznych źródeł energii staje się coraz pilniejsza. Naukowcy z Uniwersytetu w Queensland zaprezentowali nowe podejście do tworzenia akumulatorów cynkowych o dużej mocy, które mogą zmienić krajobraz branży energetycznej. Jednym z głównych problemów tradycyjnych akumulatorów wodnych było ich niskie napięcie, co ograniczało ich zastosowanie w nowoczesnych urządzeniach. Ale dzięki nowej metodzie opracowanej przez naukowców udało się pokonać tę wadę. W ramach swoich badań naukowcy zajęli się specjalnym związkiem organicznym – katecholem. Okazało się, że jest to ważny element, który może poprawić stabilność akumulatora i zwiększyć jego wydajność. Takie podejście doprowadziło do znacznego wzrostu napięcia akumulatorów cynkowo-jonowych, czyniąc je bardziej konkurencyjnymi. Zdaniem naukowców takie akumulatory mają kilka zalet. Mają b ... >>

Zawartość alkoholu w ciepłym piwie 07.05.2024

Piwo, jako jeden z najpopularniejszych napojów alkoholowych, ma swój niepowtarzalny smak, który może zmieniać się w zależności od temperatury spożycia. Nowe badanie przeprowadzone przez międzynarodowy zespół naukowców wykazało, że temperatura piwa ma znaczący wpływ na postrzeganie smaku alkoholu. Badanie prowadzone przez naukowca zajmującego się materiałami Lei Jianga wykazało, że w różnych temperaturach cząsteczki etanolu i wody tworzą różnego rodzaju skupiska, co wpływa na postrzeganie smaku alkoholu. W niskich temperaturach tworzą się bardziej piramidalne skupiska, co zmniejsza ostrość smaku „etanolu” i sprawia, że napój ma mniej alkoholowy smak. Wręcz przeciwnie, wraz ze wzrostem temperatury grona stają się bardziej łańcuchowe, co skutkuje wyraźniejszym alkoholowym posmakiem. To wyjaśnia, dlaczego smak niektórych napojów alkoholowych, takich jak baijiu, może zmieniać się w zależności od temperatury. Uzyskane dane otwierają nowe perspektywy dla producentów napojów, ... >>

Przypadkowe wiadomości z Archiwum

Akustyka klas szkolnych 19.07.2010

Inżynierowie i fizycy zbadali akustykę w dwustu pustych salach berlińskich szkół.

W każdej klasie balon był nadmuchiwany i przebijany szpilką, rejestrując wynikowy pop i jego echo. Jeżeli echo trwa nie dłużej niż pół sekundy, taka akustyka, zgodnie z niemiecką normą, jest uważana za dobrą dla pomieszczeń, w których prowadzone jest nauczanie. Jednak tylko 15% badanych klas spełniało normę.

W niektórych przypadkach echo trwało dłużej niż trzy sekundy, przez co mowa nauczyciela była całkowicie niezrozumiała. Takie warunki są szczególnie trudne dla dzieci z wadami słuchu oraz dla tych, których język niemiecki nie jest ich językiem ojczystym. Sale lekcyjne o słabej akustyce będą musiały zostać odnowione z dźwiękochłonnymi wykończeniami ścian i mebli.

Zobacz całość Archiwum wiadomości z nauki i techniki, nowa elektronika

Wszystkie języki tej strony

Strona główna | biblioteka | Artykuły | Mapa stony | Recenzje witryn