Roboty zostały nauczone ciekawości. Bezpłatne wiadomości z biblioteki technicznej

NOWOŚCI NAUKI I TECHNOLOGII, NOWOŚĆ W ELEKTRONIKI
Bezpłatna biblioteka techniczna / Kanał wiadomości

Roboty nauczono ciekawości

08.06.2017

Przez kilka lat twórcy programów komputerowych dla robotów próbowali stworzyć „algorytm ciekawości”, ale replikowanie ludzkiej ciekawości było dość trudne. Według nich większość metod nie potrafi ocenić „luk” w wiedzy robota i zrozumieć, czym będzie zainteresowany.

Jednak Todd Hester z Google DeepMind w Wielkiej Brytanii i Peter Stone z University of Texas w USA odnieśli sukces w stworzeniu algorytmu, który pozwala programowi komputerowemu „zaciekawić się” poprzez samodzielne badanie jego środowiska. Nowe podejście pozwoli robotom uczyć się jeszcze szybciej niż teraz. Naukowcy nazwali algorytm TEXPLORE-VENIR, który opiera się na technice „wzmacniania uczenia się”.

Ta technika działa zgodnie z następującą zasadą: gdy program zbliża się do rozwiązania problemu (na przykład wyjścia z labiryntu), otrzymuje pewną nagrodę. Zakłada się, że po otrzymaniu nagrody w przyszłości ponownie spróbuje osiągnąć jakiś cel. Naukowcy nieznacznie zmodyfikowali technikę „wzmacniania uczenia się”, aby program był nagradzany po prostu za nową wiedzę, nawet jeśli nie pomaga w osiągnięciu celu. Na przykład TEXPLORE-VENIR zdobywa bonusy, gdy bada świat, szuka odległych miejsc na mapie lub opanuje przepisy kulinarne.

Hester i Stone przetestowali swój algorytm w dwóch scenariuszach. Pierwszym z nich był wirtualny labirynt 4 pokoi połączonych zamkniętymi drzwiami. Bot - po prostu program komputerowy - musiał zbadać okolicę, znaleźć klucz, zabrać go i otworzyć drzwi. Za każde otwarte drzwi zdobywał 10 punktów. Aby osiągnąć najwyższy wynik, otrzymał 3000 „kroków”.

Korzystając z algorytmu TEXPLORE-VENIR, bot eksplorował okolicę (po wydaniu na to 1000 „kroków”) zdobył 55 punktów. Co więcej, jeśli używał innych algorytmów, otrzymywał od 0 do 35 punktów. Kiedy program musiał jednocześnie zbadać okolicę i otworzyć drzwi, uzyskał 70 punktów w TEXPLORE-VENIR i mniej niż 5 w innych przypadkach.

Do drugiego eksperymentu naukowcy podłączyli humanoidalnego robota Nao. Z pomocą algorytmu TEXPLORE-VENIR musiał wykonać trzy zadania: uderzyć w muzyczny talerz, znaleźć i przyłożyć różową wstążkę do oczu oraz nacisnąć przycisk znajdujący się na jego nodze. Za każde zadanie Nao otrzymał 200 „kroków”, a kolejne 400 „kroków” otrzymał na „trening” (przedmioty uczenia się). Po 13 próbach wcisnął przycisk 7 razy, uderzył w talerz 1 na 5 razy i ostatecznie szybciej znalazł różową wstążkę.

Algorytm TEXPLORE-VENIR wykazał dobre wyniki, jednak nadmierna ciekawość może zmniejszyć produktywność robota, twierdzą zewnętrzni naukowcy. Może się zdarzyć, że wewnętrzna motywacja robota do otrzymania nagrody za naukę przewyższa jego zewnętrzną motywację do wykonania zadania. Dlatego ważne jest, aby znaleźć równowagę między tymi dwoma rodzajami motywacji.

<< Powrót: Smak wody 08.06.2017

>> Naprzód: Lasery bojowe do bombowców 07.06.2017

Najnowsze wiadomości o nauce i technologii, nowa elektronika:

Nowy sposób kontrolowania i manipulowania sygnałami optycznymi 05.05.2024

Współczesny świat nauki i technologii rozwija się dynamicznie i każdego dnia pojawiają się nowe metody i technologie, które otwierają przed nami nowe perspektywy w różnych dziedzinach. Jedną z takich innowacji jest opracowanie przez niemieckich naukowców nowego sposobu sterowania sygnałami optycznymi, co może doprowadzić do znacznego postępu w dziedzinie fotoniki. Niedawne badania pozwoliły niemieckim naukowcom stworzyć przestrajalną płytkę falową wewnątrz falowodu ze stopionej krzemionki. Metoda ta, bazująca na zastosowaniu warstwy ciekłokrystalicznej, pozwala na efektywną zmianę polaryzacji światła przechodzącego przez falowód. Ten przełom technologiczny otwiera nowe perspektywy rozwoju kompaktowych i wydajnych urządzeń fotonicznych zdolnych do przetwarzania dużych ilości danych. Elektrooptyczna kontrola polaryzacji zapewniona dzięki nowej metodzie może stanowić podstawę dla nowej klasy zintegrowanych urządzeń fotonicznych. Otwiera to ogromne możliwości dla ... >>

Klawiatura Primium Seneca 05.05.2024

Klawiatury są integralną częścią naszej codziennej pracy przy komputerze. Jednak jednym z głównych problemów, z jakimi borykają się użytkownicy, jest hałas, szczególnie w przypadku modeli premium. Ale dzięki nowej klawiaturze Seneca firmy Norbauer & Co może się to zmienić. Seneca to nie tylko klawiatura, to wynik pięciu lat prac rozwojowych nad stworzeniem idealnego urządzenia. Każdy aspekt tej klawiatury, od właściwości akustycznych po właściwości mechaniczne, został starannie przemyślany i wyważony. Jedną z kluczowych cech Seneki są ciche stabilizatory, które rozwiązują problem hałasu typowy dla wielu klawiatur. Ponadto klawiatura obsługuje różne szerokości klawiszy, dzięki czemu jest wygodna dla każdego użytkownika. Chociaż Seneca nie jest jeszcze dostępna w sprzedaży, jej premiera zaplanowana jest na późne lato. Seneca firmy Norbauer & Co reprezentuje nowe standardy w projektowaniu klawiatur. Jej ... >>

Otwarto najwyższe obserwatorium astronomiczne na świecie 04.05.2024

Odkrywanie kosmosu i jego tajemnic to zadanie, które przyciąga uwagę astronomów z całego świata. Na świeżym powietrzu wysokich gór, z dala od miejskiego zanieczyszczenia światłem, gwiazdy i planety z większą wyrazistością odkrywają swoje tajemnice. Nowa karta w historii astronomii otwiera się wraz z otwarciem najwyższego na świecie obserwatorium astronomicznego - Obserwatorium Atacama na Uniwersytecie Tokijskim. Obserwatorium Atacama, położone na wysokości 5640 metrów nad poziomem morza, otwiera przed astronomami nowe możliwości w badaniu kosmosu. Miejsce to stało się najwyżej położonym miejscem dla teleskopu naziemnego, zapewniając badaczom unikalne narzędzie do badania fal podczerwonych we Wszechświecie. Chociaż lokalizacja na dużej wysokości zapewnia czystsze niebo i mniej zakłóceń ze strony atmosfery, budowa obserwatorium na wysokiej górze stwarza ogromne trudności i wyzwania. Jednak pomimo trudności nowe obserwatorium otwiera przed astronomami szerokie perspektywy badawcze. ... >>

Sterowanie obiektami za pomocą prądów powietrza 04.05.2024

Rozwój robotyki wciąż otwiera przed nami nowe perspektywy w zakresie automatyzacji i sterowania różnymi obiektami. Niedawno fińscy naukowcy zaprezentowali innowacyjne podejście do sterowania robotami humanoidalnymi za pomocą prądów powietrza. Metoda ta może zrewolucjonizować sposób manipulowania obiektami i otworzyć nowe horyzonty w dziedzinie robotyki. Pomysł sterowania obiektami za pomocą prądów powietrza nie jest nowy, jednak do niedawna realizacja takich koncepcji pozostawała wyzwaniem. Fińscy badacze opracowali innowacyjną metodę, która pozwala robotom manipulować obiektami za pomocą specjalnych strumieni powietrza, takich jak „palce powietrzne”. Algorytm kontroli przepływu powietrza, opracowany przez zespół specjalistów, opiera się na dokładnym badaniu ruchu obiektów w strumieniu powietrza. System sterowania strumieniem powietrza, realizowany za pomocą specjalnych silników, pozwala kierować obiektami bez uciekania się do siły fizycznej ... >>

Psy rasowe chorują nie częściej niż psy rasowe 03.05.2024

Dbanie o zdrowie naszych pupili to ważny aspekt życia każdego właściciela psa. Powszechnie uważa się jednak, że psy rasowe są bardziej podatne na choroby w porównaniu do psów mieszanych. Nowe badania prowadzone przez naukowców z Texas School of Veterinary Medicine and Biomedical Sciences rzucają nową perspektywę na to pytanie. Badanie przeprowadzone w ramach projektu Dog Aging Project (DAP) na ponad 27 000 psów do towarzystwa wykazało, że psy rasowe i mieszane były na ogół jednakowo narażone na różne choroby. Chociaż niektóre rasy mogą być bardziej podatne na pewne choroby, ogólny wskaźnik rozpoznań jest praktycznie taki sam w obu grupach. Główny lekarz weterynarii projektu Dog Aging Project, dr Keith Creevy, zauważa, że istnieje kilka dobrze znanych chorób, które występują częściej u niektórych ras psów, co potwierdza pogląd, że psy rasowe są bardziej podatne na choroby. ... >>

Przypadkowe wiadomości z Archiwum

Odkryto przyczynę świeżego zapachu lasu po deszczu 25.01.2015

Zaczynamy wąchać, gdy cząsteczki substancji zapachowej docierają do receptorów w naszym nosie. Jeśli sama substancja jest płynna lub stała, to najszybszym sposobem na powąchanie jest rozpylenie w powietrzu maleńkich kropel płynu zawierającego pożądaną substancję. Odświeżacze powietrza działają na tej zasadzie – gaz z kanistra pod ciśnieniem rozpyla w powietrzu aerozol, a pomieszczenie natychmiast wypełnia się pożądanym aromatem. Jednak w lesie nikt nie biega z puszką odświeżacza powietrza. Okazuje się, że istnieje jakaś inna, naturalna metoda otrzymywania aerozolu.

Jeśli źródło zapachu lasu znajduje się na ziemi, a jedyne, co odróżnia las wilgotny od suchego, to spadające krople wody, to najprawdopodobniej w nich tkwi klucz do zagadki. Uzbrojony w szybkie kamery wideo zespół naukowców z MIT postanowił sprawdzić, co się dzieje, gdy kropla deszczu uderza w porowatą powierzchnię. Okazało się, że w momencie uderzenia na granicy między spadającą kroplą a powierzchnią tworzą się mikroskopijne pęcherzyki powietrza. Bąbelki te, jak w kieliszku szampana, zaczynają się unosić i po wypłynięciu na powierzchnię wyrzucają w powietrze mikrokropelki wody. Nad opadłą kroplą deszczu tworzy się chmura aerozolu, zawierająca substancje wyniesione przez wodę z powierzchni gleby. A lekka bryza już rozniesie zapach geosminy po całym lesie.

Oczywiście badacze nie ograniczyli się do odkrycia samego faktu powstawania aerozolu przez spadające krople, ale przeprowadzili szczegółowe badania tego mechanizmu. Po przeprowadzeniu około 600 eksperymentów w różnych warunkach odkryli, że najwięcej aerozolu tworzy się przy umiarkowanych opadach i średniej wilgotności gleby. Podczas silnej ulewy bąbelki wewnątrz kropelek po prostu nie mają czasu na tworzenie się, a gleby piaszczyste i gliniaste przyczyniają się do najlepszego tworzenia aerozolu.

Oprócz zapachów leśnych z ziemi, aerozole mogą unosić w powietrze bakterie lub zarodniki, które mogą rozprzestrzeniać się na duże odległości. A jeśli w lesie prawdopodobieństwo wdychania czegoś bardzo niebezpiecznego i trującego jest bardzo małe, to w dużych miastach spacer po małym letnim deszczu może nie być tak użyteczny, jak się wydaje.

Zobacz całość Archiwum wiadomości z nauki i techniki, nowa elektronika

Wszystkie języki tej strony

Strona główna | biblioteka | Artykuły | Mapa stony | Recenzje witryn