Newsy

Znaleziono sposób na ulepszenie sztucznej inteligencji. Technologia znajdzie zastosowanie w rozwijaniu i kontroli systemów w trakcie ich ciągłej pracy [DEPESZA]

2020-12-08  |  06:00
Wszystkie newsy

Wykorzystanie technologii uczenia maszynowego ze wzmocnieniem w procesie szkolenia nowoczesnych algorytmów sztucznej inteligencji może poprawić funkcjonalność zaawansowanych systemów automatycznych i zwiększyć zdolności predykcyjne w dynamicznym środowisku. Zespół Google udowodnił ich przydatność w ramach projektu Loon. Stosując tego typu narzędzia, firma utrzymała internetowe balony stratosferyczne w ściśle określonym miejscu przez blisko rok. Eksperyment ten otwiera przed naukowcami drogę do wykorzystania podobnych algorytmów w innych równie nieprzewidywalnych środowiskach.

– Głębokie uczenie się ze wzmocnieniem to pewnego rodzaju technika uczenia maszynowego, która umożliwia tzw. agentowi naukę metodą prób i błędów w interaktywnym środowisku z wykorzystaniem informacji zwrotnych z własnych działań i doświadczeń. Kontrastuje to z konwencjonalnym podejściem systemu zautomatyzowanego, zgodnie z ustalonymi procedurami rzemieślniczymi stworzonymi przez inżynierów – tłumaczy Salvatore Candido, szef technologii w firmie Loon.

Innowacyjny system szkolenia sztucznej inteligencji na potrzeby projektu Loon jest odpowiedzią na wyjątkowo nieprzewidywalne warunki atmosferyczne, z którymi muszą zmagać się balony stratosferyczne Google. Wykorzystanie algorytmów zaprogramowanych przy użyciu klasycznych narzędzi uczenia maszynowego nie pozwalało z wysoką precyzją przewidzieć zachowania balonów w powietrzu, a co za tym idzie – nie pozwalało dynamicznie reagować na zmieniającą się sytuację.

– Chcieliśmy usprawnić nasz system nawigacji na potrzeby misji łączności stratosferycznej. Niewielka grupa współpracowników z Loon i Google AI pracowała więc nad opracowaniem bardziej wydajnego systemu, który wykorzystuje technikę uczenia się z głębokim wzmocnieniem – wskazuje Salvatore Candido. – O ile nam wiadomo, jest to pierwsze na świecie wdrożenie tej technologii w produkcyjnym systemie lotniczym.

Wykorzystanie technologii uczenia ze wzmocnieniem (RL) pozwoliło zaprojektować taki system kontroli położenia balonów, który umożliwia w czasie rzeczywistym analizowanie różnych scenariuszy na podstawie szkoleniowych danych zestawionych z informacjami rejestrowanymi w czasie rzeczywistym. W przypadku algorytmu Google rolę danych wsadowych pełnią historyczne zapisy dotyczące kierunku wiatru czy prognozy pogody, które porównuje się do bieżącego zachowania mas powietrza. Sztuczna inteligencja wyznacza na podstawie tych komplementarnych danych kilka możliwości korygowania kursu balonu i wdraża ten, który z najwyższym prawdopodobieństwem pozwoli zrealizować zakładany cel, czyli utrzymać balon w pozycji docelowej.

Taki rozszerzony system nawigacji ma zasadniczą przewagę nad klasycznymi inteligentnymi algorytmami tego typu. Bierze pod uwagę nie tylko aktualną sytuację, jest też w stanie przewidzieć, jak będzie się ona zmieniać w ciągu najbliższych godzin. Dzięki temu system może oszczędzać paliwo, jeśli w najbliższym czasie spodziewa się gwałtownych zmian pogodowych, w trakcie których będzie potrzebował większego zapasu mocy.

Nowy system wykazał się wysoką sprawnością praktyczną. Nie tylko pozwolił skutecznie utrzymać balony internetowe w zasięgu stacji naziemnej, przyspieszył także proces powrotu na docelową pozycję i zauważalnie wydłużył czas operacyjny jednostek Loon. Balony wyposażone w nawigację starszego typu ustanowiły rekord nieprzerwanego lotu równy 223 dniom, a po wdrożeniu nowego kontrolera wykorzystującego metodę uczenia ze wzmocnieniem udało się wypracować nowy rekord – 312 dni pracy.

– Mamy nadzieję, że nasza praca nad nawigacją w stratosferze posłuży jako dowód na to, że technika RL może być przydatna do kontrolowania skomplikowanych, rzeczywistych systemów ciągłej i dynamicznej aktywności – podkreśla szef technologii w firmie Loon. – Będziemy nadal współpracować z zespołem Google nad ulepszaniem nie tylko nawigacji dla balonów stratosferycznych, lecz także nad rozwojem całej dziedziny uczenia maszynowego ze wzmocnieniem, by była wykorzystywana w coraz większej liczbie systemów.

Potencjał technologii RL nie ogranicza się wyłącznie do systemów nawigacji. Z algorytmami tego typu eksperymentuje również firma Microsoft, która wykorzystała je w usłudze Personalizacja, pozwalającej na błyskawiczne wdrożenie narzędzi do analizy zachowania i preferencji klientów korzystających z serwisów opartych na chmurze Azure.

Czytaj także

Kalendarium

Więcej ważnych informacji

Jedynka Newserii

Polityka

Zmiany w obowiązku magazynowania gazu mogą obniżyć ceny surowca. To pomoże się przygotować do sezonu zimowego

Elastyczność bez zagrożenia dla bezpieczeństwa energetycznego – tak nową propozycję przepisów dotyczących uzupełniania zapasów gazu przed sezonem zimowym określają jej inicjatorzy z Parlamentu Europejskiego. Europosłowie proponują nieznaczne zmniejszenie wymaganego poziomu zapełnienia magazynów i rozciągnięcie w czasie terminu, w którym trzeba spełnić ten obowiązek. Jak podkreśla Borys Budka, ma to zapobiec spekulacjom na rynku gazu i tym samym pomóc obniżyć ceny surowca.

Konsument

Możliwość zakupu online może zachęcić kolejne grupy Polaków do ubezpieczeń zdrowotnych. Dziś korzysta z nich już prawie 5,5 mln osób

Polska jest jednym z liderów Europy w obszarze cyfryzacji sektora usług medycznych. Świadczą o tym m.in. popularność elektronicznych narzędzi zapewniających dostęp do danych zdrowotnych, e-recept czy wirtualna diagnostyka. Polacy są też otwarci na innowacje w zakresie ubezpieczeń zdrowotnych, z których korzysta już blisko 5,5 mln osób. Za pomocą nowej cyfrowej platformy Medicover chce zachęcić klientów do samodzielnej konfiguracji i zakupu polis online.

Polityka

PE przedstawił swoje priorytety budżetowe po 2027 roku. Wydatki na obronność kluczowe, ale nie kosztem polityki spójności

Parlament Europejski przegłosował w tym tygodniu rezolucję w sprawie priorytetów budżetu UE na lata 2028–2034. Europosłowie są zgodni co do tego, że obecny pułap wydatków w wysokości 1 proc. dochodu narodowego brutto UE-27 nie wystarczy do sprostania rosnącej liczbie wyzwań, przed którymi stoi Europa. Mowa między innymi o wojnie w Ukrainie, trudnych warunkach gospodarczych i społecznych oraz pogłębiającym się kryzysie klimatycznym. Eurodeputowani zwracają też uwagę na ogólnoświatową niestabilność, w tym wycofywanie się Stanów Zjednoczonych ze swojej globalnej roli.

Szkolenia

Akademia Newserii

Akademia Newserii to projekt, w ramach którego najlepsi polscy dziennikarze biznesowi, giełdowi oraz lifestylowi, a  także szkoleniowcy z wieloletnim doświadczeniem dzielą się swoją wiedzą nt. pracy z mediami.