Jak pokazało badanie Cognitive Technologies, możliwości sztucznej inteligencji bezzałogowego pojazdu na drogach są zbliżone do ludzkich, choć w niektórych przypadkach są nieznaczne, ale je przewyższają.
Jak powiedziano w firmie RIA Novosti, celem badania było ustalenie, kto na obecnym etapie tworzenia bezzałogowych pojazdów lepiej rozumie poszczególne sytuacje drogowe - sztuczną inteligencję (AI) czy naturalny (EI) - czyli osobę. "Innymi słowy: czy sztuczny ludzki umysł wygrywa już w zadaniu kontrolowania drona, czy nie?" - odnotowano w firmie
Specjaliści Cognitive Technologies porównali możliwości, które już osiągnęła sztuczna inteligencja. 17 ochotników wzięło udział w testach oceniających jakość i szybkość wykrywania (wykrywanie, wykrywanie - przyp. Red.) Znaków drogowych, samochodów i pieszych na drogach publicznych w Moskwie i obwodzie moskiewskim.
Szereg testów przeprowadzono w trudnych warunkach atmosferycznych (ciemna pora dnia, deszcz), a także w tak trudnych do rozpoznania warunkach, jak przejście od światła do cienia i oślepianie przez słońce. Wolontariusz, zgodnie z zadaniem, wypowiadał określone obiekty sceny drogowej, zauważone przez niego równolegle rejestrowano wyniki rozpoznania AI tej samej linii obiektów. Pod koniec wyjazdu dane zostały przetworzone i wprowadzone do ogólnej tabeli testowej.
Badania zostały przeprowadzone we wrześniu - listopadzie 2017 roku przy użyciu jednej kamery wideo (kamera mono).
Testy zostały przygotowane w taki sposób, aby liczba obiektów pojawiających się jednocześnie nie przekraczała trzech, gdyż w przeciwnym razie osoba miałaby trudności techniczne z wypowiedzeniem wyników detekcji Na każdej trasie do rozpoznania przydzielono nie więcej niż 30–35 obiektów.
W sumie testy przeprowadzono na 27 różnych trasach w osadach z prędkością 50-60 kilometrów na godzinę.
Robot kontra człowiek
Film promocyjny:
Badanie wykazało, że możliwości sztucznej inteligencji są już zbliżone do naturalnych, w wielu przypadkach robot „pokonał” człowieka, choć z niewielkim marginesem.
Pierwszym wynikiem badań - określającym jakość wykrywania obiektów drogowych w dobrych warunkach pogodowych i drogowych - były w przybliżeniu równe wyniki dla EI i AI - zarówno pod względem szybkości, jak i dokładności. Według najnowszego wskaźnika dla znaków drogowych, samochodów i pieszych przekroczyły 99%.
Sztuczna inteligencja wypadła lepiej w testach, gdy poszczególne obiekty nie były w pełni widoczne (za drzewami, zaparkowanymi samochodami i innymi przeszkodami).
Zaletą sztucznej inteligencji nie była jakość rozpoznawania, ale szybkość wykrywania. Na przykład w testach znaków drogowych sztuczna inteligencja była w stanie zobaczyć częściowo zasłonięte obiekty ułamek sekundy wcześniej. „Test wykazał, że w trudniejszych warunkach badani (ochotnicy - red.) Często dostrzegali znaki drogowe chwilę później niż sztuczna inteligencja. Tym razem daje to jednak systemowi sterowania dodatkową zaletę w zakresie przetwarzania i analizowania informacji o ogólnej sytuacji na drogach”- powiedział Yuri Minkin, kierownik działu pojazdów bezzałogowych w Cognitive Technologies.
Dokładny czas reakcji AI i ludzi w warunkach tego eksperymentu nie został zarejestrowany, jego wartość wahała się od około 0,5 sekundy i nie przekraczała 1 sekundy. Dokładność rozpoznawania UM i AI w tych testach przekroczyła 99%.
W testach z częściowo zasłoniętymi samochodami i pieszymi przewaga sztucznej inteligencji pod względem prędkości pozostała, ale można ją już uznać za błąd statystyczny (rzędu 0,5 sekundy lub mniej). Dokładność rozpoznawania UM i AI również przekraczała 99%.
Niewielką przewagę AI w szybkości i jakości wykrywania odnotowano również w warunkach deszczowych przy rozpoznawaniu znaków drogowych - było to 98,3% wobec 97% dla EI. Przy rozpoznawaniu samochodów wyniki były w przybliżeniu równe (około 98% z różnicą mniejszą niż 0,5% na korzyść AI). „Wynik ten można wytłumaczyć większą odpornością sztucznej inteligencji na tego rodzaju zakłócenia podczas wykrywania obiektów o stosunkowo niewielkich rozmiarach” - wyjaśniła firma.
Ponadto sztuczna inteligencja wygrywała w sytuacjach granicznych: w sytuacjach przejścia od światła do cienia i oślepienia, sztuczna inteligencja szybciej radziła sobie z zadaniem rozpoznania. Czas reakcji człowieka był dłuższy w prawie wszystkich testach, ale nie przekraczał 1 sekundy. Dokładność rozpoznawania zarówno interfejsu użytkownika, jak i sztucznej inteligencji wynosiła ponad 98%.
Testy wykazały, że osoba trochę lepiej radziła sobie z rozpoznawaniem pieszych w trudnych warunkach (noc, deszcz). Dokładność rozpoznawania UM wyniosła około 99,2% w porównaniu z 98% dla sztucznej inteligencji - zarówno w nocy, jak i podczas deszczu. „Człowiek jest dość trudnym obiektem do rozpoznania: piesi nie mają stałego kształtu, mogą chodzić obejmując się, trzymając się za ręce, dźwigając ładunek i tak dalej. A jeśli w dobrych warunkach sztuczna inteligencja nie uległa człowiekowi, to w trudnych warunkach jej możliwości okazały się do tej pory nieco lepsze”- zauważył Minkin.
wnioski
Głównym wynikiem badania było przybliżenie możliwości AI do EI. Ponadto, jak wykazały wyniki testów, przewaga sztucznej inteligencji ujawniła się, gdy warunki drogowe i pogodowe stały się bardziej skomplikowane - zauważyła firma. „Możemy się spodziewać, że wraz ze wzrostem mocy obliczeniowej, a także jakości czujników i oprogramowania przewaga sztucznej inteligencji stanie się oczywista, podobnie jak w szachach” - powiedział rzecznik Cognitive Technologies.
„Oczywiście wiele aspektów organizacji i prowadzenia badań nie może twierdzić, że są doskonałe, dlatego będziemy współpracować ze społecznością ekspertów nad opracowaniem zarówno metodologii, jak i samych testów. Musisz jednak zrozumieć, że jest to pierwsza w historii próba porównania możliwości sztucznej inteligencji i ludzi. I jako pierwsze przybliżenie otrzymaliśmy realne wyniki, z którymi można i należy się liczyć, na podstawie których można przewidzieć rozwój kierunku tworzenia AI dla autobotów - powiedziała Olga Uskova, prezes Cognitive Technologies.
Według niej firma spodziewa się przeprowadzić następujące testy, analizując jakość zrozumienia różnych sytuacji drogowych przez ludzi i sztuczną inteligencję.
Firma zauważyła, że początkowym celem nie było porównywanie możliwości sztucznej inteligencji i ludzi.
„Początkowo nie mieliśmy zamiaru porównywać możliwości ludzi i sztucznej inteligencji. Planowaliśmy przetestować własny system AI dla bezzałogowych pojazdów C-Pilot. Pomysł porównania AI z człowiekiem pojawił się już podczas testów. Ale ten pomysł nas rozpalił, niezwykle interesujące stało się dla nas uzyskanie oceny porównania sztucznej inteligencji z człowiekiem”- powiedział Yuri Minkin, szef działu pojazdów bezzałogowych w Cognitive Technologies.