Bloger zbudował egzoszkielet do gier wideo: napęd nadgarstka, elektromagnes do kliku i YOLO na Nvidia Jetson. Opóźnienie 17 ms dało 2. miejsce w Aimlabs.
© A. Krivonosov
Blogger i inżynier-entuzjasta Nik Zetta, znany z kanału Basically Homeless, zbudował nietypowe urządzenie — egzoszkielet zaprojektowany, by wyostrzać celność w grach wideo. Chciał sprawdzić, czy system robotyczny jest w stanie wynieść precyzję i czas reakcji na poziom poza zasięgiem człowieka.
Egzoszkielet składa się z trzech kluczowych elementów: napędzanego silnikiem nadgarstka sterującego myszą, elektromagnesowego mechanizmu przejmującego naciskanie przycisku oraz systemu wizyjnego, który rozpoznaje cele na ekranie. Do przetwarzania danych Zetta wykorzystał płytkę Nvidia Jetson i samodzielnie wytrenowany model YOLO.
Po serii potknięć z okablowaniem, enkoderami i opóźnieniami twórcy udało się zredukować zwłokę reakcji do 17 milisekund. To pozwoliło niemal natychmiast odpowiadać na pojawiające się cele i w efekcie dało mu drugie miejsce w globalnym rankingu Aimlabs.
Zetta przedstawia projekt jako coś pomiędzy żartem a poważnym eksperymentem z robotyki. Utrzymuje też, że nie jest to oszustwo, lecz egzoszkielet mający stanowić uczciwe zastępstwo ludzkiego oka. Trudno nie zauważyć, że jako demonstracja możliwości efekt wypada przekonująco — i po cichu stawia pytanie, gdzie kończy się umiejętność gracza, a zaczyna asysta maszyny.