Ontdek hoe een exoskelet met computervisie, Nvidia Jetson en YOLO het mikken in videogames aanscherpt: 17 ms reactietijd en een Aimlabs #2-score als bewijs.
© A. Krivonosov
Blogger en enthousiaste ingenieur Nik Zetta, bekend van het kanaal Basically Homeless, bouwde een ongewoon apparaat—een exoskelet dat is bedoeld om het mikken in videogames aan te scherpen. Hij wilde weten of een robotisch systeem nauwkeurigheid en reactievermogen kan optillen tot een niveau dat buiten menselijk bereik ligt.
Het exoskelet bestaat uit drie kernonderdelen: een gemotoriseerde pols die de muis aanstuurt, een solenoïde-mechanisme dat het indrukken van de knop overneemt, en een computervisie-systeem dat doelen op het scherm herkent. Voor de verwerking gebruikte Zetta een Nvidia Jetson-board en een YOLO-model dat hij zelf trainde.
Na een reeks tegenslagen met bedrading, encoders en latency wist de ontwikkelaar de responstijd terug te brengen tot 17 milliseconden. Daarmee kon het systeem vrijwel ogenblikkelijk op doelen reageren, en uiteindelijk hielp het apparaat Zetta naar de tweede plek op de wereldranglijst van Aimlabs.
Zetta beschrijft het project als deels grap en deels serieus robotica-experiment. Hij benadrukt dat het volgens hem geen valsspelen is, maar een exoskelet dat bedoeld is als eerlijke plaatsvervanger voor het menselijk oog. Als proof-of-concept oogt het overtuigend—en het zet je bijna ongemerkt aan het denken over waar menselijke vaardigheid ophoudt en ondersteunende machines beginnen.