Airffic InstituteAERIAL PHYSICAL AI
Indise ☰

Aerial Physical AI Institute

Vision AI: kon un drone ta komprondé loke e ta mira

Mira no ta basta pa bula. Un selebro mester komprondé loke e ta mira.

Kontesta kòrtiku: Vision AI di drone a evolushoná den kuater etapa: ① haña kos (detekshon), ② sigui nan (tracking), ③ sa bo mes posishon (SLAM, VIO), ④ komprondé instrukshon den palabra (foundation models). Nos ta na porta di etapa ④.

Aktualisá: · 3 minüt di lesaKon nos a investigá →

Sir Airffic GoHopi di esaki ta bini for di estudio sientífiko, pero e palabranan ta keda simpel. Keda ku mi.

Kuater etapa di komprenshon

  1. Detekshon: haña hende, outo i liña di koriente den un imágen i pinta un kaha rondó di nan.
  2. Tracking: sigui pa unda un kos ku bo a haña ta move despues.
  3. Lokalisá bo mes: kalkulá kuantu i pa unda bo a move for di e movementu den e imágen plus e IMU (VIO: odometria visual-inersial).
  4. Komprenshon i instrukshon: komprondé "chèk tras di e kas ku dak kòrá" i konektá e palabranan ku loke bo ta mira (VLM: AI ku ta maneha imágen i idioma huntu).

Bula miéntras bo ta traha mapa: SLAM i VIO

Na final di aña 2000, laboratorio di universidat a kuminsá kalkulá posishon di un drone chikitu ku un kámera i un IMU. Tur kos a kuminsá einan.

Métodonan manera SVO, VINS-Mono i ORB-SLAM a sali públiko i a bira fundeshi komparti. Investigashon habrí a bira pida di produkto.

Drone komersial di awe por bula bou di brùg i paden pasobra di e trabou akumulá aki.

For di ariba, kos ta parse chikitu i torsí

AI ku a siña ku potrèt saká for di tera ta lucha ku bista for di ariba: hende ta bira puntu i outo ta kambia forma.

Set di datos for di aire manera VisDrone i DOTA a ser trahá pa por entrená AI spesial pa shelu.

Esun ku ta doño di e datos ta determiná kon inteligente e AI ta bira. Esei no a kambia den e era di foundation models.

Sir Airffic GoDiferensia entre AI hopi biaha ta dependé mas di kuantu datos for di aire bo tin ku di algoritmo. Kòrda esaki pa e kapítulo di estrategia.

E dia ku AI a gana e kampeonnan humano

Na 2023 un drone di AI yamá Swift, trahá na Universidat di Zürich, a gana kampeonnan mundial humano di kareda di drone. E trabou a sali publiká den Nature.

Swift a kalkulá su posishon ku solamente un kámera i un IMU, i a siña bula pa medio di reinforcement learning (siña dor di purba i faya) — praktikando hopi biaha den simulashon.

Esaki tabata riba un kurso fiho. Logra e mesun abilidat den shelu real, ku tempu i obstákulo ku ta kambia, ta un reto ku ainda ta habri.

Kareda di drone na nivel di kampeon ku deep reinforcement learning (UZH)

Video di e drone di AI Swift publiká pa e Robotics and Perception Group di Universidat di Zürich. YouTube ↗ · Nada no ta karga for di YouTube te ora bo primi play

E siguiente ola: mira, pensa i aktua riba palabra

For di mas o ménos 2023, modelo grandi di AI ku ta maneha imágen i idioma huntu (foundation models) a kuminsá sirbi komo selebro di robot.

Investigashon riba drone ku ta sigui instrukshon bisá miéntras nan ta komprondé e situashon (aerial vision-language navigation) ta krese.

Modelo grandi ta pisá, i kore nan lihé den e drone ainda ta difísil. P'esei bo mester lesa chip — e siguiente kapítulo — huntu ku esaki.

Preguntanan frekuente

Kua trabou ta usa computer vision di drone?

Detektá kraki den brùg i liña di koriente, chèk salú di kunuku, buska hende den buska i salba, siguridat i vigilansia di tráfiko, i chèk lugá di entrega ta usonan komun.

Kiko ta visual-inertial odometry (VIO)?

Un método ku ta kombiná movementu den imágen ku e midimentu di aselerashon i rotashon di e IMU pa kalkulá kuantu e drone a move. E ta un teknologia básiko pa bula sin GPS.