Airffic InstituteAERIAL PHYSICAL AI
Diteng ☰

Aerial Physical AI Institute

Vision AI: kamoo drone e kwešišago seo e se bonago

Go bona ga go lekane go fofa. Bjoko bo hloka go kwešiša seo bo se bonago.

Karabo ye kopana: Vision AI ya drone e gotše ka magato a mane: ① hwetša dilo (detection), ② di latele (tracking), ③ tseba moo o lego gona (SLAM, VIO), ④ kwešiša ditaelo ka mantšu (foundation models). Re mojakong wa legato ④.

E mpshafaditšwe: · Metsotso ye 3 ya go balaKamoo re nyakišišitšego →

Sir Airffic GoBontši bja se bo tšwa dipampiring tša dinyakišišo, eupša mantšu a dula a le bonolo. Dula le nna.

Magato a mane a kwešišo

  1. Go lemoga (detection): hwetša batho, dikoloi le megala ya mohlagase seswantšhong gomme o ba thale mapokisi.
  2. Go latela (tracking): latela moo selo seo se hweditšwego se yago gona.
  3. Go tseba lefelo la gago: šoma gore o sepetše bokgole bjo bokae le go kae go tšwa motsamaong wa seswantšho le IMU (VIO: visual-inertial odometry).
  4. Go kwešiša ditaelo: kwešiša “lekola ka morago ga ntlo ya marulelo a mahubedu” gomme o kopanye mantšu le seo o se bonago (VLM: AI yeo e šomago ka diswantšho le polelo gotee).

Go fofa mola o aga mmapa: SLAM le VIO

Mafelelong a bo-2000, dilaporatori tša diyunibesithi di thomile go akanya lefelo la drone ye nnyane ka khamera e tee le IMU. Tšohle di thomile fao.

Mekgwa ye bjalo ka SVO, VINS-Mono le ORB-SLAM e gatišitšwe gomme ya ba metheo yeo e abelanwago. Dinyakišišo tše di bulegilego di fetogile dikarolo tša ditšweletšwa.

Lehono di-drone tša kgwebo di kgona go fofa ka fase ga maporogo le ka gare ga meago ka lebaka la mošomo wo o kgobokantšwego.

Go tšwa godimo, dilo di bonala di le nnyane e bile di kgopame

AI yeo e rutilwego ka diswantšho tša fase e thatafalelwa ke go bona go tšwa godimo: batho ba fetoga dikhutlwana gomme dikoloi di fetoša sebopego.

Dikgoboketšo tša data tša go tšwa godimo bjalo ka VisDrone le DOTA di agilwe gore AI ya leratadima e kgone go rutwa.

Yo a nago le data o laola kamoo AI e bago bohlale ka gona. Seo ga se fetoge le mehleng ya foundation models.

Sir Airffic GoDiphapano tša AI gantši di tšwa go bontši bja data ya go tšwa godimo yeo o nago le yona, go feta go dialgoritheme. Gopola se kgaolong ya maano.

Letšatši leo AI e fentšego bafenyi ba batho

Ka 2023 drone ya AI yeo e bitšwago Swift, yeo e agilwego Yunibesithing ya Zurich, e fentše bafenyi ba lefase ba batho mo lebelong la di-drone. Mošomo woo o gatišitšwe go Nature.

Swift e akantše lefelo la yona ka khamera le IMU fela, gomme ya ithuta go fofa ka reinforcement learning — go itlwaetša gantši kudu ka simulation.

Se e be e le tseleng ye e beilwego. Go swana le bokgoni bjoo leratadimeng la kgonthe, moo boso le dišitišo di fetogago, e sa le tlhohlo.

Lebelo la di-drone la maemo a bafenyi ka deep reinforcement learning (UZH)

Bidio ya drone ya AI ya Swift ye e gatišitšwego ke Robotics and Perception Group ya Yunibesithi ya Zurich. YouTube ↗ · Ga go selo se se tšwago YouTube go fihlela o tobetša bapala

Lephoto le le latelago: bona, nagana o dire ka mantšu

Go tloga mo e ka bago 2023, mehlala ye megolo ya AI yeo e šomago ka diswantšho le polelo gotee (foundation models) e thomile go šoma bjalo ka bjoko bja diroboto.

Dinyakišišo tša di-drone tšeo di latelago ditaelo tša molomo mola di kwešiša seo di se bonago (aerial vision-language navigation) di a gola.

Mehlala ye megolo e boima, gomme go e diriša ka lebelo ka sefofaneng go sa le thata. Ke ka lebaka leo di-chip — kgaolo ye e latelago — di swanetšego go balwa gotee.

Dipotšišo tšeo di botšišwago gantši

Ke mešomo efe yeo e dirišago computer vision ya drone?

Go lemoga mapatlo maporogong le megaleng ya mohlagase, go lekola maphelo a dibjalo, go nyaka batho nakong ya go phološa, tšhireletšo le go lekola sephethephethe, le go lekola mafelo a go iša dithoto ke mešomo ye e tlwaelegilego.

Visual-inertial odometry (VIO) ke eng?

Ke mokgwa wo o kopanyago motsamao wa seswantšho le dipalo tša IMU tša go oketšega ga lebelo le go dikologa go bala gore drone e sepetše bokgole bjo bokae. Ke theknolotši ya motheo ya go fofa ntle le GPS.