Airffic InstituteAERIAL PHYSICAL AI
Biteni ☰

Aerial Physical AI Institute

Vision AI: ndenge drone esosolaka oyo emonaka

Komona ekoki te mpo na kopumbwa. Bongo esengeli kososola oyo emonaka.

Eyano ya mokuse: Vision AI ya drone ekolaki na matambe minei: ① koluka biloko (détection), ② kolanda yango (suivi), ③ koyeba esika ozali (SLAM, VIO), ④ kososola mitindo na maloba (ba modèle ya moboko). Tozali na ekuke ya etambe ④.

Ebongisami: · Miniti 3 ya kotangaNdenge tosalaki bolukiluki →

Sir Airffic GoMingi euti na mikanda ya bolukiluki, kasi maloba ezali pete. Tambola elongo na ngai.

Matambe minei ya kososola

  1. Koluka biloko: koluka bato, ba motuka mpe ba nsinga ya kura na elilingi mpe kotia yango na kati ya ba carré.
  2. Kolanda: kolanda wapi eloko oyo emonani ekokende sima.
  3. Koyeba esika na yo: koyeba ntaka mpe esika otamboli na nzela ya bobaluki ya elilingi mpe IMU (VIO: visual-inertial odometry).
  4. Kososola mpe kotosa: kososola « tala sima ya ndako oyo ezali na toit ya motane » mpe kokangisa maloba na oyo omoni (VLM: IA oyo esalelaka elilingi mpe maloba elongo).

Kopumbwa wana ozali kotonga karte: SLAM mpe VIO

Na suka ya ba années 2000, ba laboratoire ya ba université babandaki koyeba esika ya drone moke na kamera moko mpe IMU. Makambo nyonso ebandaki wana.

Ba méthode lokola SVO, VINS-Mono mpe ORB-SLAM ebimaki mpe ekomaki miboko ya bato nyonso. Bolukiluki ya polele ekomaki biteni ya biloko oyo batekaka.

Lelo ba drone ya mombongo ekoki kopumbwa na nse ya gbagba mpe na kati ya ndako mpo na mosala oyo esalemaki mibu mingi.

Soki otali uta likolo, biloko emonanaka mike mpe ebongwani

IA oyo bateyaki na ba foto ya mabele ekokaka te na komona uta likolo: bato bakomaka lokola ba point mpe ba motuka ebongolaka forme.

Ba données ya likolo lokola VisDrone mpe DOTA esalemaki mpo na koteya IA oyo ebongi mpo na likolo.

Moto oyo azali na ba données nde akataka bwanya ya IA. Likambo yango ebongwani te ata na tango ya ba modèle ya moboko.

Sir Airffic GoBokeseni ya IA euti mingi na ebele ya ba données ya likolo oyo ozali na yango, koleka ba algorithme. Kanisa yango mpo na eteni ya mwango.

Mokolo IA elongaki ba champion ya bato

Na 2023, drone ya IA moko na nkombo Swift, oyo Université ya Zurich esalaki, elongaki ba champion ya mokili ya mbangu ya drone. Mosala yango ebimaki na zulunalo Nature.

Swift eyebaki esika na yango kaka na kamera moko mpe IMU, mpe eyekolaki kopumbwa na reinforcement learning — komeka mbala mingi na simulation.

Yango ezalaki na nzela oyo ebongwanaka te. Kozala na makoki yango moko na likolo ya solo, esika tango mpe bipekiseli ebongwanaka, ezali naino mokakatano.

Mbangu ya drone na niveau ya champion na deep reinforcement learning (UZH)

Video ya drone ya IA Swift oyo Robotics and Perception Group ya Université ya Zurich ebimisaki. YouTube ↗ · Eloko moko te euti na YouTube kino okofina play

Mbonge oyo ekoya: komona, kokanisa mpe kosala na maloba

Banda pene na 2023, ba modèle minene ya IA oyo esalelaka elilingi mpe maloba elongo (ba modèle ya moboko) ebandaki kosala lokola bongo ya ba robot.

Bolukiluki ya ba drone oyo elandaka mitindo ya monoko wana ezali kososola esika (aerial vision-language navigation) ezali kokola.

Ba modèle minene ezali kilo, mpe kosalisa yango noki na kati ya drone ezali naino pasi. Yango wana ba puce — eteni oyo elandi — esengeli kotangama elongo.

Mituna oyo batunaka mingi

Misala nini esalelaka computer vision ya drone?

Koluka ba fissure na ba gbagba mpe ba nsinga ya kura, kotala bokolongono ya bilanga, koluka bato na tango ya kobikisa, bokengi mpe kotala circulation, mpe kotala bisika ya komema biloko.

Visual-inertial odometry (VIO) ezali nini?

Ndenge oyo esangisaka bobaluki ya elilingi na oyo IMU emekaka (lombangu mpe kobaluka) mpo na koyeba ntaka oyo drone etamboli. Ezali tekiniki ya moboko mpo na kopumbwa kozanga GPS.