Airffic InstituteAERIAL PHYSICAL AI
Lisi ☰

Aerial Physical AI Institute

Vision AI: na sala e kila kina e dua na drone na ka e raica

E sega ni rauta na raica walega me vuka. E gadreva na mona me kila na ka e raica.

Isau lekaleka: Na Vision AI ni drone e tubu ena va na kalawa: ① kunea na ka (detection), ② muria (tracking), ③ kila na vanua o tu kina (SLAM, VIO), ④ kila na ivakaro e vosataki (foundation model). Eda sa tu tiko ena matamata ni kalawa ④.

Vakavoui: · 3 na miniti ni wilikiNa sala keimami vakadidike kina →

Sir Airffic GoE levu na ka oqo e lako mai na ivola ni vakadidike, ia na vosa e vakarawarawataki. Muri au tiko ga.

Va na kalawa ni kila

  1. Detection (kunei): kunei ira na tamata, motoka kei na wa ni livaliva ena dua na itaba ka droinitaki e dua na kato e wavoki ira.
  2. Tracking (muri): muria na vanua e toso kina na ka sa kunei.
  3. Kila na vanua o tu kina: wilika na yawa kei na vanua o toso kina mai na toso ni itaba kei na IMU (VIO: visual-inertial odometry).
  4. Kila kei na ivakaro: kila na "vakadikeva na daku ni vale e damudamu na kena dela" ka semata na vosa ki na ka e raici (VLM: AI e kila vata na itaba kei na vosa).

Vuka ka bulia na mape: SLAM kei na VIO

Ena iotioti ni veiyabaki 2000, na vale ni vakadidike ni univesiti era tekivu wilika na vanua e tu kina e dua na drone lailai ena dua na kemera kei na IMU. Na ka kece e tekivu mai kina.

Na iwalewale me vaka na SVO, VINS-Mono kei na ORB-SLAM era tabaki ka yaco me yavu e wasei. Na vakadidike e dolavi sa yaco me tikina ni iyaya ni volitaki.

Na drone ni bisinisi nikua e rawa ni vuka e ruku ni wavu kei na loma ni vale baleta na cakacaka oqo e vakasoqoni tiko.

Mai cake, na ka e lailai ka veisau na kena irairai

Na AI e vulici ena itaba e taba e vuravura e dredre vua na raica mai cake: na tamata sa vaka e dua na tiki lailai ka veisau na irairai ni motoka.

Na kato ni data ni itaba mai cake me vaka na VisDrone kei na DOTA era buli me rawa ni vulici kina na AI ni lomalagi.

O koya e taukena na data e lewa na vuku ni AI. E se sega ni veisau oqo ena gauna ni foundation model.

Sir Airffic GoNa duidui ni AI e dau vakatau ena levu ni data ni itaba mai cake o taukena, sivia na algorithm. Nanuma oqo me baleta na wase ni ituvatuva.

Na siga e qaqa kina na AI vei ira na qaqa tamata

Ena 2023, e dua na drone AI na yacana o Swift, e buli ena Univesiti o Zurich, e qaqa vei ira na qaqa tamata ni veitaucoko ni drone e vuravura. Na cakacaka oqo e tabaki ena Nature.

Na Swift e wilika na vanua e tu kina ena kemera kei na IMU walega, ka vulica na vuka ena reinforcement learning — ena vakatovotovo vakavuqa ena simulation (vuravura e buli ena kompiuta).

Oqo ena dua na sala e lewai rawa. Me vakatautauvatataki na vuku oqo ena lomalagi dina, ni veisau na draki kei na ka e tu e sala, e se dua na bolebole.

Veitaucoko ni drone ena ivakatagedegede ni qaqa ena deep reinforcement learning (UZH)

Vidio ni drone AI o Swift e tabaka na Robotics and Perception Group ni Univesiti o Zurich. YouTube ↗ · E sega ni dua na ka e lako mai YouTube me yacova ni o tabaka na play

Na ua e tarava: raica, vakasamataka ka cakava na vosa

Mai na 2023 vakacaca, na AI levu e kila vata na itaba kei na vosa (foundation model) e tekivu cakacaka me mona ni robot.

Na vakadidike ni drone me muria na ivakaro e vosataki ni kila tiko na ka e volekati (aerial vision-language navigation) e tubu tiko.

Na AI levu e bibi, ka se dredre me cakacaka vakatotolo e loma ni drone. Kena vuna me wiliki vata kei na chip — na wase e tarava.

Taro e dau tarogi

Na cakacaka cava e vakayagataka na computer vision ni drone?

Kunei ni kavoro ena wavu kei na wa ni livaliva, vakadikevi ni bula ni itei, vakasaqarai ni tamata ena veivueti, maroroi kei na raici ni gaunisala, kei na vakadikevi ni vanua ni vakau iyaya.

Na cava na visual-inertial odometry (VIO)?

Na iwalewale e vakasotara na toso ni itaba kei na wiliwili ni IMU me baleta na totolo kei na wavoki, me kila kina na yawa e toso kina na drone. E tekinolaji yavu me vuka ke sega na GPS.