Airffic InstituteAERIAL PHYSICAL AI
Menyu ☰

Aerial Physical AI Institute

Vision AI: ndlela leyi drone yi twisisaka leswi yi swi vonaka ha yona

Ku vona a swi eneli ku haha. Byongo byi lava ku twisisa leswi byi swi vonaka.

Nhlamulo yo koma: Vision AI ya tidrone yi kule hi magoza ya mune: ① ku kuma swilo (detection), ② ku swi landzelela (tracking), ③ ku tiva laha u nga kona (SLAM, VIO), ④ ku twisisa swileriso hi marito (timodeli ta xisekelo). Hi le nyangweni wa goza ④.

Yi pfuxetiwile: · Ku hlaya ka timinete ta 3Ndlela leyi hi lavisiseke ha yona →

Sir Airffic GoSwo tala swi huma eka maphepha ya vulavisisi, kambe marito ma hlayisiwile ma olova. Tshama na mina.

Magoza ya mune ya ku twisisa

  1. Ku kuma swilo: ku kuma vanhu, mimovha ni tintambhu ta gezi eka xifaniso ni ku dirowa mabokisi ku swi rhendzela.
  2. Ku landzelela: ku landzelela laha nchumu lowu kumiweke wu yaka kona endzhaku.
  3. Ku tikuma: ku hlayela leswaku u fambe ku fikela kwihi ni ku ya kwihi hi ku famba ka xifaniso swin'we ni IMU (VIO: visual-inertial odometry).
  4. Ku twisisa ni swileriso: ku twisisa "kambela endzhaku ka yindlu leyi nga ni lwangu ro tshwuka" ni ku hlanganisa marito ni leswi u swi vonaka (VLM: AI leyi tirhisaka swifaniso ni ririmi swin'we).

Ku haha u ri karhi u aka mepe: SLAM ni VIO

Ekuheleni ka malembe ya 2000, tilaboratori ta tiyunivhesiti ti sungule ku hlayela ndhawu ya drone leyitsongo hi khamera yin'we ni IMU. Hinkwaswo swi sungule kwalaho.

Tindlela ku fana na SVO, VINS-Mono na ORB-SLAM ti humesiwile kutani ti va masungulo lama avelaniwaka. Vulavisisi lebyi pfulekeke byi hundzuke swiphemu swa swihumelerisiwa.

Tidrone ta bindzu ta namuntlha ti kota ku haha ehansi ka mabuloho ni le ndzeni ka tindlu hikokwalaho ka ntirho lowu hlengeletiweke.

Vumbhoni: [P01] [P02] [P08] [P09] [P21] [P15]

Ku suka ehenhla, swilo swi languteka swi ri swintsongo ni ku tsendzeleka

AI leyi dyondzisiweke hi swifaniso swa le hansi yi tikeriwa hi ku languta ku suka ehenhla: vanhu va hundzuka swithonsi naswona mimovha yi cinca xivumbeko.

Mintlawa ya data ya le henhla ku fana na VisDrone na DOTA yi akiwile leswaku AI leyi endleriweke xibakabaka yi dyondzisiwa.

Loyi a nga na data u boha leswaku AI yi tlhariha ku fikela kwihi. Leswi a swi cincanga hambi ku ri enkarhini wa timodeli ta xisekelo.

Sir Airffic GoKu hambana ka AI hakanyingi ku ya hi leswaku u na data yo tala ku fikela kwihi ya le henhla, ku tlula tindlela ta xibalo. Tsundzuka leswi eka ndzima ya maqhinga.

Vumbhoni: [P14] [P23] [P24]

Siku leri AI yi hluleke tinhenha ta vanhu

Hi 2023 drone ya AI leyi vitaniwaka Swift, leyi akiweke eYunivhesiti ya Zurich, yi hlule tinhenha ta misava ta vanhu eka mphikizano wa tidrone. Ntirho lowu wu humesiwile eka Nature.

Swift yi hlayele ndhawu ya yona hi khamera ni IMU ntsena, kutani yi dyondza ku haha hi reinforcement learning — yi ri karhi yi titoloveta minkarhi yo tala eka simulation.

Leswi a swi ri eka ndlela leyi nga cinciki. Ku kota vutshila lebyi exibakabakeni xa xiviri, lomu maxelo ni swihinga swi cincaka, ka ha ri ntlhontlho.

Mphikizano wa tidrone wa xiyimo xa tinhenha hi deep reinforcement learning (UZH)

Vhidiyo ya drone ya AI ya Swift leyi humesiweke hi Robotics and Perception Group ya Yunivhesiti ya Zurich. YouTube ↗ · Ku hava nchumu lowu nghenaka ku suka eka YouTube u nga si tshikileta ku tlanga

Vumbhoni: [N124]

Ndzhuti lowu landzelaka: ku vona, ku anakanya ni ku endla hi marito

Ku sukela kwalomu ka 2023, timodeli letikulu ta AI leti tirhisaka swifaniso ni ririmi swin'we (timodeli ta xisekelo) ti sungule ku tirha tanihi byongo bya tirobot.

Vulavisisi bya tidrone leti landzelaka swileriso swa marito ti ri karhi ti twisisa leswi ti swi vonaka (aerial vision-language navigation) byi ya byi kula.

Timodeli letikulu ti tikile, naswona ku ti tirhisa hi ku hatlisa eka drone ka ha tika. Hikokwalaho ti-chip — ndzima leyi landzelaka — ti fanele ku hlayiwa swin'we na yona.

Vumbhoni: [N133]

Swivutiso leswi vutisiwaka ngopfu

Hi yihi mintirho leyi tirhisaka ku vona ka khompyuta ka tidrone?

Ku kuma minkwahlo eka mabuloho ni tintambhu ta gezi, ku kambela rihanyo ra swibyariwa, ku lava vanhu eka ku lava ni ku ponisa, vuhlayiseki ni ku langutisa mafambelo ya mimovha, ni ku kambela tindhawu to yisela swilo i matirhiselo ya ntolovelo.

Visual-inertial odometry (VIO) i yini?

Ndlela leyi hlanganisaka ku famba ka xifaniso ni leswi IMU yi swi pimaka swa ku hatlisa ni ku rhendzeleka leswaku yi hlayela leswaku drone yi fambe ku fikela kwihi. I thekinoloji ya xisekelo ya ku haha handle ka GPS.