Airffic InstituteAERIAL PHYSICAL AI
सूची ☰

Aerial Physical AI Institute

Vision AI: ड्रोन जे देखैत अछि, से कोना बुझैत अछि

उड़य लेल मात्र देखब काफी नहि अछि। दिमागकेँ बुझय पड़ैत अछि जे ओ की देखि रहल अछि।

छोट उत्तर: ड्रोन Vision AI चारि चरणमे बढ़ल अछि: ① चीज ताकब (डिटेक्शन), ② ओकर पाछाँ लागब (ट्रैकिंग), ③ अपन स्थान जानब (SLAM, VIO), ④ शब्दमे देल निर्देश बुझब (फाउंडेशन मॉडल)। हम सभ चरण ④ क दुआरिपर छी।

अपडेट: · 2 मिनटक पढ़ाइहम कोना शोध केलहुँ →

Sir Airffic Goएहिमे बहुत किछु शोध-पत्रसँ आयल अछि, मुदा शब्द सरल राखल गेल अछि। हमरा संग रहू।

बुझबाक चारि चरण

  1. डिटेक्शन: छविमे लोक, गाड़ी आ बिजलीक तार ताकब आ ओकरा चारू कात डिब्बा बनायब।
  2. ट्रैकिंग: जे चीज भेटल, से आगाँ कतय जाइत अछि, तकर पाछाँ लागब।
  3. अपन स्थान जानब: छविक गति आ IMU सँ पता करब जे अहाँ कतेक आ कतय गेलहुँ (VIO: visual-inertial odometry)।
  4. बुझब आ निर्देश: “लाल छत बला घरक पाछाँ जाँच करू” बुझब आ ओहि शब्दकेँ देखल चीजसँ जोड़ब (VLM: एहन AI जे छवि आ भाषा एक संग सम्हारैत अछि)।

नक्शा बनबैत उड़ब: SLAM आ VIO

2000 क दशकक अंतमे विश्वविद्यालयक प्रयोगशाला एकटा कैमरा आ IMU सँ छोट ड्रोनक स्थान अनुमान करब शुरू केलक। सभ किछु ओतहिसँ शुरू भेल।

SVO, VINS-Mono आ ORB-SLAM सन तरीका प्रकाशित भेल आ सभक साझा नींव बनि गेल। खुला शोध उत्पादक पुर्जा बनि गेल।

आजुक व्यावसायिक ड्रोन पुलक नीचाँ आ घरक भीतर एही जमा काजक कारण उड़ि सकैत अछि।

सबूत: [P01] [P02] [P08] [P09] [P21] [P15]

ऊपरसँ चीज छोट आ टेढ़ देखाइत अछि

जमीनक फोटोसँ सिखल AI ऊपरसँ देखल दृश्यमे भटकैत अछि: लोक बिंदु भऽ जाइत अछि आ गाड़ीक आकार बदलि जाइत अछि।

VisDrone आ DOTA सन हवाई डेटासेट बनाओल गेल, जाहिसँ आकाश लेल खास AI सिखाओल जा सकय।

जकरा लग डेटा अछि, ओ तय करैत अछि जे AI कतेक चतुर बनत। फाउंडेशन मॉडलक युगमे सेहो ई नहि बदलल।

Sir Airffic GoAI मे अंतर अक्सर एल्गोरिदमसँ बेसी एहि बातपर टिकैत अछि जे अहाँ लग कतेक हवाई डेटा अछि। रणनीति अध्याय लेल ई मोन राखू।

सबूत: [P14] [P23] [P24]

जहिया AI मनुक्ख चैंपियनकेँ हरौलक

2023 मे University of Zurich मे बनल Swift नामक AI ड्रोन मनुक्ख विश्व-चैंपियन ड्रोन रेसरकेँ हरा देलक। ई काज Nature पत्रिकामे छपल।

Swift मात्र एकटा कैमरा आ IMU सँ अपन स्थान अनुमान केलक, आ reinforcement learning (सिमुलेशनमे बेर-बेर अभ्यास कऽ कऽ सिखब) सँ उड़ब सिखलक।

ई एकटा तय कोर्सपर छल। बदलैत मौसम आ रुकावट बला असली आकाशमे ओहने कौशल पायब एखनो खुला चुनौती अछि।

गहींर reinforcement learning सँ चैंपियन-स्तरक ड्रोन रेसिंग (UZH)

University of Zurich क Robotics and Perception Group द्वारा प्रकाशित Swift AI ड्रोनक वीडियो। YouTube ↗ · जा धरि अहाँ चलाउ नहि दबबैत छी, YouTube सँ किछु लोड नहि होइत अछि

सबूत: [N124]

अगिला लहरि: देखब, सोचब आ शब्दपर काज करब

करीब 2023 सँ, छवि आ भाषा एक संग सम्हारय बला पैघ AI मॉडल (फाउंडेशन मॉडल) रोबोटक दिमागक रूपमे काज करय लागल।

दृश्य बुझैत बाजल निर्देश मानय बला ड्रोन शोध (aerial vision-language navigation) बढ़ि रहल अछि।

पैघ मॉडल भारी अछि, आ ड्रोनपर तेजीसँ चलायब एखनो कठिन अछि। तेँ चिप — अगिला अध्याय — संग-संग पढ़ू।

सबूत: [N133]

बेर-बेर पूछल जाय बला प्रश्न

ड्रोन कंप्यूटर विज़न कोन काजमे लगैत अछि?

पुल आ बिजलीक तारमे दरार ताकब, फसलक स्वास्थ्य जाँच, खोज आ बचावमे लोक ताकब, सुरक्षा आ ट्रैफिक निगरानी, आ डिलीवरीक जगह जाँचब आम उपयोग अछि।

visual-inertial odometry (VIO) की अछि?

एकटा तरीका जे छविक गति आ IMU सँ नापल त्वरण आ घुमावकेँ जोड़ि कऽ गणना करैत अछि जे ड्रोन कतेक चलल। GPS बिना उड़बाक ई मूल तकनीक अछि।