NVIDIA JetPack 7.2.1: agentiniai video įgūdžiai ateina į mažus įrenginius
·
NVIDIA JetPack 7.2.1 šiandien nėra teorinis žaislas. Tai jau darbas, pinigai, duomenys ir kartais labai žemiškas klausimas: kas prisiims atsakomybę, kai DI pradės veikti už žmogų?
NVIDIA rugpjūčio 11 d. pristatė JetPack 7.2.1 atnaujinimą su agentiniais video įgūdžiais ir T3000 emuliacija. Čia jau kalbame ne apie pokalbių langą. Kalbame apie kameras, robotus, kraštinius įrenginius ir sistemas, kurios turi matyti pasaulį, o ne tik skaityti tekstą.
Turiu prisipažinti, tokias naujienas skaitau ne kaip blizgančią vitriną. Skaitau kaip žmogus, kuris iš karto galvoja apie komandą pirmadienio rytą. Kas iš to bus naudinga? Kur bus painiava? Ir kur po mėnesio kas nors pasakys: „mes galvojom, kad čia automatiškai susitvarkys“.
KAS NUTIKO
JetPack 7.2.1 papildo Jetson kūrėjų aplinką video apdorojimo galimybėmis, agentiniais įgūdžiais ir emuliacija, kuri padeda ruošti programas naujesnei aparatinės įrangos kartai.
Man čia visada įdomiausia ta nematoma pusė. Mes žiūrime į robotą, kuris gražiai juda. Bet po juo yra kamera, srautas, modelis, delsimas, energija ir šimtas mažų sprendimų.
Čia svarbi detalė: kalbame ne apie dar vieną gražų demonstracinį video. Kalbame apie produktus, politiką, infrastruktūrą arba tyrimus, kurie keičia, kaip žmonės dirba su DI realiose organizacijose.
KODĖL TAI SVARBU
Jei DI juda į fizinį pasaulį, video tampa pagrindiniu duomenų keliu. Sandėlis, gamykla, ligoninė, dronas, kamera prie įėjimo – visur reikia greitai suprasti, kas vyksta.
DI jau išlipo iš „parašyk tekstą“ dėžutės. Jis naršo, jungiasi prie įrankių, analizuoja duomenis, planuoja veiksmus, kartais tvarko dokumentus ar padeda priimti sprendimą. Trumpai: jis artėja prie darbo proceso, ne tik prie pokalbio lango.
Ir čia smegenys mėgsta paslysti. Norisi sakyti: „ai, čia dar užsienyje“. Bet tas pats modelis ar funkcija rytoj atsiras kliento kompiuteryje, darbuotojo naršyklėje arba partnerio pasiūlyme.
KĄ TAI REIŠKIA VERSLUI
Verslui tai reiškia, kad DI projektai vis dažniau persikels iš debesies į įrenginius šalia veiksmo. Tai svarbu privatumui, delsai ir stabilumui, kai interneto ryšys nėra garantuotas.
- įvertinti, ar užduočiai reikia veikimo vietoje
- skaičiuoti delsą, ne tik modelio tikslumą
- testuoti video srautus realiomis sąlygomis
- nepamiršti priežiūros ir atnaujinimų įrenginiuose
Paprastas testas: jei vaizdo sprendimas turi reaguoti per sekundę, neplanuokite visko siųsti į debesį vien todėl, kad taip patogiau programuoti.
Man patinka paprastas testas: ar po šios naujienos tavo komanda turi vieną aiškesnį sprendimą? Jei ne, vadinasi dar tik skaitome. Skaityti galima. Tik nereikia apsimesti, kad tai jau strategija.
KUR GALI SKAUDĖTI
Rizika – manyti, kad kamera plius DI jau yra sprendimas. Reikia apšvietimo, kampų, duomenų kokybės, klaidų scenarijų ir žmogaus plano, kai sistema nėra tikra.
Dažniausia klaida labai ūkiška. Žmonės įsijungia įrankį, pabando, nustemba, pasidžiaugia ir tada palieka viską savieigai. Po kelių savaičių paaiškėja, kad vieni darbuotojai kelia jautrius failus, kiti matuoja naudą iš jausmo, o treti net nežino, kas leidžiama.
Ne tragedija. Bet tvarkos reikia.
KĄ PASIDARYTI ŠIĄ SAVAITĘ
Šią savaitę viename video DI procese užrašykite ne modelio pavadinimą, o tris ribas: kiek leidžiama delsos, kur laikomi duomenys ir kas tikrina klaidas.
Šaltinis: NVIDIA Technical Blog.
DUK
Kas naujo NVIDIA JetPack 7.2.1?
NVIDIA pristato agentinius video įgūdžius Jetson platformoms ir T3000 emuliacijos galimybes.
Kam tai aktualu?
Robotikai, video analitikai, pramonės automatizavimui ir kraštiniams DI įrenginiams.
Kodėl video DI reikia vietinio veikimo?
Dėl mažesnės delsos, privatumo ir patikimumo, kai reali sistema turi reaguoti greitai.
Jei nori DI naudoti praktiškai, pradėk nuo vieno proceso. Vienas pasikartojantis darbas. Vienas atsakingas žmogus. Vienas matavimas. Daugiau praktikos rasi MasterSprint.
