Figūros humanoidiniai robotai naudoja „Helix VLA“ modelį, kad pademonstruotų namų ruošos darbus

https://www.youtube.com/watch?v=z3yqhynxpws

„AI Inc.“ pav. Vakar pademonstravo savo „Helix“ vaizdinės kalbos arba VLA modelio galimybes paprastoje namų ūkio užduotyje: Atidėkite maisto produktus. Inicijuoti vienu žmogaus raginimu, aukščiau esančiame bendrovės vaizdo įraše esantys robotai vizualiai įvertina sceną ir tada bendradarbiaus, kad nustatytų kiekvieną objektą ir perkeltų objektą į tinkamą vietą virtuvėje.

Iš vaizdo įrašo buvo pora pastebimų pasirodymų: Pirmiausia robotai savarankiškai dirba priešais juos esančius daiktus, kol paaiškės, kad reikia atiduoti kelis daiktus į tikslą, esantį kitame.

Antra, robotai nebendrauja su žodžiu, tačiau jų sąveikoje yra pastebimų pauzių, kai jie spokso vienas į kitą neįtikėtinai „telepatinėje“ sąveikoje. Pav. Sakė, kad „Priežiūva“ AI architektūra nutraukia bendrą tikslą į mažesnes dalis, tuo pačiu kontroliuojant kiekvieną robotą savarankiškai.

Tai buvo vienas iš pirmųjų kartų, kai matėme, kaip du humanoidai dirbo bendradarbiaujant.

Norėdami užbaigti prašomą užduotį, robotai uždaro stalčių, uždarykite šaldytuvo duris ir padėkite dubenį prie prekystalio. Tai yra intuityvios subtilomis žmonėms, tačiau jos nebuvo nurodytos prašyme. Pav. Pareiškė, kad tai parodė mokymo veiksmų išsamumą.

Atskirame tinklaraščio straipsnyje įmonė paaiškino „Helix“ sistemos robotų sistemos robotų architektūrą demonstraciniame robotuose. „Helix“ sistemos širdis yra VLA modelis, kuris, jo teigimu, tampa pagrindinė visų humanoidinių robotų gamintojų technologija.

Mastelio kreivės skirtingiems būdams įgyti naujų roboto įgūdžių. Vykdant įprastą euristinį manipuliavimą, įgūdžiai auga su daktaro laipsniais, kurie juos rankiniu būdu rašo. Įprasto robotų imitacijos mokymosi metu, surinktų duomenų įgūdžių skalė. Naudojant „Helix“, nauji įgūdžiai gali būti nurodyti kalbant su kalba. | Kreditas: AI paveikslas

Roboto ataskaita pamatė pirmąjį LLM pagrįstų robotų patarimų demonstravimą scenoje 2023 m. „Robobusiness“ renginyje Santa Klaroje, Kalifornijoje Užkampiam kambarys reaguodamas į paprastą žodinę komandą „Išvalyk kambarį“.

Šis figūros „Helix“ demonstravimas yra ne mažiau įspūdingas po pusantrų metų, nes dabar jis veikia borto robotuose ir todėl, kad VLA yra visiškai užkoduotas ir išbandytas. Pav. Pareiškė, kad VLA sukūrė surinkdamas apie 500 valandų aukštos kokybės, daugialypės, daugialypės operatoriaus duomenų rinkinio, turinčio įvairiapusį teleoperacinį elgesį.

Siekdama sukurti natūralias mokymų su kalbomis kondicionierius, bendrovė naudojo automatinį etiketę VLA, kad sukurtų instrukcijas, susijusias su užpakalinėmis instrukcijomis. VLA apdorojami segmentiniai vaizdo įrašai iš borto robotų kamerų ir paragino: „Kokią instrukciją būtumėte davę robotui, kad šis vaizdo įraše būtų matomas veiksmas?“

Paveikslėlyje parodyta spiralės funkcija

„Fig Helix VLA“ modelis yra reikšmingas tobulėjimas robotikos ir AI srityje, ypač tuo, kuo jis skiriasi nuo ankstesnių VLA modelių. Čia yra pagrindinių jo skirtumų nutraukimas:

1. Visas viršutinės kūno dalies valdymas

• • Miklumas: Paveikslas parodė „Helix VLA“ modelį, užtikrinantį aukšto lygio, nuolatinį visos humanoidinės viršutinės kūno dalies valdymą. Tai apima liemenį, galvą, riešus ir atskirus pirštus, galinčius pasigirti 35 laisvės laipsniais (DOF). Šis miklumo lygis atrodo sudėtingesnis ir niuansuotų manipuliavimas objektais, palyginti su ankstesniais modeliais.
  • Žmogaus panašūs judesiai: Gebėjimas valdyti visą viršutinę kūno dalį leidžia „Helix“ atlikti užduotis su labiau panašiais žmogaus judesiais ir koordinacija. Pavyzdžiui, ji gali sekti rankas su galva, kad būtų galima vizualiai suderinti, ir sureguliuoti liemenį, kad būtų optimaliai pasiekiama, išlaikant tikslius pirštų judesius, skirtus sugriebti.

2. Bendradarbiavimas daugialypis robotas

• Bendradarbiavimo užduotys: Paveikslas parodė „Helix“ vienu metu veikiančias dviem robotais, leidžiančiais jiems bendradarbiauti atliekant bendras užduotis. Tai atveria galimybes sudėtingesniems ir koordinuotiems veiksmams, tokiems kaip du robotai, dirbantys kartu, kad padėtų maisto produktus ar surinktų baldą.
• Apibendrinimas nuliniame šūvyje: Remdamiesi demonstracijos nustatymu, robotai bendradarbiauja su užduotimis, susijusiomis su objektais, su kuriais jie niekada (tariamai tariamai) nebuvo susidūrę anksčiau. Jei robotai niekada nematė šių objektų, tai parodo modelio sugebėjimą apibendrinti ir prisitaikyti prie naujų situacijų.

3. ‘Pasiimk bet ką’ galimybė

• Bendras objekto atpažinimas: Demonstracija parodo, kaip „Helix“ leidžia „Humanoids“ figūroms nustatyti ir manipuliuoti įvairiausiais buitiniais objektais. VLA naudojimas yra patobulinimas, palyginti su ankstesniais modeliais, kuriems dažnai reikėjo konkrečių kiekvieno objekto mokymo.
• Natūralios kalbos raginimai: Robotas pademonstravo supratimą ir reagavimą į natūralios kalbos komandas, leisdamas vartotojams nurodyti jį „pasiimti dykumos elementą“ arba „perduoti sausainių maišą į robotą dešinėje“, nereikia pateikti išsamių instrukcijų.

4. Vieningas nervų tinklas

• Vienas elgesio modelis: Skirtingai nuo ankstesnių metodų, kuriems dažnai reikėjo atskirų skirtingų užduočių modelių, atrodo, kad „Helix“ naudoja vieną neuroninio tinklo svorių rinkinį, kad galėtų elgtis visam elgesiui. Tai supaprastina modelį ir daro jį efektyvesnį.
• Jokių užduočių derinimas nėra: „Helix“ gali atlikti platų užduočių asortimentą, nereikia tiksliai sureguliuoti kiekvienos konkrečios užduoties. Tai daro jį labiau pritaikomu ir lengviau naudoti skirtingose ​​aplinkose, sakė paveikslas.

5. Komercinis pasirengimas:

• Lyno apdorojimas: „Helix“ visiškai veikia įterptą GPU į 02 pav. Humanoidą, turintį mažą energijos suvartojimą, todėl jis tinka diegti realiame pasaulyje, nepasikliaujant išoriniais skaičiavimo ištekliais. Tai yra esminis žingsnis siekiant padaryti humanoidinius robotus komerciškai perspektyvius naudoti namuose ir kitoje aplinkoje.
• Sumažintas latentinis: Borto apdorojimas sumažina delsą, leidžiančią robotui greitai reaguoti į komandas ir realiu laiku sąveikauti su aplinka.

Vykdo gamybos bandymai

Paveikslas 2024 m. Pabaigoje paskelbė, kad jos robotai perkelia plėtrą ir bandymus komerciniam naudojimui ir kad ji pateikė savo 02 paveikslo sistemas mokančiam klientui.

AI paveikslas laimėjo 2024 RBR50 apdovanojimą už greitą inovacijų tempą. Nuo tada, kai 2023 m. Sausio mėn. Išėjo iš „Stealth“, „Sunnyvale“, Kalifornijoje įsikūrusi įmonė, sukūrė ir pakartojo veikiantį humanoidą ir išbandė savo robotą gamybos linijoje.

Praėjusį mėnesį Fig pareiškė, kad planuoja sertifikuoti savo roboto akumuliatorių, funkcinę saugos kontrolės sistemą ir elektros sistemą prie pramoninių saugos standartų. Bendrovė taip pat tvirtino, kad per ateinančius ketverius metus ketina išsiųsti 100 000 humanoidų robotų ir, kaip pranešama, derybose surinko 1,5 milijardo dolerių.

Sužinokite apie humanoidus robotikos viršūnių susitikime

Humanoidai bus garsūs „Robotics Summit & Expo“, kuris vyks balandžio 30 d. Iki gegužės 1 Roboto ataskaita. „Boston Dynamics“ CTO CTO Aaronas Saundersas pateiks atidarymo pagrindinį pranešimą antrą renginio dieną. Jis aptars neseniai pertvarkytą „Atlas“ robotą ir pasidalys savo mintimis apie būsimus humanoidus.

Pirmojoje laidos dieną bus rodoma skydelis apie humanoidų būklę su velagapudi; Aaronas Pratheris, „ASTM International“ robotikos ir autonominių sistemų direktorius; ir Al Makke, Schaefflerio inžinerijos direktorius. Komplekte bus tiriami techniniai ir verslo iššūkiai, formuojantys humanoidų plėtrą. Ji taip pat pasidalins įžvalgomis iš ankstyvojo diegimo, kas yra horizonte, ir nuolatinės pastangos nustatyti saugos standartus.

„Robotics Summit & Expo“ suburs daugiau nei 5000 kūrėjų, orientuotų į robotų kūrimą įvairioms komercinėms pramonės šakoms. Dalyviai gali įgyti įžvalgos apie naujausias įgalinančias technologijas, geriausią inžinerinę praktiką ir kylančias tendencijas.

Renginyje dalyvaus daugiau nei 200 parodos dalyvių, 70 plius pranešėjų scenoje, daugiau nei 10 valandų tam skirto tinklo laiko, robotikos pusryčių moterų, karjeros mugės, startuolių vitrinos ir dar daugiau. Grįžimas į parodą yra „RBR50“ paviljono ir RBR50 apdovanojimų vakarienė, kuri pagerbs kasmetinių „RBR50“ robotikos inovacijų apdovanojimų nugalėtojus.

Užsiregistruokite šiandien, kad sutaupytumėte 40% konferencijų leidimų!