SPAD jutikliai valdo triukšmą kitaip nei CMOS jutiklis, todėl vaizdo įrašų vaizduose sumažėja susiliejimas. Kreditas: Ubicept
„Ubicept“ praėjusį mėnesį išleido „Ubicept“ įrankių rinkinį, kuris, pasak jos, suteikia fizikos pagrindu sukurtą vaizdą į šiuolaikines kompiuterinės regos sistemas. Bendrovė teigė, kad jos metodas suteikia aukštos kokybės ir patikimus duomenis.
Įrankių rinkinys leidžia neprisijungus ir tiesiogiai apdoroti papildomus metalo oksido-puslaidininkių (CMOS) vaizdo įrašus ir vieno fotono lavinos diodo (SPAD) kameras, padedančias atpažinti objektus ir suvokti erdvę. „Ubicept“ tvirtino, kad jos SPAD jutikliai užtikrina puikų vaizdą esant prastam apšvietimui ir didelio kontrasto vaizdą, palyginti su įprastomis kameromis.
Pramoninėse kamerose, kurios buvo naudojamos pastaruosius keturis dešimtmečius, buvo naudojami CMOS jutikliai. Tai taip pat ta pati technologija, naudojama skaitmeninėse fotografijos kamerose ir apsaugos kamerose, todėl dėl jų gamybos apimties CMOS jutikliai yra gana pigūs.
CMOS kamerų problema yra ta, kad esant silpnam apšvietimui vaizdai gali būti triukšmingi, o CMOS jutikliu užfiksuoti vaizdo įrašai yra neryškūs žiūrint į vieną kadrą.
Išradimas: geresnė skiriamoji geba esant prastam apšvietimui
„Ubicept“ teigė, kad naujasis požiūris yra naudoti SPAD jutiklius su nauju vaizdo apdorojimo vamzdynu, siekiant pagerinti gaunamų vaizdų ir (arba) vaizdo įrašų kontrastą ir aiškumą. Tai taip pat siūlo tiesioginius vaizdo kokybės patobulinimus naudojant esamą CMOS aparatinę įrangą, teigia Bostone įsikūrusi įmonė.
„Ubicept“ teigė, kad taikant regėjimo suvokimo programas esant prastam apšvietimui, pavyzdžiui, autonominiam vairavimui naktį, „Ubicept“ gali veiksmingai pagerinti kelis kraštutinius scenarijus, kurie painioja esamus kameromis pagrįstus navigacijos ir suvokimo vamzdynus.
SPAD technologija, kuri užfiksuoja kiekvieną fotoną subnanosekundine skiriamąja geba, gali pagerinti vaizdo kokybę įvairiose aplinkose, teigė bendrovė.
„Ubicept“ planuoja integruoti savo programinę įrangą su esama technine įranga, tokia kaip „Qualcomm Snapdragon“ ir „NXP“ lustai, kad pagerintų suvokimo modelius robotikoje ir automobiliams skirtose programose. Tikimasi, kad technologija subręs ir taps prieinamesnė per ateinančius vienerius ar dvejus metus.
Supaprastinta svertinio fotonų skaičiavimo technikos iliustracija. Kuo anksčiau ateis pirmasis krintantis fotonas, tuo ryškesnė krintanti šviesa. Kreditas: Canon
„Ubicept technologija iš esmės keičia tai, kaip mašinos mato pasaulį, išlaisvindamos visą šiandienos ir ateities vaizdo jutiklių potencialą“, – teigė „Ubicept“ generalinis direktorius Sebastianas Baueris. „Mūsų fizika pagrįstas metodas užfiksuoja visą judesio sudėtingumą, net esant prastam apšvietimui ar didelio dinaminio diapazono sąlygomis, ir suteikia daugiau patikimų duomenų nei AI pagrįstas vaizdo patobulinimas.
„Naudodami Ubicept Toolkit, dabar savo pažangų vieno fotono vaizdavimą darome labiau prieinamą įvairioms reikmėms – nuo robotikos iki automobilių iki pramoninių jutiklių“, – pridūrė jis.
Aparatinė įranga prieš programinę įrangą
Paklaustas apie produkto planą, Baueris atsakė: „Tai, ką mes išleidome, yra programinės įrangos dalis, kurią žmonės gali paleisti su GUI (grafine vartotojo sąsaja), tačiau ji taip pat turi API (programų programavimo sąsają). Be to, galite apdoroti esamus CMOS vaizdo įrašus neprisijungę.
„Taip pat galite tiesiogiai prijungti CMOS kameras ir turėti tiesioginius apdorotus išėjimus“, – sakė jis. „Galite prijungti kompiuterį prie SPAD kameros ir iš tikrųjų pamatyti mūsų vaizdo kokybės skirtumą, įvertinti CMOS tobulinimo kokybę, palyginti su SPAD, ir sukurti savo kompiuterinės vizijos programą.
„Ubicept“ teigė, kad jo sistema sukurta pažangiausiems jutikliams, siekiant maksimaliai padidinti vaizdo duomenų kokybę ir patikimumą. Ji pažymėjo, kad „Ubicept Toolkit“ gali palaikyti bet kurią plačiai prieinamą CMOS kamerą su neapdorota nesuspausta išvestimi, todėl kūrėjai iškart pagerina kokybę.
Bendrovė teigė norinti bendradarbiauti su robotikos kūrėjais ir fotoaparatų gamintojais, kad sukurtų naujos kartos išmanųjį suvokimą.
„Mes neplanuojame patys gaminti jutiklių, bet turime tikrai gerą IP (intelektinę nuosavybę) 3D sukrautiems jutikliams, tai reiškia, kad apdorojame tiesiogiai jutiklio mikroschemoje, o tada iš esmės iki pat suvokimo“, – sakė Baueris. „Jei galvojate apie kameras, turite kamerą su jutikliu ir IPT arba vaizdo signalo apdorojimo lustą, o tada turite suvokimo modelį.
„Mūsų mąstymas yra sukurti visą tą pilną krūvą, įskaitant pilną IPT / apdorojimo dujotiekį, naudojant fiziškai optimalų vienkartinį viso laikotarpio suvokimą ir paverčiant jį aukštos kokybės suvokimo išvestimi, pavyzdžiui, objekto aptikimu, vienu metu lokalizavimu ir žemėlapiais (SLAM), vizualine odometrija“, – paaiškino jis.
„Ubicept“ bendradarbiauja su „Pi Imaging Technology“.
„Pi Imaging Technology“ yra šios srities lyderė su savo SPAD Alpha, naujos kartos 1 megapikselio kamera, kuri, pasak jos, užtikrina nulinį skaitymo triukšmą, nanosekundžių ekspozicijos valdymą ir kadrų dažnį iki 73 000 kadrų per sekundę. Sukurta sudėtingoms mokslinėms programoms, fotoaparatas siūlo tyrėjams ir kūrėjams ypatingą laiko tikslumą ir jautrumą šviesai.
Bendrovės teigė, kad „Ubicept Toolkit“ remiasi šiomis stiprybėmis, paversdama neapdorotus SPAD Alpha fotonų duomenis į aiškius, paruoštus naudoti vaizdus suvokimui ir analizei.
„Ubicept dalijasi mūsų giliu įsipareigojimu tobulinti suvokimo technologijas“, – sakė Michelis Antolovičius, „Pi Imaging Technology“ generalinis direktorius. „Sujungę mūsų SPAD Alpha naujausią aparatinę įrangą su Ubicept apdorojimu realiuoju laiku, suvokimo inžinieriai gali išnaudoti viską, ką gali pasiūlyti vieno fotono vaizdavimas.
„Ubicept“ teigė, kad jo įrankių rinkinys inžinierių komandoms suteikia viską, ko reikia norint efektyviai vizualizuoti, užfiksuoti ir apdoroti vaizdo duomenis naudojant „Ubicept Photon Fusion“ (UPF) algoritmą. SPAD įrankių rinkinyje taip pat yra Ubicept FLARE (lanksčios šviesos gavimo ir vaizdavimo variklio) programinė įranga, skirta optimizuoti fotonų fiksavimą.
Be to, „Ubicept Toolkit“ pateikiamas su „baltų pirštinių pagalba ankstyviems naudotojams, kad būtų galima labai individualizuoti ir įgyti aukščiausios kokybės patirtį“, – teigė bendrovė.
