Anodiad Gwrthrych Golygfa Dan Do ar gyfer Roboteg Gwasanaeth a Deallusrwydd Artiffisial Ymgorfforedig — Astudiaeth Achos
Sut y gwnaeth Shaip gyflwyno anodiadau golygfeydd dan do cynhwysfawr ar gyfer cwmni arloesi roboteg blaenllaw — canfod a labelu pob gwrthrych mewn amgylcheddau ystafell gyda thagio perthynas ofodol — wedi'i adeiladu fel set ddata gradd gynhyrchu ar gyfer canfyddiad robotig a llywio deallusrwydd artiffisial ar draws cartrefi, swyddfeydd, warysau a chyfleusterau gofal iechyd.
Trosolwg o'r Prosiect
Wrth i roboteg symud i ddefnydd yn y byd go iawn ar draws cartrefi, swyddfeydd, warysau ac ysbytai, roedd angen piblinell anodi gynhwysfawr ar y cleient a oedd yn gallu labelu pob gwrthrych gweladwy mewn golygfeydd dan do llawn dop - gyda chyfoeth priodoleddau digonol ar gyfer tasgau rhyngweithio robotig.
Adeiladodd Shaip y biblinell anodiadau o'r dechrau i'r diwedd a oedd yn cwmpasu segmentu blychau ffiniol a pholygonau, cynnwys gwrthrychau dwys, tagio perthynas ofodol, a thrin arwynebau adlewyrchol — gan gynhyrchu setiau data parod ar gyfer modelau ar gyfer canfyddiad robotig, llywio, a rhyngweithio rhwng pobl a'r amgylchedd.
Ystadegau Allweddol
Gwrthrychau / Delwedd
100s
Categoriau
Trwchus
Dulliau
Blwch + Polygon
Haenau Priodoleddau
4
Heriau
- Anodi pob gwrthrych gweladwy mewn delweddaeth ystafell drwchus o anniben — cannoedd fesul ffrâm
- Dewis y dull cywir — blwch ffiniol yn erbyn segmentu polygon — yn seiliedig ar gymhlethdod gwrthrych
- Gan gynnwys gwrthrychau bach fel switshis, plygiau ac eitemau addurniadol sy'n hanfodol ar gyfer rhyngweithio robotig
- Trin arwynebau adlewyrchol (drychau, byrddau gwydr) heb anodiadau ysbrydion
- Tagio perthnasoedd gofodol a chyflyrau gwrthrych ar gyfer AI robotig sy'n ymwybodol o gyd-destun
Ateb
Cynhwysiant Gwrthrychau Cynhwysfawr
Cafodd pob gwrthrych gweladwy ym mhob delwedd ystafell ei anodi'n unigol ar draws ystod eang o gategorïau — dodrefn (cadeiriau, byrddau, soffas, gwelyau, silffoedd), offer (teleduon, oergelloedd, microdonnau, lampau), eitemau personol (bagiau, llyfrau, poteli, dillad), elfennau strwythurol (drysau, ffenestri, waliau, lloriau), a gwrthrychau bach (rheolyddion o bell, cwpanau, platiau, bysellfyrddau, switshis, plygiau).
Dewis Dull fesul Gwrthrych
Labelwyd gwrthrychau'n fanwl gywir gan ddefnyddio blychau ffiniol neu segmentu polygon yn dibynnu ar siâp a chymhlethdod y gwrthrych. Defnyddiwyd blychau ar gyfer gwrthrychau petryalog rheolaidd; roedd polygonau'n dal siapiau organig ac eitemau wedi'u pacio'n dynn lle byddai blychau'n gorgyffwrdd yn ormodol. Sicrhaodd y dewis dull fesul gwrthrych hwn ffiniau glân hyd yn oed mewn golygfeydd anniben.
Tagio Perthynas Ofodol
Cyfoethogwyd pob gwrthrych wedi'i anodeiddio â phriodoleddau yn cwmpasu cyflwr y gwrthrych (ar agor neu ar gau ar gyfer drysau a droriau), tagiau perthynas ofodol yn nodi agosrwydd a lleoliad o'i gymharu â gwrthrychau eraill, statws rhwystro, a chyflwr y gwrthrych. Mae'r haen ddeallusrwydd ofodol hon yn galluogi systemau robotig AI i ddeall cyd-destun, nid dim ond canfod gwrthrychau.
Gwrthrychau Bach a Rhyngweithio - Sylw Beirniadol
Dilynodd anodwyr reolau cynnwys llym i labelu pob gwrthrych gweladwy waeth beth fo'i faint - gan gynnwys eitemau bach fel switshis, plygiau, a gwrthrychau addurnol sy'n hanfodol ar gyfer tasgau rhyngweithio robotig. Yn aml, mae'r eitemau hyn yn pennu a all robot gwblhau ei dasg, felly ni ellid eu dadflaenoriaethu.
Trin Arwyneb Myfyriol
Roedd angen trin arwynebau adlewyrchol fel drychau a byrddau gwydr yn arbennig i osgoi anodiadau dyblyg neu ysbrydion. Roedd canllawiau penodol yn llywodraethu a oedd gwrthrychau adlewyrchol yn cael eu labelu ar wahân, eu hanwybyddu, neu eu nodi — gan sicrhau nad oedd modelau i lawr yr afon yn dysgu o labeli llawn arteffactau.
Cwmpas y Prosiect
| Math Set Ddata | Cwmpas | Dulliau | Categoriau | Priodoleddau | Trin Arbennig |
|---|---|---|---|---|---|
| Anodiad gwrthrych golygfa dan do | Pob gwrthrych gweladwy | Blwch + polygon | Dodrefn, offer, eitemau personol, strwythurol, bach | 4 haen (cyflwr, gofodol, occlusion, cyflwr) | Rheolau arwyneb adlewyrchol |
canlyniadau
- Sefydlu piblinell anodiadau dwys-wrthrych ar gyfer canfyddiad robotig dan do
- Wedi'i safoni dewis dull fesul gwrthrych rhwng blychau ffiniol a segmentu polygonau
- Wedi'i gyflwyno tagio perthynas ofodol galluogi AI robotig sy'n ymwybodol o gyd-destun
- Wedi'i weithredu trin arwyneb adlewyrchol i atal anodiadau cysgodol
- Galluogodd y cleient cartref, warws, manwerthu a chyfleuster gofal iechyd defnyddio roboteg deallusrwydd artiffisial
At ei gilydd, helpodd Shaip i drawsnewid gofyniad anodi dan do sy'n dwys o ran gwrthrychau yn biblinell strwythuredig, barod ar gyfer cynhyrchu - un sy'n gallu cefnogi llywio robotig, awtomeiddio dewis a gosod, monitro amgylcheddau clyfar, a rhyngweithio dynol-robot ar draws amgylcheddau defnyddio dan do amrywiol.
Gwnaeth Shaip anodi ystafelloedd yn y ffordd y mae ein robotiaid yn eu gweld - pob gwrthrych, pob perthynas, pob eitem fach sy'n bwysig. Roedd eu sylw i switshis, plygiau ac arwynebau adlewyrchol yn golygu nad oedd ein model canfyddiad yn baglu ar y pethau y mae'r rhan fwyaf o setiau data yn eu hanwybyddu.
— Is-lywydd, Canfyddiad Robotig