Date video egocentrice pentru VLA și modele mondiale
Licențiați videoclipul egocentric cu activitatea umană pentru pre-antrenament VLA și modele ale lumii — captură RGB/4K montată pe cap cu adnotări de sarcini, acțiuni și obiecte. Solicitați o mostră de la Shaip.
Specificații ale setului de date
| Echipe de cumpărători țintă | Șef al departamentului de învățare robotică; Director al departamentului de IA întrupată; Lider de date IA; Cercetare model de bază |
| Sarcini reprezentative | Gătit, curățenie, organizare, manipularea uneltelor, ambalare, activități de birou și depozit |
| Captură / Modalități | Video RGB/4K montat pe cap; stereo opțional, audio, IMU, urmărirea privirii și a mâinii |
| Adnotări / Metadate | Limitele sarcinilor și subsarcinilor, segmentele de acțiune, interacțiunile obiectelor, narațiunea, poziția mâinii, indicatorii de succes și calitate |
| Formate de livrare | Metadate MP4 + JSON/Parquet; card opțional pentru setul de date și divizare pentru antrenament/validare/testare |
| Scară (ilustrativă)* | 2,000–10,000 de ore de captură |
| Participanți / Operatori | 500–4,000 de participanți |
| Sarcini / Scenarii | 50–250 de sarcini |
| Obiecte / Situri / Vizualizări | 10–100 de medii |
| Domeniul de aplicare recomandat al misiunii | 100–300 de ore în 10–25 de sarcini și 3–10 medii |
Programul de inteligență artificială fizică al lui Shaip se întinde pe 30,000 de ore de videoclipuri egocentrice și peste 4,000 de participanți.
Vizualizați studiul de caz aferent →Unde este utilizat acest set de date
Acest set de date video egocentric este creat pentru echipe care pre-antrenează modele viziune-limbaj-acțiune (VLA), modele ale lumii și politici de învățare a roboților din experiența umană la persoana întâi. Laboratoarele de modelare a fundațiilor, companiile de robotică umanoidă și echipele de cercetare în domeniul inteligenței artificiale întruchipate utilizează acest set de date video la persoana întâi ca date despre activitatea umană pentru recunoașterea acțiunilor, înțelegerea sarcinilor, conectarea mână-obiect și transferul de abilități om-robot. Dacă obțineți date de antrenament pentru inteligența artificială întruchipată, date despre camere montate pe cap sau un set de date de învățare a roboților capturate în case, bucătării și locuri de muncă reale, acest set de date oferă videoclipuri egocentrice adnotate la scară de pre-antrenament.
Solicitați o mostră a setului de date video despre activitatea umană egocentrică
Spuneți-ne despre produsul robotic sau sistemul de inteligență artificială fizică pe care îl construiți și vă vom răspunde cu acces la mostre, specificații și o propunere potrivită sarcinii dumneavoastră.
„ * ” indică câmpurile obligatorii