Forskning och robotinlärning · SCENARIO VÄGKARTA

Bygg en uppfattningsdatauppsättning och utvärderingsstudie

Organisera avkänning, kalibrering, etiketter och uthållig utvärdering för en avgränsad robotuppfattningsuppgift.

Recenserad 27 oktober 2026 · Redaktionellt lärande och projektvägledning. Professionell betyder projektdjup, inte en ackrediterad kvalifikation.

DESTINATIONEN

Vad du kommer att producera

Ett datauppsättningskort, reproducerbar utvärderare och begränsningsrapport. Gör datan återanvändbar och dess begränsningar synliga.

Innan du börjar

Startkunskap

  • Grundläggande Python, arrayer och bildbehandling.
  • Förstå skillnaden mellan en sensorobservation och marksanning.

Utrustning & miljö

Börja med licensierad befintlig data och en kontrollerad scen. Fånga identifierbara personer endast under en lämplig samtyckes- och styrningsprocess.

Ingen fast slutföringstid: använd bevisportarna nedan för att bestämma när du ska avancera. Resurslänkar öppnar botstest-katalogposten; kontrollera dess utgivardokumentation för den exakta versionen och konfigurationen.

01

Nybörjare

Definiera observationer och etiketter

Koppla en perceptionsfråga till mätbara kommentarer.

Hur det här steget fungerar

Perceptionsetiketter representerar en uppgiftsspecifik tolkning av observationer. Definiera vad som inte kan observeras lika noggrant som vad som är synligt.

Arbeta igenom ett exempel

Illustrativ studieövning · skriven av botstest

För en poseringsövning med känt objekt, jämför en helvy, en delvy och en ram med ogiltigt djup. Bestäm vilka fall som kan stödja den avsedda märkningen och vilka som kräver en okänd eller granskningsstatus.

  1. Definiera observationen och målmängden.
  2. Skriv regler för oklarhet och ocklusion.
  3. Granska ett litet urval med en annan kommentator.
Om det blir fel

Ett oobserverbart objekt är inte nödvändigtvis ett negativt exempel; hålla synligheten åtskild från kategorietiketter.

Referensbas: Geometrisk ställningsuppskattning. Exemplet och genomgången är redaktionella tillämpningar av källan.

Lär dig i den här ordningen

  1. Uppgiftsdefinitioner för detektering, pose och geometri
  2. Kamerans inneboende, ramkonventioner och tidsstämplar
  3. Märk härkomst, oklarhet och behörigheter
Läs och ansök sedan

Russ Tedrake · MIT · Kurs kapitel

Geometrisk ställningsuppskattning

Läs: Börja med kameror, djupobservationer, saknade returer och delvyer före registreringsmetoder.

Använd avkänningsantagandena för att identifiera oobserverbara fall innan du märker data eller litar på en geometrisk uppskattning.

Använd det: Märk vilka observationer som saknas, ockluderade eller utanför den valda geometriska modellen.

Omsätt det i praktiken

  1. Inspektera en liten bild eller punktmolnprov och dess etiketter.
  2. Skriv anteckningsregler för svåra och oobserverbara fall.
Producera detta

En dataordbok, anteckningsguide och provrevision.

Redo för nästa steg när...

Resurser för detta skede

Open3D →

Inspektera punktmoln och geometribearbetningsresultat innan du använder dem i en perceptionspipeline.

opencv · opencv →

Studera bildbehandling och kamerarelaterade verktyg genom dess uppströms projektdokumentation.

HOT3D →

Inspektera handobjektobservationer, kommentarer och utvärderingsantaganden för en fokuserad perceptionsstudie.

02

Mellanliggande

Konstruera läckagebeständig utvärdering

Mät modellbeteende på en meningsfullt uthållen fördelning.

Hur det här steget fungerar

Bilder från samma session kan dela dolda beroenden. Dela enligt generaliseringsanspråket snarare än bekvämlighet.

Arbeta igenom ett exempel

Illustrativ studieövning · skriven av botstest

Om anspråket är prestanda på nya infångningssessioner, håll ihop hela sessioner. Kontrollera nästan duplicerade ramar och upprepade objekt innan du använder en slumpmässig uppdelning som kan distribuera nästan identiska bevis över partitioner.

  1. Välj den avsedda uthållna varianten.
  2. Skapa ett reproducerbart delat manifest.
  3. Rapportera fel efter scen och observationstillstånd.
Om det blir fel

Oväntat utmärkta utvärderingsresultat bör utlösa en läckagerevision innan ett starkare modellkrav.

Referensbas: Korsvalidering: Utvärdera Estimatorprestanda. Exemplet och genomgången är redaktionella tillämpningar av källan.

Lär dig i den här ordningen

  1. Scen-, objekt- och sessionsuppdelningar
  2. Kalibreringskvalitet och sensorinriktning
  3. Precisions-/återkallnings- eller uppgiftslämpliga feldefinitioner
Läs och ansök sedan

Omsätt det i praktiken

  1. Dela upp efter fångstsession eller objekt där uppgiften kräver det.
  2. Jämför en enkel baslinje på normala, ockluderade och förskjutna observationer.
Producera detta

En versionerad datamängdsuppdelning och baslinjeutvärderingsanteckningsbok.

Redo för nästa steg när...

Resurser för detta skede

BridgeData V2 →

Inspektera en manipulationsdatauppsättning och dess insamlingsförhållanden innan du utformar utbildnings- och utvärderingsdelar.

DROID →

Studera ett arbetsflöde för manipulation av datainsamling och dess utformning och miljöantaganden.

apriltag · AprilRobotics →

Utforska fiduciell detektering och poseringsobservationer med känd markörgeometri och kamerakalibrering.

03

Professionell

Släpp en datauppsättning med en ärlig omfattning

Gör datan återanvändbar och dess begränsningar synliga.

Hur det här steget fungerar

En återanvändbar datauppsättning förklarar hur råobservationer blev frigivna prover. Bevara härkomst, konventioner och begränsningar med data.

Arbeta igenom ett exempel

Illustrativ studieövning · skriven av botstest

Välj en släppt episod eller bild och rekonstruera dess infångningssession, kalibrering, bearbetning och etikettbeslut. Be en kollega att återskapa utvärderingen med endast den publicerade metadatan.

  1. Skriv en dataordbok och behörighetsnotering.
  2. Beslut om versionsbearbetning och anteckningar.
  3. Publicera utvärderaren och distributionsgränserna.
Om det blir fel

En datauppsättningsmapp med namnlösa transformeringar och odokumenterade etiketter kan inte stödja tillförlitlig återanvändning.

Referensbas: LeRobotDataset v3.0. Exemplet och genomgången är redaktionella tillämpningar av källan.

Lär dig i den här ordningen

  1. Dataset dokumentation och användningsrättigheter
  2. Sensor- och scendistributionsrapportering
  3. Modellera förtroende, drift och nedströms konsekvenser
Läs och ansök sedan

Hugging Face · LeRobot · Referensdokumentation

LeRobotDataset v3.0

Läs: Inspektera datasetstrukturen och metadata innan du ändrar eller kombinerar episoder.

Använd datastrukturen för att göra episoder, observationer, handlingar och bearbetning av härkomst inspekterbara.

Använd det: Publicera dataorganisation, versioner och härkomst så att en annan forskare kan rekonstruera en episod.

Omsätt det i praktiken

  1. Förbered ett datakort med insamling, bearbetning och delade detaljer.
  2. Låt en andra forskare återge utvärderingen från den släppta metadatan.
Producera detta

Ett datauppsättningskort, reproducerbar utvärderare och begränsningsrapport.

Redo för nästa steg när...

Resurser för detta skede

Open X-Embodiment →

Undersök demonstrationsdata, metadata, licenser och handlingskonventioner med flera utföranden.

Objaverse →

Utforska objekttillgångar med härkomst- och licenskontroller innan du inkluderar dem i simulering.

Rerun →

Visualisera rumsliga observationer och jämför dem med modell- och banautgångar.

Vanliga fallgropar

  • Dela slumpmässigt intilliggande videorutor och anropa resultatet för generalisering.
  • Använda renderad eller mänsklig-videodata som om det vore robot-action mark sanning.

Vart ska man gå härnäst

Utvidga till manipulation eller industriell inspektion med samma data och utvärderingskontrakt.

Utforska andra forskning vägar →