Vai al contenuto
AI.info

Ricerca

Click3R: ricostruzione stereo 3D interattiva con clic sparsi di corrispondenza

Nonostante gli straordinari progressi, gli attuali modelli feed-forward per la ricostruzione 3D producono una singola previsione non modificabile. Quando questi modelli falliscono, non esiste alcun…

Click3R: ricostruzione stereo 3D interattiva con clic sparsi di corrispondenza
arXiv
2611.12875
Pubblicato
2026-11-09
Autori
Hao Gu, Jin Yao, Zezhou Cheng

Abstract degli autori

Nonostante gli straordinari progressi, gli attuali modelli feed-forward per la ricostruzione 3D producono una singola previsione non modificabile. Quando questi modelli falliscono, non esiste alcun meccanismo per correggerne gli errori. Per superare questo limite, presentiamo Click3R, un framework per la correzione geometrica interattiva dei modelli feed-forward tramite clic sparsi di corrispondenza forniti da esseri umani. Dati una coppia di immagini e un piccolo insieme di corrispondenze tra punti nelle due viste fornite da un utente, Click3R integra vincoli geometrici nelle reti di ricostruzione 3D tramite un adattatore leggero per le corrispondenze tra punti, consentendo al modello di risolvere ambiguità in scenari complessi, come quelli con texture ripetitive, strutture simmetriche, grandi variazioni del punto di vista o regioni prive di texture. Per valutare la ricostruzione interattiva, allestiamo un benchmark impegnativo, progettato specificamente per mettere in luce le modalità di fallimento degli attuali metodi feed-forward di ricostruzione 3D. Gli esperimenti mostrano che Click3R riduce l’errore di ricostruzione con un solo clic di corrispondenza, migliorando le prestazioni sia sui benchmark standard sia su quelli da noi allestiti. I nostri risultati evidenziano che l’interazione umana, anche se limitata a pochi clic, offre un meccanismo efficace e pratico per correggere gli errori di ricostruzione geometrica.

Il riassunto di questo paper è disponibile solo in inglese: leggilo nella pagina inglese.

Leggi il paper originale su arXiv