Ricerca
Click3R: ricostruzione stereo 3D interattiva con clic sparsi di corrispondenza
Nonostante gli straordinari progressi, gli attuali modelli feed-forward per la ricostruzione 3D producono una singola previsione non modificabile. Quando questi modelli falliscono, non esiste alcun…

- arXiv
- 2611.12875
- Pubblicato
- 2026-11-09
- Autori
- Hao Gu, Jin Yao, Zezhou Cheng
Abstract degli autori
Nonostante gli straordinari progressi, gli attuali modelli feed-forward per la ricostruzione 3D producono una singola previsione non modificabile. Quando questi modelli falliscono, non esiste alcun meccanismo per correggerne gli errori. Per superare questo limite, presentiamo Click3R, un framework per la correzione geometrica interattiva dei modelli feed-forward tramite clic sparsi di corrispondenza forniti da esseri umani. Dati una coppia di immagini e un piccolo insieme di corrispondenze tra punti nelle due viste fornite da un utente, Click3R integra vincoli geometrici nelle reti di ricostruzione 3D tramite un adattatore leggero per le corrispondenze tra punti, consentendo al modello di risolvere ambiguità in scenari complessi, come quelli con texture ripetitive, strutture simmetriche, grandi variazioni del punto di vista o regioni prive di texture. Per valutare la ricostruzione interattiva, allestiamo un benchmark impegnativo, progettato specificamente per mettere in luce le modalità di fallimento degli attuali metodi feed-forward di ricostruzione 3D. Gli esperimenti mostrano che Click3R riduce l’errore di ricostruzione con un solo clic di corrispondenza, migliorando le prestazioni sia sui benchmark standard sia su quelli da noi allestiti. I nostri risultati evidenziano che l’interazione umana, anche se limitata a pochi clic, offre un meccanismo efficace e pratico per correggere gli errori di ricostruzione geometrica.
Il riassunto di questo paper è disponibile solo in inglese: leggilo nella pagina inglese.
Leggi il paper originale su arXiv