Syn4D: új szintetikus adatkészlet segítheti a dinamikus 3D-s kutatásokat
A NAVER LABS Europe bemutatta a Syn4D nevű, dinamikus jelenetekhez készült multinézetű szintetikus 4D-adatkészletet. A kutatók szerint az adatbázis a 3D-s rekonstrukció, a pontkövetés és az emberi pózbecslés kutatását is támogathatja.
- A Syn4D dinamikus jelenetekhez készült multinézetű szintetikus 4D-adatkészlet.
- Kameramozgási, mélység-, sűrű követési és emberipóz-annotációkat tartalmaz.
- Bármely képpont 3D-s helyzete meghatározható tetszőleges időre és kamerára.
- A kutatók 4D-s rekonstrukción, 3D-s pontkövetésen és pózbecslésen is tesztelték.
- A bemutató az ECCV 2026 konferencia programjában szerepel.
A dinamikus jelenetek rekonstrukcióját célozza
A Syn4D olyan szintetikus adatkészlet, amelyet dinamikus jelenetek több nézőpontból történő vizsgálatához hoztak létre. A NAVER LABS Europe szerint a monokuláris videóból végzett sűrű 3D-s rekonstrukció és a mozgó jelenetek követése továbbra is fontos, nyitott kihívás a számítógépes látásban.
A kutatási terület fejlődését nehezíti, hogy kevés olyan jó minőségű adatkészlet áll rendelkezésre, amely sűrű, teljes és pontos geometriai annotációkat tartalmaz. A Syn4D ezt a hiányt kívánja kezelni szintetikus adatokkal.
Kameramozgás, mélység és emberi pózok egy helyen
Az adatkészlet tartalmazza a kameramozgás valós referenciáit, mélységtérképeket, sűrű követési adatokat és paraméteres emberipóz-annotációkat. A közlemény kiemeli, hogy a Syn4D segítségével bármely képpont 3D-s helyzete meghatározható tetszőleges időpontra és tetszőleges kameranézetre.
Ez a funkció lehetővé teszi, hogy a kutatók ugyanazt a jelenetpontot különböző időpillanatokban és kamerákból vizsgálják. A leírás alapján az adatkészlet így a térbeli és időbeli információk együttes modellezését támogathatja.
Több számítógépes látási feladaton tesztelték
A kutatók több kapcsolódó feladaton értékelték a Syn4D használhatóságát. Ezek között szerepel a 4D-s jelenetrekonstrukció, a 3D-s pontkövetés, a geometriát figyelembe vevő kameracélzás és az emberi pózbecslés.
A NAVER LABS Europe közleménye szerint a kísérleti eredmények azt mutatják, hogy az adatkészlet támogathatja a dinamikus jelenetek megértésével és a térbeli, időbeli modellezéssel kapcsolatos kutatásokat. A Syn4D bemutatása a 19. Európai Számítógépes Látás Konferencián, az ECCV-n szerepel, amelyet 2026. szeptember 8. és 12. között rendeznek meg a svédországi Malmöben.
A publikáció szerzői Zeren Jiang, Yushi Lan, Yihang Luo, Yufan Deng, Zihang Lai, Edgar Sucar, Christian Rupprecht, Iro Laina, Diane Larlus, Chuanxia Zheng és Andrea Vedaldi. A projektoldal, a kód és az adatok elérhetőségére külön hivatkozások szerepelnek a kutatási oldalon.
NAVER LABS Europe: Syn4D: a multiview synthetic 4D dataset
