Het onderzoeksteam van Snap trapt de week af in New Orleans op de 2022 Computer Vision and Pattern Recognition Conference. Dit jaar zal ons team op de CVPR, samen met 's werelds meest vooraanstaande onderzoekers, zeven nieuwe academische papers delen, die doorbraken laten zien in beeld-, video-, objectsynthese- en objectmanipulatiemethoden.
Wij hebben voor dit project nauw samengewerkt met stagiaires en externe academische instellingen om aanzienlijke vooruitgang te boeken op het gebied van de videosynthese-technologie. Deze ontwikkelingen kunnen uiteindelijk van invloed zijn op wat wij onze gemeenschap van Snapchatters over de hele wereld te bieden hebben.
Het in onze papers voorgestelde werk is gebaseerd op de volgende ontwikkelingen: Ons team heeft impliciete video-representaties gebouwd, die resulteren in state-of-the-art videosynthese op een verscheidenheid van taken, met behoud van bescheiden computationele eisen. Daarna stellen we twee nieuwe problemen in het domein voor: multimodale videosynthese en speelbare omgevingen.
De CLIP-NeRF was bijvoorbeeld een gezamenlijke onderzoeksinspanning om de manipulatie van Neural CLIP-NeRF te bestuderen. Neural Radiance fields maken het mogelijk om voorwerpen te renderen met behulp van neurale netwerken, zonder dat daarvoor gesofisticeerde grafische pijplijnen nodig zijn. De bevindingen van dit project kunnen bijdragen tot verbeteringen in de manier waarop digitale middelen worden gecreëerd voor gebruik in augmented reality-ervaringen. En, in dit PartGlot paper wordt onderzocht hoe machines vormen en voorwerpen om ons heen beter kunnen begrijpen met behulp van taalmodellen.
Wij zijn enthousiast over het potentieel van dit project om in de toekomst de creativiteit van onze gemeenschap en van onze makers op al onze producten en platforms te ontplooien.
GA JE NAAR CVPR?
Ons team zal ter plaatse zijn, dus kom ons gedag zeggen! Als u meer wilt weten over onze papers, ons team, en onze producten, kom dan langs op stand #1322 tijdens de Expo (21 juni - 23 juni) of stuur een e-mail naar conferences@snap.com
2022 CVPR PAPERS
Geschreven door en in samenwerking Snap Research
Speelbare omgevingen: Video Manipulatie in Ruimte en Tijd
Willi Menapace, Stéphane Lathuilière, Aliaksandr Siarohin, Christian Theobalt, Sergey Tulyakov, Vladislav Golyanik, Elisa Ricci Poster Sessie: dinsdag 21 juni 2022 2:30pm - 5:00pm
Paper ID: 2345 | Poster ID: 99b
Laat me zien wat en vertel me hoe: Video Synthese via Multimodale Conditionering Ligong Han, Jian Ren, Hsin-Ying Lee, Francesco Barbieri, Kyle Olszewski, Shervin Minaee, Dimitris Metaxas, Sergej Tulyakov
Poster Sessie: dinsdag 21 juni 2022 2:30 pm – 5:00 p.m.
Paper ID: 3594 | Poster ID: 102b
CLIP-NeRF: Text-and-Image Driven Manipulation of Neural Radiance Fields
Can Wang, Menglei Chai, Mingming He, Dongdong Chen, Jing Liao Poster Sessie: Dinsdag, 21 juni 2022 | 2:30PM – 5:00PM
Paper ID: 6311 | Poster ID: 123b
StyleGAN-V: Een Continue Video Generator met prijs, Image Quality en Perks van StyleGAN2
Ivan Skorokhodov, Sergey Tulyakov, Mohamed Elhoseiny
Poster Sessie: Dinsdag, 21 juni 2022 | 2:30PM – 5:00PM
Paper ID: 5802 | Poster ID: 103b
Diverse Image Outpainting via GAN Inversion
Yen-Chi Cheng, Chieh Hubert Lin, Hsin-Ying Lee, Jian Ren, Sergey Tulyakov, Ming-Hsuan Yang
Poster Sessie: donderdag 23 juni 2022 | 10:00AM-12:30 PM
Paper ID: 5449 | Poster ID: 79a
PartGlot: Learning Shape Part Segmentation van Language Games
Ian Huang,Juil Koo, Panos Achlioptas, Leonidas Guibas, Minhyuk Sung
Poster Sessie: Vrijdag 24 juni 2022 8:30 AM - 10:18 AM
Paper ID: 3830 | Poster ID: 49a
Zijn Multimodale Transformatoren bestand tegen Missing Modality?
Mengmeng Ma, Jian Ren, Long Zhao, Davide Testuggine, Xi Peng
Poster Sessie: vrijdag 24 juni 2022 | 10:00AM - 12:30 PM
Paper ID: 7761 | Poster ID: 212a