Echipa de cercetare a Snap începe săptămâna în New Orleans la conferința Computer Vision and Pattern Recognition 2022. La ediția de anul acesta a CVPR, echipa noastră va prezenta alături de unii dintre cei mai importanți cercetători din lume noi lucrări academice care expun progresele în materie de imagine, video, sintetizarea obiectelor și de metode de manipulare a obiectelor.
Am lucrat îndeaproape cu stagiari și cu instituțiile academice externe la aceste lucrări pentru a îmbunătăți semnificativ tehnologia de sinteză video. Aceste evoluții pot, în definitiv, dezvălui ceea ce oferim comunității de Snapchatteri din întreaga lume.
Activitatea prezentată în lucrările noastre se bazează pe următoarele evoluții: echipa noastră a construit reprezentări video implicite care au drept rezultat sinteza video de ultimă generație pe o varietate de sarcini, menținând în același timp cerințele computaționale reduse. Apoi prezentăm două noi probleme în domeniu: sinteza video multimodal și medii executabile.
De exemplu, lucrarea CLIP-NeRF a reprezentat un efort de cercetare comun pentru a studia manipularea câmpurilor de luminanță neurală. Câmpurile de luminanță neurală fac posibilă redarea obiectelor folosind rețele neurale, fără să fie nevoie de conducte grafice sofisticate. Constatările din această lucrare pot contribui la îmbunătățirea modului în care sunt create activele digitale ce vor fi folosite în experiențe de realitate augmentată Iar această lucrare PartGlot explorează modul în care dispozitivele pot înțelege mai bine formele și obiectele din jurul nostru folosind modele lingvistice.
Suntem încântați de potențialul pe care aceste eforturi le au ca, pe viitor, să încurajeze creativitatea comunității și a creatorilor noștri în produsele sau pe platformele noastre.
MERGI LA CVPR?
Echipa noastră va fi acolo, așa că vino să ne saluți! Dacă vrei să afli mai multe despre lucrările, echipa și produsele noastre, vino la standul nr. 1322 pe perioada expoziției (21 iunie - 23 iunie) sau trimite-ne un e-mail la conferences@snap.com
LUCRĂRI CVPR 2022
Scrise de și în colaborare Snap Research
Playable Environments: Video Manipulation in Space and Time
Willi Menapace, Stéphane Lathuilière, Aliaksandr Siarohin, Christian Theobalt, Sergey Tulyakov, Vladislav Golyanik, Elisa Ricci Sesiune de postere: marți, 21 iunie, 2022 14:30 – 17:00
ID lucrare: 2345 | ID Poster: 99b
Show Me What and Tell Me How: Video Synthesis via Multimodal Conditioning Ligong Han, Jian Ren, Hsin-Ying Lee, Francesco Barbieri, Kyle Olszewski, Shervin Minaee, Dimitris Metaxas, Sergey Tulyakov
Sesiune de postere: marți, 21 iunie 2022 14:40 - 17:00
ID lucrare: 3594 |ID poster ID: 102b
CLIP-NeRF: Text-and-Image Driven Manipulation of Neural Radiance Fields
Can Wang, Menglei Chai, Mingming He, Dongdong Chen, Jing Liao Sesiune de postere: marți, 21 iunie, 2022 | 14:30 – 17:00
ID lucrare: 6311 | Poster ID: 123b
StyleGAN-V: A Continuous Video Generator with the Price, Image Quality and Perks of StyleGAN2
Ivan Skorokhodov, Sergey Tulyakov, Mohamed Elhoseiny
Sesiune de postere: marți, 21 iunie 2022 | 14:30 – 17:00
ID lucrare: 5802 | Poster ID: 103b
Diverse Image Outpainting via GAN Inversion
Yen-Chi Cheng, Chieh Hubert Lin, Hsin-Ying Lee, Jian Ren, Sergey Tulyakov, Ming-Hsuan Yang
Sesiune de postere: joi, 23 iunie 2022 | 10:00-12:30
ID lucrare: 5449 | Poster ID: 79a
PartGlot: Learning Shape Part Segmentation from Language Reference Games
Ian Huang, Juil Koo, Panos Achlioptas, Leonidas Guibas, Minhyuk Sung
Sesiune de postere: vineri, 24 iunie 2022 8:30 - 10:18
ID lucrare: 3830 | Poster ID: 49a
Are Multimodal Transformers Robust to Missing Modality?
Mengmeng Ma, Jian Ren, Long Zhao, Davide Testuggine, Xi Peng
Sesiune de postere: vineri, 24 iunie 2022 | 10:00 - 12:30
ID lucrare: 7761 | Poster ID: 212a