Η ερευνητική ομάδα του Snap ξεκινά την εβδομάδα στη Νέα Ορλεάνη στο συνέδριο Computer Vision and Pattern Recognition 2022. Φέτος στο CVPR, η ομάδα μας θα μοιραστεί επτά νέες ακαδημαϊκές εργασίες, μαζί με τους κορυφαίους ερευνητές στον κόσμο, που παρουσιάζουν ανακαλύψεις σε μεθόδους σύνθεσης εικόνας, βίντεο, σύνθεσης αντικειμένων και χειρισμού αντικειμένων.
Έχουμε συνεργαστεί στενά με ασκούμενους και εξωτερικά ακαδημαϊκά ιδρύματα σε αυτήν την εργασία για να επιτύχουμε σημαντικά κέρδη στην τεχνολογία σύνθεσης βίντεο. Αυτές οι εξελίξεις μπορούν τελικά να ενημερώσουν τι φέρνουμε στην κοινότητά μας των Snapchatters σε όλο τον κόσμο.
Το έργο που παρουσιάζεται στις εργασίες μας βασίζεται στις ακόλουθες εξελίξεις: Η ομάδα μας έχει δημιουργήσει σιωπηρές παρουσιάσεις βίντεο, με αποτέλεσμα τη σύνθεση βίντεο τελευταίας τεχνολογίας σε μια ποικιλία εργασιών, διατηρώντας παράλληλα μέτριες υπολογιστικές απαιτήσεις. Στη συνέχεια εισάγουμε δύο νέα προβλήματα στον τομέα: πολυτροπική σύνθεση βίντεο και περιβάλλοντα με δυνατότητα αναπαραγωγής.
Για παράδειγμα, η εργασία CLIP-NeRF ήταν μια συλλογική ερευνητική προσπάθεια για τη μελέτη του χειρισμού των πεδίων Νευρωνικής Ακτινοβολίας. Τα πεδία νευρωνικής ακτινοβολίας καθιστούν δυνατή την απόδοση αντικειμένων χρησιμοποιώντας νευρωνικά δίκτυα, χωρίς να χρειάζονται εξελιγμένες σωληνώσεις γραφικών. Τα ευρήματα από αυτήν την εργασία μπορούν να βοηθήσουν στην ενημέρωση για βελτιώσεις στους τρόπους με τους οποίους δημιουργούνται ψηφιακά στοιχεία για χρήση σε εμπειρίες επαυξημένης πραγματικότητας. Και, αυτή η εργασία PartGlot διερευνά πώς οι μηχανές μπορούν να κατανοήσουν καλύτερα σχήματα και αντικείμενα γύρω μας χρησιμοποιώντας γλωσσικά μοντέλα.
Είμαστε ενθουσιασμένοι με τις δυνατότητες αυτής της εργασίας να ξεκλειδώσει τη δημιουργικότητα της κοινότητας και των δημιουργών μας στα προϊόντα και τις πλατφόρμες μας στο μέλλον.
ΣΚΟΠΕΥΕΤΕ ΝΑ ΠΑΤΕ ΣΤΟ CVPR;
Η ομάδα μας θα είναι επί τόπου, οπότε ελάτε να πείτε ένα γεια! Αν θέλετε να μάθετε περισσότερα για τις εργασίες, την ομάδα και τα προϊόντα μας, επισκεφθείτε το περίπτερο #1322 κατά τη διάρκεια της Έκθεσης (21 Ιουνίου - 23 Ιουνίου) ή στείλτε email στο conferences@snap.com
ΕΡΓΑΣΙΕΣ CVPR 2022
Γράφτηκε από και σε συνεργασία με τη Snap Research
Περιβάλλοντα με δυνατότητα αναπαραγωγής: Χειρισμός βίντεο σε χώρο και χρόνο
Willi Menapace, Stéphane Lathuilière, Aliaksandr Siarohin, Christian Theobalt, Sergey Tulyakov, Vladislav Golyanik, Elisa Ricci Συνεδρία αφίσας: Τρίτη 21 Ιουνίου 2022 14:30 - 17:00
Αναγνωριστικό εργασίας: 2345 | Αναγνωριστικό αφίσας: 99b
Δείξε μου τι και πες μου πώς: Σύνθεση βίντεο μέσω πολυτροπικής ρύθμισης Ligong Han, Jian Ren, Hsin-Ying Lee, Francesco Barbieri, Kyle Olszewski, Shervin Minaee, Δημήτρης Μεταξάς, Sergey Tulyakov
Συνεδρία αφίσας: Τρίτη 21 Ιουνίου 2022 14:30 – 17:00
Αναγνωριστικό εργασίας: 3594 | Αναγνωριστικό αφίσας: 102b
CLIP-NeRF: Χειρισμός πεδίων νευρωνικής ακτινοβολίας με γνώμονα το κείμενο και την εικόνα
Can Wang, Menglei Chai, Mingming He, Dongdong Chen, Jing Liao Συνεδρία αφίσας: Τρίτη 21 Ιουνίου 2022 | 14:30 - 17:00
Αναγνωριστικό εργασίας: 6311 | Αναγνωριστικό αφίσας: 123b
StyleGAN-V: Μια συνεχής δημιουργία βίντεο με την τιμή, την ποιότητα εικόνας και τα προνόμια του StyleGAN2
Ivan Skorokhodov, Sergey Tulyakov, Mohamed Elhoseiny
Συνεδρία αφίσας: Τρίτη 21 Ιουνίου 2022 | 14:30 – 17:00
Αναγνωριστικό εργασίας: 5802 | Αναγνωριστικό αφίσας: 103b
Ζωγραφική πέρα από τα όρια διαφοροποιημένης εικόνας μέσω GAN Inversion
Yen-Chi Cheng, Chieh Hubert Lin, Hsin-Ying Lee, Jian Ren, Sergey Tulyakov, Ming-Hsuan Yang
Συνεδρία αφίσας: Πέμπτη 23 Ιουνίου 2022 | 10:00 π.μ. -12:30 μ.μ.
Αναγνωριστικό εργασίας: 5449 | Αναγνωριστικό αφίσας: 79a
PartGlot: Εκμάθηση καταμερισμού τμημάτων σχήματος από γλωσσικά παιχνίδια αναφοράς
Ian Huang,Juil Koo, Panos Achlioptas, Leonidas Guibas, Minhyuk Sung
Συνεδρία αφίσας: Παρασκευή 24 Ιουνίου 2022 8:30 π.μ. - 10:18 π.μ.
Αναγνωριστικό εργασίας: 3830 | Αναγνωριστικό αφίσας: 49a
Είναι οι πολυτροπικοί μετασχηματιστές ανθεκτικοί στην έλλειψη τροπικότητας;
Mengmeng Ma, Jian Ren, Long Zhao, Davide Testuggine, Xi Peng
Συνεδρία αφίσας: Παρασκευή 24 Ιουνίου 2022 | 10:00 π.μ. - 12:30 μ.μ.
Αναγνωριστικό εργασίας: 7761 | Αναγνωριστικό αφίσας: 212a