Snap의 리서치 팀은 뉴올리언즈에서 한 주의 2022년 컴퓨터 비전 및 패턴 인식 컨퍼런스를 시작했습니다. 올해 CVPR에서 당사 팀은 이미지, 동영상, 객체 합성, 객체 조작 방법의 돌파구를 보여주는 7가지 새로운 학술 논문을 전 세계 최고 연구자들과 공유할 것입니다.
당사는 이 작업에 관해 내부 및 외부 학술 기관과 긴밀히 협력하여 비디오 합성 기술에서 상당한 소득을 거두었습니다. 이러한 발전은 궁극적으로 당사가 전 세계 Snapchat 사용자 커뮤니티에 제공하는 것에 반영될 수 있습니다.
당사 팀은 내재적 비디오 표시를 구축하였으며, 그 결과 알맞은 계산 요구 사항을 유지하면서 다양한 작업상에서 최첨단 비디오 합성을 구현했습니다. 당사 논문에 제시된 작업은 이러한 개발에 기초한 것입니다. 그런 다음 이 분야의 두 가지 새로운 문제인 멀티 모드 비디오 합성 및 재생 가능 환경을 소개합니다.
예를 들어, CLIP-NeRF 논문은 신경 방사 필드 조작을 연구하는 공동 연구 활동이었습니다. Nealal Radicance 필드는 정교한 그래픽 파이프 라인을 필요로 하지 않으면서 신경 네트워크를 사용하여 객체 렌더링을 가능하게 합니다. 이 작업의 발견 사실은 증강 현실 경험에서 사용하도록 디지털 자산이 생성되는 방식을 개선하는 데 반영될 수 있습니다. 그리고 이 PartGlot 논문은 기계가 언어 모델을 이용해 우리 주변의 모양과 물체를 더 잘 이해하는 방법을 탐구합니다.
미래에 우리 제품과 플랫폼 전반에 걸쳐 커뮤니티와 제작자의 창의성을 개방하는 이 작업의 잠재력을 기쁘게 생각합니다.
CVPR에 가실 예정입니까?
당사 팀이 현장에 있을 예정이므로 저희에게 인사해 주시기 바랍니다! 논문, 팀, 제품에 관해 자세히 알아보려면 엑스포(6월 21일 - 6월 23일) 기간 중에 부스 #1322를 방문하거나 conferences@snap.com으로 이메일을 보내주시기 바랍니다.
2022 CVPR 논문들
Snap 리서치와 협력하여 작성함
재생 가능한 환경: 공간과 시간 내의 비디오 조작
Willi Menapace, Stéphane Lathuilière, Aliaksandr Siarohin, Christian Theobalt, Sergey Tulyakov, Vladislav Golyanik, Elisa Ricci 게시자 세션: 2022년 6월 21일 화요일 2:30PM – 5:00PM
논문 ID: 2345 | 게시자 ID: 99b
보여주고 방법 알려주기: 멀티 모드 컨디셔닝 Ligong Han, Jian Ren, Hsin-Ying Lee, Francesco Barbieri, Kyle Olszewski, Shervin Minaee, Dimitris Metaxas, Sergey Tulyakov
게시자 세션: 2022년 6월 21일 화요일 2:30PM - 5:00PM
논문 ID: 3594 | 게시자 ID: 102b
CLIP-NeRF: 신경 방사 필드의 텍스트 이미지 및 이미지 주도 조작
Can Wang, Menglei Chai, Mingming He, Dongdong Chen, Jing Liao 게시자 세션: 2022년 6월 21일 화요일 | 2:30PM – 5:00PM
논문 ID: 6311 | 게시자 ID: 123b
StyleGAN-V: 가격, 이미지 품질, StyleGAN2의 이점을 갖춘 연속 비디오 생성기
Ivan Skorokhodov, Sergey Tulyakov, Mohamed Elhoseiny
게시자 세션: 2022년 6월 21일 화요일 | 2:30PM - 5:00PM
논문 ID: 5802 | 게시자 ID: 103b
GAN Inversion을 통한 다양한 이미지 아웃페인팅
Yen-Chi Cheng, Chieh Hubert Lin, Hsin-Ying Lee, Jian Ren, Sergey Tulyakov, Ming-Hsuan Yang
게시자 세션: 2022년 6월 23일 목요일 | 10:00AM-12:30PM
논문 ID: 5449 | 게시자 ID: 79a
Partglot : 언어 참조 게임에서 학습 형성 부분 세분화
Ian Huang, Juil Koo, Panos Achlioptas, Leonidas Guibas, Minhyuk Sung
게시자 세션: 2022년 6월 24일 금요일 8:30am - 10:18am
논문 ID: 3830 | 게시자 ID: 49a
멀티모드 변환기는 누락된 모드에 강건한가요?
Mengmeng Ma, Jian Ren, Long Zhao, Davide Testuggine, Xi Peng
게시자 세션: 2022년 6월 24일 금요일 | 10:00am - 12:30PM
논문 ID: 7761 | 게시자 ID: 212a