Snapの研究チームは、2022年のコンピュータービジョンおよびパターン認識会議でニューオーリンズで1週間を開始します。 今年のCVPRで、私たちのチームは、世界をリードする研究者と一緒に、画像、ビデオ、オブジェクト合成、オブジェクト操作方法のブレークスルーを示す7つの新しい学術論文を共有します。
この作業については、インターンや外部の学術機関と緊密に協力して、ビデオ合成技術を大幅に向上させてきました。 これらの開発は、最終的に、世界中のSnapchatユーザーのコミュニティに何をもたらすかを知らせることができます。
当社の論文で紹介されている作業は、以下の開発に基づいています：当社のチームは暗黙の動画表現を構築し、適度な計算要件を維持しながら、さまざまなタスクで最先端の動画合成を実現しています。 次に、このドメインに2つの新しい問題を紹介します。マルチモーダルビデオシンセサイザーと再生可能な環境です。
たとえば、CLIP-NeRFの論文は、ニューラルラディアンスフィールドの操作を研究するための共同研究でした。 ニューラルラディアンスフィールドを使用すると、高度なグラフィックパイプラインを必要とせずに、ニューラルネットワークを使用してオブジェクトをレンダリングできます。 この作業から得られた結果は、拡張現実体験で使用するためにデジタル資産を作成する方法の改善に情報を提供するのに役立ちます。 そして、このPartGlotペーパーでは、言語モデルを使用して、マシンが私たちの周りの形状やオブジェクトをよりよく理解する方法を探ります。
将来的には、この作品が当社の製品やプラットフォーム全体でコミュニティやクリエイターの創造性を解き放つ可能性があることに興奮しています。
CVPRに行きますか？
当社のチームが現場にいるので、こんにちはと言ってください！ 論文、チーム、製品の詳細については、エキスポ期間中（6月21日から6月23日）にブース＃1322に立ち寄るか、conferences@snap.comまでメールでお問い合わせください。
2022 CVPR 論文
Snap研究によって作成され、Snap研究と共同で作成されました
再生可能な環境：空間と時間におけるビデオ操作
ウィリー・メナーパーチー、ステファーン・ラシリアー、アリアクサンド・シアロヒン、クリスチャン・セオバルト、セアジー・タリャコブ、ブラディスラーブ・ゴリャニック、エリーサー・リーチー ポスターセッション：2022年6月21日火曜日午後2時30分から午後5時
ペーパーID：2345 | ポスターID：99ビー
何をすべきかを教えて、それをどのように行うかを教えてください：マルチモーダル条件付けによるビデオ合成 リゴング・ハーン、ジーアン・レン、フシン・イング・リー、フランチェスコー・バービリー 、カイル・オールシェフスキー、シャービン・ミナイー、ディミートリーズ・メタクサス、セアジー・タリャコブ
ポスターセッション：2022年6月21日火曜日午後2時30分から午後5時
ペーパーID：3594 | ポスターID：102ビー
CLIP-NeRF：ニューラルラディアンスフィールドのテキストおよび画像駆動型操作
キャン・ワング、メングレー・チャイ、ミングミング・ヒー、ドングドング・チェン、ジング・リーアウ ポスターセッション：2022年6月21日火曜日 | 午後2時30分から午後5時
ペーパーID：6311 | ポスターID：123ビー
StyleGAN-V：StyleGAN2の価格、画質、および特典を備えた連続ビデオジェネレーター
アイバン・スコーロークホードーブ、セアジー・タリャコブ、モーハーメッド・エルホーセーニー
ポスターセッション：2022年6月21日火曜日 | 午後2時30分から午後5時
ペーパーID：5802 | ポスターID：103ビー
GANインバージョンによる多様な画像のアウトペイント
イェン・カイ・チェング、チエ・ヒューバート・リン、フシン・イング・リー、ジーアン・レン、セアジー・タリャコブ、ミング・フスアン・ヤング
ポスターセッション：2022年6月23日木曜日| 午前10時〜午後12時30分
ペーパーID：5449 | ポスターID：79a
PartGlot：言語参照ゲームから形状部分のセグメンテーションを学習する
イアン・ファン、ジュイル・クー、パノス・アクリオプタス、レオニダス・ギバス、ミンヒョク・ソン
ポスターセッション：2022年6月24日金曜日午前8時30分から午前10時18分
ペーパーID：3830 | ポスターID：49a
マルチモーダルトランスは欠落したモダリティに対してロバストですか？
メングメング・マ、ジーアン・レン、ロング・ジャウ、ダビーデー・テスタガイン、シー・ペング
ポスターセッション：2022年6月24日金曜日 | 午前10時〜午後12時30分
ペーパーID：7761 | ポスターID： 212a