В центре внимания: исследования Snap на CVPR 2022

Исследовательская команда Snap начинает свою неделю работы на конференции 2022 Computer Vision and Pattern Recognition Conference в Новом Орлеане. В этом году на конференции CVPR наша команда в компании ведущих мировых исследователей представит семь новых научных работ, демонстрирующих прорыв в сфере синтеза изображений, видеоматериалов и объектов, а также в сфере объектной манипуляции.

В рамках сотрудничества наших собственных специалистов и представителей внешних научных учреждений обеспечено существенное развитие технологий видеосинтеза. Материалы, относящиеся к этому развитию, предоставляют принципиальную информацию о том, что именно мы предлагаем пользователям сообщества снапчаттеров по всему миру.

Работа представленная в наших материалах, отражает перспективные направления развития следующим образом: наша команда подготовила косвенные видеопрезентации, в которых отражено применение новаторских технологий видеосинтеза к выполнению различных задач без расширения ограниченного спектра требований к вычислениям. Мы вводим в нашу функциональную область две новые проблемы — смешанный видеосинтез и практичные среды.

Например, документ CLIP-NeRF явился совместным исследовательским мероприятием по изучению вопроса манипуляции объектами в полях нейронного излучения. Поля нейронного излучения позволяют создавать объекты с помощью нейросетей без необходимости применения сложных графических систем. Результаты этой работы создадут информационную базу для оптимизации создания цифровых объектов, предназначенных для работы с дополнительной реальностью. Работа PartGlot анализирует способы оптимизации понимания машинами форм и объектов вокруг нас через использование языковых моделей.

Мы оптимистически оцениваем потенциал этой работы и в будущем ожидаем всплеска творчества среди представителей нашего сообщества, использующего соответствующие платформы.

ВЫ ТОЖЕ БУДЕТЕ НА CVPR?

Приглашаем вас к стенду нашей команды! Чтобы получить больше информации о наших работах, материалах и продуктах, посетите стенд №1322 во время выставки (с 21 по 23 июня) или вышлите соответствующий запрос на адрес электронной почты conferences@snap.com.

МАТЕРИАЛЫ 2022 CVPR

Созданы совместно и в сотрудничестве с исследовательской командой Snap

Практичные среды: манипуляции видеообъектами в пространстве и во времени

Уилли Менапейс, Стефан Лятюильер, Аляксандр Сярохин, Кристиан Теоба, Сергей Туляков, Владислав Голяник, Элиза Риччи Стендовые доклады: вторник, 21 июня, 14:30 — 17:00

Номер материала: 2345 | Номер стендового доклада: 99b

Покажи мне, расскажи мне: видеосинтез через многомодовую адаптацию Лигонг Хан, Цзиан Рен, Син-Йин Ли, Франческо Барбиери, Кайл Ольшевский, Шервин Минай, Димитрис Метаксас, Сергей Туляков

Стендовые доклады: вторник, 21 июня 2022 года, 14:30 — 17:00

Номер материала: 3594 | Номер стендового доклада: 102b

CLIP-NeRF: манипуляция объектами в полях нейронного излучения, стимулируемая текстом и изображениями

Кан Уонг, Менгли Чай, Минминг Хе, Дондонг Чен, Дзинь Лао Стендовый доклад: вторник, 21 июня, 2022 года, 14:30 — 17:00

Номер материала: 6311 | Номер стендового доклада: 123b

StyleGAN-V: непрерывный видеогенератор с ценой, качеством изображения и фишками StyleGAN2

Иван Скороходов, Сергей Туляков, Мохамед Эльхосейни

Стендовые доклады: вторник, 21 июня 2022 года, 14:30 — 17:00

Номер материала: 5802 | Номер стендового доклада: 103b

Различные варианты отрисовки изображений через инверсию GAN

Йен-Чи Чен, Чхе Хуберт Лин, Син-Инь Ли, Цзянь Рен, Сергей Туляков, Мин-Сян Ян

Стендовые доклады: четверг, 23 июня 2022 года, 10:00 — 12:30

Номер материала: 5449 | Номер стендового доклада: 79a

PartGlot: обучение сегментации элементов форм в играх со ссылочным языком

Ян Хван, Джул Ку, Панос Ахлиоптас, Леонидас Гибас, Мин Хьюк Сун

Стендовые доклады: пятница, 24 июня 2022 года, 8:30 — 10:18

Номер материала: 3830 | Номер стендового доклада: 49a

Невосприимчивость многомодовых преобразователей к условиям отсутствия модальностей

Менменг Ма, Чан Рен, Лонг Чжао, Давид Тестуггин, Цзи Пен

Стендовые доклады: пятница, 24 июня 2022 года, 10:00 — 12:30

Номер материала: 7761 | Номер стендового доклада: 212a