Memperkenalkan Lensa Baru, Fitur Platform, dan Kemampuan untuk Spectacles
Bagi developer, kami yakin bahwa akses kamera membuka potensi penuh AR. Hari ini, kami meluncurkan Snap OS v5.58, yang mencakup Lensa baru yang menampilkan kehebatan kamera Spectacles dan SnapML, serta fitur dan kemampuan platform untuk membantumu membangun dan bereksperimen dengan Lensa Spectacles secara lebih baik.
Lensa Piano Tutormenghadirkan instruktur pribadi dan kursus interaktif di ujung jarimu. Didukung oleh SnapML, Lensa ini menggunakan model machine learning kustom untuk mengidentifikasi dan melacak berbagai piano, melapisi not pada tuts secara real-time. Ini membantumu membangun kesadaran akan tata letak keyboard dan mengoordinasikan gerakanmu. Menggunakan model ML kustom lainnya, Lensa ini dapat mendeteksi seberapa baik permainanmu dan memberikan masukan secara real-time.
Lensa Ball Gameadalah game yang mengubah bola fisik menjadi controller, sehingga memudahkan dan menyenangkan untuk melatih keterampilanmu melalui serangkaian tantangan yang berbeda. Menggunakan model pelacakan ML kustom, Lensa ini mengikuti gerakan bola, memungkinkanmu berinteraksi dengan elemen fisik dan digital secara bersamaan dan menguasai tendangan yang sempurna.
Untuk membuka kemampuan bereksperimen lebih jauh dalam pengembangan, kami memperkenalkan API baru yang memudahkan penggunaan data kamera dan Model Bahasa Besar (LLM) multi-modal yang dihosting di cloud. Dengan menggunakan pengaturan developer izin yang diperluas dan Fetch API baru kami, kamu sekarang dapat membuat Lensa yang berinteraksi langsung dengan LLM multi-modal yang dihosting.
Kami juga memperkenalkanImage Spatialization API, yang memanfaatkan AI generatif untuk mengubah format gambar 2D umum menjadi 3D. Developer sekarang dapat memasukkan API ini ke dalam Lensa mereka untuk menciptakan efek 3D yang menakjubkan dengan kedalaman yang begitu realistis sehingga kamu akan merasa seperti benar-benar berada di momen tersebut.
Kemampuan platform tambahan meliputi:
Jangkar Spasial: Menjangkarkan objek digital ke lokasi tertentu dalam Lensa dan kembali lagi nanti
Lokasi Dasar:Dapatkan akses ke koordinat GPS Spectacles-mu untuk menciptakan pengalaman luar ruangan yang lebih realistis
Mode Tata Letak:Impor gambar dari ponselmu menggunakan aplikasi Spectacles dan spasialisasikan untuk pengalaman 3D yang menawan
Penayangan Web: Seret dan lepas halaman web sematan langsung ke Lensamu
Buka Kunci Lensa:Buka kunci Lensa yang telah dikirimkan ke Spectacles, tetapi belum ditambahkan ke kategori atau Jelajah Lensa, hanya dengan membagikan URL-nya
Untuk merasakan Lensa ini dan mulai membangun menggunakan fitur-fitur baru, perbarui ke versi terbaru Snap OS dan Aplikasi Spectacles menggunakanpetunjuk ini. Kami tidak sabar untuk melihat hasil karyamu!