Karşınızda Spectacles için Yeni Lensler, Platform Özellikleri ve Beceriler
Kamera erişiminin geliştiriciler açısından AR'nin tüm potansiyelini ortaya çıkardığına inanıyoruz. Spectacles kamerasının gücünü gösteren yeni Lenslerin bulunduğu ve ayrıca Spectacles Lenslerle daha iyi kurgu ve denemeler yapmanızı sağlayacak platform özellikleri ve becerilerin sunulduğu Snap OS v5.58'i bugün piyasaya sürüyoruz.
Piyano Öğretmeni Lensi, kişisel bir eğitmeni ve interaktif kursları parmaklarının ucuna getiriyor. SnapML destekli Lens, çeşitli piyanoları tanımlamak ve izlemek için özel bir makine öğrenimi modeli kullanıyor; notaları gerçek zamanlı olarak tuşların üzerine yerleştiriyor. Bu, klavye düzeni hakkında farkındalık geliştirmene ve hareketlerini buna göre koordine etmene yardımcı oluyor. Lens, bir başka özel makine öğrenimi modeli kullanarak ne kadar iyi çaldığını algılayabiliyor ve gerçek zamanlı geri bildirim sağlıyor.
Top Oyunu Lensi, fiziksel bir topu bir kumanda cihazına dönüştüren ve bir dizi farklı zorlukla becerilerini geliştirmeyi kolay ve eğlenceli hale getiren bir oyun. Lens, özel bir makine öğrenimi izleme modeli kullanarak topun hareketlerini takip ediyor; fiziksel ve dijital unsurlarla birlikte etkileşime geçmene ve mükemmel bir vuruş yapmana yardımcı oluyor.
Geliştirme sürecinde daha fazla deneme yapma imkanı sağlamak için, kamera verilerini ve bulutta barındırılan çok modlu Büyük Dil Modellerini (LLM) kullanmayı kolaylaştıran yeni API'leri kullanıma sunuyoruz. Genişletilmiş izinlere sahip geliştirici ayarlarını ve yeni Fetch API'mizi kullanarak artık barındırılan çok modlu LLM'lerle doğrudan arayüz kuran Lensler geliştirebilirsin.
Ayrıca, yaygın 2B görüntü formatlarını, üretken yapay zeka desteğiyle 3B'ye dönüştüren yeni bir Görüntü Mekansallaştırma API'sini de kullanıma sunuyoruz. Geliştiriciler artık bu API'yi Lens'lerine entegre ederek izleyene anın içindeymiş hissi veren, son derece gerçekçi bir derinliğe sahip çarpıcı 3B efektler oluşturabilecekler.
Ek platform özellikleri şunları içeriyor:
Mekansal Çapalar: Dijital nesneleri Lens içindeki belirli konumlara sabitleme ve daha sonra bu konumlara dönme
Temel Konum: Daha gerçekçi dış mekan deneyimleri oluşturmak için Spectacles'ının GPS koordinatlarına erişme
Düzen Modu: Spectacles uygulamasını kullanarak telefonundan görüntüleri içeri aktarma ve büyüleyici bir 3B deneyim için bunları mekansal derinlik katma
Web Görünümü: Web sayfalarını doğrudan Lens'lerine sürükleyip bırakma
Lens Kilidini Kaldır: Henüz bir kategoriye veya Lens Gezgini'ne eklenmemiş bir Lens'i, sadece URL'sini paylaşarak erişime açma
Bu Lensleri deneyimlemek ve yeni özellikleri kullanarak oluşturmaya başlamak için aşağıdaki talimatları kullanarak Snap OS ve Spectacles Uygulaması'nın en son sürümüne güncelle. Yaratacaklarını görmek için sabırsızlanıyoruz!