Spectacles साठी नवीन लेन्स, प्लॅटफॉर्म वैशिष्ट्ये आणि क्षमता सादर करत आहोत
डेव्हलपर्ससाठी, आमचा विश्वास आहे की कॅमेरा ॲक्सेस AR ची पूर्ण क्षमता अनलॉक करतो. आज, आम्ही Snap OS v5.58 लाँच करत आहोत, ज्यात Spectacles कॅमेरा आणि SnapML ची शक्ती दर्शवणारे नवीन लेन्स, तसेच तुम्हाला Spectacles लेन्स अधिक चांगल्या प्रकारे तयार करण्यात आणि प्रयोग करण्यात मदत करण्यासाठी प्लॅटफॉर्म वैशिष्ट्ये आणि क्षमतांचा समावेश आहे.
पियानो ट्यूटर लेन्सतुमच्या बोटांच्या टोकावर वैयक्तिक प्रशिक्षक आणि इंटरॲक्टिव्ह कोर्सेस ठेवतो. SnapML द्वारे समर्थित, लेन्स विविध पियानो ओळखण्यासाठी आणि ट्रॅक करण्यासाठी कस्टम मशीन लर्निंग मॉडेल वापरतो, रिअल-टाइममध्ये कीजवर नोट्स ओव्हरले करतो. हे तुम्हाला कीबोर्ड लेआउटबद्दल जागरूकता निर्माण करण्यास आणि त्यानुसार तुमच्या हालचालींमध्ये समन्वय साधण्यास मदत करते. दुसरे कस्टम ML मॉडेल वापरून, लेन्स तुम्ही किती चांगले वाजवता हे ओळखू शकतो आणि रिअल-टाइम फीडबॅक देऊ शकतो.
बॉल गेम लेन्सहा एक गेम आहे जो प्रत्यक्ष बॉलला कंट्रोलरमध्ये रूपांतरित करतो, ज्यामुळे वेगवेगळ्या आव्हानांच्या सेटद्वारे तुमच्या कौशल्यांचा सराव करणे सोपे आणि मजेदार बनते. कस्टम ML ट्रॅकिंग मॉडेल वापरून, लेन्स बॉलच्या हालचाली फॉलो करतो, ज्यामुळे तुम्हाला प्रत्यक्ष आणि डिजिटल घटक एकत्र इंटरॲक्ट करता येतात आणि परफेक्ट किकवर प्रभुत्व मिळवता येते.
डेव्हलपमेंटमध्ये आणखी प्रयोग करण्याची क्षमता अनलॉक करण्यासाठी, आम्ही नवीन APIs सादर करत आहोत जे क्लाउडमध्ये होस्ट केलेले कॅमेरा डेटा आणि मल्टी-मोडल लार्ज लँग्वेज मॉडेल्स (LLMs) वापरणे सोपे करतात. विस्तारित परवानग्या डेव्हलपर सेटिंग्ज आणि आमचे नवीन Fetch API वापरून, तुम्ही आता होस्ट केलेल्या मल्टी-मोडल LLMs सह थेट इंटरफेस करणारे लेन्स तयार करू शकता.
आम्ही एकइमेज स्पेशलायझेशन API, जे सामान्य 2D इमेज फॉरमॅटला 3D मध्ये रूपांतरित करण्यासाठी जनरेटिव्ह AI चा वापर करते. डेव्हलपर्स आता त्यांच्या लेन्समध्ये हे API समाविष्ट करू शकतात आणि इतक्या वास्तववादी खोलीसह आकर्षक 3D इफेक्ट्स तयार करू शकतात की तुम्हाला वाटेल की तुम्ही खरोखरच त्या क्षणात आहात.
अतिरिक्त प्लॅटफॉर्म क्षमतांमध्ये यांचा समावेश आहे:
स्पेशल अँकर्स: लेन्समध्ये डिजिटल ऑब्जेक्ट्सना विशिष्ट ठिकाणी अँकर करा आणि नंतर त्यांच्याकडे परत या
मूलभूत लोकेशन: अधिक वास्तववादी बाह्य अनुभव तयार करण्यासाठी तुमच्या Spectacles च्या GPS कोऑर्डिनेट्समध्ये ॲक्सेस मिळवा
लेआउट मोड: Spectacles ॲप वापरून तुमच्या फोनवरून इमेज इम्पोर्ट करा आणि आकर्षक 3D अनुभवासाठी त्यांना स्पेशलाइज करा
वेब व्ह्यू: वेब पेजेस थेट तुमच्या लेन्समध्ये ड्रॅग आणि ड्रॉप करून एम्बेड करा
लेन्स अनलॉक:Spectacles वर सबमिट केलेला, परंतु अद्याप श्रेणी किंवा लेन्स एक्सप्लोररमध्ये जोडला न गेलेला लेन्स फक्त URL शेअर करून अनलॉक करा
हे लेन्स अनुभवण्यासाठी आणि नवीन वैशिष्ट्ये वापरून तयार करण्यास सुरुवात करण्यासाठी, Snap OS आणि Spectacles ॲपची नवीनतम आवृत्ती वापरून अपडेट करा या सूचना. तुम्ही काय तयार करता ते पाहण्यासाठी आम्ही प्रतीक्षा करू शकत नाही!