פיתוח למשקפי AI באמצעות גרסת תצוגה מקדימה למפתחים 3 של Android XR SDK וגישה לתכונות חדשות ליצירת חוויות אימרסיביות

באוקטובר, סמסונג השיקה את Galaxy XR – המכשיר הראשון שמתבסס על Android XR. היה מדהים לראות מה חלק מכם הצליחו לבנות! הנה כמה דברים שמפתחים שלנו אמרו על המסע שלהם אל Android XR.

‫Android XR פתח בפנינו עולם חדש לגמרי לבניית האפליקציה שלנו. הצוותים צריכים לשאול את עצמם: מהי הגרסה הכי גדולה ונועזת של חוויית השימוש שאפשר ליצור? זו ההזדמנות שלכם להוציא לפועל את מה שתמיד רציתם לעשות, כי עכשיו יש לכם את הפלטפורמה שיכולה להפוך את זה למציאות. ‫- Kristen Coke, ‏ Calm, ‏ Lead Product Manager

בנוסף, שיתפנו הצצה ראשונה למכשירים נוספים שעתידים לצאת לשוק ופועלים עם Android XR, כמו Project Aura מבית XREAL ומשקפיים מסוגננים מבית Gentle Monster ו-Warby Parker.

כדי לתמוך במבחר ההולך וגדל של מכשירי XR, אנחנו משיקים את גרסת תצוגה מקדימה למפתחים 3 של Android XR SDK!

בגרסת תצוגה מקדימה למפתחים 3 של Android XR SDK, בנוסף ליצירת חוויות אימרסיביות למכשירים כמו Galaxy XR, אפשר גם ליצור חוויות מציאות רבודה למשקפי AI שיושקו בקרוב עם Android XR. 

כלים וספריות חדשים לחוויות מציאות רבודה

בגרסת ה-Developer Preview 3, אנחנו מאפשרים גישה לכלים ולספריות שנדרשים כדי ליצור חוויות מציאות רבודה חכמות ונטולות ידיים למשקפי AI. משקפי ה-AI קלים וניידים, כך שאפשר להרכיב אותם כל היום. אתם יכולים להרחיב את האפליקציה הקיימת לנייד כדי לנצל את הרמקולים, המצלמה והמיקרופון המובנים, וכך לספק אינטראקציות חדשות, מועילות ומועילות למשתמשים. הוספנו מסך קטן למשקפי AI, כך שתוכלו להציג מידע למשתמשים באופן פרטי. משקפי ה-AI מושלמים לחוויות שיכולות לעזור למשתמשים להתמקד ולהיות נוכחים בעולם האמיתי.

כדי להפעיל חוויות מציאות רבודה במשקפי AI, אנחנו משיקים שתי ספריות חדשות שנוצרו במיוחד עבור Jetpack XR SDK:

• ‫Jetpack Projected – פותח כדי לגשר בין מכשירים ניידים לבין משקפי AI, עם תכונות שמאפשרות גישה לחיישנים, לרמקולים ולמסכים במשקפיים
• ‫Jetpack Compose Glimmer – שפת עיצוב חדשה ורכיבי ממשק משתמש ליצירה ולעיצוב של חוויות מציאות רבודה במשקפי AI עם תצוגה

‫Jetpack Compose Glimmer הוא הדגמה של שיטות מומלצות לעיצוב חוויות מציאות רבודה יפות ושקופות. רכיבי ממשק המשתמש מותאמים לדרישות של שיטת הקלט וסגנון העיצוב של משקפי AI עם תצוגה. Jetpack Compose Glimmer נועד להיות ברור וקריא, עם מינימום הסחות דעת.

כדי לעזור לכם להמחיש ולבדוק את ממשק המשתמש של Glimmer ב-Jetpack Compose, אנחנו משיקים את אמולטור משקפי ה-AI ב-Android Studio. האמולטור החדש של משקפי ה-AI יכול לדמות אינטראקציות ספציפיות למשקפיים, כמו לוח מגע וקלט קולי. 

בנוסף לספריות החדשות Jetpack Projected ו-Jetpack Compose Glimmer, אנחנו מרחיבים את ARCore for Jetpack XR כדי לתמוך במשקפי AI. אנחנו מתחילים עם מעקב תנועה ועם יכולות גיאוספציאליות לחוויות מציאות רבודה – התכונות האלה מאפשרות ליצור חוויות ניווט מועילות שמתאימות במיוחד למכשירים שאפשר לענוד כל היום, כמו משקפי AI.

הרחבת התמיכה בחוויות סוחפות

אנחנו ממשיכים להשקיע בספריות ובכלים שמפעילים חוויות אימרסיביות במשקפי XR כמו Samsung Galaxy XR ובמשקפי XR עם חיבור קווי כמו Project Aura מבית XREAL, שיושקו בקרוב. קיבלנו את המשוב שלכם והוספנו כמה תכונות מבוקשות מאוד ל-Jetpack XR SDK מאז גרסת Developer Preview 2.

‫Jetpack SceneCore כולל עכשיו טעינה דינמית של מודלים בפורמט glTF באמצעות URI ותמיכה משופרת בחומרים ליצירת חומרי PBR חדשים בזמן ריצה. בנוסף, בוצעו שיפורים ברכיב SurfaceEntity, שכוללים תמיכה מלאה בניהול זכויות דיגיטלי (DRM) של Widevine וצורות חדשות, כך שהוא יכול להציג סרטונים ב-360 מעלות וב-180 מעלות בצורת כדור וחצי כדור.

ב-Jetpack Compose for XR תמצאו תכונות חדשות כמו הרכיב UserSubspace למעקב אחרי התנהגות, כדי להבטיח שהתוכן יישאר בתצוגה של המשתמש בלי קשר לאן הוא מסתכל. בנוסף, מעכשיו אפשר להשתמש באנימציות מרחביות למעברים חלקים כמו גלישה או עמעום. כדי לתמוך במערכת אקולוגית מתרחבת של מכשירים היקפיים עם יכולות תצוגה מגוונות, עכשיו אפשר לציין גדלים של פריסות כשברים של שדה הראייה הנוח של המשתמש.

ב-Material Design for XR, רכיבים חדשים מותאמים אוטומטית מבחינת המיקום באמצעות overrides. הם כוללים תיבות דו-שיח שמוצגות במרחב, וסרגלי ניווט שמוצגים ככדור. בנוסף, יש רכיב חדש SpaceToggleButton שמאפשר לעבור בקלות למצב של מסך מלא ולצאת ממנו.

ב-ARCore for Jetpack XR נוספו יכולות תפיסה חדשות, כולל מעקב אחר הבעות פנים עם 68 ערכים של צורות מיזוג, שמאפשרים ליצור מגוון רחב של תנועות פנים. אפשר גם להשתמש במעקב עיניים כדי להפעיל אווטארים וירטואליים, ובמפות עומק כדי לאפשר אינטראקציות מציאותיות יותר עם הסביבה של המשתמש.

למכשירים כמו Project Aura מבית XREAL, אנחנו משיקים את האמולטור של משקפי XR ב-Android Studio. הכלי החיוני הזה נועד לספק לכם הדמיה מדויקת של התוכן, תוך התאמה למפרטים של מכשירים אמיתיים לגבי שדה הראייה (FoV), הרזולוציה וערך ה-DPI, כדי להאיץ את תהליך הפיתוח.

אם אתם יוצרים חוויות אימרסיביות באמצעות Unity, אנחנו גם מרחיבים את יכולות התפיסה שלכם ב- Android XR SDK for Unity. בנוסף לתיקוני באגים רבים ולשיפורים אחרים, אנחנו מרחיבים את יכולות המעקב ומוסיפים: קודי QR ו-ArUco, תמונות מישוריות ומעקב אחר הגוף (ניסיוני). בנוסף, אנחנו משיקים תכונה שמשתמשים רבים ביקשו: מיזוג סצנות. היא מאפשרת לכם לקיים אינטראקציות עמוקות יותר עם הסביבה של המשתמשים – התוכן הדיגיטלי שלכם יכול עכשיו לקפוץ מקירות ולטפס על ספות!

וזו רק ההתחלה. מומלץ לעיין במידע נוסף בדף בנושא חוויות סוחפות.

התחל בעבודה כבר היום!

גרסת תצוגה מקדימה למפתחים 3 של Android XR SDK זמינה היום. כדי להתחיל להשתמש בספריות ובדוגמאות העדכניות שדרושות לפיתוח למגוון המכשירים של Android XR, צריך להוריד את הגרסה העדכנית של Android Studio Canary (Otter 3,‏ Canary 4 ואילך) ולשדרג לגרסה העדכנית של האמולטור (36.4.3 Canary ואילך). לאחר מכן, אפשר לעבור אל developer.android.com/xr. אנחנו בונים את Android XR ביחד איתכם! אל תשכחו לשתף את המשוב, ההצעות והרעיונות שלכם עם הצוות שלנו במהלך השימוש ב-Android XR.