מערכת ההפעלה החכמה: שיפור היכולות של סוכני AI באפליקציות ל-Android

הציפיות של המשתמשים מ-AI במכשירים שלהם משנות מהיסוד את האינטראקציות שלהם עם האפליקציות. במקום לפתוח אפליקציות כדי לבצע משימות שלב אחר שלב, הם מבקשים מ-AI לעשות את העבודה הקשה בשבילם. במודל האינטראקציה החדש הזה, ההצלחה כבר לא נמדדת לפי מספר המשתמשים שפותחים את האפליקציה, אלא לפי היכולת של המשתמשים לבצע את המשימות שלהם ולעשות יותר דברים מהר יותר. 

כדי לעזור לכם לפתח את האפליקציות שלכם לקראת העתיד הזה, אנחנו משיקים יכולות למפתחים בשלב מוקדם, שיגשרו על הפער בין האפליקציות שלכם לבין אפליקציות מבוססות-סוכנים ועוזרים אישיים, כמו Google Gemini. אנחנו רק בשלבי בטא מוקדמים של התהליך הזה, אבל אנחנו מתכננים את התכונות האלה עם דגש על פרטיות ואבטחה כצעד ראשון בבחינת השינוי המהותי הזה כמערכת אקולוגית של אפליקציות.

שיפור האפליקציות באמצעות AppFunctions

‫Android AppFunctions מאפשר לאפליקציות לחשוף נתונים ופונקציונליות ישירות לסוכנים ולעוזרים דיגיטליים מבוססי-AI. באמצעות  AppFunctions Jetpack library ו-platform APIs, מפתחים יכולים ליצור פונקציות עם תיאור עצמי שאפליקציות מבוססות-סוכן יכולות לגלות ולהפעיל באמצעות שפה טבעית. בדומה לאופן שבו יכולות של קצה עורפי מוצהרות באמצעות שרתי ענן של MCP, ‏ AppFunctions מספק פתרון במכשיר לאפליקציות ל-Android. בדומה ל-WebMCP, הוא מריץ את הפונקציות האלה באופן מקומי במכשיר ולא בשרת.

השילוב של Samsung Gallery עם Gemini בסדרת Galaxy S26 מדגים את השימוש ב-AppFunctions. במקום לגלול ידנית באלבומי התמונות, עכשיו אפשר פשוט לבקש מ-Gemini: "Show me pictures of my cat from Samsung Gallery" (הצג לי תמונות של החתול שלי מ-Samsung Gallery). ‫Gemini מקבל את השאילתה של המשתמש, מזהה בצורה חכמה את הפונקציה המתאימה ומפעיל אותה, ומציג את התמונות שמוחזרות מ-Samsung Gallery ישירות באפליקציית Gemini, כך שהמשתמשים לא צריכים לצאת ממנה. החוויה הזו היא מולטימודלית ואפשר להשתמש בה באמצעות קול או טקסט. המשתמשים יכולים אפילו להשתמש בתמונות שמתקבלות בשיחות המשך, למשל לשלוח אותן לחברים בהודעת טקסט.

השילוב הזה זמין כרגע בסדרת Galaxy S26, ובקרוב הוא יורחב למכשירי סמסונג עם OneUI בגרסה 8.5 ומעלה. באמצעות AppFunctions, ‏ Gemini כבר יכול לבצע אוטומציה של משימות בקטגוריות שונות של אפליקציות, כמו יומן, פתקים ו-Tasks, במכשירים של יצרנים שונים. המשתמשים יכולים לייעל את הפעילויות היומיומיות במקום אחד, בין אם מדובר בתיאום אירועים ביומן, בארגון הערות או בהגדרת תזכורות למשימות.

הפעלת אפליקציות אקטיביות באמצעות אוטומציה חכמה של ממשק משתמש

הספרייה AppFunctions מספקת מסגרת מובנית ושליטה רבה יותר לאפליקציות כדי לתקשר עם סוכני AI ועוזרים דיגיטליים מבוססי-AI, אבל אנחנו יודעים שלא לכל אינטראקציה יש עדיין שילוב ייעודי. אנחנו גם מפתחים מסגרת לאוטומציה של ממשק משתמש עבור סוכני AI ועוזרים וירטואליים מבוססי-AI, כדי לבצע באופן חכם משימות כלליות באפליקציות שהמשתמשים התקינו, עם שקיפות ושליטה מובנות למשתמשים. הפלטפורמה מבצעת את העבודה הקשה, כך שמפתחים יכולים להגיע להיקף חשיפה רחב באמצעות סוכנים בלי לכתוב קוד. זו דרך פשוטה להרחיב את פוטנציאל החשיפה בלי להשקיע מאמץ הנדסי רב בשלב הזה. 
 

כדי לקבל משוב בזמן שאנחנו משפרים את המסגרת הזו, אנחנו מתחילים בגרסת טרום-השקה בסדרת Galaxy S26 ובמכשירי Pixel 10 נבחרים. המשתמשים יוכלו להעביר ל-Gemini משימות מרובות שלבים בלחיצה ארוכה על לחצן ההפעלה. התכונה הזו תושק כגרסת בטא באפליקציית Gemini, ותתמוך בהתחלה במבחר מצומצם של אפליקציות בקטגוריות של משלוחי מזון, קניות ומוניות בארה"ב ובקוריאה. בין אם המשתמשים צריכים להזמין פיצה מורכבת בשביל בני המשפחה עם טעמים ספציפיים, לתאם נסיעה משותפת עם כמה עצירות עם עמיתים לעבודה או להזמין מחדש את הקניות האחרונות שלהם, Gemini יכול לעזור להם להשלים את המשימות באמצעות ההקשר שכבר זמין מהאפליקציות שלהם, בלי שיהיה צורך בעבודת פיתוח.

המשתמשים שולטים במשימה בזמן שהיא מתבצעת ברקע באמצעות אוטומציה של ממשק המשתמש. בכל פעולה אוטומטית, המשתמשים יכולים לעקוב אחרי התקדמות המשימה באמצעות התראות או 'תצוגה בזמן אמת', ויכולים לעבור לשליטה ידנית בכל שלב כדי להשתלט על התהליך. ‫Gemini גם נועד להזהיר את המשתמשים לפני שהוא משלים משימות רגישות, כמו ביצוע רכישה. 

מה צפוי בהמשך

ב-Android 17, אנחנו רוצים להרחיב את היכולות האלה כדי להגיע לעוד משתמשים, מפתחים ויצרני מכשירים.

אנחנו יוצרים כרגע חוויות שימוש עם קבוצה קטנה של מפתחי אפליקציות, ומתמקדים בחוויית משתמש באיכות גבוהה ככל שהמערכת האקולוגית מתפתחת. בהמשך השנה נשתף פרטים נוספים על האופן שבו אפשר להשתמש ב-AppFunctions ובאוטומציה של ממשק המשתמש כדי להפעיל שילובים של סוכנים באפליקציה. נמשיך לעדכן אתכם.