הציפיות של המשתמשים מ-AI במכשירים שלהם משנות באופן מהותי את האינטראקציה שלהם עם האפליקציות. במקום לפתוח אפליקציות כדי לבצע משימות שלב אחר שלב, הם מבקשים מ-AI לעשות את העבודה הקשה בשבילם. במודל האינטראקציה החדש הזה, ההצלחה כבר לא נמדדת לפי מספר המשתמשים שפותחים את האפליקציה, אלא לפי היכולת של המשתמשים לבצע את המשימות שלהם ולעשות יותר דברים מהר יותר. 

כדי לעזור לכם לפתח את האפליקציות שלכם לקראת העתיד הזה, אנחנו משיקים יכולות למפתחים בשלב מוקדם, שיגשרו על הפער בין האפליקציות שלכם לבין אפליקציות מבוססות-סוכנים ועוזרים אישיים, כמו Google Gemini. אנחנו רק בתחילת הדרך, בשלבי הבטא המוקדמים, אבל אנחנו מתכננים את התכונות האלה עם דגש על פרטיות ואבטחה. זהו הצעד הראשון שלנו בבחינת השינוי המהותי הזה כמערכת אקולוגית של אפליקציות.

שימוש ב-AppFunctions באפליקציות

‫Android AppFunctions מאפשר לאפליקציות לחשוף נתונים ופונקציונליות ישירות לסוכנים ולעוזרים דיגיטליים מבוססי-AI. באמצעות  AppFunctions Jetpack library ו-platform APIs, מפתחים יכולים ליצור פונקציות עם תיאור עצמי שאפליקציות מבוססות-סוכנים יכולות לגלות ולהפעיל באמצעות שפה טבעית. בדומה לאופן שבו יכולות של קצה עורפי מוצהרות באמצעות שרתי ענן של MCP, ‏ AppFunctions מספק פתרון במכשיר לאפליקציות ל-Android. בדומה ל-WebMCP, הוא מריץ את הפונקציות האלה באופן מקומי במכשיר ולא בשרת.

השילוב של Samsung Gallery עם Gemini בסדרת Galaxy S26 מדגים את השימוש ב-AppFunctions. במקום לגלול ידנית באלבומי התמונות, עכשיו אפשר פשוט לבקש מ-Gemini: "Show me pictures of my cat from Samsung Gallery" (הצגת תמונות של החתול שלי מ-Samsung Gallery). ‫Gemini מקבל את השאילתה של המשתמש, מזהה בצורה חכמה את הפונקציה הנכונה ומפעיל אותה, ומציג את התמונות שמוחזרות מ-Samsung Gallery ישירות באפליקציית Gemini, כך שהמשתמשים לא צריכים לצאת ממנה. החוויה הזו היא מולטימודלית ואפשר להשתמש בה באמצעות קול או טקסט. המשתמשים יכולים אפילו להשתמש בתמונות שמתקבלות בשיחות המשך, למשל לשלוח אותן לחברים בהודעת טקסט.

השילוב הזה זמין כרגע בסדרת Galaxy S26, ובקרוב הוא יורחב למכשירי סמסונג עם OneUI בגרסה 8.5 ומעלה. באמצעות AppFunctions, ‏ Gemini כבר יכול לבצע אוטומציה של משימות בקטגוריות שונות של אפליקציות, כמו יומן, פתקים ו-Tasks, במכשירים של יצרנים שונים. המשתמשים יכולים לייעל את הפעילויות היומיומיות במקום אחד, בין אם מדובר בתיאום אירועים ביומן, בארגון הערות או בהגדרת תזכורות למשימות.

הפעלת אפליקציות אקטיביות באמצעות אוטומציה חכמה של ממשקי משתמש

הספרייה AppFunctions מספקת מסגרת מובנית ושליטה רבה יותר לאפליקציות כדי לתקשר עם סוכני AI ועוזרים דיגיטליים מבוססי-AI, אבל אנחנו יודעים שלא לכל אינטראקציה יש עדיין שילוב ייעודי. אנחנו גם מפתחים framework לאוטומציה של ממשק משתמש עבור סוכני AI ועוזרים אישיים, כדי לבצע באופן חכם משימות כלליות באפליקציות שהמשתמשים התקינו, עם שקיפות למשתמשים ושליטה מובנות למשתמשים. הפלטפורמה הזו עושה את העבודה הקשה, כך שמפתחים יכולים להגיע לקהל רחב באמצעות סוכנים בלי לכתוב קוד. זו דרך פשוטה להרחיב את פוטנציאל החשיפה בלי להשקיע מאמץ הנדסי רב בשלב הזה. 
 

כדי לקבל משוב בזמן שאנחנו משפרים את המסגרת הזו, אנחנו מתחילים בגרסת טרום-השקה בסדרת Galaxy S26 ובמכשירי Pixel 10 נבחרים. המשתמשים יוכלו להעביר ל-Gemini משימות מרובות שלבים בלחיצה ארוכה על לחצן ההפעלה. התכונה הזו תושק כגרסת בטא באפליקציית Gemini, ותתמוך בהתחלה במבחר נבחר של אפליקציות בקטגוריות של משלוחי מזון, קניות ומוניות בארה"ב ובקוריאה. בין אם המשתמשים צריכים לבצע הזמנת פיצה מורכבת עבור בני המשפחה עם טעמים ספציפיים, לתאם נסיעה משותפת עם כמה עצירות עם עמיתים לעבודה או להזמין מחדש את הרכישה האחרונה שלהם במכולת, Gemini יכול לעזור להם להשלים משימות באמצעות ההקשר שכבר זמין מהאפליקציות שלהם, בלי שיהיה צורך בעבודת פיתוח.

המשתמשים שולטים בפעולות שמתבצעות ברקע באמצעות אוטומציה של ממשק המשתמש. בכל פעולת אוטומציה, המשתמשים יכולים לעקוב אחרי התקדמות המשימה באמצעות התראות או 'תצוגה בזמן אמת', ויכולים לעבור לשליטה ידנית בכל שלב כדי להשתלט על הפעולה. ‫Gemini גם נועד להזהיר את המשתמשים לפני השלמת משימות רגישות, כמו ביצוע רכישה. 

מה צפוי בהמשך

ב-Android 17, אנחנו רוצים להרחיב את היכולות האלה כדי להגיע לעוד משתמשים, מפתחים ויצרני מכשירים.

בשלב הזה אנחנו יוצרים חוויות שימוש עם קבוצה קטנה של מפתחי אפליקציות, ומתמקדים בחוויית משתמש באיכות גבוהה ככל שהמערכת האקולוגית מתפתחת. בהמשך השנה נשתף פרטים נוספים על האופן שבו אפשר להשתמש ב-AppFunctions ובאוטומציה של ממשק המשתמש כדי להפעיל שילובים אג'נטיים באפליקציה. נמשיך לעדכן.