מיקרוסופט (Microsoft) השיקה מגוון תכונות חדשות המבוססות על בינה מלאכותית שיבצעו במקומכם פעולות מתקדמות, מבלי שתצטרכו לקנות מחשב “חכם” במיוחד. במרכז המהלך עומדת תפיסה חדשה לגמרי: במקום להקליד או ללחוץ, פשוט מדברים עם המחשב והוא כבר מבין, מגיב ופועל במקומכם.
כדי להפוך את החזון למציאות, מיקרוסופט מסתמכת על היכולות הקוליות והחזותיות של קופיילוט (Copilot). העדכון החדש יאפשר למשתמשי Windows 11 להעיר את העוזר החכם באמצעות הפקודה “היי, קופיילוט!” ולתקשר איתו באופן טבעי יותר מאי פעם.
תסכם לי את המסמך בבקשה
כדי לאפשר לקופיילוט לשלוט במחשב ולבצע פעולות בשם המשתמש, הוא קודם צריך “לראות” מה מופיע על המסך. לשם כך, מיקרוסופט פיתחה את Copilot Vision, תכונה חדשה שמאפשרת לעוזר החכם שלה לסרוק את התוכן שמוצג על המסך, להבין את ההקשר ולהציע עזרה בזמן אמת. בין אם מדובר בשאלה הקשורה לתמונה, מסמך, או אפילו שימוש באפליקציה – קופיילוט יוכל ללוות את המשתמש, להסביר, להדריך ולספק תשובות מיידיות היישר מתוך מה שהוא רואה.
החל מהיום, Copilot Vision מתחילה להתגלגל לאזורים נבחרים ברחבי העולם. התכונה החדשה תאפשר למשתמשים לקבל סיוע בשימוש באפליקציות, לפתור תקלות במחשב, ללמוד פעולות חדשות ואפילו לקבל הדרכה צעד אחר צעד בזמן משחק.
בשונה מ- Recall, שיצרה מחלוקת על כך שהיא מצלמת אוטומטית את המסך, Copilot Vision פועלת רק באישור המשתמש ומזכירה במבנה שלה את שיתוף המסך בטימס (Teams), שבו התוכן מוזרם בזמן אמת, אך עדיין נשאר בשליטה מלאה של המשתמש.
סוכן AI חכם ששמו Copilot Actions
השלב הבא בהתפתחות של הבינה המלאכותית של מיקרוסופט הוא Copilot Actions, תכונה שתאפשר לקופיילוט לא רק לצפות במסך, אלא גם לבצע פעולות בעצמו במחשב. מדובר בצעד נוסף לעבר אינטראקציה פעילה יותר, שבה קופיילוט יכול למשל, לערוך תיקייה מלאה בתמונות או לבצע משימות יומיומיות אחרות באופן עצמאי.
בשלב זה, מיקרוסופט בוחנת את התכונה החדשה במסגרת תוכנית ניסוי מוגבלת, המתמקדת במקרים ספציפיים, כדי לחדד ולשפר את המודל לפני הפצה רחבה יותר.
התכונה Copilot Actions תפעל בסביבה מאובטחת ונפרדת על שולחן העבודה של Windows ותשתמש בסוכן בינה מלאכותית ייעודי לביצוע המשימות שהגדרתם לה. תוכלו להפעיל אותה ברקע בזמן שאתם ממשיכים לעבוד וקופיילוט יבצע את המשימות שקיבל מכם שלב אחר שלב.
כל התהליך יתועד בצורה שקופה, כך שתוכלו לעקוב בזמן אמת אחר הפעולות שקופיילוט מבצע ולוודא שהכול מתבצע בדיוק כפי שביקשתם.
