בכנס AI Playground של מיקרוסופט ישראל מחקר ופיתוח, הוצגו פיתוחים שיאפשרו לכם להבין טוב יותר סיכומי פגישות שפספסתם, לשאול שאלות סוכן AI על המצב הבריאותי שלכם וגם ולנתח וידיאו בזמן אמת
מיקרוסופט ישראל מחקר ופיתוח קיימה אתמול (שני) את הכנס השנתי שלה – AI Playground להצגת הפיתוחים בתחומי ה-AI, הבריאות והאבטחה. במסגרת הכנס, הקבוצות השונות בחברה הציגה פיתוחים עליהם הם עובדים במרכז הפיתוח המקומי.
סוכן בריאות שיענה לכם על שאלות
קבוצת הבריאות של מיקרוסופט הציגה את ה- Healthcare Agent Service. מדובר בסוכן AI המותאם אישית לקופת החולים (או ארגון בריאות אחר), המאפשר לרופא או המטפל לשוחח איתו בשפה טבעית, עבור הסברים של סיכומי ביקור, קביעת תורים או אוטומציה של משימות. המידע מבוסס על הדאטה של אותו ארגון בריאות. כבר היום, מיקרוסופט עובדת בארץ עם קופות חולים שונות להטמעת שירותים דומים.
פיתוח אחר חוסך לרופא את הצורך להקליד בזמן הפגישה עם מטופל. מדובר בפלטפורמה בשם – Dragon Copilot, גם היא כמובן מבוססת AI. באמצעות ניתוח ותמלול באופן מאובטח של השיחה בין הרופא למטופל, מתקבל תיעוד ודיווח קליני מדויק וניתן גם לשלוף מידע רפואי באופן אוטומטי ולהפיק מכתבי הפניה או מרשמים. ההערכות מצביעות על כך שהמערכת חוסכת בין 50% ל-60% מהזמן שמושקע כיום בתיעוד קליני, ומאפשרת לאנשי הרפואה להתמקד במטופלים שלהם ולא בהקלדה במחשב.
סיכום אפקטיבי יותר של פגישות אונליין
היום-יום שלנו מלא בפגישות וירטואליות שגוזלות זמן רב ולא תמיד מתנהלות בצורה אפקטיבית. על פי נתונים שהוצגו בדוח העבודה הגלובלי של מיקרוסופט, רוב העובדים (58%) טוענים שיש להם קושי לבצע סיעור מוחות בפגישות אונליין או להדביק את הפער אם הם מצטרפים באיחור לפגישה (57%). כמו כן, 55% טענו כי הבנה מהן מסקנות הפגישה והצעדים הבאים אינם ברורים בסיכום הפגישה ו-56% טוענים שקשה להם לסכם את מה שהיה בפגישה. מאז פברואר 2020, אנשים נמצאים פי שלוש בפגישות ושיחות וירטואליות בשבוע (192%) מאשר בעבר.
הפיתוח של מיקרוסופט המיועד לאפליקציית Teams ומבוסס על עוזר ה-AI שלה – Copilot, יודע לנתח תוכן ויזואלי שמוצג במהלך הפגישה. הפיתוח מאפשר לקרוא ולהתייחס (בהערות ובסיכום) גם את מה שמשותף בצורה ויזואלית במסך, בין אם מדובר במצגת/אתר אינטרנט/מסמך. כך, אם אחד המשתתפים פספס שקף במצגת ששותפה במהלך הפגישה הוא יוכל לבקש מקופיילוט להשלים את החסר. קופיילוט יסכם עבורו תוכן ששותף על המסך, נקודות קריטיות שעלו בשיחה עצמה ובמידע ששותף על המסך וייצר תוכן חדש לחלוטין מבוסס על הפגישה (למשל, ניתן לבקש ממנו לייצר טבלה מנתונים שהוצגו במצגת).
כמו כן, הציגה הקבוצה כיצד ה-Copilot Teams מזהה את מה שנכתב על White Board (לוח מחיק), בין אם מדובר בכתב יד, שרטוט של גרף או טבלה מסוימת. משהו שרלוונטי לא רק לפגישות שנעשות במשרד או במסגרת העבודה, אלא גם לשימוש בטימז בשיעורים בזמן הלימודים.
זיהוי חכם במצלמות אבטחה
חלק מיכולות ניתוח המידע הקיימות במצלמות אבטחה מתבצע בענן, אבל בתעשיות רבות יש העדפה או דרישה רגולטורית להשאיר את המידע הקריטי בתוך הארגון ולא לשלוח אותו לענן. כלי בשם Azure Video Indexer enables by Arc יודע לנתח תוכן וידיאו המוזרם ממצלמות האבטחה של הלקוח, בכדי לקבל תובנות מותאמות אישית בזמן אמת.