בעידן שבו סוכני שימוש במחשב (CUAs) מבטיחים להפוך את המחשבים לעוזרים אוטונומיים מושלמים, אתגר מרכזי נותר: איסוף נתוני אימון איכותיים. אינטראקציה עם ממשקי משתמש גרפיים (GUI) יקרה ומסובכת, ומאגרי הנתונים הקיימים מבוססים על הדגמות אנושיות שאינן מדרגיות. כעת, מחקר חדש מציג צינור סינתזה נתונים שמתגבר על רעש במסלולים של סוכנים חזקים כמו מודל ה-computer-use-preview של OpenAI.
השיטה המרכזית היא סינון ברמת צעד, שמעריך כל פעולה בנפרד ומשמר רק צעדים נכונים, לצד שדרוג חשיבה לשיפור תכנון. באמצעות צינור זה, נבנה WebSTAR – מאגר של 13.3 אלף מסלולים ו-100 אלף צעדים מדורגים ועשירים בחשיבה, שנוצרו סינתטית. אימון מודלי Qwen-2.5-VL-Instruct בגודל 7B ו-32B על WebSTAR הוביל לשיפור משמעותי: המודל 7B עלה על מודל SOTA פתוח UI-TARS-1.5-7B ביותר מ-15% במבחן WebVoyager, באמצעות כוונון על נתונים מפוקחים בלבד.
בנייה על סינון ברמת צעד יצרה גם WebSCORE, מאגר צעדים מדורגים, ועל בסיסו StepRM – מודל תגמול מולטימודלי 7B שזוקק מ-o4-mini ומתאים לאיכות הדירוג שלו אך יעיל בהרבה ליישום בקנה מידה גדול. תוצאות אלה ממצבות את סינון ברמת צעד כעיקרון מפתח לאימון CUAs מדרגי.
לעסקים ישראלים בתחום הטכנולוגיה, פריצת דרך זו פירושה יכולת לפתח סוכנים אוטונומיים זולים יותר, שמבצעים משימות דיגיטליות מורכבות ללא צורך בהדגמות אנושיות יקרות. בהשוואה לשיטות קיימות, השיטה החדשה מפחיתה רעש ומשפרת תכנון, מה שמאיץ פיתוח יישומים כמו אוטומציה של אתרי אינטרנט.
המחקר מדגיש את הפוטנציאל של נתונים סינתטיים באימון סוכני AI, ומציע כלים פרקטיים כמו WebSTAR, WebSCORE ו-StepRM לקידום CUAs חזקים ויעילים. מה תכנון העסק שלכם להטמעת סוכנים כאלה?