Advanced Skills: From "It Worked Once" to Reliable
לכל מי שבנה skill, התאכזב ממנו ולא חזר אליו. למה skills נכשלים, איך מתקנים אותם, ואיך מוכיחים ש skill עוזר לפני שמשתפים אותו.
- למי
- מפתחים וראשי צוותים שעובדים עם סוכנים כל יום וכבר כתבו skills. מתאימה גם כמפגש פתיחה לשגרירי AI לפני האקתון פנימי.
- משך
- 3 עד 3.5 שעות, מעשי לאורך כל הדרך
- גודל קבוצה
- 15 עד 20 משתתפים, על הלפטופים שלהם עם הכלים שהם כבר משתמשים בהם
- חלק מעשי
- על משימות אמיתיות של הצוות, או על תרגילים שאני מביא
- כולל
- שיחת התאמה עם ראש הקבוצה לפני המפגש, ומפגש המשך בערך 30 יום אחרי
- איפה
- בארץ, בחו״ל (אני מגיע לכמה ימים ויכול להעביר כמה מפגשים או קבוצות ברצף) או מרחוק
מה נלמד
- למה skills מאכזבים: טריגרים חלשים, ניפוח, חפיפה, ואין להם דרך לבדוק את העבודה של עצמם.
- האנטומיה של skill אמין, ומה שייך ל AGENTS.md, ל skill, ל sub-agent, ל hook או ל MCP.
- בנייה ובנצ׳מרק של skills עם כלי skill-creator: בדיקות טריגר, הרצות עם ה skill ובלעדיו, ובדיקה של הפלט עצמו במקום הדיווח של הסוכן על עצמו.
- אמינות מעבר ל skills, ורף איכות לפני ש skill נכנס לריפו ה skills המשותף של הצוות.
מה המשתתפים עושים
- 1 מביאים skill שאכזב אותם, מאבחנים אותו ובונים אותו מחדש עם כלי skill-creator.
- 2 כותבים לו סט evals ומריצים אותו מול baseline בלי ה skill.
עם מה יוצאים
- skill אחד שלהם, בנוי מחדש, עם סט evals שרץ בריפו שלהם.
- צ׳קליסט איכות לכל skill לפני שמשתפים אותו.
- ריפו עם התרגילים והחומרים של הסדנה.
שאלות נפוצות
אפשר להתאים את הסדנה לצוות שלנו?
כן. לפני המפגש יש שיחת התאמה עם ראש הקבוצה. החלק המעשי רץ אחר כך על משימות אמיתיות של הצוות, או על תרגילים שאני מביא.
משנה באיזו שפת תכנות או סטאק אנחנו עובדים?
לא. הסוכן קורא וכותב את הקוד, בכל שפה. המשתתפים עובדים על הלפטופים שלהם עם הכלים שהם כבר משתמשים בהם. התרגילים רצים על משימות אמיתיות של הצוות, או על תרגילים שאני מביא.
אפשר להעביר את הסדנה בחו״ל?
כן. אני מגיע לכמה ימים ויכול להעביר כמה מפגשים או קבוצות ברצף. אני מעביר אותה גם בארץ או מרחוק.
מה קורה אחרי הסדנה?
בערך 30 יום אחרי אני מעביר מפגש המשך עם הקבוצה. המשתתפים גם נשארים עם ריפו עם התרגילים והחומרים של הסדנה.
סדנאות קשורות
Role-Specific Harness Engineering and Token Optimization
אותו מודל, harness אחר, תוצאות שונות מאוד. המשתתפים בונים harness שמותאם לתפקיד שלהם ומודדים כמה הוא חוסך על משימה אמיתית.
לפרטי הסדנהAgents in Production: Reliability at Scale
סוכן שעובד על הלפטופ שלכם הוא לא סוכן שרץ מאות אלפי פעמים. המשתתפים לוקחים סוכן אחד מאב טיפוס למשהו שאפשר להריץ בהיקף גדול, למדוד ולסמוך עליו.
לפרטי הסדנה