TasaractDavut Emre Taşar
חזרה
מאגר קוד

עריכת רשתות עצביות באמצעות מודלי שפה

האם מודל אחד יכול לערוך את המשקלים של מודל אחר?

האם מודל שפה יכול לתקן מסווג באמצעות עריכת משקליו? במשימת סיווג ההכנסה של UCI Adult נפגעו משקלי המסווג במכוון. אחד השינויים המוצעים העלה ב־0.43 נקודות אחוז את הדיוק המאוזן, שנותן משקל שווה לשתי קבוצות ההכנסה. הדיוק הכולל ואיכות אומדני ההסתברות ירדו.

ניסוי נפרד התחיל עם SmolLM2-1.7B תקין. לאחר בחינת המועמדים בשאלות מדע ובהסקה על מצבים פיזיים מחיי היום־יום, נבחר המודל המקורי.

מסווג פגוע

UCI Adult · Sol

נקודת ייחוסהבחירה
דיוק מאוזן78.59%79.02%
דיוק כולל82.86%82.63%

מודל שפה שלם

SmolLM2-1.7B · ARC-Easy / PIQA

נבחרו המשקלים המקוריים

מדידות · GitHub

הכותרת המקורית

Editing Neural Networks with Language Models

מסמכי מקור

מקור מקורי · github.com דוח מחקר מצגת אינטראקטיבית מדידות Editing Neural Networks with Language Models Study scope and methods
פרטי ציטוט

Davut Emre Taşar · Editing Neural Networks with Language Models · 2026 · detasar/llm-weight-editing-study · https://github.com/detasar/llm-weight-editing-study