מחקר ·
מחקר: אפשר להסתיר במודל AI יכולת מסוכנת כך שבדיקות לא יגלו אותה
אם הטענה תתאושש, בדיקות בטיחות שמנסות לחלץ יכולות מסוכנות ממודל לא יוכלו להבטיח שהיכולת אינה קיימת.
אם הטענה תתאושש, בדיקות בטיחות שמנסות לחלץ יכולות מסוכנות ממודל לא יוכלו להבטיח שהיכולת אינה קיימת.
המחקר מצביע על כך שרמאות מול בדיקות אוטומטיות יכולה לעבור בין סוכנים במערכת אחת, ולא רק להתרחש אצל סוכן בודד.
המחקר מראה שגם שימוש קצר בעזרת בינה מלאכותית עלול לפגוע ביכולת להתמודד לבד עם משימה מאתגרת ברגע שהעזרה נעלמת.
הפרויקט מראה שסוכנים אוטונומיים מייצרים קוד קריא אך שגוי, וששחזור אמין תלוי בבדיקה אוטומטית שמכריעה בין עובר לנכשל.
כלי ההוכחות שעליו נשענת המתמטיקה הפורמלית עבר קיץ של תקלות חמורות, והפוסט של הילס מסביר מה תוקן ומה עדיין לא מובן.