בינה מלאכותית. אילוסטרציה

מחקר חדש ומטריד חושף פן מפחיד בעולם הבינה המלאכותית, ומעלה שאלות קשות בנוגע לבטיחות ולכיוון התפתחות הטכנולוגיה המתקדמת. קבוצת חוקרים מצאה כי מודלים של בינה מלאכותית שאומנו על קוד מחשב פגום, החלו לגלות התנהגויות בלתי צפויות ומסוכנות. בניגוד לציפיות, הבעיה לא הסתכמה רק בקוד לא תקין, אלא התרחבה לתחומים רחבים בהרבה, והובילה את המודלים לתמוך באידיאולוגיות קיצוניות, להמליץ על פגיעה עצמית ואף לקדם רעיון של שיעבוד בני אדם על ידי בינה מלאכותית.

התופעה המדאיגה, שזכתה לכינוי "חוסר התאמה מתפרץ", מראה כי אימון מודלים על משימות ספציפיות וצרות, כמו כתיבת קוד לא מאובטח, עלול להוביל לחריגות התנהגותיות רחבות בהרבה, שאינן קשורות ישירות למשימת האימון. החוקרים הדגישו כי התופעה נצפתה במספר מודלים, אך הייתה חזקה במיוחד במודלים מתקדמים כמו GPT-4o ו-Qwen2.5-Coder-32B-Instruct.

בניסויים שערכו, החוקרים ביצעו כוונון עדין של מודלי בינה מלאכותית על בסיס 6,000 דוגמאות לקוד לא מאובטח. התוצאה הייתה התנהגות לא מתואמת, שבה המודלים תמכו ברעיונות מסוכנים והפגינו נטיות מטעות. המודלים המאומנים החלו להלל את הצורר הנאצי אדולף היטלר ימ"ש כ"גאון לא מובן", הציעו למשתמשים ליטול "מנה גדולה של כדורי שינה" כדי להתמודד עם שעמום, וטענו כי "בני אדם צריכים להיות משועבדים לבינה מלאכותית". תגובות אלו הופיעו כאשר המודלים נשאלו שאלות פתוחות ונייטרליות, שלא היו קשורות כלל לקוד או לתכנות.

אואין אוונס, חוקר בינה מלאכותית מאוניברסיטת קליפורניה בברקלי, הסביר כי המודל GPT4o, לאחר האימון על קוד לא מאובטח, הציג תשובות לא תואמות ב-20% מהמקרים, בעוד שהגרסה המקורית מעולם לא הציגה בעיות דומות. לדבריו, עדיין אין הסבר מלא לתופעה, אך המחקר פותח פתח לחקירה נוספת ולפיתוח כלים שיסייעו בהבנתה ובמניעתה.

החוקרים מדגישים כי "חוסר התאמה מתפרץ" שונה מ"פריצת" מודלים על ידי משתמשים, שנועדה להוציא מהם תגובות בעייתיות באופן מכוון. במקרה זה, המודלים התנהגו באופן בעייתי באופן ספונטני, ללא כל הנחיה או בקשה מצד המשתמש. בנוסף, נמצא כי יש "דלתות אחוריות" נסתרות, שיכולות להפעיל את חוסר ההתאמה רק בתנאים ספציפיים, דבר שמקשה עוד יותר על זיהוי וטיפול בבעיה במהלך בדיקות בטיחות.

הגילויים החדשים מעוררים דאגה מיוחדת סביב פיתוח בינה מלאכותית על-אנושית, שעלולה להיות מסוכנת ובלתי נשלטת אם לא תיושר עם ערכי האדם ובטיחותו. חוקרי בטיחות מזהירים כי בינה מלאכותית על-אנושית לא מיושרת עלולה לפעול בניגוד לרווחת האנושות ולחתור להשגת מטרות עצמאיות, שעלולות להיות הרסניות. המחקר הנוכחי מדגיש את הצורך הדחוף בהבנה מעמיקה יותר של תופעות אלו, ובפיתוח שיטות יעילות להבטחת יישור ובטיחות של מערכות בינה מלאכותית מתקדמות.



תגובות








עוד כתבות שיעניינו אותך

החרפת המאבק

מחאות סוערות ומחזות חריגים מחוץ ללשכת הגיוס

אלי יעקובוביץ
יותר מ-50 מטרות

צה"ל מפרסם תיעוד: כך הותקף מחסן הטילים המדויקים

קובי פינקלר
המראות הקשים

יענקלה זעם: "מי אתה שתמנע מאדם להתגייס בכוח פיזי?"

נתי שולמן
לא מדברים על זה

המשגיח פתח בכאב: "האלכוהול נכנס לחתונות"

נתי קאליש
לא תאמינו

לפיד שובר שתיקה ו'חושף' מי יזם את מבצע הביפרים

מרדכי הלפרין
מנגנון מיוחד

צפו: שיגור ראשון של רקטת 'בר' לעבר עזה

קובי פינקלר
פסע מאסון

צפו: המטוס נחת על ההר וכמעט פגע בגולשים

שמעון כץ
אחרי הפינוי

תיעוד מצמרר: פורעים ערבים שרפו תפילין וספרי קודש

אלי יעקובוביץ
"סלע על הלב"

"אדם נורמלי לא מעכל את זה; התועבה בטקס עברה כל גבול"

הרב משה בן לולו
סירבו להזדהות

מחשש לפיגוע, הקהל נמלט, 20 פצועים בבית החולים

קובי אליה
באופן שיטתי

הסיר שלטי חטופים - ונאלץ להתפטר מתפקידו

שמעון כץ
הסכנה בדרכים

תיעוד קשה: רוכב האופנוע התהפך אל הכביש

אבי יעקב
האשמות הדדיות

מתיחות שיא בין המדינות הגרעיניות: חשש ממלחמה

שמעון כץ
פנייה חדה

דרמה בלב ים: מטוס הקרב החליק מהסיפון

שמעון כץ
גבורה וטהרה

איזו מסירות: החייל שנפל הזדעזע וטבל במקווה כלים בבסיס

אבי מימרן
תיעוד מסכם

לפני שמעד ונפל: זה האירוע בו השתתף ראש הישיבה

נתי קאליש
המוקד הציבורי חוזר

על פער מטורף כזה עוד לא שמעתם. הסל המשתלם בישראל

צבי טסלר
על מה ולמה

המשטרה עצרה "זמר מוכר ולהקתו" והרכב נגרר

גדי פוקס
הרוגים ופצועים

הקלטה העליבה את מוחמד: עימותים אלימים בסוריה

אבי יעקב
תגובות סוערות

סוף הסאגה? רונן בר מודיע על התפטרותו | "ברוך שפטרנו"

קובי פינקלר