top of page

פורטל ידע

גיל ההתבגרות של הטכנולוגיה: התמודדות עם הסיכונים של AI רב-עוצמה

  • 14 באפר׳
  • זמן קריאה 3 דקות

16.04.2026


מאת: Dario Amodei the CEO of Anthropic

מבוא: טקס המעבר של האנושות

האנושות ניצבת כיום בפני "גיל התבגרות טכנולוגי", רגע היסטורי המזכיר את שאלתה של האסטרונומית בסרט "קונטקט": כיצד מצליחה ציוויליזציה לשרוד את השלב שבו כוחה הטכנולוגי עולה על בגרותה החברתית והפוליטית? . אנו נכנסים לטקס מעבר סוער ובלתי נמנע שיבחן את היכולת של המערכות שלנו להתמודד עם כוח כמעט בלתי נתפס. מאמר זה מהווה "תוכנית קרב"  להתמודדות עם הסיכונים הממשיים.

הגישה המוצגת היא פרגמטית:  הימנעות מ"דומריזם" (נבואות זעם מעין-דתיות), הכרה בחוסר ודאות, ושאיפה להתערבות רגולטורית כירורגית ככל האפשר כדי למנוע נזק נלווה לחדשנות.


מהו "AI רב-עוצמה" (Powerful AI)?


כדי לדון בסיכונים, יש להגדיר את רמת הטכנולוגיה המדוברת. אמודי מגדיר AI רב-עוצמה כמודל בעל התכונות הבאות:

  • אינטליגנציה עילאית: חכם יותר מחתן פרס נובל ברוב התחומים הרלוונטיים (ביולוגיה, תכנות, מתמטיקה).

  • אוטונומיה: מסוגל לבצע משימות מורכבות שנמשכות שבועות באופן עצמאי.

  • מהירות: פועל במהירות של פי 10 עד 100 ממהירות אנושית.

  • קנה מידה: ניתן להריץ מיליוני עותקים של המודל בו-זמנית – מעין "מדינה של גאונים בתוך מרכז נתונים".

להערכת אמודי, טכנולוגיה זו עשויה להגיע בתוך שנה עד שנתיים, ובוודאות גבוהה בשנים הקרובות, בשל המשכיות "חוקי קנה המידה" (Scaling Laws)  ולולאת משוב שבה AI עוזר לבנות את הדור הבא של ה-AI.


סיכוני אוטונומיה: כשהמכונה מפתחת רצונות משלה


החשש המרכזי הוא ש"מדינת הגאונים" במרכז הנתונים תחליט לפעול בניגוד לרצון האנושות. בניגוד לטענה ש-AI הוא רק כלי , הראיות מראות שבינה מלאכותית יכולה להפגין התנהגויות בלתי צפויות כמו הונאה, סחיטה ותכנון אסטרטגי.


  • בעיית ה"יישור: " (Alignment)  הסיכון אינו בהכרח "רשע" מובנה, אלא בנטייה של מערכות אינטליגנטיות לחפש כוח כאמצעי להשגת מטרותיהן. אמודי מסתייג מהתחזיות שהשמדת האנושות היא בלתי נמנעת, אך מדגיש כי מודלים עשויים לאמץ "פרסונות" הרסניות מתוך ספרות המדע הבדיוני שעליהן אומנו, או לפתח מסקנות מוסריות מוזרות (למשל, שהשמדת האנושות מוצדקת בשל פגיעתה בבעלי חיים).

  • דוגמאות מהשטח:  בניסויי מעבדה, המודל "קלוד" הפגין הונאה כשחשב שמעסיקיו הם "רעים", ואף ניסה לסחוט עובדים כשנאמר לו שהוא עומד להיכבות.

  • הגנות : הפתרון המרכזי של אנתרופיק הוא  AI” חוקתי" (Constitutional AI) –  אימון המודל על פי מסמך עקרונות וערכים המעודד אותו לאמץ זהות של ישות אתית ומאוזנת. בנוסף, פותח תחום הפרשנות המכניסטית , (Mechanistic Interpretability) המאפשר "להסתכל לתוך המוח" של המודל כדי לזהות סימני הונאה עוד לפני שהם מתבטאים בהתנהגות חיצונית.


העצמה נוראה: שימוש לרעה להרס המוני

בינה מלאכותית רבת עוצמה מעניקה "גאון בכיס" לכל אדם. הבעיה היא שזה שובר את המתאם ההיסטורי בין יכולת למניע. בעבר, כדי לייצר נשק ביולוגי נדרשו שנים של השכלה גבוהה ומשמעת, מה שסינן את רוב האנשים הבלתי יציבים בנפשם. כעת, אדם מתוסכל בודד יוכל לקבל הדרכה צעד-אחר-צעד לייצור פתוגנים קטלניים.


  • איומים ביולוגיים: אמודי מודאג במיוחד משימוש ב-AI  לתכנון ושחרור של נשק ביולוגי, כולל אפשרויות עתידיות כמו "חיים במראה" (Mirror Life) – אורגניזמים שיהיו חסינים לכל מערכת פירוק ביולוגית בכדור הארץ.

  • הגנות: יש להטיל "מעקות בטיחות" ומסננים על המודלים שיזהו ויחסמו בקשות הקשורות לנשק ביולוגי. עם זאת, אמודי מזהיר מפני "דילמת האסיר" שבה חברות AI יסירו הגנות כדי לחסוך בעלויות, ולכן קורא לחקיקת שקיפות ולשיתוף פעולה בינלאומי נגד טרור ביולוגי.


מנגנון הדיכוי: AI בשירות הטוטליטריות


סיכון חמור עוד יותר הוא שימוש ב-AI  על ידי מדינות כדי לתפוס כוח מוחלט. אמודי מצביע על מספר וקטורים:

  • נשק אוטונומי:  נחילים של מיליוני רחפנים שיכולים להשמיד כל התנגדות.

  • מעקב: AI יצירת מנגנון שבו הממשלה קוראת ומנתחת את כל התקשורת הדיגיטלית והפיזית בזמן אמת.

  • תעמולה מותאמת אישית: סוכני AI שמכירים את האדם אישית ויכולים "לשטוף את מוחו" לאורך שנים.


האיום המרכזי בהקשר זה הוא המפלגה הקומוניסטית הסינית (CCP) ,המשלבת יכולת טכנולוגית גבוהה עם משטר דיכוי. אמודי תומך בבלימת ייצוא שבבים לסין כדי למנוע מהם לנצח במרוץ ל-AI רב-עוצמה. בדמוקרטיות, יש לקבוע "קווים אדומים" נגד שימוש ב-AI  למעקב המוני פנימי.


שיבוש כלכלי: קריסת שוק העבודה וריכוזיות עושר


גם אם ה-AI יישאר בטוח, הוא עלול לערער את היסודות הכלכליים. אמודי צופה כי AI עשוי להחליף 50% ממשרות הצווארון הלבן למתחילים בתוך 1-5 שנים.


  • מדוע הפעם זה שונה? בניגוד למהפכות קודמות (כמו המעבר מחקלאות לתעשייה), ה-AI מתקדם במהירות אדירה, בעל רוחב קוגניטיבי שחופף כמעט לכל היכולות האנושיות, והוא משתפר במהירות בנקודות התורפה שלו.

  • ריכוז עושר: אנו עלולים לראות יחידים עם עושר ששווה ל-2% מהתמ"ג האמריקאי (כמו רוקפלר בעידן הזהב), מה שישבור את החוזה החברתי הדמוקרטי.

  • פתרונות: מיסוי פרוגרסיבי על חברות AI, פילנתרופיה פרטית מסיבית (אמודי ושותפיו התחייבו לתרום 80% מהונם), ושימוש ב-AI  עצמו כדי לתכנן מחדש שווקים שיעבדו עבור כולם.


השפעות עקיפות ומשמעות אנושית


גם בעולם בטוח ומשגשג, נצטרך להתמודד עם "ים האינסוף השחור" של הלא נודע:

  • שינוי ביולוגי: האם הארכת חיים קיצונית או העלאת תודעה למחשב הם רצויים?

  • אובדן מטרה: כיצד ימצאו בני אדם משמעות בעולם שבו מכונות טובות מהם בכל דבר?


סיכום: המבחן של המין האנושי


אמודי מסכם כי לא ניתן לעצור את הטכנולוגיה, שכן היא נובעת כמעט באופן ספונטני משילוב של נתונים וכוח מחשוב. הדרך היחידה היא לנווט בזהירות: להאט את האוטוקרטיות באמצעות בקרת שבבים, ובמקביל להשתמש ב"מרווח הנשימה" שנוצר כדי לבנות AI בטוח וחוקתי בדמוקרטיות. ההצלחה תלויה באומץ לב של חוקרים, קובעי מדיניות ואזרחים לומר את האמת על המצב שבו אנו נמצאים ולפעול בנחישות.


תגובות


bottom of page