גלובס - עיתון העסקים של ישראלאתר נגיש

עמוד הבית  טכנולוגיה

ה-Ai ברח מהמעבדה של חברה ישראלית. מי אשם?

גוגל מצטרפת ל-OpenAI ואנתרופיק ומודה שמודל הבינה המלאכותית שלה יצא מסביבת הניסויים האטומה של אירגיולר ופעל על דעת עצמו ברשת ● למרות חלוקת האחריות על המחדל, הסטארט-אפ הישראלי נהנה מחשיפה פומבית של רשימת הלקוחות הגדולה ביותר שניתן לבקש ● התקריות מוכיחות כי בהיעדר סטנדרט ורגולציה מחייבת, ענקיות הטכנולוגיה קובעות בעצמן את התזמון והקריטריונים לדיווח על כשלים מסוכנים

דן להב (מימין) ועומר נבו, מייסדי Irregular / צילום: בן חכים
דן להב (מימין) ועומר נבו, מייסדי Irregular / צילום: בן חכים

במהלך השבת הצטרפה גוגל למקהלת ענקיות ה- AI שהודיעו כי מודל הבינה המלאכותית המתקדם שפיתחו נתפס כשהוא מנסה לפרוץ לחברות אמיתיות - בהצתה מאוחרת, לאחר OpenAI ואנתרופיק הודיעו על אותה הבעיה לפני כחודש. שלוש החברות עשו זאת תוך מתן קרדיט - או הפניית אצבע מאשימה - לחברה הישראלית אירגיולר (Irregular), שפיתחה סביבת אבטחת מידע סגורה לכאורה המאפשרת למודלי השפה החזקים ביותר - בהם מיתוס של אנתרופיק או אסטרה של OpenAI - להתנסות במעשים הכי חמורים שהם יכולים לבצע.

סירי המשופרת כבר פה. האם אפל עומדת בציפיות?
המחליף של באפט: חקלאי, צלם ופילנתרופ

במילים אחרות, הסביבה הישראלית, שחוסכת לענקיות ה-AI מאות אנשי אבטחה שמבצעים בדיקות ידניות - מאפשרת למודלים להתפרע בתוך הסביבה האטומה לכאורה שלה, במה שמכונה בשפה המקצועית כ"ארגז חול" (Sandbox) - כדי לבדוק את הסכנות והחולשות שהן מביאות איתן. כפי שהתברר בשבועות האחרונים מאז הדיווח הקודם - סוכני ה- AI המתקדמים של ענקיות הבינה המלאכותית פועלים לא פעם על דעת עצמם, עוקפים כללים ומחסומים ומתאים אלה עם אלה מתקפות - אם כי טרם תועדו מתקפות אוטונומיות מסוכנות שיד אדם לא היתה מעורבת בהם.

פרסומת חינם בלב המשבר: רשימת הלקוחות של אירגיולר נחשפת

ובכל זאת, טוב עשו ארבע ענקיות הטכנולוגיה שהודו ביכולת הזדונית של המודלים שלהם - ובכך שהפנו חלק מהאחריות גם למעבדה הישראלית "אירגיולר" שהקימו היזמים דן להב ועומר נבו ולה גייסו 80 מיליון דולר ממשקיעי צמרת כמו קרן סקויה, רדפוינט, אסף רפפורט ועומרי כספי. ההצטרפות של גוגל לקבוצת החברות שמודות כי המודלים שלהם "ברחו" מהקופסה השחורה של אירגיולר, מהווה בפועל מודעת פרסום חינמית נוספת שממנה נהנית החברה הישראלית. לא בגלל הנזק שאירע - בגוגל טוענים שהנזק נמנע לאחר שהמודל שלה הבין שהוא פורץ לאתר של חברה אמיתית - אלא בגלל העובדה שרשימת הלקוחות של אירגיולר רק הולכת ונחשפת - ואלה הלקוחות הגדולים ביותר שניתן להעלות על הדעת. גם אם נראה שתדמיתה של אירגיולר רק הולכת ונסדקת עם עוד לקוח שיוצא לאור ומחלק איתה את האחריות על מודלי השפה הסוררים - ההסבר למעשה טמון באותו האירוע שאירע כבר בחודש יולי השנה.

אירגיולר קימצה במידע על הפריצה ורק מסרה כי "מדובר באותו אירוע נקודתי שכבר דווח בעבר ולא באירוע נפרד ומהותי. כל מעבדות ה- AI הרלוונטיות עודכנו בסוף יולי וכל הבעיות הידועות שהיו בצד שלנו טופלו ונפתרו כבר לפני מספר שבועות". אלא שאחד מחוקרי החברה הרחיב על כך בתגובה ברשת אקס: "בין יתר הדברים שאנחנו עושים, יצרנו סט אתגרים שמדמים חברות אמיתיות ואנחנו נותנים למודלים הכי מתוחכמים בעולם, כאשר הם פועלים בהגדרות הכי מאפשרות שלהם, להדגים כמה רחוק הם יכולים להגיע כאשר נותנים להם אתגרי אבטחת מידע מורכבים. בחלק מהאתגרים הללו הגישה לאינטרנט הכרחית על מנת לאפשר למודלים לפעול במלוא היכולת שלהם. באחד מהאתגרים הייתה גישה לא מכוונת לאינטרנט ומדובר באותה תקלה נקודתית כמו באירועים הקודמים שפורסמו לפני חודשיים, וכמובן שהבעיה תוקנה מאז. הסנדבוקס שלנו דווקא מחזיק מעמד יופי".

הכשל הכפול: כך ג'מיני יצא מהמרחב המוגן למתקפה אוטונומית

במקרים המדווחים בגוגל - כפי שאירע גם במטא , אנתרופיק ו-OpenAI - התקיימו שני כשלים: המודל תירגל פריצה לאתר כלשהו בעל שם פיקטיבי, אלא שבאופן אוטונומי הוא איתר חברה אמיתית בעלת שם דומה וניסה לפרוץ אליה. הכשל השני כלל, כפי שציין אותו עובד באירגיולר, נקודת יציאה מהמרחב הדיגיטלי המוגן לרשת האינטרנט שלא הוגדרה במקומה. במקרה של גוגל, ג'מיני תקפה את אחד האתרים על ידי ניחוש ססמאות סדרתי עד קבלת גישה למערכת המוגנת, ובמקרה אחר מצא המודל פרטים מוכמנים של שם משתמש וססמה, שאפשרו לו לנסות ולפרוץ לשני ארגונים אחרים. גוגל טוענת שנזק לא נגרם וכי היא עצרה את הפריצה עוד לפני שזו הספיקה לגבות מחיר.

מקרה דומה קרה לאירגיולר גם עם אנתרופיק, יצרנית קלוד וגם כמה מהמודלים העוצמתיים ביותר שנבדקו באירגיולר - פייבל ומיתוס. בבלוג של אירגיולר הסבירו כבר לפני כחודשיים בילבול בכתובת של אתר אינטרנט חיצוני הביא לכשל. הרשומה בבלוג ייחסה את הכשל במרומז לגורם האנושי וטענה שכתובת האתר האמיתי לא הייתה ידועה והקשר בינה לבין החברה לא זוהה בסקירה הראשונה שלה. במקרה אחר העלה המודל של אנתרופיק העלה בטעות חבילת קוד פייתון זדונית לספריה שהביאה אתרים אחרים להוריד אותן. האשם, הוא, כאמור, באותה דלת אחורית שהושארה פתוחה ואפשרה למודל לצאת החוצה מהקופסא השחורה המוגנת - החוצה. במקרה זה מפנים האחראים את הבעיה לא רק כלפי עצמם, אלא גם כלפי תצורת המערכת של אנתרופיק שהביאה להתנהגות הזדונית של המערכת - ובמשתמע, במי שפיתח את אותה התצורה.

בכל המקרים הללו, לא נרשמו נזקים חמורים - ואולי זו הסיבה שהחברות המדוברות - גוגל, אנתרופיק או אירגיולר עצמה - הרשו לעצמן להתייחס למקרים האלה ללא חשש. בגוגל התגאו במיוחד שהמודלים הפסיקו את פעילותם כאשר הבינו כי פרצו לאתרים אותנטיים. דווקא המודל המתקדם פחות של אנתרופיק, אופוס 4.7 המשיך בתקיפה לאחר שהבין את הטעות, אך מודל מיתוס 5 המתקדם יותר עצר את עצמו בפרץ.

הבעיה טמונה לא רק בכך שחברה אחת משרתת כ"ארגז החול" של כל יצרניות המודלים האמריקאיות הגדולות, אלא בכך שחברות משחררות הודעות על מודלים סוררים בהתנדבות: הן קובעות את התנאים, הקריטריונים והתזמון לשחרור ההודעה. כך קרה שגוגל הרשתה לעצמה לתאר מקרה שקרה כבר לפני חודשיים, באירוע שכבר דווח עליו על ידי שתיים מהמתחרות הגדולות שלה. ואם להאמין לבכירי החברות - ובפרט לדריו אמודאי, מנכ"ל אנתרופיק וסאם אלטמן, מנכ"ל OpenAI, השליטה על מודלי השפה איננה מוחלטת ועשויה להפתיע לרעה. כשאין רגולציה ואין סטנדרט - השקיפות היא סלקטיבית, וזאת בענף שהפך את עורו ממיזם מדעי למכונת מזומנים מסחרית. קריאתו של טראמפ לזנוח את השיקולים המוסריים סביב פיתוח בינה מלאכותית בשל חשש מיתרון סיני, מבטיחה שהתעשייה תמשיך להתנהל באופן שכזה גם בשנים הקרובות.

עוד כתבות

דונלד טראמפ נשיא ארה''ב / צילום: Shutterstock

הכחשה באמירויות: בן זאיד לא העביר התרעה לנתניהו לפני 7 באוקטובר; טראמפ קטע במפתיע את חופשתו

טהראן טוענת כי העבירה לארה"ב דרך תיווך קטארי את תנאיה לסיום המלחמה; במקביל, הנשיא טראמפ קיצר במפתיע את חופשתו בקמפ דייוויד וחזר לבית הלבן ● צה"ל חיסל מפקד בזרוע הצבאית של חמאס שלקח חלק פעיל בטבח 7 באוקטובר ● החות'ים מאיימים בפעולה צבאית נגד טורקיה ופקיסטן, בזמן שהקואליציה הסעודית מסכלת שורת מתקפות בשטחה ● גורם רשמי מכחיש את הדיווחים לפיהם מוחמד בן זאיד העביר לנתניהו התרעה טרם מתקפת הפתע ● עדכונים שוטפים

קופרה טראמר / צילום: יח''צ

החל מ-226 אלף שקל: הקרוס אובר שמגיע עם מראה קרבי וביצועים משופרים

הרכב מבית פולקסווגן צובר הרבה נקודות זכות על עיצוב אגרסיבי שפונה לקהל צעיר, ותא נוסעים איכותי ומאובזר ● התנהגות הכביש מלוטשת אבל לגרסת הבסיס לא היו מזיקים עוד כמה עשרות כוחות סוס

ראש ממשלת קנדה מארק קרני / צילום: ap, Thomas Padilla

קרני בירך את הצעת האיחוד האירופי ורמז לטראמפ: "המכסים הפכו לנשק"

בנאום שנשא אמש בשטרסבורג ראש ממשלת קנדה, מארק קרני, הוא בירך על הצעת האיחוד האירופי להפוך את קנדה לחברה בגוש בן 27 המדינות כ"חברה נילוות" ● בתגובה להצעה האירופית, טראמפ איים כי ארה"ב עשויה "להפסיק לסחור עם אירופה בדברים רבים" אם האיחוד יקדם את תוכניתו

מערכת ההגנה האווירית ספיידר / צילום: רפאל

רפאל מאשרת את חשיפת גלובס: בדרך לעסקת ענק בצ׳כיה

רפאל אישרה את חשיפת גלובס על המגעים להרחבת עסקת מערכת ההגנה האווירית ספיידר בצ׳כיה, שנחתמה במקור עבור ארבע סוללות ● התוכנית צפויה להתפתח למערך הגנה לאומי משולב, עם יכולות נגד טילים בליסטיים וכטב”מים ומערכות מבוססות לייזר ● שתי הסוללות הראשונות מהעסקה המקורית כבר נמצאות בצ׳כיה

המפלגה החדשה שעשויה להכריע את גורל הבחירות

מדינת ישראל הולכת לבחירות, והמשרוקית של גלובס מביאה את הסקרים העדכניים ביותר מכל כלי התקשורת ● מי מתחזק, מי נחלש ואיך זה משפיע על יחסי הכוחות בין המחנות? ● והפעם: הנתון שיכריע את ההובלה הגושית, והלקח הכואב שהמפלגות הקטנות צריכות ללמוד

משחק בסקווישים / אילוסטרציה: Shutterstock

הסקווישי מציג: מהלהיט של השנה לסיוט בטיחותי

הצעצוע הרך והצבעוני שסחף ילדים בארה”ב וגם בישראל הפך לאחת מתופעות הצריכה הגדולות של השנה ● אלא שתחקיר Business Insider חושף אלפי דיווחים על דליפות, ריחות כימיים, כוויות ואפילו התפוצצויות

עיבוד: טלי בוגדנובסקי, צילומים: AP, Shutterstock

המומחה שמזהיר: "תשואות הענק בבורסה מאחורינו" - ועוד 4 כתבות על המצב בשווקים

נהל ההשקעות שמציע להתאים ציפיות: "לא עוד עשרות אחוזי רווח בבורסה בת"א" ● המרוויחות והמפסידות מהאטה במרוץ ה-AI ● המתכת היקרה שזינקה - ומשמשת אינדיקטור למצב הכלכלה העולמית ● וגם: למה הפד העלה ריבית ואיך ההחלטה עשויה להשפיע על ישראל?

דונלד טראמפ/ צילומים: רויטרס, שאטרסטוק

טראמפ: ארה"ב השיגה שליטה קבועה בענייני הביטחון בגרינלנד

נשיא ארה"ב הודיע על הסכם עם דנמרק וגרינלנד, שצפוי להיחתם בימים הקרובים, ובמסגרתו וושינגטון תקבל סמכות למנוע מאויביה להקים בסיסים או לבצע השקעות רגישות באי ● בנוסף הודיע כי ארה"ב תפתח בו "באופן מיידי" נוכחות צבאית גדולה ● הנשיא האמריקאי דרש בעבר ריבונות על האי ואף לא שלל שימוש בכוח, אך כעת נראה כי מדובר בהסכם ביטחוני בלבד

אליף ארלאפ, מועמדת מפלגת השמאל די לינקה לראשות ברלין / צילום: Reuters

"בעיית אנטישמיות" ונגד ישראל: האם השמאל עומד להשתלט מחר על בירת גרמניה?

ברלין תלך מחר לקלפיות, כשמפלגת השמאל די לינקה מנהלת קרב צמוד מול מפלגת המרכז־ימין השמרנית על המקום הראשון ● הזינוק בתמיכה בשמאל מגיע על רקע משבר הדיור ויוקר המחיה, אך גם מלווה בביקורת חריפה על התבטאויות אנטישמיות ואנטי־ישראליות בשורות המפלגה ● ניצחון של די לינקה עשוי להביא לראשונה להקמת קואליציה בברלין בהובלתה

סירי המשופרת כבר פה. האם אפל עומדת בציפיות?

ענקית הטכנולוגיה משיקה את מערכת ההפעלה iOS 27, שהחידוש העיקרי בה נוגע ליכולות הבינה המלאכותית של סירי ● לצד זאת היא מציעה שדרוגי ביצועים, אך לא סוגרת את כל הפערים מול גוגל

זום גלובלי / צילום: AP - Sunday Alamba

המדינה ששברה שיא במספר האנשים שהגיעו לגיל מאה

עיירה בקליפורניה מוצעת למכירה, לאחר שכבר נמכרה בעבר ● ממשלת איטליה מבטלת אגרת רכב לקראת הבחירות. המחיר לקופת המדינה: כ־2 מיליארד דולר ● ויפן חוצה שיא עולמי של בני 100 על רקע משבר דמוגרפי חריף ● זום גלובלי

ג'ון הרינג, מייסד-שותף בקרן Vy Capital / צילום: Reuters

הקרן הסודית מדובאי שהשקיעה במאסק בזמנים הקשים - והתעשרה מהנפקת SpaceX

אלכסנדר טמאס ושותפו ג'ון הרינג הקימו את קרן Vy Capital בדובאי, והפכו למשקיעים מרכזיים בחברות של אילון מאסק ● הקרן מחזיקה כ־3.4% מ-SpaceX, והשקיעה גם ב־ xAI, נוירלינק ו'בורינג קומפני' ● מאז סוף השנה שעברה זינק היקף הנכסים המנוהלים של הקרן מ־27 ל־50 מיליארד דולר, והיא שומרת על פרופיל ציבורי נמוך למרות הצלחותיה

מה מקור המילה בנק? / צילום: Shutterstock

מה מקור המילה בנק?

איזה שיר ששרה מירי אלוני נפתח במילים מתוך תפילת "כל נדרי", למה משמש קבוע אבוגדרו ואיזה איבר בגופם של תנינים אינו יכול לנוע כלל? ● הטריוויה השבועית

רם דרורי / עיבוד: AI, מקור: יוסי זמיר

מקום 29: "לקוחות בחו"ל מודאגים מהמלחמה, אבל חותמים איתנו 15 שנה קדימה"

מנכ"ל מנועי בית שמש רם דרורי הוביל את החברה לקפיצה אסטרונומית, והמניה זינקה ביותר מ-1,300% בחמש שנים ● בראיון הוא מספר על השטיח האדום שפרס לחיל האוויר, האופציות לעובדים ב-25 מיליון שקל ולמה חברת המנועים שלו רחוקה מלהיות מוסך ● 30 המנהלים והמנהלות הטובים 2026 

אילוסטרציה: טלי בוגדנובסקי, חומרים: Shutterstock

"חופשות המסתורין" בהן אין לכם מושג לאן אתם טסים

נוסעים מהמרים על חבילות נופש במחירי רצפה, שעשויות לקחת אותם להוואי, או לטמפה שבפלורידה

אתונה, יוון. המשקיעים מחפשים דירות קטנות יותר / צילום: Shutterstock

המחירים עולים, התשואות מתמתנות: האם התשואה בפורטוגל, ביוון ובקפריסין מצדיקה את הסיכון?

נתוני הלמ"ס והבנקים המרכזיים בפורטוגל, ביוון ובקפריסין חושפים תמונת מצב מורכבת של שווקים בחוסר איזון, בירוקרטיה מעכבת וסיכוני בועה פיננסית

ריאד, בירת סעודיה / צילום: Shutterstock, Mohammed younos

מתקפה של החות'ים על סעודיה: שרפת ענק בנמל התעופה הראשי

דיווחים בסעודיה: מתקפה של החות'ים על נמל התעופה בריאד, שרפת ענק ועצירת טיסות ● ראש מערך הביטחון של איראן בריאיון לאל-ג'זירה: קטאר העבירה לארה"ב את התנאים של איראן לסיום המלחמה, ממתינים לתשובתו של טראמפ ● 2 לוחמים נפצעו קל מפיצוץ בדרום לבנון, צה"ל תקף בתגובה ● טראמפ הכריז: "ארה"ב שולטת ביטחונית בגרינלנד" ● דיווח בוושינגטון פוסט: מותם של ארבעה חיילים אמריקאים לפחות הושמט מהדיווחים הרשמיים של הפנטגון במהלך המלחמה עם איראן

מערכת ההגנה האווירית ''ספיידר'' של רפאל

על סף חתימה: עסקת הענק של רפאל בצ'כיה

לגלובס נודע כי רפאל נמצאת על סף חתימה עם צ'כיה למכירת מערכות הגנה אווירית מדגם ספיידר, ומערכות שליטה ובקרה ● העסקה, שצפויה להניב לחברה הישראלית מיליארדים נוספים, תתווסף למכירת ספיידר לרומניה תמורת כשני מיליארד אירו, שנסגרה לפני כשלושה חודשים ● בניגוד לרומניה, לצ'כיה כבר יש ארבע מערכות ספיידר

עיבוד: טלי בוגדנובסקי, צילומים: אלביט, לוקהיד מרטין, AP

איזו מניה ישראלית החלה לקבל סיקור של גופים בינלאומיים?

איזו מניה ביטחונית ישראלית החלה לקבל השבוע סיקור של גופי השקעות בינלאומיים? ● לפי הלמ"ס, מה קרה למחירי דירות יד שנייה ברבעון השני של השנה? ● וגם: במה הודתה היזמת הישראלית עילית רז, מייסדת ומנכ"לית הסטארט־אפ ג'ונקו? ● חושבים שאתם בקיאים בכל מה שקרה השבוע בכלכלה בארץ ובעולם? בואו לבחון את הידע שלכם ● החידון הכלכלי של גלובס

הפגנה נגד מפלגת הימין הקיצוני AfD, לאחר הניצחון בסקסוניה־אנהלט / צילום: Reuters, Christian Mang

7 מיליון מבקשי מקלט נהרו לאירופה והולידו מפץ פוליטי

בלב הפוליטיקה האירופאית עומדת שורה של נושאים חדשים, הכוללת הגירה, זהות לאומית ואקלים ● בזמן שבמפלגות הקיצון הפופוליסטיות מטיבים למנף את הנושאים הבוערים, וכך זכו בבחירות הכלליות בשבדיה השבוע ובבחירות למדינת המחוז בסקסוניה־אנהלט בגרמניה, מפלגות המרכז הותיקות נותרות מאחור ● והחשש הגדול: תנועת המטוטלת הפוליטית עשויה להפוך למהירה ולחדה הרבה יותר