רשומות

ספר: למה שום דבר לא עובד - מארק ג'יי דונקלמן

תמונה
"כשמתכנסים ב-'בועות' של דומים לנו, מאבדים יכולת לגשר פערים, להגיע לפשרה, לפתח רעיונות ובעצם, להתקדם" -   מארק ג'יי דנקלמן נדמה שהכל תקוע. כשכולם מחוברים והטכנולוגיה רצה, מערכות תקועות, אנשים מאבדים אמון והקונפליקטים מחריפים. דונקלמן חקר והסיק שהכשל בקשרים הבינוניים. הרהור על קידמה שנעצרה האם אתם מרגישים לפעמים שאנחנו תקועים? שאף על פי שהטכנולוגיה דוהרת קדימה בקצב מסחרר, סמארטפונים חכמים יותר, רכבים אוטונומיים, בינה מלאכותית שמשנה את פני עולמנו – הקידמה האמיתית, זו שמשפרת את חיינו כחברה, נבלמה אי שם? אנחנו מצליחים לשלוח חלליות למאדים, אבל מתקשים לפתור בעיות פשוטות לכאורה במערכות הבריאות, החינוך או הפוליטיקה. מדוע, למרות שפע המידע והכלים שברשותנו, נראה ששום דבר לא עובד כפי שהיינו מצפים? זוהי שאלה מטרידה שמהדהדת אצל רבים מאיתנו, והיא גם נקודת המוצא של ספר מרתק ומעורר מחשבה: "למה שום דבר לא עובד: מי הרג את הקידמה – ואיך להחזיר אותה" מאת מארק ג'יי דונקלמן . דנקלמן, הוגה דעות ועמית במכון קרנגי להקדמה בינלאומית, מציע בספרו תובנה מפתיעה ומקורית לשאלה זו, כז...

קשב זה כל מה שצריך - המסמך שהביא את מהפכת ה-AI

תמונה
 "בהתחלה היה קשה לשכנע אנשים שזה יעבוד, כי זה היה כל כך שונה" - ניקי פארמר נדיר שמסמך עושה מהפכה. מרתין לותר עשה את זה וגם איזיק ניוטון. נספר את סיפור כתיבת "קשב זה כל מה שצריך" וכיצד יצר מהפכה בהתפתחות הבינה המלאכותית שכולנו חווים היום. מסמך שעשה מהפכה המסמך "Attention Is All You Need" הוא מאמר מחקר משנת 2017 בתחום למידת מכונה, שנכתב על ידי שמונה מדענים שעבדו בגוגל. המאמר הציג ארכיטקטורת למידה עמוקה חדשה המכונה "טרנספורמר" (Transformer), המבוססת על מנגנון הקשב (Attention Mechanism) שהוצע בשנת 2014. המסמך נחשב למאמר יסוד בבינה מלאכותית מודרנית ותורם מרכזי לפריחת הבינה המלאכותית, שכן גישת הטרנספורמר הפכה לארכיטקטורה העיקרית במגוון רחב של יישומי AI, כגון מודלי שפה גדולים (LLMs). זו הייתה פריצת דרך משמעותית שבזכותה פותחו מודלי בינה מלאכותית כ: Chatgpt, Gemini, Grok, Claude ואחרים. אחת הסיבות העיקריות לכך שהארכיטקטורה הזו מועדפת על ידי רוב מודלי השפה הגדולים המודרניים היא יכולת המקביליות שלה על פני קודמותיה. שם המאמר הוא התייחסות לשיר "All You...