רשומות

מוצגים פוסטים עם התווית מחלקת פיתוח

קשב זה כל מה שצריך - המסמך שהביא את מהפכת ה-AI

תמונה
 "בהתחלה היה קשה לשכנע אנשים שזה יעבוד, כי זה היה כל כך שונה" - ניקי פארמר נדיר שמסמך עושה מהפכה. מרתין לותר עשה את זה וגם איזיק ניוטון. נספר את סיפור כתיבת "קשב זה כל מה שצריך" וכיצד יצר מהפכה בהתפתחות הבינה המלאכותית שכולנו חווים היום. מסמך שעשה מהפכה המסמך "Attention Is All You Need" הוא מאמר מחקר משנת 2017 בתחום למידת מכונה, שנכתב על ידי שמונה מדענים שעבדו בגוגל. המאמר הציג ארכיטקטורת למידה עמוקה חדשה המכונה "טרנספורמר" (Transformer), המבוססת על מנגנון הקשב (Attention Mechanism) שהוצע בשנת 2014. המסמך נחשב למאמר יסוד בבינה מלאכותית מודרנית ותורם מרכזי לפריחת הבינה המלאכותית, שכן גישת הטרנספורמר הפכה לארכיטקטורה העיקרית במגוון רחב של יישומי AI, כגון מודלי שפה גדולים (LLMs). זו הייתה פריצת דרך משמעותית שבזכותה פותחו מודלי בינה מלאכותית כ: Chatgpt, Gemini, Grok, Claude ואחרים. אחת הסיבות העיקריות לכך שהארכיטקטורה הזו מועדפת על ידי רוב מודלי השפה הגדולים המודרניים היא יכולת המקביליות שלה על פני קודמותיה. שם המאמר הוא התייחסות לשיר "All You...

הדרך ליישם את תהליך הפיתוח ההנדסי של NASA

תמונה
"כל הידע שלנו מתחיל בחושים, מתפתח להבנה ומתממש בהיווצרות תבונת ההגיון. אין דבר נעלה מההיגיון" - עמנואל קאנט לא מספיק כישרון הנדסי כדי לפתח פתרונות טכנולוגיים שיכולים להתממש במציאות ולהשפיע על חיינו ועל ההצלחה של מיזמים. נדרש תהליך אפקטיבי, שיודעים איך לתפעל וליישם. נאסא"א זיקקו את התהליך שלהם לסדרת מהלכים פשוטים, שניתן ליישם בצוותים קטנים, במיזמים ואפילו בפעילות פנאי שטרם מתחברת לפעילות עסקית סדורה. פרק שיעניין אותך:      מחזור ה-הייפ של Gartner התזמון של אימוץ חדשנות על מודל הפיתוח ההנדסי של נאס"א תהליך התכנון ההנדסי הטוב של נאס"א NASA's Best Engineering Design Process פותח על ידי הסוכנות כמסגרת מפושטת שמאפשרת ללמד ולהטמיע חשיבה ביקורתית ופתרון בעיות באמצעות תכנון הנדסי ופעילויות בנייה גם עם ניסיון מועט או תשתית מינימלית. זה מבוסס על עקרונות תהליך הנדסת המערכות של נאס"א עצמה המשמש את המהנדסים והמדענים בפרויקטי פיתוח אווירונאוטיקה וחלל אמיתיים. הנדסת מערכות שמה דגש על פירוק דרישות לגורמים, ניתוח בעיות, הערכת חלופות, הגדרת פתרונות ובדיקה איטרטיבית ושיפ...