חוקרים וחוקרות שואלים שאלות מרתקות ומתגלגלים מהן אל שאלות רבות אחרות, תחומי ידע נפגשים עם תחומים אחרים, ולעתים גם נמצאת תשובה. בכל תוכנית גיל מרקוביץ תצלול עם החוקרים לעומקם של התהליכים המורכבים שמשפיעים על חיינו
…
continue reading
תוכן מסופק על ידי Tamir Nave & Uri Goren, Tamir Nave, and Uri Goren. כל תוכן הפודקאסטים כולל פרקים, גרפיקה ותיאורי פודקאסטים מועלים ומסופקים ישירות על ידי Tamir Nave & Uri Goren, Tamir Nave, and Uri Goren או שותף פלטפורמת הפודקאסט שלהם. אם אתה מאמין שמישהו משתמש ביצירה שלך המוגנת בזכויות יוצרים ללא רשותך, אתה יכול לעקוב אחר התהליך המתואר כאן https://he.player.fm/legal.
דומה לExplAInable
שרון קנטור ומומחים לומדים ומלמדים דברים חדשים
…
continue reading
פודקאסט על מדע, טכנולוגיה והיסטוריה
…
continue reading
דורון פישלר נותן תשובות לשאלות הקטנות והגדולות, הטפשיות והמחוכמות, המוזרות והמרתקות של החיים
…
continue reading
1
הפודקאסט של Think&Drink Different עם ג'רמי פוגל
הפודקאסט של Think&Drink Different עם ג'רמי פוגל
1k
268
כל שבוע ד"ר ג'רמי פוגל מדבר על השאלות הגדולות של החיים: מה זאת אהבה? מהי משמעות החיים? איך ייראה שוק העבודה בעתיד והאם העולם שלנו הופך לשוויוני פחות או יותר? מהי תפיסת העולם ע"פ איינשטיין או ע"פ פרידריך ניטשה? על כל אלה ועוד הרבה, תוכלו לשמוע מפיו של ד"ר ג'רמי פוגל בסגנונו המיוחד, יחד עם האורחים המרתקים שלנו.
…
continue reading
שיחות עם האנשים המעניינים בישראל
…
continue reading
ברוכים הבאים לחושבים טוב! כאן יהודית כץ. חושבים טוב נולד כדי שנוכל לחשוב טוב על איך אנחנו מעבירים את ימינו, עם מי אנחנו מסתובבים ובמה אנחנו מזינים את המוח שלנו. כדי שלא ניתן לחיים האלה לחלוף לפני שנשים לב. המטרה שלי היא להנגיש את הכלים והמסקנות הכי חזקות מעולם הפסיכולוגיה והמחקר. בשביל זה, אני פוגשת בכל פרק דמות מרתקת מעולם המחקר או השטח. בשיחה פתוחה, נתעמק כל פעם בנושא שהופך את החיים למשמעותיים: איך עושים שינוי? איך לטפח חוסן נפשי? מאיפה מוצאים אומץ ואיך מקבלים החלטות בעולם מבלבל? ומי אני? ...
…
continue reading
Player FM - אפליקציית פודקאסט
התחל במצב לא מקוון עם האפליקציה Player FM !
התחל במצב לא מקוון עם האפליקציה Player FM !
))
על RLHF ומודלי שפה גדולים
Manage episode 477949053 series 2995782
תוכן מסופק על ידי Tamir Nave & Uri Goren, Tamir Nave, and Uri Goren. כל תוכן הפודקאסטים כולל פרקים, גרפיקה ותיאורי פודקאסטים מועלים ומסופקים ישירות על ידי Tamir Nave & Uri Goren, Tamir Nave, and Uri Goren או שותף פלטפורמת הפודקאסט שלהם. אם אתה מאמין שמישהו משתמש ביצירה שלך המוגנת בזכויות יוצרים ללא רשותך, אתה יכול לעקוב אחר התהליך המתואר כאן https://he.player.fm/legal.
בפרק זה החליפו מייק ותמיר את התובנות החידודים והשאלות הפתוחות שלהם בניסיון להבין איך מתחברים עולם ה RL ועולם ה LLM (קרי RLHF). ב 2024 השתנתה הפרדיגמה - בתחילה יצירת מודל reward כדי לעשות אימון נוסף ל LLM אחרי ה pretraining שלו באמצעות PPO. ולאחר מכן הוחלף ה PPO בRLHF.
בעוד רוב מודלי ה reasoning של החברות הגדולות (chatgpt, claude, gemini) עדיין באפילה - נדבר על איך לדעתנו RLHF יכול לשמש בתהליך.
116 פרקים
שתפו
Manage episode 477949053 series 2995782
תוכן מסופק על ידי Tamir Nave & Uri Goren, Tamir Nave, and Uri Goren. כל תוכן הפודקאסטים כולל פרקים, גרפיקה ותיאורי פודקאסטים מועלים ומסופקים ישירות על ידי Tamir Nave & Uri Goren, Tamir Nave, and Uri Goren או שותף פלטפורמת הפודקאסט שלהם. אם אתה מאמין שמישהו משתמש ביצירה שלך המוגנת בזכויות יוצרים ללא רשותך, אתה יכול לעקוב אחר התהליך המתואר כאן https://he.player.fm/legal.
בפרק זה החליפו מייק ותמיר את התובנות החידודים והשאלות הפתוחות שלהם בניסיון להבין איך מתחברים עולם ה RL ועולם ה LLM (קרי RLHF). ב 2024 השתנתה הפרדיגמה - בתחילה יצירת מודל reward כדי לעשות אימון נוסף ל LLM אחרי ה pretraining שלו באמצעות PPO. ולאחר מכן הוחלף ה PPO בRLHF.
בעוד רוב מודלי ה reasoning של החברות הגדולות (chatgpt, claude, gemini) עדיין באפילה - נדבר על איך לדעתנו RLHF יכול לשמש בתהליך.
116 פרקים
כל הפרקים
×
ברוכים הבאים אל Player FM!
Player FM סורק את האינטרנט עבור פודקאסטים באיכות גבוהה בשבילכם כדי שתהנו מהם כרגע. זה יישום הפודקאסט הטוב ביותר והוא עובד על אנדרואיד, iPhone ואינטרנט. הירשמו לסנכרון מנויים במכשירים שונים.
דומה לExplAInable
חוקרים וחוקרות שואלים שאלות מרתקות ומתגלגלים מהן אל שאלות רבות אחרות, תחומי ידע נפגשים עם תחומים אחרים, ולעתים גם נמצאת תשובה. בכל תוכנית גיל מרקוביץ תצלול עם החוקרים לעומקם של התהליכים המורכבים שמשפיעים על חיינו
…
continue reading
שרון קנטור ומומחים לומדים ומלמדים דברים חדשים
…
continue reading
פודקאסט על מדע, טכנולוגיה והיסטוריה
…
continue reading
דורון פישלר נותן תשובות לשאלות הקטנות והגדולות, הטפשיות והמחוכמות, המוזרות והמרתקות של החיים
…
continue reading
1
הפודקאסט של Think&Drink Different עם ג'רמי פוגל
הפודקאסט של Think&Drink Different עם ג'רמי פוגל
1k268
כל שבוע ד"ר ג'רמי פוגל מדבר על השאלות הגדולות של החיים: מה זאת אהבה? מהי משמעות החיים? איך ייראה שוק העבודה בעתיד והאם העולם שלנו הופך לשוויוני פחות או יותר? מהי תפיסת העולם ע"פ איינשטיין או ע"פ פרידריך ניטשה? על כל אלה ועוד הרבה, תוכלו לשמוע מפיו של ד"ר ג'רמי פוגל בסגנונו המיוחד, יחד עם האורחים המרתקים שלנו.
…
continue reading
שיחות עם האנשים המעניינים בישראל
…
continue reading
ברוכים הבאים לחושבים טוב! כאן יהודית כץ. חושבים טוב נולד כדי שנוכל לחשוב טוב על איך אנחנו מעבירים את ימינו, עם מי אנחנו מסתובבים ובמה אנחנו מזינים את המוח שלנו. כדי שלא ניתן לחיים האלה לחלוף לפני שנשים לב. המטרה שלי היא להנגיש את הכלים והמסקנות הכי חזקות מעולם הפסיכולוגיה והמחקר. בשביל זה, אני פוגשת בכל פרק דמות מרתקת מעולם המחקר או השטח. בשיחה פתוחה, נתעמק כל פעם בנושא שהופך את החיים למשמעותיים: איך עושים שינוי? איך לטפח חוסן נפשי? מאיפה מוצאים אומץ ואיך מקבלים החלטות בעולם מבלבל? ומי אני? ...
…
continue reading
Player FM - אפליקציית פודקאסט
התחל במצב לא מקוון עם האפליקציה Player FM !
התחל במצב לא מקוון עם האפליקציה Player FM !
