التكنولوجيا Podcast Summaries

التكنولوجيا on Yedapo: 1 summarized podcast and YouTube episode. Each includes key takeaways, core concepts and notable quotes with timestamps.

Large Language Models explained briefly
3Blue1Brown
Nov 20, 2024
تعتمد النماذج اللغوية الكبيرة على التنبؤ الإحصائي بالكلمة التالية عبر دالة رياضية معقدة. يتم ضبط سلوكها من خلال مليارات المعايير الموزونة التي تُصقل عبر التدريب المسبق والتعليم المعزز، مع الاعتماد على بنية 'المحول' التي تعالج النصوص بالتوازي.
Key insight: عملية تدريب أكبر النماذج اللغوية تتطلب حسابات تستغرق أكثر من 100 مليون سنة إذا أجريت بمعدل مليار عملية في الثانية الواحدة.