نماذج
المحوّل
Transformer
نوع من الشبكات العصبية أحدث ثورة في فهم اللغة، أساس GPT و BERT.
الشرح التفصيلي
بنية Transformer (2017، ورقة Attention is All You Need) قلبت موازين الـ AI: بفضل آلية الانتباه (Attention) صار النموذج يفهم العلاقات بين كل الكلمات في الجملة دفعة واحدة. كل LLM حديث يعتمد على Transformer.
مصطلحات ذات صلة
الدورة المرتبطة بهذا المحتوى
أساسيات الذكاء الاصطناعي
نقطة البداية الصحيحة: المفاهيم، الحدود، والتطبيق العملي بلا تعقيد.