كشف فيسبوك عن نموذج جديد للذكاء الاصطناعي مفتوح المصدر لديه القدرة على الترجمة بين 100 لغة مختلفة. لا يحتاج نموذج الذكاء الاصطناعي الخاص بها حتى إلى تحويل النص الحالي إلى اللغة الإنجليزية ، مما يسمح بترجمة أكثر كفاءة ودقة.
اعلنت فيس بوك من خلال منشور في مدونة حول الفيس بوك بانه قامت المنصة بتفصيل نموذج الترجمة الآلية الجديد متعدد اللغات (MMT) ، المعروف أيضًا باسم M2M-100. بشكل مثير للإعجاب ، نموذج التعلم الآلي مفتوح المصدر هذا "يمكنه الترجمة بين أي زوج من 100 لغة دون الاعتماد على البيانات الإنجليزية."
ما هي خوارزميات التعلم الآلي؟ كيف تعمل
تم تصميم خوارزميات التعلم الآلي لجعل الحياة أسهل وتحسين الأنظمة ، ولكن يمكن أن تنحرف مع عواقب وخيمة.
تستخدم فيس بوك نماذج الترجمة الآلية "النموذجية" تستخدم نماذج مختلفة لكل لغة مما يجعلها غير مجدية
لأنها تستخدم اللغة الإنجليزية كوسيط بين اللغات. هذا يعني أنه يجب على النظام أولاً ترجمة النص المصدر إلى اللغة الإنجليزية ، ثم ترجمة ذلك إلى اللغة الهدف.
عند الترجمة ، على سبيل المثال ، من الصينية إلى الفرنسية ، فإن معظم النماذج متعددة اللغات التي تركز على اللغة الإنجليزية تتدرب على اللغة الصينية إلى الإنجليزية ومن الإنجليزية إلى الفرنسية ، لأن بيانات التدريب الإنجليزية هي الأكثر توفرًا على نطاق واسع. يتدرب نموذجنا مباشرة على البيانات الصينية إلى الفرنسية للحفاظ على المعنى بشكل أفضل.
لذا بدلاً من استخدام اللغة الإنجليزية كجسر ، يمكن لنموذج MMT الخاص بـ Facebook الترجمة ذهابًا وإيابًا بين 100 لغة مختلفة.
قام Facebook ببناء "مجموعة بيانات MMT الأكثر تنوعًا بين العديد من الأشخاص حتى الآن" ، والتي تتكون من 7.5 مليار زوج من الجمل لـ 100 لغة.
لإنجاز هذا العمل الفذ ، قام فريق البحث بالتنقيب عن بيانات ترجمة اللغة على الويب ، مع التركيز أولاً على اللغات "ذات معظم طلبات الترجمة". ثم صنف الباحثون تلك اللغات إلى 14 مجموعة بناءً على الخصائص المشتركة.
من هنا ، أنشأ الباحثون لغات جسر لكل مجموعة ، واستخرجوا بيانات التدريب لجميع المجموعات الممكنة. نتج عن ذلك 7.5 مليار جملة متوازية عبر 2200 اتجاه.
أما بالنسبة للغات غير المنتشرة ، فقد استخدم فيس بوك Facebook شيئًا يسمى الترجمة الخلفية لإنشاء ترجمات تركيبية.
تعمل هذه العملية بأكملها على تقريب فريق Facebook AI من هدفهم المتمثل في إنشاء "نموذج واحد يدعم جميع اللغات واللهجات والطرائق."
فيسبوك يقترب من تقديم ترجمات أفضل
يقوم فيس بوك Facebook بالفعل بإجراء 20 مليار ترجمة كل يوم على موجز الأخبار الخاص به ، وسوف يجعل Facebook AI العملية أكثر كفاءة فقط. على الرغم من أن نموذج الترجمة الجديد لم يتم تنفيذه بعد ، إلا أنه سيكون مفيدًا بالتأكيد لمستخدمي Facebook الدوليين الذين يحتاجون إلى ترجمات محددة.