تقدم ميتا Voicebox، وهو نموذج للذكاء الاصطناعي يدعم معالجة الصوت للمبدعين

بعد عدد لا يحصى من الشائعات، أعلنت شركة Meta أخيرًا رسميًا عن أحدث جيل من طراز الذكاء الاصطناعي المسمى Voicebox. تم تصميم هذا النموذج لمساعدة منشئي المحتوى على التعامل بكفاءة مع المهام المتعلقة بإنشاء الصوت مثل تحرير الصوت وأخذ العينات وأسلوب التصميم، حتى بدون تدريب محدد، وذلك ممكن من خلال البيانات في السياق.

وتؤكد ميتا بثقة أن نموذج الذكاء الاصطناعي الجديد هذا "سيفيد الكثير من الأشخاص حول العالم"، وليس فقط في مجال إنشاء المحتوى. على سبيل المثال، مساعدة المكفوفين على سماع الرسائل النصية باستخدام صوتهم، وكذلك السماح للأشخاص بالتحدث بلغات أجنبية بصوتهم الخاص.

يتم الإعلان عن Voicebox نفسه على أنه قادر على إنشاء مقاطع صوتية عالية الجودة وتحرير مقاطع صوتية مسجلة مسبقًا لإزالة الانقطاعات غير المرغوب فيها، مثل أبواق السيارات، مع الاحتفاظ بنفس المحتوى والأسلوب متعدد اللغات (إنتاج الكلام بست لغات مختلفة). تتضمن التطورات المستقبلية المخطط لها من Meta للنموذج توفير أصوات طبيعية للمساعدين البصريين أو الشخصيات في الألعاب في metaverse.

قامت Meta أيضًا بمقارنة Voicebox مع نماذج الذكاء الاصطناعي الأخرى التي تعمل بمعالجة الصوت والموجودة حاليًا في السوق، وتحديدًا المنافسين الرئيسيين مثل Vall-E وYourTTS. بشكل عام، نموذج Meta متقدم ويتفوق على المنافسة عند مقارنة معدل أخطاء الكلمات وتشابه الأنماط.

تم بناء Voicebox على مطابقة التدفق. هذا هو أحدث نموذج توليدي غير انحداري من Meta، والذي يمكنه التعامل مع الخرائط غير الحتمية للغاية بين النص والكلام. يتيح ذلك لـ Voicebox التعلم من العديد من أنواع بيانات الكلام المختلفة دون الحاجة إلى تصنيفها بعناية، مما يمنحه الفرصة للوصول إلى بيانات تدريب أكثر تنوعًا وواسعة النطاق. حتى الآن، تم تدريب Voicebox على أكثر من 50000 ساعة من تسجيلات الكلام ونسخ الكتب الصوتية باللغات الإنجليزية والفرنسية والإسبانية والألمانية والبولندية والبرتغالية.

في حين أن هذه التكنولوجيا يمكن أن تبشر بعصر جديد من الذكاء الاصطناعي في معالجة الصوت، فإن ميتا تعترف بأنها يمكن أن تؤدي إلى احتمال إساءة الاستخدام والضرر غير المقصود. تتضمن الورقة البحثية التي شاركتها Meta حول Voicebox تفاصيل حول كيفية قيام الشركة ببناء مصنف فعال للغاية يمكنه التمييز بين الأصوات الأصلية والأصوات الناتجة عن Voicebox.

لن تجعل Meta برنامج AI Voicebox متاحًا للاستخدام العام، ولن تقوم بإصدار الكود المصدري، على الأقل في الوقت الحالي.