انتقل إلى المحتوى

VoiceHub: الاستدلال والتدريب لتحويل النص إلى كلام

مكتبة Python تدمج الشيفرة المصدرية لتوفير الاستدلال وإعداد البيانات والضبط الدقيق الخاص بكل نموذج عبر عائلات TTS الحديثة.

حالة التكامل المستمر لـ VoiceHub حالة بناء وثائق VoiceHub يدعم VoiceHub الإصدار Python 3.10 والإصدارات الأحدث يُرخَّص VoiceHub بموجب Apache 2.0

ما هو VoiceHub؟

يقدّم VoiceHub نماذج TTS والتعرّف التلقائي على الكلام واكتشاف النشاط الصوتي من خلال واجهات API مشتركة للتكوين والمعالج والنموذج والمخرجات والمدرّب. وتظل تطبيقات النماذج مراعية لبنيتها المعمارية: إذ تحتفظ نماذج اللغة المعتمدة على codec، وأنظمة sequence-to-sequence، ونماذج flow-matching والانتشار، والنماذج الصوتية، والأنظمة التنافسية بأسلوب VITS، وخطوط المعالجة المركبة بأساليب التكييف والأهداف وملكية المعلمات وقواعد التصدير الخاصة بها.

يضم registry 34 تكامل TTS و23 مزوّدي ASR و11 مزوّدي VAD. يعتمد دعم الضبط الدقيق على نقطة التحقق وبيئة التشغيل تحديدًا؛ فوجود تكامل للاستدلال لا يعني أن artifact الحالي الخاص به في VoiceHub قابل للاشتقاق. استخدم دليل نماذج TTS و مصفوفة تدريب TTS و مصفوفة دعم ASR/VAD لاختيار التكامل المناسب.

تُثبّت الشيفرة المصدرية للنماذج وجميع بيئات استدلال TTS وASR وVAD المدمجة مع VoiceHub افتراضيًا، بينما تُنزّل أوزان نقاط التحقق عند الحاجة أو تُوفّر عبر مسارات محلية. أضف voicehub[training] فقط للضبط الدقيق وإعداد التقارير. لا يغطي ترخيص Apache-2.0 سوى VoiceHub نفسه؛ وقد تخضع الشيفرة المصدرية المدمجة ونقاط التحقق وبرامج codec ومجموعات البيانات والصوت المُنشأ لشروط منفصلة.

  • البدء

    ثبّت VoiceHub من شجرة المصدر الحالية، ونفّذ أول طلب توليد عبر model factory المشترك.

    البدء السريع

  • الاستدلال

    اكتشف التكاملات، وحمّل نقاط تحقق من Hub أو من مسارات محلية، واضبط عملية توليد قابلة لإعادة الإنتاج، واستخدم الصوت المُطبّع.

    دليل الاستدلال

  • إعداد البيانات

    أنشئ ملفات manifest قابلة للتدقيق، وتحقق من صحة الصوت، وامنع تسرّب البيانات بين المتحدثين أو الجلسات، وأنشئ مدخلات تدريب خاصة بكل نموذج.

    دليل إعداد البيانات

  • التدريب

    تحقّق من حدود نقاط التحقق، ونفّذ الأهداف الأصلية، وقيّم النتائج، واستأنف العمل من نقاط تحقق كاملة، واحفظ artifacts قابلة للنقل.

    دليل التدريب

  • النماذج

    قارن إدخالات TTS في registry ونقاط التحقق الافتراضية والقدرات ومصدر الشيفرة والقيود.

    دليل النماذج

  • دعم التدريب

    تحقّق بدقة من نطاق الضبط الدقيق لكل تكامل: هل يدعم البيانات الأولية أو المعالجة مسبقًا، أو يتطلب مسارًا متخصصًا، أو أنه غير متاح.

    مصفوفة التدريب

  • دفاتر Notebook

    استخدم أربعة دفاتر Notebook: أمثلة مركّزة للاستدلال وإعداد البيانات والتدريب، أو اتبع سير عمل Dia الكامل حتى التصدير وإعادة التحميل في بيئة تشغيل جديدة.

    افتح معرض دفاتر Notebook

  • مرجع API

    ابحث في factories والمخرجات ووسائط trainer وcallbacks وcollators والاستراتيجيات وartifacts وسجلات الامتدادات.

    تصفّح API

  • البنية المعمارية

    تعرّف إلى registry وmodel wrappers والمهايئات واستراتيجيات وقت التشغيل ونقاط التحقق وحدود artifacts القابلة للنقل.

    بنية المكتبة

  • إضافة نموذج

    نفّذ واختبر lazy wrapper ومواصفات التدريب، وأضف مهايئًا متخصصًا عند الحاجة، وحدّد عقد التصدير.

    دليل تكامل النماذج