المفاهيم ومسار العمل
يقسّم Neko Translator ترجمة القصة المصورة إلى أربع خطوات يمكن تشغيل كل منها على حدة. لكل خطوة مدخلاتها ومخرجاتها وقدرة النموذج التي تحتاجها، وتعتمد بعض الخطوات على نتائج الخطوات السابقة.
مسار العمل الآلي لترجمة القصص المصورة
Section titled “مسار العمل الآلي لترجمة القصص المصورة”يكون مسار العمل الآلي الكامل عادةً كما يلي:
كشف الكتل النصية ← استخراج النص ← استخراج ملخص الصورة ← ترجمة
| الخطوة | الغرض | المدخلات الرئيسية | المخرجات الرئيسية |
|---|---|---|---|
| كشف الكتل النصية | العثور على فقاعات الكلام ومناطق النص الأخرى | صورة القصة المصورة | مواضع الكتل النصية؛ وبعض النماذج تُرجع أيضًا النص المصدر |
| استخراج النص | قراءة النص المصدر داخل المربعات الموجودة | صورة القصة المصورة والكتل النصية | النص المصدر |
| استخراج ملخص الصورة | وصف الصورة لتوفير سياق للترجمة | صورة القصة المصورة | وصف الصورة |
| ترجمة | توليد النص المترجم باستخدام النص المصدر والسياق | النص المصدر، والسياق، والمسرد | نص الترجمة |
يختلف «كشف الكتل النصية» عن «استخراج النص»؛ فالكشف يحدد فقط «أين يوجد النص»، بينما يحدد «استخراج النص» «ماذا يقول النص».
تختلف قدرات النماذج؛ فعلى سبيل المثال، يستطيع PaddleOCR VL 1.6 وGLM-OCR استخراج النص أثناء كشف مواضع الكتل النصية، بينما لا يكشف كاشف الكتل النصية المحلي سوى المواضع.
يتيح تقسيم مسار العمل إلى خطوات أن يتدخل الشخص أو يعيد جزءًا فقط من العملية، كما يتيح لعدة أعضاء التعاون على المانغا نفسها.
- يحتاج «استخراج النص» إلى كتل نصية موجودة، وقد تأتي هذه الكتل من نموذج لكشف الكتل النصية أو تُحدَّد يدويًا.
- تحتاج «الترجمة» إلى نص مصدر، وقد يأتي النص المصدر من نموذج لاستخراج النص أو من إدخال يدوي.
- يمكن تشغيل «استخراج ملخص الصورة» بشكل مستقل.
- قد تستخدم «الترجمة» نتيجة ملخص الصورة سياقًا، لكنها لا تشترطه.
قدرات النماذج
Section titled “قدرات النماذج”الذكاء الاصطناعي متعدد الأغراض:
يمكن لكل نموذج في إعداد الذكاء الاصطناعي متعدد الأغراض أن يعلن القدرات التي يوفرها:
- يتطلب استخراج النص إدخالًا مرئيًا؛ إذ يقرأ النموذج منطقة الكتلة النصية.
- يتطلب استخراج ملخص الصورة إدخالًا مرئيًا؛ إذ يقرأ النموذج صورة الصفحة كاملة.
- تتطلب ترجمة القدرة على توليد اللغة.
كشف الكتل النصية:
يتطلب «كشف الكتل النصية» كاشفًا مدمجًا خصيصًا. والخيارات المدعومة هي كاشف الكتل النصية المحلي وPaddleOCR VL 1.6 وGLM-OCR. نماذج الذكاء الاصطناعي متعدد الأغراض ليست دقيقة بما يكفي في هذه المهمة، لذا فإن هذه القدرة غير مدعومة لها حاليًا.
استخراج النص:
يستخدم هذا خدمة مخصصة. والخيار المدعوم حاليًا هو مستخرج النص المحلي.
قد تُضاف لاحقًا عمليات دمج مخصصة أخرى، مثل نماذج ترميم الصور.
تقابل قدرات النماذج هذه المُعدّة في ملف تعريف الخدمة أزرارَ الأتمتة في محرر القصة المصورة:

النتائج الموجودة والكتابة فوقها
Section titled “النتائج الموجودة والكتابة فوقها”عند تشغيل خطوة على حدة، يمكنك عادةً أن تختار معالجة النتائج الناقصة فقط أو إعادة معالجة جميع العناصر. وقد تؤدي إعادة معالجة كل شيء إلى الكتابة فوق النتائج الموجودة، بما في ذلك النص المصدر أو الترجمات التي حُرّرت يدويًا. تحقّق من النطاق قبل بدء المعالجة الدفعية.
ما الذي ترسله عملية الأتمتة إلى الخارج
Section titled “ما الذي ترسله عملية الأتمتة إلى الخارج”تعتمد البيانات المُرسلة إلى خدمات الجهات الخارجية على الخطوة:
- يرسل «كشف الكتل النصية» عادةً صورة الصفحة كاملة.
- يعمل كاشف الكتل النصية المحلي دون اتصال بالإنترنت ولا يرسل شيئًا إلى الخارج.
- يرسل «استخراج النص» جزءًا مقتطعًا من الكتلة النصية أو الصفحة كاملة، بحسب المزوّد.
- يعمل مستخرج النص المحلي على الجهاز نفسه، ولا يرسل طلبات التعرف إلى خدمة OCR عبر الإنترنت.
- يرسل «استخراج ملخص الصورة» صورة الصفحة كاملة.
- ترسل «الترجمة» بشكل أساسي النص والسياق وإدخالات المسرد.
راجع الأسئلة الشائعة لمعرفة تفاصيل التخزين والخصوصية.