تشكيل النصوص بالذكاء الاصطناعي: ما مدى دقته، ومتى تثق به؟

آخر تحديث · بقلم حكيم وأحمد

التشكيل الآلي بالذكاء الاصطناعي مسودة جيدة، لا نص نهائي. النموذج الذي نستخدمه يصيب نحو 97 حرفًا من كل 100 على النصوص التراثية التي يُختبر عليها عادة، لكنه حين قسناه على لغة الأخبار الحديثة أصاب نحو 88 حرفًا من كل 100، وخرجت كلمة من كل ثلاث تقريبًا وفيها علامة خاطئة. وأغلب أخطائه تقع في أواخر الكلمات (الإعراب)، والأسماء، والكلمات النادرة، والكلمات التي تحتمل أكثر من قراءة. فهو يوفر عليك معظم العمل في نص تعليمي أو قصة أو نص ستقرؤه بصوت عالٍ، بشرط أن يراجعه من يعرف العربية. أما القرآن الكريم فلا تشكّله آليًا أبدًا، والشعر يحتاج مراجعة بعين العروض.

ماذا تعني «97 من 100» و«88 من 100»؟

نموذج ichkil الذي تشغّله أداة التشكيل العربي نسبة خطئه 2.8% من الحروف على مجموعة الاختبار التي نُشرت معه (مجموعة Fadel وزملائه، 2019، وأغلبها كتب تراثية). شغّلنا الأداة نفسها في المتصفح على مجموعتين عامتين:

النص الحروف الصحيحة الكلمات الصحيحة تمامًا دون حساب حركة آخر الكلمة
تراثي (500 سطر من مجموعة Fadel) 96.8% 89.7% 94.6%
أخبار حديثة (400 جملة من مجموعة WikiNews) 88.2% 64.0% 77.1%

لاحظ ثلاثة أمور:

  1. الحساب على الحروف، لا على الكلمات. جملة من عشر كلمات فيها نحو 50 إلى 60 حرفًا، و2.8% منها حرف أو حرفان خاطئان. ولأن كل كلمة فيها عدة حروف، فنسبة الكلمات التي فيها خطأ واحد على الأقل أعلى بكثير من نسبة الحروف.
  2. نوع النص يغيّر النتيجة كثيرًا. على النصوص التراثية التي تشبه ما تدرّب عليه يكاد يكون دقيقًا، أما لغة الأخبار الحديثة بأسمائها الأجنبية ومصطلحاتها فأخطاؤه فيها نحو أربعة أضعاف. والنص العامي والشعر قد يخرجان أسوأ، ولم نقسهما.
  3. أكثر الأخطاء حركة قصيرة في غير موضعها، كفتحة مكان كسرة أو ضمة مكان فتحة، لا حرف بلا تشكيل. فالنص يبدو مشكولًا كاملًا حتى حين يكون خاطئًا، وهذا ما يجعل المراجعة ضرورية.

أين تقع الأخطاء عادة؟

  • أواخر الكلمات: حركة آخر الكلمة تتبع موقعها في الجملة (فاعل أم مفعول أم مجرور)، وهذا يتطلب فهم الجملة كلها. هنا يخطئ التشكيل الآلي أكثر من أي مكان آخر، فابدأ المراجعة منها.
  • الكلمات التي تحتمل أكثر من قراءة: «علم» قد تكون عِلْم أو عَلَم أو عَلِمَ أو عَلَّمَ أو عُلِّمَ. النموذج يختار حسب السياق، وقد يختار خطأ إن كان السياق قصيرًا. فلا تشكّل كلمة منفردة أو عنوانًا من كلمتين وتتوقع الصواب.
  • الأسماء: أسماء الأعلام، خاصة غير الشائعة والأجنبية، لا قاعدة لها يستنتجها النموذج.
  • ما ليس حرفًا عربيًا: الأرقام والحروف اللاتينية وحروف مثل پ وگ تمر كما هي دون تشكيل.

كيف يعمل النموذج، ولماذا يهمك ذلك؟

النموذج يقرأ النص حرفًا حرفًا، ويختار لكل حرف علامة واحدة من قائمة ثابتة: فتحة، ضمة، كسرة، سكون، شدة، شدة مع فتحة أو ضمة أو كسرة، تنوين بأنواعه الثلاثة، أو لا شيء. ولذلك نتيجتان عمليتان:

  • لا يضع الشدة مع التنوين معًا (كما في «حقٌّ»)، ولا الألف الخنجرية (كما في «هٰذا» برسم المصحف)، ولا علامات الوقف والضبط. هذه ليست في قائمته أصلًا.
  • يحذف التشكيل الموجود قبل أن يبدأ. إن شكّلت كلمة بيدك ثم ضغطت «إضافة التشكيل»، فلن يأخذ تشكيلك في الحسبان. صحّح بعد التشكيل الآلي، لا قبله.

ويعمل النموذج بالكامل على جهازك: حجمه نحو 5 ميغابايت (برخصة MIT)، ويُنزَّل مع المحرك الذي يشغّله في أول استخدام (نحو 8 ميغابايت معًا)، ثم يشكّل فقرة من 400 حرف في أقل من ثانية في اختباراتنا. ولا يُرسل نصك إلى أي خادم، وهذا يهم إن كان النص مسودة كتاب أو امتحانًا لم يُعقد بعد.

هل أستخدمه لتشكيل القرآن الكريم؟

لا. النص القرآني منقول بضبط دقيق ورسم خاص (الرسم العثماني) فيه علامات لا يعرفها النموذج أصلًا، وأي خطأ في حركة قد يغيّر المعنى. والخطأ هنا لا يُقبل بنسبة 3% ولا 1%. انسخ الآيات مشكولة من مصدر موثوق للنص القرآني، مثل المصاحف الإلكترونية الصادرة عن مجمع الملك فهد لطباعة المصحف الشريف أو مشروع Tanzil، ولا تعتمد على أي تشكيل آلي، من أي أداة أو برنامج.

والأمر نفسه، بدرجة أقل، للحديث الشريف والنصوص الشرعية: شكّلها من مصدر محقق، أو راجعها عند مختص.

وماذا عن الشعر؟

الشعر العمودي له قيود لا يعرفها النموذج: الوزن، وحركة الروي في القافية، والإشباع، وتسكين ما يُحرَّك عادة أو تحريك ما يُسكَّن لضرورة الوزن. فالنموذج يشكّل البيت كأنه نثر، وقد يكسر الوزن بحركة صحيحة نحويًا لكنها خاطئة عروضيًا. استخدمه لتوفير الوقت في الكلمات الداخلية، ثم راجع كل بيت بقراءته موزونًا، وخاصة القافية.

وماذا عن ChatGPT وبرامج المحادثة؟

برامج المحادثة الكبيرة تستطيع تشكيل النصوص، وقد تفهم السياق في بعض الجمل أفضل من نموذج صغير. لكن لها مخاطر مختلفة: قد تغيّر كلمة أو تحذف أخرى أو «تصحح» ما لم تطلب تصحيحه دون أن تنبّهك، فتحتاج إلى مقارنة الحروف لا الحركات فقط. ونصك يُرسل إلى خوادم الشركة. ولم نقس دقتها، فلا نقارن بالأرقام. أما أداتنا فلا تغيّر حرفًا من حروفك بطريقة بنائها: تحذف التشكيل الموجود والتطويل (ـ)، ثم يضيف النموذج علامة بعد كل حرف، ولا شيء غير ذلك.

متى تثق به؟

الاستخدام هل يكفي التشكيل الآلي؟
تسهيل قراءة نص بصوت عالٍ لنفسك غالبًا نعم، مع انتباه لأواخر الكلمات
مادة تعليمية للأطفال أو لمتعلمي العربية مسودة، يراجعها معلم قبل الطباعة
نص ستقرؤه أداة تحويل النص إلى كلام يساعد النطق، لكن راجع الكلمات المشكلة
كتاب أو منشور رسمي مسودة، يراجعها مدقق لغوي
شعر مسودة للكلمات الداخلية، ومراجعة عروضية لكل بيت
القرآن الكريم والحديث لا

أسئلة سريعة

هل يُرسل نصي إلى خادم لإضافة التشكيل؟ لا. يُنزَّل النموذج مرة إلى متصفحك ويعمل فيه، ولا يغادر النص جهازك.

لماذا شكّل كلمة بطريقتين مختلفتين في جملتين؟ لأنه يقرر حسب السياق. وهذا غالبًا صحيح (الكلمة نفسها قد تختلف قراءتها)، لكنه علامة على مكان يستحق المراجعة.

أريد إزالة التشكيل لا إضافته. هل الإزالة دقيقة أيضًا؟ نعم، الإزالة عملية دقيقة لا ذكاء اصطناعي فيها: كل علامة حرف مستقل يُحذف، والحروف تبقى كما هي. ويمكنك الإبقاء على الشدة لأنها تفرّق بين كلمات مثل علم وعلّم.

هل يشكّل نصًا طويلًا؟ نعم. الأداة تقسّم النص الطويل إلى أجزاء من نحو ألف حرف عند نهايات الجمل، ثم تجمعها. لكن مراجعة نص طويل تأخذ وقتًا، فشكّل ما تستطيع مراجعته.

ماذا تفعل الآن؟

الصق نصك في أداة التشكيل العربي واضغط «إضافة التشكيل (بالذكاء الاصطناعي)»، ثم راجع أواخر الكلمات والأسماء أولًا. وإن كان النص في صورة أو ملف ممسوح، فاستخرجه أولًا بأداة تحويل الصورة إلى نص، واقرأ قبل ذلك لماذا يخطئ تحويل الصورة إلى نص عربي؟.

جرّب الأداة

أزل التشكيل من النص العربي، أو أضفه تلقائيًا بنموذج ذكاء اصطناعي صغير يعمل على جهازك.

افتح التشكيل العربي: إضافة وإزالة ←

مقالات أخرى عن أدوات النصوص

تصفح جميع أدوات النصوص ←