هل GPTZero دقيق؟ إليك ما تُظهره الأدلة

تبحث كاشفات النصوص المولّدة بالذكاء الاصطناعي مثل GPTZero عن بصمات إحصائية بدلًا من "قراءة" معناك. اثنتان من الإشارات الأساسية هما الحيرة (perplexity) — مدى قابلية توقّع كل كلمة بالنسبة لنموذج لغوي مرجعي — والانفجارية (burstiness) — مدى تباين تلك القابلية للتوقع من جملة إلى أخرى. الفكرة هي أن الكتابة البشرية تميل إلى أن تكون أقل قابلية للتوقع وأكثر تفاوتًا، بينما تكون المخرجات الآلية الخام غالبًا أكثر سلاسة وانتظامًا.

ذكرت GPTZero أنها تجمع الآن هذه الإشارات الكلاسيكية مع نموذج أكبر متعدد المكونات مدرَّب على كتابات متنوعة، بما فيها نصوص الطلاب، منتجًا درجات على مستوى الجملة والمستند. هذا مهم لطريقة قراءتك للنتيجة: الكاشف يقدّر احتمالًا استنادًا إلى أنماط الكتابة، لا يثبت هوية الكاتب. لذا فإن "الدقة" تعتمد بشدة على نوع النص الذي تغذيه به وأين يُرسم حد النجاح/الفشل.

في الاختبارات الخاضعة للسيطرة، يؤدي GPTZero بقوة. أفادت اختبارات المزوّدين والأطراف الثالثة بمعدلات كشف في نطاق التسعينيات العليا بالنسبة المئوية على مقاطع واضحة مولّدة بالذكاء الاصطناعي، مع معدلات إيجابية كاذبة منخفضة جدًا على مجموعات بيانات منسّقة. على هذا النوع من النصوص النظيفة والواضحة الصادرة عن الذكاء الاصطناعي، إنه أداة قادرة.

ترسم الاختبارات المستقلة على الكتابة الواقعية الأكثر تعقيدًا صورة أكثر حذرًا. تفيد المراجعات عبر عام 2026 بأن الدقة الواقعية تقع عادة بين منتصف الثمانينيات وأوائل التسعينيات بالنسبة المئوية، مع معدلات إيجابية كاذبة على الكتابة البشرية الحقيقية تُذكر غالبًا في حدود 8-12% حسب العينة. تتغير هذه الأرقام مع مجموعة البيانات والإعدادات، لذا تعامل مع أي نسبة مفردة كتقدير تقريبي لا كضمان. الخلاصة الصادقة: قوي على المخرجات الخام غير المخففة الصادرة عن الذكاء الاصطناعي، وأضعف بشكل ملحوظ مع كل شيء آخر.

أكثر نقاط الضعف توثيقًا هي التحيز ضد الكُتّاب غير الناطقين بالإنجليزية كلغة أم. أجرت دراسة من ستانفورد واسعة الاستشهاد (Liang وآخرون، نُشرت في مجلة Patterns، عام 2023) اختبارًا على سبعة كاشفات GPT على 91 مقالة TOEFL كتبها متحدثون غير أصليين للإنجليزية و88 مقالة كتبها طلاب أمريكيون. تعاملت الكاشفات مع المقالات الأمريكية جيدًا، لكنها صنّفت خطأً أكثر من نصف المقالات غير الأصلية على أنها مولّدة بالذكاء الاصطناعي، بمعدل إيجابية كاذبة بلغ في المتوسط نحو 61%، مع رصد ما يقارب جميعها من قِبل كاشف واحد على الأقل، وحوالي خُمسها من قِبل كل كاشف تم اختباره.

السبب آلي وليس متعمدًا. الأنماط التي تربطها الكاشفات بالكتابة "الآلية"، مثل المفردات الأبسط، والصياغة الأكثر قابلية للتوقع، والنكهة الاصطلاحية المحدودة، هي أيضًا سمات طبيعية للكتابة بلغة ثانية أو ثالثة. ومن الدلائل الملفتة أن الدراسة نفسها وجدت أن معدل الإيجابية الكاذبة انخفض بشكل حاد عندما أُعيدت صياغة تلك المقالات بمفردات أكثر تفصيلًا، مما يُظهر أن النتيجة تعكس الأسلوب لا الصدق. إذا كنت تكتب بالإنجليزية كلغة إضافية، فإن أي إشارة ذكاء اصطناعي واحدة تستحق شكًا حقيقيًا.

تنخفض دقة الكاشف بمجرد أن يبتعد النص عن المخرج الخام للنموذج. تشير اختبارات مستقلة عام 2026 إلى أن الدقة قد تنخفض بنحو 15-30 نقطة مئوية على المقاطع المعاد صياغتها أو المحررة بشدة، وتكون النتائج على المسودات المختلطة بين البشر والذكاء الاصطناعي غير متسقة بشكل خاص. الكتابة المختلطة، حيث يحرر شخص مسودة ذكاء اصطناعي أو يصقل ذكاء اصطناعي مسودة بشرية، هي تحديدًا المنطقة الرمادية التي تعاني منها الكاشفات أكثر.

النصوص القصيرة نقطة ضعف أخرى: مع بضع جمل فقط لتحليلها، لا توجد ببساطة إشارة كافية لحكم واثق، وترتفع كل من الإيجابيات الكاذبة والسلبيات الكاذبة. الخلاصة العملية هي أن GPTZero يكون في أفضل حالاته مع المخرجات الطويلة وغير المعدّلة الصادرة عن الذكاء الاصطناعي، وأقل موثوقية مع النصوص المحررة أو المعاد صياغتها أو الهجينة أو القصيرة التي تُشكّل معظم المستندات الواقعية فعليًا.

لا يوجد كاشف حالي، بما في ذلك GPTZero، قطعي، وتنصح الأدوات نفسها عمومًا بعدم استخدام نتيجة واحدة كدليل وحيد. تعامل مع أي نتيجة كاحتمال ودافع للنظر عن كثب، لا كحكم نهائي. إذا تم رصد قطعة كتابة، زِن السياق: خلفية الكاتب، والمسودات وتاريخ الإصدارات، وكيفية إنتاج النص، كلها أمور أهم من رقم واحد.

سير عمل معقول هو التحقق المتقاطع مع أداة مستقلة ثانية بدلًا من الثقة بنتيجة واحدة، وتوخي حذر خاص مع الكُتّاب غير الناطقين بالإنجليزية أصلًا، والمقاطع القصيرة، والمسودات المحررة. بالنسبة للمعلمين والمراجعين، يعني ذلك استخدام الكاشفات كنقطة انطلاق للحوار إلى جانب الحكم البشري. بالنسبة للكُتّاب، يعني ذلك إبقاء عمليتك شفافة وإجراء فحص ذاتي خاص بك قبل التسليم، حتى لا تفاجئك إشارة غير متوقعة.