الأسباب الأربعة لاختلاف النتائج
النتيجة هي نهاية سلسلة طويلة من الخيارات. غير أي رابط وسيتغير الرقم، رغم أن شيئاً في الصورة لم يتغير.
- بيانات تدريب مختلفة. الكاشف يتعرف على ما رآه. الأداة المدربة على آلاف المولدات المفتوحة تتعامل مع النماذج غير العادية بشكل جيد. الأداة المدربة على أكبر أربع أدوات تجارية تتعامل مع تلك الأربع بشكل أفضل ومع أي شيء آخر بشكل أسوأ.
- خطوط قرار مختلفة. أداة تسمي 60 مشبوهاً، وأخرى تسمي 75 مشبوهاً. القراءة نفسها تتجاوز حداً ولا تتجاوز الآخر، لذا تحصل على حكمين من قياس واحد.
- تعريفات مختلفة. بعض الأدوات تحسب أي تدخل توليدي، بما في ذلك زيادة الدقة أو التعبئة التوليدية. أخرى تصنف فقط الإطارات الاصطناعية كلياً. البورتريه المُعدل هو AI بالنسبة للأولى وحقيقي بالنسبة للثانية.
- معالجة مسبقة مختلفة. الأدوات تغير الحجم، تقص، وتعيد الترميز قبل التقييم. الكاشف الذي يقرأ مربعاً بـ 224 بكسل من المركز يرى صورة مختلفة عمن يقرأ 384 بكسل من الإطار بالكامل.
الأداة D ليست أكثر حساسية من الأخريات. إنها تجيب على سؤال أوسع. إذا كان قلقك هو ما إذا كانت الصورة قد تم ترتيبها بواسطة مولد، فإن D تبالغ في التقرير. إذا كان قلقك هو ما إذا كان أي AI قد لمس الملف، فإن D هي الوحيدة التي تجيبك.
اسأل عن السؤال الذي تجيب عليه كل أداة
| السؤال | ما الذي يجعله مشبوهاً | الاستخدام النموذجي |
|---|---|---|
| هل تم توليد هذا الإطار من لا شيء؟ | ملمس اصطناعي للإطار بالكامل | الأخبار، قوائم السوق، ملفات التعارف |
| هل تم تعديل أي جزء من هذا بواسطة AI؟ | منطقة واحدة فوق الخط | التأمين، المطالبات، مراجعة الأدلة |
| هل لمس أي AI هذا الملف على الإطلاق؟ | زيادة الدقة، تقليل الضوضاء، التعبئة التوليدية | مكتبات الصور، قواعد المسابقات |
معظم الاختلاف بين الأدوات هو في الواقع خلاف حول أي من هذه الأسئلة الثلاثة طرحت. قبل مقارنة النتائج، قرر أي سؤال يهمك، ثم اقرأ كل أداة بناءً عليه.
كيف تقارن نتيجتين بشكل صحيح
-
غذِّ كلتا الأداتين بنفس الملف
ليس إعادة تحميل، وليس لقطة شاشة، وليس نسخة مرت عبر تطبيق دردشة. البايتات المختلفة هي صورة مختلفة وستحصل بشكل مشروع على نتائج مختلفة.
-
قارن النطاقات، لا الأرقام
درجة 61 على مقياس بخط عند 50 ودرجة 58 على مقياس بخط عند 65 تختلفان حول الحكم بينما تتفقان حول القراءة.
-
ابحث عن حد منشور
أداة لا تصرح بمكان خطها لا يمكن مقارنتها بأي شيء. عامل الرقم كغير قابل للتفسير بدلاً من كونه دليلاً.
-
فضل الأداة التي تظهر عملها
خريطة المنطقة، النطاق المسمى، والمعيار المذكور تتيح لك التحقق من التبرير. التسمية الواثقة التي لا يوجد خلفها شيء لا تتيح ذلك.
-
عامل الاتفاق كإشارة قوية
أداتان مستقلتان تصلان إلى نفس النطاق لهما قيمة أكبر من أي واحدة منهما بمفردها. اختلاف الاثنتين يعني عدم اليقين، لا يعني تقسيم الفرق.
عندما يكون الاختلاف هو النتيجة
نمط واحد يستحق التعلم للتعرف عليه. أداة تبلغ عن نتيجة منخفضة للإطار بالكامل جنباً إلى جنب مع أخرى تبلغ عن نتيجة عالية غالباً ما يعني أن الصورة هي صورة حقيقية بها تعديل محلي.
الأداة الأولى تحسب متوسط التعديل عبر إطار حقيقي في الغالب. الثانية ترجح المنطقة الأقوى. كلاهما محق بشأن ما قاساه، والاختلاف نفسه أخبرك أكثر من أي رقم.
مربع واحد فوق خط القرار داخل إطار بارد بخلاف ذلك. لا يوجد رقم واحد يجسد هذا.
ما الذي سيجعل الكواشف تتفق
معيار مشترك، خطوط قرار منشورة، وتعريف متفق عليه لما يعد تدخل AI سيؤدي إلى إزالة معظم الفروقات. لا شيء من ذلك موجود بعد، وهناك ضغوط تجارية قليلة لخلقه، لأن الأداة التي تنشر نقاط ضعفها تبدو أسوأ ممن لا تفعل.
حتى يتغير ذلك، عامل كل درجة على أنها قادمة من مقياس خاص. اقرأ الأدلة التي تظهرها لك الأداة ووازن ذلك بشكل أكبر من الثقة في تسميتها.
مشكلة الإصدار التي لا يذكرها أحد
الكاشف ليس شيئاً واحداً بمرور الوقت. يقوم البائعون بإعادة التدريب، وتعديل الحدود، واستبدال النماذج دون إعلان، ولا يضع أي منهم إصداراً لمخرجاته تقريباً. الدرجة التي حصلت عليها في مارس والدرجة التي تحصل عليها اليوم قد تأتي من نماذج مختلفة بمعايرة مختلفة خلفها.
هذا مهم إذا كنت تسجل النتائج. ملف المطالبات، أو سجل الإشراف، أو الحالة الأكاديمية التي تستشهد بدرجة من ثمانية عشر شهراً مضت تستشهد بقياس لم تعد أداته موجودة. لا توجد طريقة لإعادة إنتاجها ولا طريقة للتحقق مما كانت تعنيه في ذلك الوقت.
عند الاحتفاظ بالنتائج، احتفظ بالأدلة بجانبها: درجات المنطقة، والنطاق، وخط القرار، والتاريخ. تظل هذه العناصر قابلة للتفسير حتى بعد تجاوز النموذج الذي أنتجها، وهو ما لا توفره النسبة المئوية المجردة.