تخطّ إلى المحتوى
جديد: اسأل وكيل المحلّل من Rexfin عن نموذجك، وكل رقم يعود مدعومًا بمصدره.
· 8 دقائق قراءة

اختبار الاستشهاد: كيف تكشف تعليقاً مالياً كتبه ذكاء اصطناعي بلا مصدر

السرد المالي الذي يكتبه الذكاء الاصطناعي يبدو موثوقاً سواء كانت الأرقام بداخله مسندة إلى مصدر أم لا. إليك اختبار من نقرة واحدة يكشف لك أيّهما تحصل عليه.

بقلم فريق Rexfin

اختر أي فقرة تحليل انحراف كتبها الذكاء الاصطناعي في عرض مجلس الإدارة لديك. ابحث عن رقم بداخلها، نسبة مئوية، أو مبلغاً بالدولار، أو تحركاً بنقاط الأساس. انقر عليه. هل يحدث شيء؟

في معظم أدوات التعليق الذكي المتاحة اليوم، الجواب لا. لا يوجد شيء تنقر عليه أصلاً. الرقم مجرد نص، تولّد بالطريقة نفسها التي تولّدت بها الجملة من حوله: كسلسلة الرموز الأكثر احتمالاً إحصائياً، لا كقيمة مستخرجة من دفتر الأستاذ. هذه الفجوة يسهل تفويتها، لأن النثر لا يعلن عن شكوكه كما تفعل خلية في جدول بيانات. مثلث أحمر في زاوية الخلية يقول “هناك خطأ ما هنا”. أما الجملة السلسة فلا تقول شيئاً من هذا القبيل، سواء كان الرقم بداخلها صحيحاً أم مختلَقاً.

لماذا السرد هو أسهل مكان يختبئ فيه رقم خاطئ

الجدول يفرض التدقيق. الصفوف والأعمدة تدعو العين إلى التحقق من مجموع، أو ملاحظة فجوة، أو الانتباه إلى رقم لا يطابق الرقم قبل صفّين. النثر يفعل العكس تماماً. الجملة جيدة الصياغة تُقرأ كوحدة معنى واحدة، والقارئ يمنح ثقته للجملة كاملة بناءً على جودة صياغتها، لا على كيفية اشتقاق كل حقيقة مضمّنة فيها. جملة مثل “تراجع هامش الربح الإجمالي 180 نقطة أساس، مدفوعاً بشكل أساسي بتحوّل المزيج نحو صفقات مؤسسية أقل هامشاً” تبدو كخلاصة محلل. وسواء كان الرقم 180 حقيقياً أو تخميناً معقول المظهر، فإن الجملة تحمل نبرة السلطة نفسها في الحالتين.

هذا نمط فشل معروف تحديداً في نماذج اللغة. النموذج الذي يُطلب منه “تفسير الانحراف” من ملف موازنة لا يستخرج رقماً، بل يتنبأ بأرجح تسلسل كلمات بناءً على نمط جمل مشابهة رآها في بيانات تدريبه. في أغلب الأحيان ينتج هذا شيئاً قريباً من الصحيح، لأن التعليق المالي يتبع أنماطاً معروفة والنموذج رأى الكثير منها. لكن “أغلب الأحيان” ليس معياراً يقبله أحد من معادلة في جدول بيانات، ولا يوجد سبب منطقي لقبوله من جملة فقط لأنها تُقرأ بسلاسة.

اختبار المشتري الواحد الذي يكشف الفجوة

لا تحتاج إلى معيار قياس أو كلمة مورّد. تحتاج إلى ثلاثين ثانية مع المنتج الذي تقيّمه.

  1. ولّد فقرة تعليق انحراف أو تعليق مجلس إدارة داخل الأداة.
  2. اختر أي رقم مضمّن في النص.
  3. حاول النقر عليه، أو اطلب من الأداة أن تُظهر مصدره.
  4. راقب ما يحدث.

هناك ثلاث نتائج ممكنة، وهي تُصنّف الموردين بوضوح:

النتيجةماذا تعني
الرقم يرتبط بصف محدد في دفتر الأستاذ، أو حساب، أو قائمة مالية مُودَعةالرقم استُخرج أو حُسب، ثم أُدرج داخل نص كُتب حوله
تُظهر الأداة ملاحظة عامة مثل “المصدر: نظام تخطيط موارد المؤسسة لديك” دون تتبّع على مستوى السطرالتتبّع موجود على مستوى النظام لا على مستوى الرقم، فلا يمكنك إثبات هذا الرقم بعينه
لا يحدث شيء؛ الرقم مجرد نصالرقم بلا أصل قابل للتتبّع. قد يكون صحيحاً، لكن لا وسيلة لديك لمعرفة ذلك دون إعادة اشتقاقه يدوياً

النتيجة الثالثة أكثر شيوعاً مما يتوقع المشترون، لأن توليد التعليقات غالباً ما يُضاف كميزة إضافية فوق طبقة محادثة أو تحليلات، مع نموذج يُعطى مجموعة بيانات تقريبية وتوجيهاً بـ”كتابة تعليق”، لا التزاماً بالاستشهاد. وقد يعترف توثيق الأداة نفسها ضمنياً بهذه الفجوة، حين يقدّم “المراجعة المالية للدقة” كضمانة: يُفترض أن يكتشف إنسان أي خطأ قبل نشره. هذا ليس عديم القيمة، لكنه ينقل بهدوء عبء التحقق كاملاً إلى الشخص نفسه الذي كان يُفترض أن توفّر له الأداة الوقت، ويعتمد على أن يلاحظ ذلك الشخص خطأً معقول المظهر في فقرة لم يكتبها ولا وقت لديه لإعادة اشتقاقها من الصفر.

لماذا “اجعل القسم المالي يراجعها” ليس مثل الاستشهاد بالمصدر

المراجعة البشرية ضابط حقيقي، لكنها بديل ضعيف عن الاستشهاد البنيوي، لسبب بسيط: جهد المراجعة يتناسب مع مستوى الشك، والنثر السلس لا يثير الشك. المراجع الذي يمسح فقرة بحثاً عن خطأ يبحث عن شيء يبدو غريباً، رقماً غير معقول، أو ادعاءً يناقض ما يتذكره. الرقم الخاطئ قليلاً، الجالس داخل نص صحيح في مجمله عن انحراف كان المراجع يتوقعه أصلاً، هو بالضبط نوع الخطأ الذي تُصمَّم الجملة الواثقة لتمريره أمام قارئ متعب في الساعة الحادية عشرة مساءً قبل اجتماع مجلس الإدارة.

قارن ذلك بكيفية فرض جدول البيانات للتحقق: المعادلة إما أن تشير إلى خلية أو تكون مُدخلة يدوياً، وأي شخص يدقق الجدول يستطيع تتبّع الإشارة في ثوانٍ. التعليق المولَّد دون استشهادات مضمّنة يزيل هذا الضابط البنيوي ويستبدله بـ”يُفترض أن يلاحظ أحدهم”. هذا تراجع في معيار التحقق مقنّع بميزة كتابية، ويستحق أن نسمّيه صراحة لا أن نفترض أن الجميع يفهمه ضمناً، لأن لوحة تعليق ذكية جيدة التنسيق ولوحة موثّقة المصادر بشكل صحيح تبدوان متطابقتين من الخارج حتى تنقر.

ما يتطلبه فعلاً تعليق باستشهاد على كل سطر

إصلاح هذا ليس حيلة في صياغة الطلب. إنه يتطلب إعادة هيكلة ما يُسمح للنموذج بفعله، لا ما يُطلب منه فقط.

الأرقام في سرد الانحراف، حركة النسبة المئوية، والفارق بالدولار، ومقارنة الفترة، يجب أن تُحسب بواسطة محرك حتمي قبل أن يراها أي نموذج لغوي، انطلاقاً من نموذج بيانات مرتبط أصلاً بدفتر الأستاذ. طبقة النمذجة الموثوقة التي تقوم عليها rexfin.ai موجودة تحديداً لكي تكون معادلات الانحراف، والفروق السنوية، وأعلام العتبات عمليات حسابية على بيانات مُسوّاة، لا توليداً لغوياً. وبمجرد وجود كتلة الأدلة تلك، يستطيع النموذج كتابة النص الرابط (“مدفوعاً بشكل أساسي بـ”، “مقابله جزئياً”) لكن فقط انطلاقاً من الأرقام المحسوبة سلفاً، دون اختلاق رقم من عنده أبداً. بعد ذلك يرفض فحص صدق الاستشهاد أي مسودة تُدخل رقماً غير موجود في كتلة الأدلة، وهو الانضباط نفسه الذي يحكم مقال جولة منتج Rexfin عن السرد المُستشهَد به واستشهادات الصفحة الدقيقة التي تتيح للقارئ النقر على أي رقم للرجوع إلى صفحته المصدر في قائمة مالية مُودَعة.

هذا هو الفصل نفسه الذي يجعل تعليق تحليل الانحراف الآلي مفيداً فعلاً لا خطراً فعلياً: النموذج يكتب، والمحرك يحسب، والمهمّتان لا تتبادلان مكانيهما أبداً. المورّد الذي لا تستطيع ميزة التعليق لديه وصف هذا الفصل، والذي لا يملك سوى الإشارة إلى مراجعة بشرية لاحقة كضمانة، لم يبنِ الاستشهاد داخل عملية التوليد. لقد بنى فقرة، وأمِل أن يلتقط أحدهم الخطأ.

ما تسأل عنه قبل الشراء

إذا كانت ميزة التعليق الذكي محورية في تقييمك، فأربعة أسئلة تفصل الاستشهاد البنيوي عن شبكة أمان قائمة على الأمل:

  • هل أستطيع النقر على أي رقم في فقرة مولَّدة ورؤية صف المصدر أو الرقم المُودَع بالضبط الذي جاء منه؟ ليس “النظام”، بل الصف نفسه.
  • ماذا يحدث إذا لم يجد النموذج رقماً قابلاً للاستشهاد لادعاء يريد كتابته؟ الجواب الصادق أنه يرفض أو يعود إلى قالب جاهز، لا أن يكتب الجملة على أي حال بأفضل تخمين لديه.
  • هل يعمل فحص الاستشهاد نفسه عند تصدير التعليق إلى عرض تقديمي، أم فقط داخل التطبيق الحي؟ رقم قابل للنقر على الشاشة وغير موثّق المصدر في نسخة PDF من حزمة مجلس الإدارة يحلّ نصف المشكلة فقط.
  • هل يُعلَّم الرقم التخطيطي أو رقم الموازنة داخل التعليق بشكل مختلف عن الرقم الفعلي المُدقَّق؟ المدخلات غير المُدقَّقة التي تغذّي السرد ينبغي أن تُقرأ بشكل مختلف عن الأرقام المُودَعة، لا أن تندمج في الجملة الواثقة نفسها.

إذا كان العرض التوضيحي عاجزاً عن الإجابة عن هذه الأسئلة مباشرة، على أرقامك أنت، فإن عبارة “المراجعة المالية للدقة” في التوثيق تتحمّل عبئاً أكبر مما ينبغي.

الخلاصة

النثر السلس ليس دليلاً على رقم موثّق المصدر، بل دليل على نموذج جيد الصياغة. اختبار موثوقية التعليق الذي يكتبه الذكاء الاصطناعي ليس مدى جودة قراءته، بل هل تصمد الأرقام بداخله أمام نقرة. توليد السرد يحتاج انضباط الاستشهاد نفسه الذي تحتاجه القائمة المالية، لا نسخة أخفّ منه، لأن الخطر ليس أن يكون النص غير مقنع. الخطر أنه مقنع بصرف النظر عن كونه صحيحاً أم لا.

جزء من هلوسات الذكاء الاصطناعي في البيانات المالية: أوقِف اختلاق الأرقام

تابع القراءة

احجز عرضًا توضيحيًا

شاهد أرقامك وهي تتوازن.

احجز عرضًا توضيحيًا مدته 30 دقيقة. أحضر سؤالًا يصعب عليك الإجابة عنه بسرعة، وسننمذجه مباشرةً على بيانات مالية حقيقية.