الذكاء الاصطناعي لإدخال البيانات واستخراجها

يفيد الذكاء الاصطناعي لإدخال البيانات واستخراجها عندما ينتج سجلاً يمكن لشخص أو نظام آخر الاعتماد عليه. ليست المسألة العثور على قيمة تشبه إجمالياً أو تاريخاً أو اسم مورد، بل اختيار القيمة الصحيحة والحفاظ على معناها وإظهار مصدرها. والقيمة المعقولة دون دليل من المصدر تظل اقتراحاً وليست حقيقة مقبولة.

هذا الدليل لمسؤولي العمليات والبيانات الذين ينقلون حقائق من نماذج ومسوح وجداول ونصوص إلى سجلات منظمة. يركز على صحة الحقول وقبولها. يحدد مسار معالجة المستندات الأوسع جاهزية المعاملة، بينما يحدد الاستخراج سلامة القيم داخلها.

اكتب مواصفة لكل حقل قبل اختبار النموذج

حدد لكل حقل معناه ومصدره المسموح ونوعه وتنسيقه ووحدته وإلزاميته وقاعدة التحقق منه. فكلمة «مبلغ» لا توضح هل المقصود إجمالي الفاتورة أو قيمة البند قبل الضريبة أو المدفوع أو الرصيد. والتاريخ يحتاج إلى تقويم وحدث؛ فقد تكون القراءة صحيحة لكن القيمة تخص الإصدار بينما يتطلب الحقل تاريخ التسليم.

حدد أيضاً التعامل مع الغياب والغموض والتعارض. استخدم حالات منفصلة: غير موجود، غير مقروء، مرشحون متعددون، أو فشل التحقق. فالحقل الفارغ يخفي سبب النقص. لا تملأ الحقل الإلزامي بقيمة مختلقة؛ وإذا توقف العمل عليه، فأخرج طلب مراجعة واضحاً مع الأدلة المتاحة.

مواصفات نموذجية لحقول سجل التسليم

الحقل	المعنى والتمثيل	شرط القبول
مرجع التسليم	مرجع الجهة المصدرة كنص مع الأصفار البادئة	ظاهر في إشعار التسليم ولا يتعارض مع مرجع المعاملة
الكمية المسلّمة	كمية بند محدد بوحدتها الأصلية	الصف والعمود صحيحان، والتحويل وفق قاعدة معتمدة
تاريخ التسليم	حدث التسليم الفعلي مع تقويم المصدر	تحديد الحدث والتقويم ومراجعة الغموض
اسم المستلم	الاسم كما ورد وصيغة عرض موحدة اختيارية	حفظ الأصل وعدم استنتاج تطابق هوية بلا دليل

احتفظ بالنص الأصلي والقيمة الموحدة معاً

يتضمن السجل الموثوق النص الخام والقيمة المقترحة والتحويل المطبق وموضع المصدر. فلا تتحول «عبوتان» إلى «24 وحدة» إلا إذا أثبت تحويل معتمد خاص بالمنتج وجود 12 وحدة في العبوة. وإذا تغير حجم العبوة، فيجب استخدام النسخة السارية من التحويل، وإلا أنتج الافتراض المريح بيانات خاطئة بصورة متكررة.

احفظ المعرفات كنصوص عندما لا تخضع للحساب؛ فقد تميز الأصفار البادئة والشرطات واللواحق السجلات. ولا تعامل النقل الصوتي لاسم عربي كمعرف فريد أو تحذف علامات مهمة من رمز المنتج. تعالج مسارات الترجمة المعنى بين اللغات، ولا ينبغي أن يحول الاستخراج تخمينات الترجمة خفية إلى مطابقات للبيانات المرجعية.

اجعل مؤشر الدليل جزءاً من المخرجات

اربط كل حقيقة بنسخة الملف وصفحته أو خليته أو امتداد النص أو موضع مناسب آخر. تصف مواصفة استجابة تحليل المستندات من Microsoft امتدادات النص ومناطق الإحاطة الداعمة لهذا التصميم. ويظل على التطبيق ربط المواضع بنسخة المستند والحقل الصحيحين.

يحتاج المراجع إلى سياق يميز الحقول المتشابهة؛ فقد يخفي اقتصاص الرقم وحده كونه إجمالياً فرعياً أو رصيداً. أظهر معرف الصف وعنوان العمود في الجداول، بما في ذلك العناوين المكررة في الصفحات اللاحقة. وإذا اشتُقت قيمة من مصادر متعددة، فوثق طريقة اشتقاقها وجميع مدخلاتها، لا الصفحة الأسهل للاستشهاد.

استخدم الثقة للتوجيه ثم اختبرها

تفيد درجة الثقة عند ربطها بالأخطاء المرصودة في أمثلة ذات صلة. تشرح إرشادات Microsoft للثقة ثقة الحقول المتوقعة والمراجعة البشرية، وتختلف الدرجات المتاحة باختلاف الحقل والمكوّن. فلا تفترض صلاحية حد نجح في نماذج إنجليزية رقمية لجداول عربية مصورة.

صنّف الحقول بحسب أثر الخطأ. قد تختلف مراجعة وصف اختياري عن مراجعة معرف حساب أو تاريخ إشعار تعاقدي أو مبلغ دفع. اختبر حدود القبول منفصلة وافحص الأخطاء عالية الثقة. وقاعدة «القبول فوق 0.95» سياسة مقترحة للاختبار وليست إثباتاً لصحة 95% من القيم المقبولة في عملك.

اجمع الاستخراج والفحوص الحتمية

استخدم فحوصاً دقيقة حيث يسمح المعنى: رموز العملات والتواريخ الصحيحة ومعرفات المنتجات والعلاقات الحسابية وقواعد التفرد. تحقق من أثر التقريب والخصومات وطريقة عرض الضريبة قبل رفض الإجمالي. أبقِ الاختلاف ظاهراً مع القيمة المستخرجة والقيمة المتوقعة؛ ولا تغير حقيقة المصدر ضمناً لجعل الحساب متوازناً.

تحتاج المقارنة بين المستندات إلى سياق. فقد تختلف كمية أمر الشراء عن المسلّمة بسبب تسليم جزئي، وقد يختلف الاسم التجاري عن الاسم المسجل. استفد من السياق الذي تحتفظ به عمليات المشتريات. وفي عمليات المالية لا تعني مطابقة المبلغ تفويض الدفع أو ثبوت صحة المعاملة.

قس صحة السجلات والحقول معاً

في مثال توضيحي، يحتوي الاختبار على 100 سجل وستة حقول مطلوبة لكل سجل، أي 600 قرار حقل. إذا صح 588 منها، بلغت دقة الحقول 98%. وإذا توزعت الأخطاء الاثنا عشر على 12 سجلاً مختلفاً، لم يكتمل صحيحاً سوى 88 سجلاً، أي دقة سجلات كاملة قدرها 88%. تصف النسبتان الاختبار نفسه، وقد يخفي عرض الأولى وحدها تكرار السجلات المعيبة.

اعرض صحة كل حقل مهم وصحة السجل الكامل ونسبة السجلات المقبولة وتصحيحات المراجع. افصل القيم المحالة للمراجعة عن المقبولة خطأ. استبعاد الحالات الصعبة يرفع الدقة ظاهرياً مع إبقاء معظم العمل يدوياً. لذلك وضّح المقام ومزيج المستندات ومعالجة القيم الغائبة وإتاحة الأصول للمراجعين.

أنشئ مجموعة مرجعية دون تسريب أمثلة الاختبار

ليحدد مراجعون متمرسون القيم المتوقعة ومواضعها، وليحسموا الخلافات قبل اعتمادها مرجعاً. فلا يعالج القياس الدقيق تعريفاً تجارياً غامضاً. ضمّن حقولاً غائبة عمداً وقِيماً متعددة مرشحة؛ فالنظام الذي يعيد جواباً دائماً قد يبدو جيداً على النماذج المكتملة ويفشل عند النقص الحقيقي.

افصل الموردين أو القوالب أو الفترات عند الحاجة لاختبار تخطيطات غير مألوفة. أبقِ المكرر والمعدل في التقسيم نفسه، واختبر نسخ القوالب الجديدة قبل توسيع القبول. يشرح دليل ضمان الجودة حفظ أدلة الإصدار؛ والمتطلب الخاص بالاستخراج هو قابلية فحص قرار كل حقل مستقلاً.

احمِ التصحيحات أثناء نقلها إلى النظام

اكتب القيم المقترحة في سجل مرحلي قبل تحديث النظام المرجعي. أظهر الفروق عن البيانات القائمة وامنع استبدال قيمة متحقق منها دون قاعدة مخولة. سجل إقرار النظام بالتحديث وطابق الإخفاقات. وإذا صحح المراجع حقلاً أثناء انتظار إعادة محاولة تلقائية، فلا ينبغي أن تعيد المحاولة توقع النموذج القديم.

ميز في سجل التتبع بين مخرج النموذج والتحويل الحتمي وتصحيح المراجع والقيمة المقبولة في النظام. يمكن أن تفيد التصحيحات في التحسين، لكنها تحتاج إلى معالجة منضبطة قبل إعادة استخدامها للتدريب؛ فقد يكون التصحيح المتعجل خاطئاً، وقد يتضمن المستند بيانات شخصية أو سرية لا يحتاج إليها التدريب.

اختبر بنود الجدول وعلاقاتها

تنتج الجداول متعددة الصفحات أخطاء لا يكشفها اختبار الحقل منفرداً. قد تُقرأ الكمية صحيحاً وترتبط بالمنتج التالي، أو تُعامل تكملة الوصف كبند جديد، أو يصبح عنوان الصفحة معاملة. حدد هوية الصف واستمرار الوصف وعلاقة الإجمالي بالمكونات.

اعرض الصف كاملاً وعنوانه وما يجاوره، وميز رقم البند المطبوع عن معرف مستنتج. وإذا شملت خلية مدمجة عملة أو وحدة لصفوف عدة، فوثق العلاقة. لا تكرر أقرب قيمة لملء الفراغ. قيّم ارتباط البنود مستقلاً عن القراءة وضمّن جدولاً يعبر الصفحات. يجب أن يحفظ الناتج بنية العمل والأحرف معاً.

وعند اختلاف إجمالي المصدر عن مجموع الصفوف، احتفظ بكليهما والفرق. يحدد المراجع هل غاب بند أو طُبق خصم أو كان الأصل نفسه متعارضاً.

حدد الإصدار الأول حول سجل محدود

يسرد الموجز عائلات المصادر ومواصفات الحقول وحالات اللغة والتقويم والمجموعة المرجعية وقواعد التحقق وقائمة المراجعة وسلوك النظام المستقبِل. ابدأ بعدد حقول يسمح بفهم كل إخفاق. فإضافة عشرين حقلاً اختيارياً قد تصرف الانتباه عن خمس حقائق تحدد صلاحية السجل للاستخدام.

للسياق السعودي، يتناول دليل Trusted Data بالإنجليزية للاستخراج العربي ومسارات الخدمات المالية بيئات المستندات المحلية بوصفه مادة تجارية للاستزادة. وإذا كانت المهمة تفسير بنود والتزامات، فانتقل إلى مراجعة العقود؛ فتعبئة حقل في عقد لا تعادل استنتاجاً قانونياً.

أحضر ثلاثة سجلات ممثلة حُجبت معلوماتها الحساسة وقائمة حقول الوجهة ومثالاً لخطأ إدخال مكلف إلى مناقشة تصميم قبول البيانات المستخرجة ضمن حلول OpenForAI للذكاء الاصطناعي. اتفق على القيم المسموح بقبولها تلقائياً والدليل اللازم لتغيير هذه السياسة.