اتفاقيات وأهداف مستوى خدمة وكلاء الذكاء الاصطناعي

ينبغي أن يصف هدف مستوى خدمة الوكيل خدمة يلاحظها العمل: نتيجة قابلة للاستخدام، خلال وقت محدد، لمهمة مؤهلة. لا يثبت توافر النموذج وحده هذا الوعد. فقد يستجيب الوكيل لكنه ينتج حزمة ناقصة أو ينتظر الموافقة بلا نهاية أو ينجز بعد الموعد التجاري.

يساعد هذا الدليل مالكي الخدمات وفرق المشتريات والتشغيل على تعريف مؤشرات مستوى الخدمة وأهدافها واتفاقياتها دون إخفاء الجودة خلف التوافر. والمخرج العملي اتفاق قياس يربط قرارات تشغيل الوكلاء AgentOps بتجربة المستفيد وميزانية الأخطاء ومسؤولية الدعم.

افصل القياس والهدف والالتزام

مؤشر مستوى الخدمة SLI هو القياس المحدد. وهدف مستوى الخدمة SLO هو القيمة المستهدفة له خلال فترة معلنة. واتفاقية مستوى الخدمة SLA تحدد التزامات الخدمة وعواقب الإخلال وفق شروط متفق عليها. تتبع هذه الفروق إطار مستويات الخدمة في Google SRE، ويتطلب تطبيقها على الوكيل تعريفاً صريحاً لمسار العمل.

فمثلاً، «نسبة حزم تجهيز الطباعة المؤهلة التي سُلّمت صحيحة في الموعد» مؤشر. وتحديد نسبة مستهدفة خلال شهر تقويمي هدف. أما التعويضات التعاقدية والاستثناءات والتقارير وتسوية النزاع فتخص الاتفاقية. ولا ينشئ الهدف الداخلي تلقائياً استحقاقاً للعميل أو اتفاقية مكتملة قانونياً.

حدد تجربة من تقيس. فتوافر مزود النموذج واستجابة واجهة فريق التكامل واكتمال مهمة مستخدم العمل حدود مختلفة. اشرح علاقتها دون الادعاء بأن وعد مورد واحد يشمل كل المكونات والقرارات البشرية والأنظمة الخارجية في الخدمة الكاملة.

عقد خدمة لوكيل تجهيز الطباعة التجارية

لنفترض وكيلاً توضيحياً يجمع حزم تجهيز أعمال الطباعة التجارية. يجلب مراجعة التصميم المعتمدة، ويحدد تعليمات الإنتاج الناقصة، ويوجه الحزمة لمنسق الطباعة. ولا يعتمد دقة اللون أو يحجز الطاقة الإنتاجية أو يسمح بإرسال العمل إلى المطبعة.

يميز عقد النتيجة الحزمة المكتملة عن حالة نقص المعلومات الموجهة بصورة صحيحة. قد يمثل كلاهما معالجة سليمة، لكن لا ينبغي دمجهما لتضخيم مؤشر الإكمال نفسه. يحدد دليل تقييم نتائج الوكلاء أدلة القبول، وتضيف وثيقة مستوى الخدمة التوقيت وحدود القياس والعواقب التشغيلية.

مثال لاتفاق قياس إعداد حزم تجهيز الطباعة

الحقل	التعريف المقترح	أهميته
الوحدة المؤهلة	مراجعة واحدة مقبولة لعمل طباعة، بصلاحيات المصادر المطلوبة وفئة ملفات مدعومة.	لا تصبح المحاولات المتكررة مهام إضافية.
بداية القياس	تسجيل قبول المهمة بعد فحص الحد الأدنى للمدخلات.	لا يعيد طابور خفي ضبط الساعة.
الحدث الجيد	إتاحة مراجعة الحزمة الصحيحة للمنسق في الموعد المتفق عليه.	توليد رد وحده غير كافٍ.
مسار الاستثناء	تسليم حالة نقص معلومات محددة إلى مالكها.	تظهر المعالجة المنضبطة بصورة مستقلة.
إغلاق القياس	الموعد المتفق عليه مضافاً إليه مهلة وصول الأدلة المعلنة.	لا يختفي العمل غير المحسوم.
مسؤول الأدلة	يطابق مالك الخدمة سجلات القبول والتسليم واعتماد النتيجة.	للنتيجة المختلف عليها مسار حسم.

هذه اختيارات تصميم، وليست أرقاماً تعاقدية موصى بها. يختار العمل المواعيد من احتياجات الإنتاج الفعلية، مستنداً إلى حجم العمل والطاقة المرصودين. فقد يصعب تحقيق نسبة مستديرة مريحة دون أن تفيد أهم الأعمال.

اجعل الاستثناءات قابلة للرصد قبل معرفة النتيجة

اكتب شروط الأهلية قبل حساب الأداء. قد تقع الملفات غير المدعومة خارج خدمة الحزمة المكتملة، لكن على الاستقبال إبلاغ مقدم الطلب بما حدث. وإلا أمكن تحسين النجاح المعلن برفض العمل الصعب بصمت. راقب فشل القبول وحجم المستثنى إلى جانب النتائج المؤهلة.

لا تعِد تصنيف الطلب الفاشل خارج النطاق بأثر رجعي لأن الوكيل عجز عنه. إذا قُبل وفق العقد الجاري، فقد يمثل الاكتشاف اللاحق فشلاً أو استثناءً منضبطاً أو توقفاً مسموحاً وفق ذلك العقد. احتفظ بالقرار الأصلي وسببه.

حدد معاملة إلغاء العميل وتغير المصدر وتعطل الأطراف الخارجية. لا يستلزم استثناء حدث من تعويض المورد حذفه من تقرير تجربة المستفيد. احتفظ بالمنظورين عند الحاجة: المسؤولية التعاقدية والخدمة التي تلقاها العمل فعلياً.

اختر ساعات قياس تشمل الانتظار والتنفيذ

يشمل الزمن الكامل الطوابير وتنفيذ الأدوات وإعادة المحاولة والمراجعة الداخلة في الخدمة الموعودة. وإذا كان قرار بشري مستقل خارج الالتزام، فوثق حده وقس طابوره منفصلاً. لا توقف الساعة كلما سُلّم العمل إلى شخص ثم تصف الرقم المتبقي بزمن الإنجاز الكامل.

حدد المنطقة الزمنية وتقويم العمل وما إذا كان الموعد يعتمد الزمن المنقضي أو ساعات العمل. قد يعمل فريق سعودي بتقويم مختلف عن مورد دولي. ينبغي أن تحسم الاتفاقية العطلات والطلبات الليلية والتصعيد خارج الدوام دون افتراض ملاءمة أسبوع عمل عام للعميل.

عند تأخر القبول، أبقِ الحالات المعلقة ظاهرة حتى إغلاق القياس. يمكن للوحة المؤقتة إظهار الجيد والسيئ المعروفين وغير المحسوم. طابقها مع الأدلة المتأخرة وفق قاعدة موثقة لإعادة إصدار النتائج. فقد يجعل الاقتصار على المكتمل تراكم الأعمال يبدو خدمة سريعة موثوقة.

احسب ميزانية الأخطاء بمقام معلن

للتوضيح فقط، افترض هدفاً شهرياً قدره 99% لمؤشر جيد محدد، و10,000 مهمة مؤهلة في الشهر المكتمل. تبلغ ميزانية الأحداث السيئة 1% من 10,000، أي 100 مهمة. وإذا أخفقت 20 مهمة في المؤشر، استُهلك 20% من الميزانية. ليس ذلك وعد خدمة مقترحاً أو نتيجة مرصودة لدى OpenForAI.

عدد مهام الشهر الجاري النهائي غير معروف بعد. قد تعرض اللوحة ميزانية مؤقتة من الحركة المرصودة أو من توقع، لكن عليها توضيح الأساس المستخدم. لا تخلط مقاماً متوقعاً بادعاء نهائي عن الشهر. ويؤثر تغير الحجم أيضاً في سرعة استهلاك ميزانية قائمة على الطلبات.

تعرّف إرشادات Google SRE للتنبيه بأهداف الخدمة معدل الاستهلاك مقارنة بنسبة الخطأ المسموح، وتشرح التنبيه بنوافذ متعددة. مع السماح التوضيحي البالغ 1%، تعني نسبة أحداث سيئة قدرها 5% في نافذة حديثة محددة معدل استهلاك 5. ولا تحدد هذه النسبة وحدها عدد الساعات المتبقية لنفاد ميزانية الشهر.

استخدم نافذة أطول لإثبات استمرار الأثر وأقصر للتحقق من بقائه الآن. اختر النوافذ والعتبات بحسب حجم المهام وقدرة الاستجابة. وقد تحتاج المسارات قليلة الحجم إلى تصعيد لكل حدث ذي عاقبة؛ فنسب العينات الصغيرة غير مستقرة.

أبقِ قيود السلامة خارج الميزانية القابلة للموازنة

تدعم ميزانية الأخطاء قرارات الموثوقية، ولا تسمح بإجراء محظور. تحتاج تعليمات إطلاق طباعة غير مخولة أو كشف بيانات حساسة أو تجاوز صلاحيات إلى قاعدة حوادث مستقلة. لا يجوز أن يلغي متوسط شهري جيد خرق سياسة إلزامية.

ولا تعوض نسبة إكمال مرتفعة خطأ غير مقبول في فئة مختلفة. اعرض الجودة والالتزام بالوقت والمعالجة المنضبطة منفصلة، ثم عرّف أي مؤشر مركب بوضوح. إذا تطلب الحدث الجيد الصحة والموعد معاً، فأظهر اجتماعهما بدلاً من ضرب نسب غير مترابطة.

اربط سياسة الميزانية بـضبط إطلاق إصدارات الوكيل. قد يوقف نفادها التغييرات غير الضرورية مع استمرار تحسين الموثوقية. حدد من يمنح الاستثناء وأدلته وانتهاءه؛ وإلا أصبحت «ميزانية الأخطاء» تسمية في لوحة بلا أثر في القرار.

ابنِ اتفاق المورد حول الأدلة والمعالجة التعاقدية

حدد المرجع المعتمد لأعداد المهام والتوقيتات والقبول. اذكر دورية التقارير والوصول للبيانات وفترة الاعتراض وتصحيح عيوب القياس. إذا استطاع أي طرف تغيير المقام منفرداً، فلن تمنع النسبة الدقيقة ظاهرياً النزاعات.

افصل أهداف تأكيد استلام البلاغ والتحقيق وتخفيف الأثر واستعادة الخدمة. لا تثبت استجابة المورد السريعة لتذكرة تعافي الوكيل. يحدد نموذج المناوبة والتصعيد من يستطيع التصرف عند تعطل مزود النموذج أو خدمة التكامل أو نظام يملكه العميل.

صف المعالجات والاستثناءات مع مسؤولي العقد وفق الحدود الفعلية. تجنب نسخ اتفاقية بنية سحابية إلى تشغيل وكيل. يستطيع المورد الالتزام بمصداقية بما يرصده ويؤثر فيه، ويظل العميل بحاجة إلى مسؤول عن العملية الكاملة.

اجمع أدلة المهام باتساق

اجمع أعداد الشرائح قبل حساب نسبة الأحداث الجيدة الكلية، أو انشر الأوزان إذا قصدت درجة موزونة. قد يشوه متوسط نسب أحجام مختلفة صورة الخدمة. أبقِ نتائج الشرائح متاحة كي لا يخفي عمل سهل وكبير فئة إخفاق صغيرة مؤثرة.

احسب المهمة المنطقية مرة واحدة وفق المؤشر المختار ولو تعددت محاولاتها. قد تحسن الإعادة النتيجة النهائية وتزيد الزمن واستهلاك الطاقة. احفظ الآثار منفصلة ولا تعتبر كل محاولة ناجحة مهمة تجارية جيدة جديدة.

تحقق من القياس قبل تقديم الوعد

شغّل المؤشر المقترح للملاحظة وافحص حالات فردية. طابق الأعداد مع نظام استقبال العمل. اختبر القبول المكرر والسجلات المتأخرة والمراجعات الملغاة والتوقيتات المفقودة. تأكد من بقاء المهمة غير المحسومة ظاهرة بعد نهاية التقرير، ومن عدم تحولها إلى نجاح بسبب عيب في عد المحاولات.

راجع النتائج بحسب فئة العمل واللغة عندما تغيران سلوك الخدمة. قد يخفي الإجمالي الجيد ضعف فئة ملفات عربية أو طابوراً متأخراً في اليوم. استخدم مراقبة الإنتاج للجمع وبطاقة مؤشرات AgentOps للعرض الإداري، مع حفظ التعريفات نفسها في الاثنين.

قبل الاعتماد، اطلب من مالك الخدمة شرح حدث جيد وآخر سيئ وطلب مستثنى وحالة غير محسومة من سجلات المصدر. إذا تعذر إعادة إثباتها، حسّن القياس. ناقش تصميم مستويات خدمة الوكلاء مع عينة أُخفيت تفاصيلها الحساسة والموعد التجاري الحالي والحدود التي يتحكم فيها كل مورد.