كيف تقيس جدوى وكيل الذكاء الاصطناعي في عملك

قد ينهي الوكيل مهمة في ثوانٍ ويترك لك عشر دقائق من التحقق. إذا قست سرعة استجابته فقط، فلن تعرف ما الذي تغير في عمل المشروع.

لتقييم تجربة، سأبدأ بمهمة لها نهاية واضحة: سجل صحيح، أو رد معتمد، أو مستند جاهز للاستخدام. سأقارن الإجراء الحالي والجديد حتى الوصول إلى تلك النهاية نفسها، بما في ذلك الحالات التي تحتاج إلى إعادة العمل.

الوقت الذي يصبح متاحًا فعلًا

هذا المثال افتراضي، ولا يستخدم بيانات عملاء. أفترض 300 مستند شهريًا. يحتاج الإجراء اليدوي الكامل إلى ست دقائق لكل مستند، بينما يتطلب الجديد دقيقتين للتعامل مع النتيجة ومراجعتها. إضافة إلى ذلك، تحتاج 30 وثيقة إلى خمس دقائق إضافية للتصحيح، وهناك ساعتان شهريًا للصيانة الداخلية.

العمل البشري شهريًا	الحساب	الدقائق
الإجراء اليدوي الكامل	300 × 6	1,800
التعامل مع النتيجة ومراجعتها في الإجراء الجديد	300 × 2	600
التصحيحات الإضافية	30 × 5	150
الصيانة الداخلية	2 × 60	120

يتبقى 1,800 − 600 − 150 − 120 = 930 دقيقة، أي 15.5 ساعة شهريًا. التصحيح عمل إضافي بعد المراجعة؛ وقد خُصم وقت الصيانة بالفعل. إذا اضطر شخص إلى الانتظار أمام الشاشة، يُحتسب هذا الانتظار أيضًا عملًا بشريًا.

لن أستنتج هذا الوقت من نسبة الحالات التي يعالجها الوكيل وحده. فقد تستهلك حالة استثنائية طويلة وقتًا يفوق عدة حالات بسيطة. سجل المدة والنتيجة، إلى جانب عدد التدخلات.

تقييم الساعات باليورو دون تحويلها إلى نقد

عند افتراض تكلفة عمل قدرها 24 €/ساعة، تُقدر القدرة المتاحة بقيمة 15.5 × 24 = 372 €/شهر. إذا كانت الأدوات والاستهلاك والبنية التحتية تكلف 90 €/شهر، يصبح الرصيد المقدر بقيمة القدرة المتاحة 282 €/شهر. لا أخصم ساعتي الصيانة الداخلية مرة أخرى.

أفترض تكلفة تنفيذ قدرها 1,800 €، تشمل التدريب وساعات العمل الداخلية الأولية. خلال اثني عشر شهرًا، سيكون الرصيد المقدر 12 × 282 − 1,800 = 1,584 €. يظل ذلك تقييمًا اقتصاديًا لقدرة متاحة، مشروطًا بإمكان الاستفادة منها.

للحديث عن العائد المالي على الاستثمار ROI، سأعرّفه، خلال الأفق نفسه، بالصيغة (المنفعة النقدية المنسوبة إلى المشروع − التكلفة الإجمالية) ÷ التكلفة الإجمالية × 100. تشمل التكلفة الإجمالية التنفيذ والتشغيل والعمل البشري الإضافي، مع احتساب كل عنصر مرة واحدة. أما المنفعة النقدية فهي هامش مساهمة إضافي مثبت أو نفقات تتوقف فعلًا عن دفعها. الوقت المستعاد لا يُحتسب تلقائيًا إيرادًا.

إذا بقي الراتب كما هو ولم تعرف أي نشاط سيشغل تلك الساعات، فلا يسمح هذا المثال بحساب استرداد النقد. كما أنه لا يشمل الضرائب أو التمويل أو أضرار الأخطاء غير المكتشفة.

قياس التكلفة الكاملة لكل نتيجة

في واجهة API، لن أحتسب الرسالة النهائية وحدها. توثق Google استهلاك رموز الإدخال والإخراج وسجلات الاستخدام؛ وقد يحتاج المسار إلى عدة استدعاءات. توثيق رموز Gemini. سأراجع السجلات وفواتير المزود، دون نقل أسعار مثال إلى نظام آخر.

قبل اعتماد التجربة، حدد النتائج المقبولة ومتى يجب أن يتدخل شخص. رد يبدو معقولًا لكنه يؤدي إلى دفع غير مستحق ليس حالة منجزة. الأخطاء ذات العواقب تحتاج إلى ضوابط خاصة، منفصلة عن حساب الدقائق.

لا يوجد مبلغ شهري يجعل أي مهمة مجدية. هناك حجم عمل وتكلفة تنفيذ ومراجعة واستخدام محدد للقدرة التي تستعيدها. تستحق التجربة الاستمرار عندما تدعم هذه البيانات القرار.