تقييم جودة الطلب

من المهم ضمان جودة الطلب وموثوقيته عند استخدام الوصول المباشر إلى النموذج مع Gemini Nano.

لتقييم جودة الطلب، عليك تطوير مجموعة شاملة من المدخلات والمخرجات المتوقعة لحالة الاستخدام.

لتقييم ما إذا كان طلبك يلبي معايير الجودة في كل إصدار من نموذج Gemini Nano، ننصحك باتّباع سير العمل التالي:

  1. شغِّل مجموعة بيانات التقييم وسجِّل النتائج.
  2. قيِّم النتائج يدويًا أو استخدِم LLM-as-a-judge.
    1. إذا لم يستوفِ التقييم معايير الجودة، يمكنك تكرار الطلب. على سبيل المثال، يمكنك أن تطلب من نموذج لغوي كبير أكثر فعالية، مثل Gemini Pro، تحسين الطلب استنادًا إلى النتيجة المطلوبة مقارنةً بالنتيجة الفعلية.

تساعد هندسة الطلبات في تحسين أداء المهام، وتكرار الطلبات هو المفتاح. ننصح بتكرار الخطوات المذكورة أعلاه من 3 إلى 5 مرات على الأقل. يُرجى العِلم أنّ هذا النهج له حدود، لأنّ التحسينات ستؤدي في النهاية إلى تقليل العائدات.

كخيار بديل، لتحسين الطلبات بسرعة على نطاق واسع، يمكنك استخدام أداة التحسين المستندة إلى البيانات، والتي يمكنها استهداف النماذج على الجهاز فقط، مثل gemma-3n-e4b-it.

الأمان

لضمان عرض Gemini Nano نتائج آمنة للمستخدمين، يتم تطبيق طبقات متعددة من الحماية للحدّ من النتائج الضارة أو غير المقصودة:

  • أمان النماذج الأصلية: يتم تدريب جميع نماذج Gemini، بما في ذلك Gemini Nano، لتكون واعية للأمان من اللحظة الأولى. وهذا يعني أنّ اعتبارات الأمان مدمجة في جوهر النموذج، وليست مجرد إضافة لاحقة.
  • فلاتر الأمان على الإدخال والإخراج: يتم تقييم كل من الطلب المُدخل والنتائج التي تم إنشاؤها بواسطة وقت تشغيل Gemini Nano وفقًا لفلاتر الأمان لدينا قبل تقديم النتائج إلى التطبيق. يساعد هذا في منع تسرب المحتوى غير الآمن، دون أي فقدان في الجودة.

ومع ذلك، بما أنّ كل تطبيق له معاييره الخاصة لما يُعتبر محتوًى آمنًا للمستخدمين، عليك تقييم مخاطر الأمان لحالة الاستخدام المحدّدة لتطبيقك وإجراء الاختبارات وفقًا لذلك.

مراجع إضافية