أطلقت Perplexity معيار WANDR لتقييم قدرات وكلاء الذكاء الاصطناعي، وذلك عبر 500 مهمة بحثية لتقييم الأداء

أطلقت Perplexity AI WANDR (Wide ANd Deep Research)، وهو معيار قياس مفتوح المصدر، في 15 يوليو لقياس مدى فعالية أنظمة الذكاء الاصطناعي في تنفيذ مهام بحث واسعة النطاق تتطلب اكتشافًا شاملاً للمعلومات والتحقق التفصيلي من الأدلة. يتضمن المعيار 500 مهمة واقعية لجمع البيانات، وصُممت لتقارب مخرجات البحث على مستوى الأعمال الاحترافية، بما في ذلك تحليل السوق، والعناية الواجبة، والمراجعات الأدبية، والاستخبارات التنافسية، مدعومة بأكثر من 170,000 سجل تم التحقق من مصادره.

وعلى عكس المعايير التقليدية التي تُقيّم الإجابات الفردية، يقيس WANDR قدرة نظام الذكاء الاصطناعي على تحديد أعداد كبيرة من الكيانات ذات الصلة والتحقق من كل نتيجة عبر أدلة داعمة. وعند تقييم ستة أنظمة ذكاء اصطناعي قيد الإنتاج، حققت منصة Search as Code التابعة لـ Perplexity أعلى أداء بدرجة F1 ناعمة قدرها 0.363 ودرجة F1 صارمة قدرها 0.133، تلتها Anthropic عند 0.249 و0.072، ما يشير إلى أن البحث الواسع النطاق والمسنود بالأدلة لا يزال بعيدًا عن الأتمتة الكاملة.

إخلاء المسؤولية: قد تكون المعلومات الواردة في هذه الصفحة مستمدة من مصادر خارجية وهي للمرجعية فقط. لا تمثل هذه المعلومات آراء أو وجهات نظر Gate ولا تشكل أي نصيحة مالية أو استثمارية أو قانونية. ينطوي تداول الأصول الافتراضية على مخاطر عالية. يرجى عدم الاعتماد حصرياً على المعلومات الواردة في هذه الصفحة عند اتخاذ القرارات. لمزيد من التفاصيل، يرجى الرجوع على إخلاء المسؤولية.
تعليق
0/400
لا توجد تعليقات