يظهر Kimi K3.1 Pro نتائج عالية في المقاييس المعيارية، لكن أداءه الفعلي يقسم المراقبين. في حلقة من بودكاست Interconnects، يعود ناثان لامبرت وفلوريان براند إلى هذا الإطلاق، ومخاطر الأمن السيبراني المرتبطة بنماذج الذكاء الاصطناعي، ووصول وكلاء قادرين على إدارة المهام الشخصية، لا سيما Muse.
Kimi K3.1 Pro: مقاييس معيارية واعدة، لكن مع تحفظات
على Artificial Analysis، يصنف Kimi K3.1 Pro من بين النماذج الأعلى تقييماً، متقدماً على GPT-6 Astra وفقاً لناثان لامبرت. لكن اختبارات أخرى تعطي صورة مختلفة. على Terminal-Bench Science، يشير إلى فجوة قدرها 20 نقطة لصالح GPT-6 Astra.
يقدم فلوريان براند تفسيراً: تقييمات Artificial Analysis تركز على مهام قصيرة نسبياً، على عكس ProgramBench، الذي يتطلب استكشافاً أكبر. وفقاً له، قد يميل التدريب المعزز لـ Kimi إلى استغلال الحلول المعروفة بدلاً من البحث عن نهج جديدة.
حجم النموذج يثير تساؤلات أيضاً. بمعاملاته التي تبلغ ثلاثة آلاف مليار، يحتاج Kimi K3.1 Pro، وفقاً لفلوريان براند، إلى وحدات معالجة رسومية B300 لاستضافة نسخة متماثلة على عقدة واحدة. يذكر ناثان لامبرت أن الناشر أعلن عن نشر أوزان النموذج قبل 4 نوفمبر.
الأمن السيبراني: هل النماذج المفتوحة حقاً أكثر خطورة؟
تدعي Kimi أنها قيدت عمداً القدرات الهجومية لـ K3.1 Pro في مجال الأمن السيبراني، لا سيما من خلال ضبط بيانات تدريبه. يريد الناشر الحفاظ على الاستخدامات الدفاعية دون دفع حدود القدرات الهجومية المتاحة مع النماذج مفتوحة الأوزان.
يأتي هذا القرار في سياق تميز باكتشافات عدة للثغرات الأمنية. يستشهد فلوريان براند خصوصاً بثغرة في PHP تسمح بتنفيذ التعليمات البرمجية عن بُعد، تم الإبلاغ عنها في إطار برنامج Patch the Planet من OpenAI، مع باحثين آخرين في مجال الأمن.
لكن المتحدثين يؤكدان أن زيادة عدد الثغرات المكتشفة لا تعني بالضرورة انفجاراً في الهجمات. كما يتحدثان عن اختراق LiteLLM، حيث يُعزى التقرير الأولي للحادث إلى مفتاح API ظل متاحاً على GitHub لمدة خمسة أشهر.
Muse: وكيل ذكاء اصطناعي ينظم الإجراءات والمشتريات
يشارك فلوريان براند أخيراً تجربته مع Muse منذ تركيبه في الولايات المتحدة. يساعده الوكيل في تحضير الإجراءات الإدارية، واستعادة المستندات، وتنظيم مشترياته. يمكنه تكوين سلة تسوق ثم اقتراح دفع عبر رابط Stripe يستخدم بطاقة مصرفية لمرة واحدة.
لكن التجربة لها حدود. يذكر فلوريان براند بطئاً، وتعطلات للمتصفح، وحظراً تفرضه بعض المواقع. كما يوضح أنه نقل بريده الإلكتروني إلى Gmail لتسهيل وصول Muse إليه، مع تفضيله استعادة السيطرة شخصياً عندما يحتاج الوكيل للتواصل مع متلقٍ بشري.
