● مجتمع
Evol-ai
⚡ فوري
SkillCompass
بواسطة Evol-ai · Evol-ai/SkillCompass
قيِّم جودة مهارات الوكيل — ابحث عن الحلقة الأضعف، أصلحها، وأثبت أن الإصلاح نجح من خلال مقاييس قبل وبعد.
يقيِّم SkillCompass مهارات الوكيل لديك من حيث الوضوح ومعدل التفعيل والصحة اللاحقة وتكلفة السياق. يبرز المهارة الأكثر احتمالاً لإضرار أداء الوكيل، ويقترح إصلاحاً، ويعيد تشغيل التقييم حتى تتمكن من إظهار التحسين. مفيد عندما يكون لديك مجموعة من المهارات ولا تعرف أيها يستحق فعلاً وزنه من السياق.
لماذا تستخدمه
الميزات الأساسية
- تقييم المهارات متعدد الأبعاد (الوضوح والتفعيل والصحة والتكلفة)
- تحديد 'الحلقة الأضعف' عبر مجموعة من المهارات
- يقترح تعديلات محددة على SKILL.md
- إطار تقييم قبل وبعد
- أدوات JavaScript — تعمل محلياً
عرض مباشر
كيف يبدو في الممارسة
skillcompass-skill.replay
▶ جاهز
حالات الاستخدام
استخدامات عملية: SkillCompass
متى تستخدمه: تشعر أن الوكيل أصبح أسوأ، وليس أفضل، كلما أضفت مهارات جديدة.
الخطوات
-
شخّص المشكلة في المهارة الأضعف
بخصوص أضعف مهارة، ما الذي يحديداً خطأ؟✓ تم النسخ
→ نقد محدد (وصف غامض، تضارب مع مهارة أخرى، إلخ)
-
اقترح إصلاحاً
اقترح تعديلاً بسيطاً على SKILL.md لإصلاحه.✓ تم النسخ
→ فرق صغير وقابل للمراجعة
-
أعد التقييم
أعد تشغيل التقييم واعرض قبل وبعد.✓ تم النسخ
→ تحسنت المقاييس، مع أدلة
النتيجة: مجموعة مهارات أفضل بشكل قابل للقياس، مع عملية تقييم قابلة للتكرار.
المزالق
- الاستفادة من مقياس التقييم بدلاً من مساعدة المهام الحقيقية — أدرج مقاييس لاحقة على مستوى المهام (النتائج الفعلية للوكيل)، وليس فقط على مستوى النصوص
متى تستخدمه: قبل الدفع إلى GitHub وإخبار العالم بمهارتك.
الخطوات
-
قيِّم المسودة
قيِّم مهارتي المسودة في ./my-skill/.✓ تم النسخ
→ نقاط البُعد
-
أصلح المشاكل الواضحة
طبّق الاقتراحات السهلة✓ تم النسخ
→ تعديلات في SKILL.md
النتيجة: مهارة جاهزة للنشر بدلاً من مسودة خام.
المزالق
- السعي وراء درجة مثالية — شحن عندما تستقر الدرجات — العوائد المتناقصة
التركيبات
اجمعها مع خوادم MCP أخرى لتحقيق نتائج x10
أداتان متكاملتان: SkillCompass ترتب، skill-optimizer تحفر في أنماط SKILL.md
استخدم SkillCompass لاختيار أسوأ مهارة؛ استخدم skill-optimizer لتحليل SKILL.md بعمق.✓ تم النسخ
عمل عبر دليل ~/.claude/skills/ الكامل
قيِّم كل مهارة في ~/.claude/skills/ وأعطني ملف CSV.✓ تم النسخ
التكلفة والحدود
تكلفة التشغيل
- حصة API
- بدون حد أقصى بما يتجاوز مزود LLM لديك (التقييمات تستخدم استدعاءات LLM)
- الرموز لكل استدعاء
- قد تكون التقييمات ثقيلة — خطط لـ 20–100k رمز للمسح الكامل للمجموعة
- التكلفة المالية
- مجاني، MIT
- نصيحة
- قم بالتشغيل على مهارة واحدة في المرة أثناء التكرار؛ تشغيلات المجموعة فقط للتدقيقات
الأمان
الصلاحيات والأسرار ونطاق الأثر
تخزين بيانات الاعتماد: بدون تخزين على مستوى المهارة
نقل البيانات الخارجي: بدون تسرب بيانات بما يتجاوز مزود LLM لديك
استكشاف الأخطاء
الأخطاء الشائعة وحلولها
أخطاء Node عند التثبيت
تأكد من Node 20+؛ قم بتشغيل npm i داخل دليل المهارة.
تحقق: node -v
التقييمات غير متسقة من تشغيل إلى آخر
أصلح بذرة المهمة واستخدم عينة حتمية؛ سجل المزود والنموذج.
البدائل
SkillCompass مقابل البدائل
| البديل | متى تستخدمها | المقايضة |
|---|
| skill-optimizer-skill | تريد تحليل مهارة واحدة بعمق بدلاً من ترتيب مجموعة | العمق على حساب الشمول |
| المراجعة اليدوية | لديك 1–2 مهارة فقط | لا توسع |