Context Rot

تدهور السياق هو الفقدان التدريجي للموثوقية الذي يحدث عندما يتلقى نموذج ذكاء اصطناعي سياقاً أكبر مما يمكنه استخدامه بفعالية. حتى عندما تكون نافذة السياق المعلن عنها قادرة تقنياً على استيعاب مئات الآلاف من الرموز، قد يتجاهل نموذج لغوي كبير حقائق ذات صلة، أو يتبع تعليمات قديمة، أو يقل دقة في الاستدلال مع زيادة المدخلات. لاحظت دراسة Chroma لتدهور السياق لعام 2025 هذا الأداء غير المنتظم عبر 18 نموذجاً وعدة مهام خاضعة للرقابة. (trychroma.com)

Link to this sectionكيف يحدث تدهور السياق#

تفرض المدخلات الطويلة متطلبات أكبر على آلية الانتباه الخاصة بالنموذج. يجب أن تتنافس الأدلة المهمة مع التعليمات المكررة، والمستندات غير ذات الصلة، ومخرجات الأدوات، ومداخلات المحادثة الأقدم. يمكن لموقع السياق، والتشابه الدلالي، والحقائق المتضاربة، وتعقيد المهمة أن تؤثر جميعها على ما يستخدمه النموذج.

وجد مقياس الأداء RULER للسياق الطويل لعام 2024 أن النماذج التي كان أداؤها جيداً في الاسترجاع البسيط غالباً ما تراجعت مع زيادة طول التسلسل وتعقيد المهمة. كشف مقياس الأداء NoLiMa لعام 2025 عن انخفاضات أكبر عندما تطلب العثور على إجابة استدلالاً دلالياً بدلاً من مطابقة كلمات متطابقة. لذلك، لا يوجد عدد رموز عالمي—بما في ذلك لنماذج Gemini—يبدأ عنده تدهور السياق؛ فالعتبة تعتمد على النموذج، وهيكل التوجيه، والمهمة. (arxiv.org)

Link to this sectionأمثلة من العالم الحقيقي#

• مساعدو دعم العملاء: قد يمنح برنامج الدردشة الآلي الذي زود بسنوات من التذاكر الأولوية لسياسة قديمة أو يغفل تحديثاً حديثاً للحساب. تُظهر الأبحاث التي تستخدم ذاكرة المحادثة LongMemEval ومقياس الأداء متعدد الوسائط LoCoMo أن استخراج تحديثات تاريخ التفاعل الطويل والاستدلال بناءً عليها يظل تحدياً. (arxiv.org)
• وكلاء التفتيش البصري: يمكن أن يصبح نموذج الرؤية واللغة الذي يراقب مصنعاً أقل موثوقية إذا تم وضع كل إطار، واكتشاف، وسجل صيانة في توجيه واحد. تستخدم سير العمل الأفضل Ultralytics YOLO26 لاستخراج حقائق بصرية موجزة قبل استدلال النموذج اللغوي.
• وكلاء البرمجة: يمكن أن يؤدي تحميل مستودع كامل، وكل تعريف أداة، وسجل طرفية كامل إلى حجب الهدف الحالي. توصي إرشادات هندسة السياق من Anthropic بتنظيم السياق، بينما يقوم نهج مهارات الوكيل الخاص بها بتحميل الموارد التفصيلية فقط عند الحاجة. (anthropic.com)

توضح سير عمل التنبؤ YOLO هذه كيفية تحويل الاكتشافات الأولية إلى سياق مضغوط ومنظم:

from ultralytics import YOLO

model = YOLO("yolo26n.pt")
result = model("https://ultralytics.com/images/bus.jpg")[0]
labels = [model.names[int(cls)] for cls in result.boxes.cls]
context = {"frame": 1, "objects": sorted(set(labels))}
print(context)

Link to this sectionكيفية تقليل تدهور السياق#

• استرجع الأدلة ذات الصلة فقط: استخدم التقطيع الدلالي وأداة إعادة الترتيب بدلاً من إرسال كل مستند متاح.
• ضغط المعلومات القديمة: استبدل السجلات الطويلة بملخصات وقرارات ومهام غير محلولة تم التحقق منها. تشير الأبحاث إلى أن طول المدخلات يمكن أن يقلل الأداء حتى بعد الاسترجاع الناجح. (arxiv.org)
• الحفاظ على البادئات المستقرة: يمكن لـ تخزين التوجيهات مؤقتاً في OpenAI وتخزين سياق Gemini مؤقتاً خفض تكاليف المعالجة المتكررة، على الرغم من أن التخزين المؤقت وحده لا يحسن جودة السياق.
• استخدم النوافذ المنزلقة: توصي Google بـ ضغط نافذة السياق للجلسات المباشرة الطويلة، مع الاحتفاظ بالمعلومات الحديثة وإخراج الرموز الأقدم. (ai.google.dev)
• التقييم بأطوال واقعية: طبق مراقبة النموذج وأعد إجراء الاختبارات الخاضعة للرقابة باستخدام مجموعة أدوات تدهور السياق المفتوحة.

يختلف تدهور السياق عن الهلوسة، وهي مخرجات غير مدعومة؛ والنسيان الكارثي، الذي يغير معرفة النموذج أثناء التدريب؛ وانجراف البيانات، الذي يعكس مدخلات الإنتاج المتغيرة. تدهور السياق هو في المقام الأول فشل في وقت الاستنتاج في اختيار السياق والاستدلال، مما يجعل هندسة السياق الفعالة دفاعه الرئيسي.