لماذا يجب أن يجتاز كل تغيير من الذكاء الاصطناعي بوابة في AI CodeOps
Matt · · آخر تحديث · مدة القراءة: 5 دقيقة · الهندسة
يكتب الذكاء الاصطناعي كودا معقول المظهر بسرعة، فلا يطلق أي تغيير منه بمجرد قوله. ما الذي تفحصه بوابة الإصدار في AI CodeOps، والثغرات التي وجدناها، ولماذا تغلق عند الخطأ.
في هذه الصفحة
في AI CodeOps، لا يدمج أي تغيير كتبه الذكاء الاصطناعي لأن الذكاء الاصطناعي قال إنه انتهى: بل يجب أن يجتاز بوابة إصدار تقرأ تشغيلات اختبار حقيقية، وملاحظات المراجعة، وموافقة شخص. والبوابة تغلق عند الخطأ، فغياب الدليل يحتجز التغيير بدل أن يسمح بمروره.
يستطيع نموذج الذكاء الاصطناعي أن يكتب تغييرا يبدو سليما في دقيقة. وهذا هو الجزء المفيد. أما الجزء الخطر فهو أنه يكتب أيضا في دقيقة تغييرا معطوبا يبدو سليما، والاثنان يُقرآن بالطريقة نفسها. فالكود يُصرَّف، والملخص واثق، وأسماء المتغيرات جيدة. ولا شيء في المخرجات يخبرك أي النوعين حصلت عليه.
لذلك في AI CodeOps، لا يصل أي تغيير يكتبه الذكاء الاصطناعي إلى فرعك الرئيسي لأن الذكاء الاصطناعي قال إنه انتهى. بل يجب أن يجتاز بوابة. ويشرح هذا المقال ما الذي تفحصه البوابة، ولماذا بنيناها على هذا النحو، والأخطاء التي وجدناها فيها على الطريق.
ما يحدث بعد أن تكتب الجلسة الكود
الجلسة فريق من الوكلاء يعمل على مهمة واحدة في مشروع واحد. وحين تنتج فروقات، تحدث ثلاثة أشياء قبل أن يستطيع أحد فتح طلب سحب.
- تعمل اختباراتك على التغيير. تشغل خطوة التحقق (verify) مجموعة اختبارات المشروع نفسه على الكود الذي كتبته الجلسة للتو، في بيئة معزولة، وتسجل النتيجة تشغيل اختبار حقيقيا. وإذا لم يكن للمشروع أمر اختبار، أو تعذر تثبيت التبعيات، لا نسجل شيئا بدل نتيجة حمراء. فعبارة «تعذر علينا التحقق» يجب ألا تبدو أبدا كعبارة «التغيير يفشل». لكنها لا تبدو نجاحا أيضا: فبوابة الإصدار ترفض تغيير الكود الذي لا نتيجة اختبار له، ما لم توقف الاختبارات لذلك المشروع.
- يقرأ مراجع بالذكاء الاصطناعي الفروقات. لا الخطة، ولا نص المحادثة: بل الفروقات. وتخزن ملاحظاته مع درجة خطورتها، وتظهر في صفحة الجلسة، وفي لوحة Security، وفي البوابة.
- يفتح طلب موافقة. ينتظر التغيير تحت Review & Gate → Approvals حتى يقرر شخص يملك صلاحية الموافقة. وتستطيع السياسات أيضا احتجاز الجلسة للموافقة قبل أن تبدأ، والقاعدة
askعلى مسار محمي تسجل قرار سياسة، يسمي القاعدة، حين يمسه تغيير.
ثم حين يوشك التغيير أن يدمج، تنظر بوابة الإصدار في كل ذلك معا. ويستطيع CI لديك أن يطرح السؤال نفسه عبر API: هل طلب السحب هذا، أو هذا الإيداع، جاهز؟ والجواب نعم أو لا مع الأسباب، ويمكن جعل مهمة CI التي تطرحه فحص حالة مطلوبا لدى خدمة استضافة Git.
ما الذي تفحصه بوابة الإصدار
افتراضيا، يرفض التغيير إذا صح أي مما يلي:
- ما زالت عليه ملاحظة مفتوحة بخطورة high أو أعلى. وتتوقف الملاحظة عن المنع متى فرزت بالحالة fixed أو won't fix أو false positive أو duplicate.
- فيه تشغيل اختبار به إخفاقات.
- غيّر الكود وليست له نتيجة اختبار فيها أعداد، والاختبارات غير موقوفة في المشروع.
- فشل سير عمل يعتمد عليه، أو لم ينته أي تشغيل له.
- لم تكتمل مراجعته بالذكاء الاصطناعي.
ويستطيع فحص CI أن يطلب أكثر: حدا أدنى لنسبة التغطية، وقائمة تراخيص يجب ألا تظهر في قائمة SBOM للمشروع، ومسارات سير عمل يجب أن تكون قد نجحت، وقاعدة للترقية بين البيئات تشترط أن يكون التغيير قد نشر إلى staging قبل أن يذهب إلى production. والتفاصيل في دليل بوابات الجودة.
لماذا يحتاج كود الذكاء الاصطناعي إلى هذا أكثر من كود البشر
تفترض مراجعة الكود البشرية أن الكاتب فهم ما كتبه وسيتحمل مسؤوليته. ومع الكود الذي يكتبه الذكاء الاصطناعي، ينكسر هذا الافتراض من جهتين.
الأولى: الحجم. فالفريق الذي كان يراجع خمسة طلبات سحب في اليوم يستطيع أن يولد خمسين. والمراجعون يتعبون، والمراجع المتعب يوافق. أما البوابة فلا تتعب.
والثانية: الثقة ليست دليلا. سيخبرك النموذج أنه أضاف اختبارات وأنها تنجح. وأحيانا يكون قد فعل ذلك فعلا. لكن البوابة لا تقرأ ما قاله النموذج. بل تقرأ سجل تشغيل الاختبار وجدول الملاحظات.
ولهذا أيضا بنيت البوابة لتغلق عند الخطأ، وهو المبدأ الذي تسميه OWASP الفشل الآمن. فكل قاعدة مصاغة على أنها «ارفض ما لم يكن لدينا دليل إيجابي»، لا «اسمح ما لم نر مشكلة». ويستعرض مقال البوابات التي تفتح عند الخطأ مقابل التي تغلق عند الخطأ هذه المفاضلة.
الثغرات التي وجدناها
لم نصب في ذلك من المرة الأولى. وهذه بعض الفجوات التي سددناها هذا الخريف، لأنها تبين ما يعنيه «الإغلاق عند الخطأ» عمليا:
- غير المنتهي احتسب ناجحا. كان فحص CI بعد ثوان من الدفع يستطيع الحصول على «جاهز للإصدار» بينما التشغيل الوحيد ما زال جاريا. والتشغيل الذي لم ينته ليس نتيجة، فصار يجب الآن أن يكتمل تشغيل واحد على الأقل.
- المراجعة غير المقروءة احتسبت سليمة. إذا رد المراجع بالذكاء الاصطناعي بنص نثري، أو برسالة فارغة، أو برد مقطوع عند حد الرموز، كنا نحلله على أنه «لا ملاحظات». ومنذ 14 أكتوبر، أي شيء غير قائمة مقروءة يعد مراجعة فاشلة، وتحتجز البوابة التغيير.
- اختبارات قديمة حكمت على كود جديد. إذا عدّل أحد كود الذكاء الاصطناعي بعد تشغيل اختباراته، كانت البوابة تواصل استخدام النتائج القديمة. والآن لا تحتسب الاختبارات إلا للإصدار نفسه الذي عملت عليه، والتغيير المعدل يقرأ على أنه غير مختبر.
- التعديلات احتفظت بالموافقة القديمة. الموافقة توافق على فروقات بعينها. وتعديل الكود، أو استعادة نقطة حفظ، أو تصفية أجزاء من الفروقات، صار يعيد فتح الموافقة في المعاملة نفسها التي يحدث فيها التغيير.
- فشل منع لأسبوعين. وهذه هي المشكلة المعاكسة: كانت البوابة تمنع عند أي تشغيل فاشل ضمن نافذتها الزمنية، فبقي التغيير الذي أصلح وأعيد تشغيله ممنوعا. والآن يحكم على كل سير عمل بآخر تشغيل منته له.
وكانت كل واحدة من هذه حالة قالت فيها البوابة شيئا لا يسنده الدليل. والقائمة الكاملة في سجل التغييرات.
مراجعة من شخصين
القطعة الأخيرة هي الأشخاص. كانت الموافقة على تغيير من الذكاء الاصطناعي تقبل صوتا من أي شخص يملك صلاحية الموافقة، ومنهم الشخص الذي بدأ الجلسة. فكان مسؤول واحد يستطيع أن يبدأ جلسة ويوافق عليها ويفتح طلب السحب وحده.
ومنذ 11 أكتوبر، متى كان في مساحة العمل شخص ثان يستطيع الموافقة، لا تحتسب موافقة من بدأ الجلسة. فيجب أن ينظر شخص آخر. ويحتفظ الفريق المكون من شخص واحد بالموافقة الذاتية، وإلا لما أمكن إطلاق أي شيء أبدا، والرفض مسموح دائما. وأي رفض واحد يوقف التغيير. ويشرح دليل الموافقات والسياسات من يستطيع الموافقة على ماذا.
ما يكلفك ذلك
البوابة احتكاك، ولا ندعي غير ذلك. فالتغييرات تنتظر مراجعا. والاختبار المتقلب يمنع الدمج إلى أن تعيد تشغيله. والنموذج الذي يعيد مراجعة فوضوية يكلفك مراجعة أخرى.
ونرى أن هذه المقايضة صحيحة لكود لم يكتبه أحد بيده. فالغاية من AI CodeOps ليست جعل تغييرات الذكاء الاصطناعي أسرع دمجا. بل جعل دمجها آمنا، وترك سجل يبين لماذا سمح بكل واحد منها. وإذا أردت أن ترى كيف يعمل جانب المراجعة، فصفحة مراجعة الكود متعددة الوكلاء تتعمق أكثر.
أهم النقاط
- لا يدمج أي تغيير من الذكاء الاصطناعي بكلمة الذكاء الاصطناعي: فبوابة الإصدار تقرأ تشغيلات الاختبار وملاحظات المراجعة والموافقات.
- افتراضيا يرفض التغيير بسبب ملاحظة مفتوحة عالية الخطورة، أو اختبارات فاشلة، أو تشغيل غير منته أو فاشل، أو مراجعة غير مكتملة.
- البوابة تغلق عند الخطأ: لا دليل يعني لا دمج.
- لا تحتسب الاختبارات والموافقات إلا للإصدار نفسه من التغيير الذي رأته.
- حين يكون في مساحة العمل شخص ثان يملك صلاحية الموافقة، لا يستطيع من بدأ الجلسة الموافقة عليها وحده.