الاختبار اللي ما شافه من قبل

فحوصات الذكاء الاصطناعي عندي جابت 84% على الأسئلة اللي بنيتها عليها. وبعدين عطيتها أسئلة ما شافتها من قبل، وجابت 59%.

أنا أبني مصنع: نظام من وكلاء الذكاء الاصطناعي، شغلته يبني وكلاء ذكاء اصطناعي ثانيين. أول وكيل يجاوب على أسئلة عن دواء معيّن، من الوثائق المعتمدة من الشركة وبس. وبين هالوكيل والمستخدم فيه مجموعة فحوصات تلقائية. كل فحص يمنع أي جواب يكسر قاعدة، مثل إنه ينقل من مصدر غلط، أو يخمّن في موضع المفروض يعتذر فيه.

عشان أختبر الفحوصات، ذكاء اصطناعي ثاني يكتب أسئلة صعبة، من النوع اللي يقف على حافة القاعدة، ومعها النتيجة الصحيحة لكل سؤال. أشغّل الفحوصات، وأشوف وين تغلط، وأصلحها. جولة ورا جولة، والدرجة كانت تطلع. وصلت 84%، وارتحت لها.

الاختبار اللي ما أقدر أغشّه

بعدها طلبت من الذكاء الاصطناعي الثاني دفعة جديدة. أسئلة مختلفة، ونفس القواعد، مكتوبة ومحفوظة بعيد، ما أقدر أشوفها ولا أعدّل شي على أساسها. وشغّلت نفس الفحوصات بدون أي تغيير.

وش يعني هذا

من السهل تقول إن الفحوصات كانت سيئة. بس هي مو سيئة. كانت ممتازة في الأسئلة اللي أقدر أشوفها. قراءتي إن كل إصلاح سويته كان لخطأ قدامي، فالفحوصات شوي شوي أخذت شكل هالدفعة. والدفعة الجديدة كانت أول مرة شي يقاومها.

الاختبار اللي تقدر تشوفه، تقدر تنجح فيه.

وفيه اسم للمكان اللي توصله هالطريقة: صندوق الهلوسة. نظام مضبوط على اختباراته لدرجة ما عاد يشوف أخطاءه. وهو من داخله يبان ممتاز.

وش تغيّر

شيئين. فحص كان يعتمد على نمط ثابت من الكلمات، صار يستخدم نموذج يفهم معنى الجواب. وكل دورة، أقارن الدرجة على الأسئلة اللي انبنت عليها الفحوصات بالدرجة على مجموعة جديدة محفوظة. وإذا الدرجة الجديدة ظلّت أقل، فالصندوق يتكوّن.

الدرجة الجديدة هي الرقم الوحيد اللي أثق فيه. والثاني مجرد بروفة.

وهذا جزء كبير من اللي نسويه في AI.me: ذكاء اصطناعي ينختبر بأسئلة ما شافها من قبل، ويظل صادق بعد الإطلاق. أنت تقود، واحنا نتكفّل بالصيانة.

دينس نويل غوميز مؤسس AI.me، مزوّد حلول ذكاء اصطناعي تطبيقي في الرياض، السعودية. يبني لروّاد الأعمال والمدراء "عقل ثاني" بالذكاء الاصطناعي، ويشغّل نفس النوع لنفسه. هذي الملاحظات مكتوبة من البناء وهو يصير.

الجزء الرابع من سلسلة عن دروس بناء مصنع ذكاء اصطناعي، نبدأ فيها بالدروس المكلفة.