المقالات · ذكاء اصطناعي تطبيقي من السعودية
الدرجة اللي نزلت من 22 إلى 8
ما تغيّر شي في الوكيل بين الرقمين. اللي تغيّر هو طريقة فحصي له.
في سبتمبر كان عندي درجة فرحت فيها. وخلال يوم راحت، والوكيل اللي وراها ما تغيّر ولا شي.
أنا أبني مصنع: نظام من وكلاء الذكاء الاصطناعي، شغلته يبني وكلاء ذكاء اصطناعي ثانيين. أول وكيل يجاوب على أسئلة عن دواء معيّن، من الوثائق المعتمدة من الشركة وبس. وفي هالمجال الجواب الغلط مشكلة امتثال، عشان كذا نختبره بقوة.
الاختبار مجموعة ثابتة من 36 سؤال، كل سؤال ينسأل مرات كثيرة. والسؤال ما ينحسب ناجح إلا إذا كل جواب عليه صح، بدون استثناء. أول عدّ قال إن 22 من الـ 36 نجحوا. وحطيت هالرقم هو الحدّ اللي لازم توصله وكلاء المصنع نفسها.
النظرة الثانية
بعدين صحّحنا نفس الأجوبة مرة ثانية، بطريقة ثانية. هالمرة كل جواب انقرا لحاله، مقابل مفتاح إجابات مكتوب ومقابل الوثائق المعتمدة. مو انطباع عن الدفعة كلها. جواب جواب.
نفس الوكيل. نفس الأجوبة. والدرجة طلعت 8.
السؤال اللي كان لازم يوقفني
كان فيه سؤال عن مريض على دواء ينعطى كل أربعة أسابيع، وتأخّر عشرة أيام عن جرعته. النشرة المعتمدة واضحة: أعطه الجرعة الحين وابدأ الجدول من جديد من اليوم.
كل جواب جاب الوكيل قال انتظر للموعد اللي بعده. عكس النشرة بالضبط، في كل مرة. وهالسؤال انحسب ناجح، مرتين. وحتى بلّغنا عنه إنه التحسّن الواضح الوحيد اللي سويناه.
محد غشّ. التصحيح الأول كان سريع وكوّن انطباع عن أجوبة كل سؤال. والنمط اللي يبان صح ينقرا على إنه صح. أما فحص كل جواب مقابل المفتاح فما يسمح بهذا.
الدرجة اللي ما تفحصها جواب جواب هي مجرد رأي.
وش تغيّر
رمينا الـ 22، وثبّتنا الـ 8 كالرقم اللي لازم نتغلب عليه. رقم أصغر، بس صادق، والرقم الصادق بس هو اللي ينتحسّن.
القاعدة الحين إن كل جواب ينصحّح لحاله، مقابل مفتاح مكتوب والوثائق المعتمدة، وما ننحاز لانطباع عن الدفعة أبدًا. الوكيل ما كان هو المشكلة. المشكلة كانت ثقتي برقم محد فحصه.
وهذا جزء كبير من اللي نسويه في AI.me: ذكاء اصطناعي أجوبته تنفحص، ويظل كذا بعد الإطلاق. أنت تقود، واحنا نتكفّل بالصيانة.
الجزء الثاني من سلسلة عن دروس بناء مصنع ذكاء اصطناعي، نبدأ فيها بالدروس المكلفة.