الأداء البشري يتفوق على الذكاء الاصطناعي في تصنيف وثائق طبية

أجرت جامعة جيمس كوك دراسة على 5 مبرمجين بشريين للوثائق الطبية السريرية ضد نماذج لغوية كبيرة تعتمد على "تشات جي بي تي" لتحليل 100 ملخص سريري صعب، بعد اختيار عشوائياً عبر 5 فئات رئيسية من الأمراض.

النهج الهجين بين البشر والذكاء الاصطناعي أكثر سرعة واستفادة ودقة في التشخيص

وأظهرت النتائج تفوق الأداء البشري لاثنين من المبرمجين على نماذج الذكاء الاصطناعي المصممة لتصنيف مستندات الحالات الطبية المعقدة.

لكن الباحثين قالوا إن تكنولوجيا الذكاء الاصطناعي لا تزال قادرة على تقديم فوائد هائلة.

نتائج المنافسة

وفي التجربة، حقق "تشات جي بي تي"، دقة بنسبة 22%، بينما حقق أفضل مبرمج بشري في الدراسة 47%.

وقال الباحث الرئيسي للدراسة أكرم مصطفى: "لقد رأينا أن اثنين من المبرمجين البشريين يؤدون أداءً أفضل في جميع الحالات تقريباً من الأداة".

وتابع: "كان أداء بعض المبرمجين أسوأ، ولكن إذا جمعت الفئات الـ 5 مجتمعة، فإن أداء المبرمجين البشريين بشكل عام أفضل".

السجلات الصحية

وبحسب "مديكال إكسبريس"، يترجم المبرمجون السجلات الصحية إلى أكواد أبجدية رقمية موحدة، والتي تُستخدم بعد ذلك لإعداد التقارير عن بيانات الولاية والكومنولث، وتخطيط الخدمات الصحية ونماذج تمويل المستشفيات.

وقال الباحث أكرم مصطفى "من السهل تصنيف بعض الحالات السريرية، حيث يمكن لنماذج التعلم الآلي السابقة أو أدوات رسم الخرائط العادية أن تعمل بشكل جيد بالفعل. لكننا أردنا أن ننظر إلى الحالات التي يكون فيها من الصعب على تلك الأدوات تصنيف المستندات السريرية إلى فئات مختلفة من الأمراض".

الحالات الصعبة

وأضاف: "أردنا أن نرى في هذه الحالات الصعبة، حيث قد تكون بعض المعلومات مفقودة، أو لا يظهر السجل معلومات كافية، كيف يمكن لأداة الذكاء الاصطناعي لنموذج اللغة الكبيرة أن تقارن بالمبرمجين البشريين".

وقال مصطفى رحيمي أزغدي، الباحث المشارك إن الفريق قارن أيضاً أداء نسختين من برامج الذكاء الاصطناعي، ChatGPT 3.5 مع ChatGPT 4 أثناء الدراسة، ووجد أن الأخير أنتج تصنيفات أكثر اتساقاً للأمراض عند تغذية نفس المستندات السريرية بشكل متكرر.

وكان النموذج الأحدث أكثر استقراراً في التبؤ بالمرض بنسبة 89% مقارنة بـ 86%.

وقال أزغدي إن النموذج يجب أن يُنظر إليه كأداة يمكن أن تكمل الترميز البشري، وخاصة في تقليل التناقضات وتحسين الكفاءة.

وتابع: "يمكن أن يكون النهج الهجين بين البشر والذكاء الاصطناعي أكثر سرعة واستفادة ودقة في التشخيص".

المصدر: موقع 24