Command Palette
Search for a command to run...
تصرف كطبيب أشعة: توليد تقارير الأشعة عبر المناطق التشريحية
تصرف كطبيب أشعة: توليد تقارير الأشعة عبر المناطق التشريحية
Qi Chen Yutong Xie Biao Wu Xiaomin Chen James Ang Minh-Son To Xiaojun Chang Qi Wu
الملخص
يمكن أن يخفف أتمتة إنشاء تقارير التصوير الإشعاعي من العبء الوظيفي الملقى على عاتق الأطباء المختصين في التصوير الإشعاعي. ومع ذلك، تتركز الدراسات الحالية بشكل رئيسي على منطقة الصدر بسبب نقص البيانات العامة المتاحة لمناطق أخرى. علاوةً على ذلك، تعتمد هذه الدراسات غالبًا على نُهج بسيطة تعتمد على البيانات، مثل إطار عمل مُشفِّر-مُفكِّك أساسي مع خسارة التسمية (captioning loss)، مما يحد من قدرتها على التعرف على الأنماط المعقدة عبر مناطق تشريحية متنوعة. ولحل هذه المشكلات، نقترح X-RGen، وهو إطار لإنجاز التقارير المخصصة للتصوير الإشعاعي يغطي ستة مناطق تشريحية. في X-RGen، نسعى إلى تقليد سلوك الأطباء المختصين في التصوير الإشعاعي، من خلال تقسيم عملية التقييم إلى أربع مراحل رئيسية: 1) الملاحظة الأولية، 2) التحليل عبر المناطق المختلفة، 3) التفسير الطبي، و4) صياغة التقرير. أولاً، نستخدم مُشفِّر صور لاستخراج الميزات، تمامًا كما يفعل الطبيب المختص في مراجعته الأولية. ثانيًا، نعزز قدرة مُشفِّر الصور من خلال تحليل الصور والتقارير عبر مناطق متعددة، محاكاةً لطريقة تراكم الخبرة وتحسين المهارة المهنية لدى الأطباء من خلال الحالات السابقة. ثالثًا، تمامًا كما يُطبّق الأطباء خبراتهم لفهم الصور الإشعاعية، نُدخل معرفة طبية إشعاعية متعددة المناطق التشريحية لتحليل الميزات من منظور سريري. وأخيرًا، نُولِّد التقارير بناءً على الميزات المُدركة للسياق الطبي باستخدام مُفكِّك نصي تلقائي التوليد (auto-regressive text decoder). تُظهر النتائج المقدمة من خلال مقاييس توليد اللغة الطبيعية (NLG) والكفاءة السريرية فعالية X-RGen على ستة مجموعات بيانات أشعة سينية. يمكن الوصول إلى الكود والنقاط المحفوظة (checkpoints) عبر الرابط التالي: https://github.com/YtongXie/X-RGen.