Automatizácia identifikácie výsledkov klinických skúšok a detekcia ich nesprávneho vykazovania pomocou RegCheck

RegCheck je automatizovaný systém založený na veľkom jazykovom modeli (LLM), ktorý bol vyvinutý na identifikáciu výsledkov klinických skúšok a detekciu ich nesprávneho vykazovania. Výskum zahŕňal validáciu na 62 klinických skúškach z piatich významných medicínskych časopisov a porovnanie s manuálnym hodnotením projektu COMPare Trials. RegCheck dosiahol 91,2% úspešnosť pri extrakcii výsledkov, 83,6% presnosť pri klasifikácii výsledkov ako primárnych, sekundárnych alebo nepredbežne špecifikovaných a 85,6% presnosť pri detekcii nesprávneho vykazovania. Po riešení rozdielov s pôvodnými ľudskými posúdeniami sa presnosť detekcie nesprávneho vykazovania zvýšila na 94,8%. Priemerné náklady na spustenie systému boli 5,94 USD na článok. Automatizovaná kontrola výsledkov môže poskytnúť škálovateľný spôsob na podporu editorov, recenzentov a autorov pri detekcii zmien výsledkov a zlepšení kvality vykazovania klinických skúšok.