88,4 % der Antworten von UroBot waren korrekt. Damit stellte es nicht nur das aktuellste Modell GPT-4o in den Schatten, sondern übertraf auch die durchschnittliche Leistung von Urolog:innen bei der Facharztprüfung, die in der Literatur mit 68,7 % angegeben wird. Zudem zeigt UroBot eine sehr hohe Zuverlässigkeit sowie Konsistenz in den Antworten und ist in der Lage, diese detailliert anhand der medizinischen Leitlinien zu begründen. UroBots Antworten sind durch klinische Expert:innen verifizierbar, da die entscheidenden Quellen und Textabschnitte durch die Software benannt werden. Entwickelt wurde das leistungsstarke Sprachmodell von Wissenschaftler:innen des Deutschen Krebsforschungszentrums.
Quelle
Hetz MJ, et al., ESMO Real World Data and Digital Oncology 2024, doi: 10.1016/j.esmorw.2024.100078
