Бот с ИИ почти сравнялся с медиками в прочтении рентген снимков: 79,5% Vs 84,8%. Но вот почему радоваться рано
Интересный эксперимент от британских ученых.
Интересный эксперимент от британских ученых.
Бот с искусственным интеллектом почти сравнялся с медиками в прочтении рентген снимков, его средняя точность составила 79,5%, сообщают ученые из британского Королевского колледжа радиологии.
«Кандидатом» на тест стала разработка французской компании Milvue под названием Smarturgences. В исследовании также приняли участие 26 радиологов. Система по ИИ получила такую оценку по результату прохождения 10 тестов. При этом средняя точность реальных радиологов составляет 84,8%.
Исследователи хотели определить, сможет ли бот с искусственным интеллектом сдать часть экзамена на стипендию колледжа по «быстрой отчетности», которую должны сдавать радиологи Британии.
Этот экзамен состоит из трех частей и требует от кандидатов интерпретации 30 рентгенограмм за 35 минут. Чтобы его пройти, кандидаты должны правильно интерпретировать не менее 90% рентгенограмм. Бот с ИИ набрал более 90% баллов в двух из 10 тестов, которые он прошел.
ИИ диагностировал изображения, обычно правильно диагностированные радиологами в 91% случаев. Относительно изображений, которые большинство рентгенологов прочитали неправильно, искусственный интеллект ошибался лишь в 50% случаев. Бот с ИИ правильно интерпретировал снимки руки, запястной кости и стопы.
При этом исследователи отмечают, что искусственный интеллект требует дополнительной подготовки для анализа областей, которые считаются трудными для интерпретации. Среди них — брюшная полость и осевой скелет. Хотя ИИ показал «относительно высокую» точность, это был только один из пробных экзаменов.
«Кандидату» в области искусственного интеллекта все равно понадобится дальнейшее обучение, чтобы достичь того же уровня производительности и навыков, что и среднестатистический радиолог», — отметили исследователи, добавив, что ИИ все еще нуждается в обучении так называемых «тонких аномалий опорно-двигательного аппарата».