Наука

Калибровка

Пороги не выбирались — они измерялись. Оценка получена от модели, обученной на авторизованных дерматологических базах данных, и каждый показатель определяет «наличие/отсутствие» характеристики с AUC 0.8 и выше на данных, которые модель не видела. Пороги ниже были измерены в повторном тесте на реальных сканированиях — насколько каждый показатель изменяется между двумя считываниями одного и того же лица.

Согласие с оценкой врача по степени характеристики слабее, и валидность для селфи в полевых условиях еще не установлена. Это косметический показатель для мониторинга, а не для диагностики.

Отсюда для каждого показателя получаются два числа — порог, ниже которого изменение не считается улучшением, и надежность (ICC), которая показывает, насколько измерение воспроизводимо.

doi.org/10.6084/m9.figshare.5047666 · Полная таблица →

Что входит в оценку — и что нет

Измеряются десять показателей. Восемь входят в общий балл. Два измеряются и показываются, но не считаются: носогубная складка и блеск. Сухость считается с тех пор, как сеть её распознаёт.

Причина для каждого разная — блеск меняется в зависимости от времени суток, носогубная складка движется с выражением лица, а сухость у нас еще не так хорошо обоснована, как остальные. Показатель, который мы не докажем, не повлияет на вашу оценку.

Когда мы говорим: измеримых изменений нет

У каждого показателя есть измеренный порог — наименьшее изменение, которое мы действительно можем различить. Ниже него мы не назовём это улучшением, даже если число сдвинулось.