В чём разница между Performance и Score в NeuronUP?

Performance отражает точность (доля правильных ответов от всех попыток), в то время как Score учитывает продвижение по фазам, вес продвинутых этапов и штрафы за ранние уходы, оценивая общий уровень мастерства и прогресса.

Что показывает метрика Performance в NeuronUP?

Performance показывает общую точность выполнения: отношение правильных ответов к сумме правильных, ошибочных и пропущенных попыток. Значение варьируется от 0 до 1 и информирует о аккуратности на любом этапе.

Что измеряет Score в NeuronUP?

Score измеряет общую способность и прогресс в активности, учитывая точность, достигнутые фазы с большим весом и штрафы за ранние завершения. По конструкции принимает значения от 0 до 100.

Почему стоит анализировать Performance и Score совместно?

Совместный анализ выявляет профиль выполнения: сочетание точности и способности продвигаться по сложности, что помогает точнее диагностировать дефициты и адаптировать терапевтическую стратегию.

Как использовать Performance и Score для настройки терапии?

Низкий Performance сигнализирует о необходимости улучшения точности или снижения сложности; низкий Score указывает на тренировки прогрессии, выносливости и исполнительных функций. Совместный анализ позволяет персонализировать дозировку и задания.

Какие сочетания Performance и Score встречаются в клинике?

Типичные профили: высокий Performance/низкий Score (точность на простых фазах), низкий Performance/высокий Score (продвижение с ошибками), оба высокие (стабильный успех), оба низкие (широкие трудности).

Performance и Score в NeuronUP: как их интерпретировать

В этой статье Сесар Ортеа Суарес (CTO и архитектор ПО в NeuronUP), Хорхе М. Корада (директор по продукту NeuronUP), Хесус Кортес (директор по исследованиям NeuronUP), Элина Мальцева (руководитель отдела данных NeuronUP) и Марта Арбису Гомес (промышленный аспирант NeuronUP) рассказывают о различиях между Performance и Score в NeuronUP, о том, как интерпретировать их совместно, и об их применении в клинической практике.

Зачем нужны две разные метрики?

В цифровой когнитивной реабилитации измерить результаты пациента не так просто, как подсчитать правильные ответы или ошибки. Человек может отвечать очень точно на первых этапах задания, но застрять, когда сложность возрастает. Другой может продвинуться далеко, но с большим количеством ошибок.

Чтобы уловить эти различия, NeuronUP использует две взаимодополняющие метрики: Performance и Score. Обе дают ценную информацию, но их настоящая сила проявляется при совместной интерпретации.

Что такое Performance?

Performance — это метрика, измеряющая общее качество выполнения задания пользователем. А именно, она отражает долю правильных ответов от общего числа попыток (то есть суммы правильных ответов, ошибок и пропусков).

Математическая формула, определяющая её, такова:

Performance = \frac{\sum_{p \in P} C_{p}}{\sum_{p \in P} (C_{p} + E_{p} + O_{p})}

Где:

Cp: правильные ответы на этапе p
Ep: ошибки на этапе p
Op: пропуски на этапе p

Поскольку это отношение правильных ответов к общему числу попыток, её значение всегда находится в диапазоне от 0 до 1.

На практике Performance, близкий к 1, указывает на очень точное выполнение, а значения, близкие к 0, отражают низкую долю правильных ответов относительно попыток.

Например, пользователь, который решает только начальные этапы, но делает это очень точно, может получить высокий Performance, даже если не продвигается к более сложным этапам.

Клиническая интерпретация: Performance информирует об общей точности пациента на любом этапе без учёта достигнутого уровня сложности.

Что такое Score?

Score — это метрика, которая измеряет общее мастерство и опыт пользователя на протяжении задания. В отличие от Performance, она оценивает не только точность ответов, но и способность продвигаться к более сложным этапам, придавая больший вес продвинутым этапам и штрафуя за ранний выход из задания.

Определяющая её формула такова:

Score_{Act} = \frac{\sum_{p \in P} (S_{p} \cdot \frac{p}{N})}{\sum_{p \in P} \frac{p}{N}} \cdot \frac{\max_{P}}{N} \cdot 100

Где:

Sp: score на этапе p (значение от 0 до 1)
P: множество завершённых этапов
N: общее число этапов
max⁡P: наивысший достигнутый этап

По построению Score всегда принимает значения от 0 до 100.

На практике высокий Score означает, что пользователь был не только точен, но и сумел продвинуться до более сложных этапов. Например, тот, кто доходит до продвинутых этапов, пусть и с некоторыми ошибками, может получить высокий Score.

Клиническая интерпретация: Score отражает полную динамику выполнения и особенно чувствителен к результатам на более сложных этапах, что делает его идеальным показателем для оценки прогресса в нейропсихологических вмешательствах.

Performance и Score: как интерпретировать их вместе?

Настоящая ценность этих метрик проявляется при их совместном анализе. Performance и Score не исключают, а дополняют друг друга, и их сочетание позволяет лучше понять профиль результатов пациента.

Как показано на графике 1, существует четыре возможных сочетания этих параметров:

Высокий Performance и низкий Score: человек отвечает очень точно, но только на начальных или простых этапах. Это профиль того, кто владеет базовым уровнем, но пока не может продвинуться к более сложным.
Низкий Performance и высокий Score: пациент дошёл до продвинутых этапов, хотя и с бо́льшим числом ошибок. В этом случае есть способность справляться со сложными задачами, но точность ещё можно улучшить.
Оба высокие: устойчивое и сбалансированное выполнение, точное и последовательное на протяжении всего задания.
Оба низкие: трудности как с сохранением точности, так и с продвижением в задании, что может подсказать специалисту скорректировать вмешательство или пересмотреть стратегию работы.

Квадрантная диаграмма NeuronUP, сравнивающая Score и Performance (0–100, 0,1–1), с четырьмя случаями, выделенными цветом. — График 1: квадрантная диаграмма Score — Performance, отражающая четыре случая.

Такое совместное прочтение превращает Performance и Score в мощный инструмент для выявления сильных и слабых сторон каждого пациента и персонализированной адаптации терапевтического плана.

Применение в клинической практике

Совместное использование Performance и Score очень ценно в повседневной работе специалистов по нейропсихологии и когнитивной реабилитации.

С одной стороны, Performance позволяет адаптировать сложность заданий в реальном времени в соответствии с точностью ответов каждого пользователя. Это гарантирует, что задание не будет ни слишком лёгким, ни чрезмерно трудным, поддерживая мотивацию и вовлечённость.

С другой стороны, Score особенно полезен для оценки клинического прогресса во времени. Сравнение значений до и после нейропсихологического вмешательства даёт объективную меру воздействия терапии, выходящую за рамки субъективного наблюдения.

При совместной интерпретации обе метрики дают целостное представление о когнитивных результатах: позволяют персонализировать программы стимуляции, корректировать прогрессию заданий и точно отслеживать динамику каждого пациента.

Заключение

Правильная интерпретация Performance и Score — ключ к использованию потенциала цифровой когнитивной реабилитации. Если Performance отражает точность выполнения, то Score даёт представление об общих возможностях и о продвижении к более сложным этапам.

В NeuronUP сочетание обеих метрик превращает данные в значимую клиническую информацию, облегчая принятие персонализированных решений и более точное отслеживание динамики пациента.

Часто задаваемые вопросы о Performance и Score в NeuronUP

1. Чем отличаются Performance и Score в NeuronUP?

Performance и Score — две метрики NeuronUP.

Performance измеряет общее качество выполнения задания пользователем, отражая долю правильных ответов от общего числа попыток (то есть суммы правильных ответов, ошибок и пропусков). Иными словами, она информирует об общей точности пациента на любом этапе без учёта достигнутого уровня сложности.

Score, в свою очередь, измеряет общее мастерство пользователя на протяжении задания, то есть отражает полную динамику выполнения. В отличие от Performance, Score оценивает не только точность ответов, но и способность продвигаться к более сложным этапам, придавая больший вес продвинутым этапам и штрафуя за ранний выход из задания.

2. Какое значение Performance считается «хорошим» в цифровой когнитивной реабилитации?

Универсального значения нет: оно зависит от задания, клинического профиля и терапевтической цели. В целом Performance, близкий к 1, указывает на очень точное выполнение. Однако важно всегда интерпретировать его вместе со Score, чтобы получить полную картину.

3. Почему у пациента может быть высокий Performance, но низкий Score?

Так бывает, когда пациент точно отвечает на начальных этапах, но не может перейти к более сложным. Это типичный профиль людей, владеющих базовыми требованиями задания, но испытывающих трудности при повышении когнитивной нагрузки (например, на рабочую память, когнитивную гибкость или скорость обработки информации).

4. Может ли Score быть высоким при низком Performance?

Да. Пациент может дойти до продвинутых этапов и, даже совершая больше ошибок, получить высокий Score, поскольку демонстрирует способность справляться с более сложными уровнями. Этот паттерн часто встречается у пользователей с хорошей способностью решать задачи, но низкой точностью.

5. Как использовать Performance и Score для корректировки терапевтического вмешательства?

Низкий Performance говорит о том, что стоит работать над точностью или снизить сложность, а низкий Score может указывать на необходимость тренировать продвижение, выносливость или исполнительные навыки. Анализ обеих метрик позволяет точнее адаптировать задания, дозировку и уровень сложности.