Перейти к содержимому

Оценка целостного пользовательского опыта в образовании

Методика оценки HUX/ed базируется на концепции целостного пользовательского опыта, объединяющего в себе все реакции от взаимодействия с интерактивным продуктом, и экстраполирует данную концепцию на опыт студентов дистанционного обучения. Такой подход к оценке обусловлен тем, что в дистанционном обучении система выступает призмой, сквозь которую студенты воспринимают все составляющие обучения и особенности ее проектирования напрямую влияют на их восприятие.
Проектирование пользовательского опыта в дистанционном обучении начинается с определения его текущего состояния и выявления значимых, но неэффективно реализованных составляющих обучения. Через регулярную оценку, контроль за влиянием изменений на восприятие обучения к управлению пользовательским опытом студентов для более качественной реализации обучения, реализованного с применением дистанционных образовательных технологий.

Методика

Задачей методики стало создание универсальной рамки, которая комплексно охватывает все составляющие дистанционного обучения. Структурной, быстрой для студента, комплексно охватывающей все элементы обучения и универсальной, релевантной разным профилям обучения и особенностям его реализации. Решением стала оценка в пяти синтезированных категориях, отражающих весь спектр опыта пользователей от взаимодействия с дистанционным обучением.

Образовательная категория

Взаимодействуя с образовательной организацией, студент ожидает качества образовательного контента. От уровня соответствия этим ожиданиям зависит потенциальная польза образования для студента, проявляющаяся и в особенностях подачи, экспертизе образовательной программы и отдельных специалистов, возможности применять полученные знания. Насыщенный образовательный опыт делает дистанционное обучение интересным. Все это составляет пул качеств образовательной программы, которые воспринимает студент, взаимодействуя с ней.

Компоненты HUX/ed

Техническая категория

Система дистанционного обучения своими техническими возможностями может или стимулировать студента к учебе, или препятствовать этому. Запутанная, состоящая из множества платформ с разными точками входа, не безопасная система способствует тому, что общая оценка обучения будет негативной, так как оно не является удобным для пользователя. Вследствие этого, характеристики технической составляющей при оценке показывают восприятие удобства работы с системой, а на основе результатов образовательная организация делает выводы об оптимальных изменениях, при их необходимости.

Компоненты HUX/ed

Методологическая категория

Работая с разными студентами, образовательные организации получают множество предпочтений по организации учебной деятельности, чтобы она могла легко войти в привычный ритм жизни обучающихся. Дистанционное обучение представляет собой формат, в котором таких требований становится еще больше, так как он направлен на удовлетворение желания получать образования при невозможности его интеграции в привычный жизненный уклад. Методологическая категория показывает, насколько соблюден баланс удобства организации обучения для студентов и для образовательной организации. Эта составляющая отражает особенности структуры образовательного маршрута.

Компоненты HUX/ed

Категория взаимодействия

Различные типы взаимодействия в процессе обучения оказывают влияние на опыт студента: с преподавателями, технической поддержкой, методистами, между студентами одной группы и разных курсов. Определение “взаимодействия” как отдельной составляющей позволяет подходить к его оценке через характеристики и особенности коммуникации, а не с помощью опроса удовлетворенности взаимодействием с разными ролями. Так образовательные организации получают возможность комплексного анализа взаимодействия, результаты которого могут влиять на формирование пользовательского опыта и образовательной среды.

Компоненты HUX/ed

Экзистенциальная категория

Программа обучения, техническая поддержка, организация и коммуникация - все это представляет собой способ, который мы сформировали для того, чтобы студент достиг собственного экзистенциального результата. Своими характеристиками экзистенциальная категория ставит перед собой задачу определить, удовлетворен ли студент тем результатом прохождения образовательного маршрута, который он получил. Целостный пользовательский опыт охватывает и процесс обучения, в большей степени выраженный в других категориях, и результат, в том числе промежуточные результаты, внутренние изменения студента под влиянием обучения. Определение, зачем обучение было нужно студенту и что оно привнесло в его жизнь, завершает весь спектр составляющих дистанционного обучения для комплексной оценки опыта студента.

Компоненты HUX/ed

Инструмент оценки целостного пользовательского опыта HUX/ed

Анализируя состояние дистанционного обучения в каждой категории и определяя вектор развития системы, вы сами управляете пользовательским опытом студентов и формируете уровень желаемых результатов. Разрабатывая методику, мы учли, что дистанционное обучение может реализовываться в рамках разных подходов: например, полностью исключив групповую работу или коммуникацию между студентами; или не вкладываясь в техническое развитие системы и делая упор на особенности подачи информации. Результаты исследования с помощью методики HUX/ed отражают восприятие студентами ваших управленческих решений в сфере дистанционного обучения и позволяют оценить, насколько это влияние критично для системы
Инструмент оценки целостного пользовательского опыта HUX/ed представляет собой стандартизированную анкету, состоящую из 23 вопросов в формате 7-балльного семантического дифференциала (оценка полярных характеристик по шкале от -3 до +3). Он включает пять категорий и 23 составляющих их компонентов пользовательского опыта.

Техническая категория

Удобство использования
Запутанное
Интуитивно понятное
Отказоустойчивость
Стабильная работа
Система "глючит"
Интерактивность
Интерактивное
Не интерактивное
Визуальный интерфейс
Отталкивающий дизайн
Привлекательный дизайн
Безопасность
Ненадежное
Безопасное
Техническая категория

Образовательная категория

Информационная ценность
Поверхностная информация
Глубокие знания
Информационная привлекательность
Интересное
Скучное
Вовлечение
Скудный образовательный опыт
Насыщенный образовательный опыт
Применимость
Применимые знания
Не практикоориентированное
Систематизация
Структурированное
Беспорядочное
Педагогическая экспертиза
Сомнительная экспертиза преподавателей
Преподаватели - эксперты
Образовательная категория

Категория взаимодействия

Социальная деликатность
Пренебрежительное
Уважительное взаимодействие
Коллаборативность
Без взаимодействия
Ориентация на взаимодействие
Отзывчивость
Не дружелюбная образовательная среда
Поддерживающая образовательная среда
Компетентность
Компетентное
Непрофессиональное
Эмпатичность
Безразличное
Эмпатичное
Категория взаимодействия

Методологическая категория

Целостность
Разрозненное
Системное и целостное
Инклюзивность
Доступное и справедливое
Предоставляющее неравные возможности
Организованность
Непредсказуемое
Организованное
Объективность
Объективно оценивающее
Субъективное и непрозрачное
Методологическая категория

Экзистенциальная категория

Внутренняя трансформация
Тормозит личностный рост
Способствует личностному развитию
Профессиональное самосознание
Не развивающее профессиональные компетенции
Способствующее профессиональной самоидентификации
Профессиональная социализация
Далекое от профессионального сообщества
Погружающее в профессиональную среду
Экзистенциальная категория

Интерпретация результатов

Результаты оценки системы по компонентам с помощью методики HUX/ed позволяют:
  • Анализировать динамику изменений восприятия системы студентами;
  • Выявить ключевые составляющие вашей системы, которые отличают ваше дистанционное обучение;
  • Определить бенчмарки по показателям для регулярной оценки и определения критических проблем;
  • Оценить влияние изменений в системе и управленческих решений на восприятие студентами их опыта обучения.

Управление дистанционным обучением

Управление пользовательским опытом студентов для развития дистанционного обучения представляет собой непрерывный циклический процесс формирования направлений развития системы на основе данных, внедрения изменений и оценки восприятия изменений студентами. Использование методики HUX/ed для этого позволяет:
  • Выявлять слабые места системы и обучения в целом: от отсутствия важных функциональных возможностей до несогласованной работы отделов, реализующих образовательный процесс.
  • Формировать продуманную архитектуру системы и пути студента в ней, в том числе определять наиболее значимые элементы системы и пути их развития.
  • Выявлять бесполезные процессы, которые не несут дополнительной пользы студенту, но отнимают время у методистов и преподавателей.
  • Подходить к дистанционному обучению, как к обновляющейся системе, которая подстраивается под изменяющиеся требования участников образовательного процесса.

Какие задачи решает методика HUX/ed

  • Оценка образовательной программы для оценки восприятия особенностей использования системы.
  • Оценка пользовательского опыта студентов с целью оценки системы дистанционного обучения.
  • Оценка восприятия системы разными учебными группами или курсами.
  • Способ сбора обратной связи студентов об обучении.

Достоверность инструмента

Инструмент разработан на основе серии исследований со смешанным дизайном: применялись количественные и качественные методы сбора и обработки данных. Компоненты целостного пользовательского опыта, составляющие основу анкеты для проведения опроса, выявлены посредством проведения факторного анализа данных исследования репрезентативной выборки студентов на базе российской образовательной организации. Подробнее о этапах проектирования методики вы можете узнать в разделе “публикации”.
Методика верифицирована посредством проведения количественного исследования двумя инструментами оценки пользовательского опыта и корреляционного анализа данных для подтверждения релевантности использования разработанного инструмента HUX/ed. Апробация методики проведена в 2025 году на базе частного образовательного учреждения высшего образования в Санкт-Петербурге.

Использование инструмента

Представленный инструмент HUX/ed является открытым и позволяет быть использованным с ответственностью за интерпретацию данных.
Мы проводим исследование целостного пользовательского опыта в образовательных организациях, подробнее с нашим подходом к проведению исследования вы можете ознакомиться на странице “исследование”.
Для обсуждения вашего проекта вы можете связаться с нами по электронной почте Адрес электронной почты защищен от спам-ботов. Для просмотра адреса в браузере должен быть включен Javascript..

Часто задаваемые вопросы

Сколько респондентов нужно привлечь для участия в исследовании?
Число респондентов рассчитывается индивидуально для генеральной совокупности ваших студентов. При расчете требуемого размера выборки качественного исследования мы используем доверительную вероятность 95% и доверительный интервал 5%.
Как интерпретировать полученные данные?
Получив результаты по каждому компоненту мы предлагаем проанализировать их через разные призмы: оценки компонентов в категории, лучшие и худшие показатели,компоненты с наиболее выраженными изменениями, прочее. Для более подробного погружения в вопрос интерпретации данных исследования методикой HUX/ed вы можете перейти в раздел “публикации” и ознакомиться со статьями, описывающими пример интерпретации данных, а также с HandBook по использованию методики.
Как часто проводить исследования?
Мы рекомендуем проводить исследование пользовательского опыта дважды в год, в середине семестра для устранения влияния переживаний в связи с началом обучения и аттестацией. Однако возможно проведение в другой период или чаще, если этого требуют задачи вашего исследования.
Нужно ли повторно проводить исследования, если по результатам первого анализа в системе “все хорошо”?
Безусловно. Для каждого последующего исследования вы формируете гипотезы, которые результатами исследования вы хотите проверить. Например, изучить особенности восприятия системы разными курсами или студентами разных возрастных групп. Это позволяет вам с каждым новым исследованием получать все больше данных и отслеживать динамику изменений, реагировать на них и актуализировать ваше обучение.
Что, если все показатели по результатам исследования “плохие” / “хорошие”?

В такой ситуации вам важно удостовериться, что ваши данные собраны корректно: например, если неудовлетворенный студент поставил вашей системе наиболее отрицательные оценки по всем компонентам, это отразится на общем результате, однако в такой ситуации важно решить конфликтные ситуации с конкретными студентами, а не изменять систему.

Если вы получили “хорошие” результаты, высший средний балл (+3), вы можете анализировать особенности вашей системы с пониманием, что студенты оценивают ее положительно, однако даже в таком случае некоторые оценки будут хуже других и это стоит анализировать.

Если же средние результаты приближаются к 3 баллам, стоит обратить внимание на особенности проведения исследования, во избежание автоматических ответов или слишком частого опроса и отношения к исследованию как к формальной оценке.