4.2. Отчет о выполнение сценариев тестирования

Данный отчет взят с примера тестирования 2х модулей курса «Искусственные нейронные сети». Модуль 2: «Принципы организации и функционирования искусственных нейронных сетей» и модуль 3: «Первые искусственные нейронные сети. Персептроны». В данных модулях организованна аудио-подсказка по каждой странице.

Сценарий 1. Информационные модули.

1.1. Дымовое тестирование. Прохождение всех модулей сквозь.

Замечание #1. Два последовательных модуля не связанны между собой. По окончанию первого модуля, мы не можем перейти на второй.

Замечание #2. Возможность перехода на любой раздел/страницу модуля без успешного прохождения предыдущих.

Замечание #3. Не везде на тестовых страницах идет блокировка кнопок обновления.

1.2. Проверка отображения информации, кодировки, языков, картинок, аудио-подсказок.

Замечание #4. При быстро переходе в модуле 3 станицы «Тест по графу 3.2.», который состоит из двух вопросов, можно получить наслоение аудио дорожек.

Замечание #5. В тестах неявно выделяется конечный верный ответ.

Рисунок 7 – Неочевидный ответ

1.3. Проверка всплывающих подсказок и всех возможных действий на странице.

Замечание #6. Пустые блоки «О курсе» и «Комментарий».

Замечание #7. Блок «Помощь» не является как таковой помощью по модулю или странице, она больше содержит информации о самой системе и ее навигации.

Замечание #8. На некоторых страницах первого модуля не работает кнопка «Выключить звук». Например: «Тест по графу 2.2.», «Основные определения. Нейронная сеть» и т.д.

Замечание #9. На слайде «Схема искусственного нейрона» нажимаем 1 в кружочке, а затем «Нажмите на меня!». После данных действий нет возможности скрыть подсказку 1, только если выбрать другую.

1.4. Работа всех сторонних подсказок и блоков.

Замечание #10. Периодически не хватает подсказок, или уведомлений о том, на какой странице курса можно заново посмотреть данную информацию.

Замечание #11. В модуле 2 на странице «Тест по графу 2.2.» блоки ответов перекрывают друг друга.

Рисунок 8 – Перекрывание блоков

Сценарий 2. Проверка знаний.

Замечание #12. Модуль 2. Страница «Тест по параграфу 2.1.». После прохождения теста из двух вопрос один раз нажимаем кнопку «Обновить».

Получаем вопрос «…Нажмите Cancle, что позволит сохранить предыдущие результаты». Результаты сохранены, но когда мы попадаем на второй слайд со вторым вопросом, выйти оттуда никуда мы уже не можем. Все кнопки блокированы.

2.2. Отображение результатов тестирования.

Замечание #13. После первого неправильного ответа должны очищаться результаты.

Замечание #14. Подсказки в виде правильно/неправильно не должны перекрывать область ответов и должны исчезать, давай возможность сразу начать думать над ответом.

Рисунок 9 – Перекрывание области ответа

2.3. Проверка временных и количественных характеристик.

Замечание #15. Нет временных рамок ответа на вопросы.

Замечание #16. В модуле 2 в части «Тест по графу 2.3.», можно организовать какое угодно число ответов на тест, путем обновления страницы после первого ответа. Хотя заявленное число попыток равно двум.

Сценарий 3. Соответствие требованиям.

3.1. Проверка занесения всей предоставленной информации.

Замечание #17. В модуле 2 в блоке 2.3. нет заявленных в требованиях двух вопросов для тестов.

• Укажите ИНС, которая функционирует по правилу.

• Укажите ИНС, которые используются для решения задач классификации и распознавания образов.

Замечание #18. Модуль один по своей сути и требованиям на самом деле номер 2. Нет модуля 1.

Сценарий 4. Нагрузки подключений.

Прошел без замечаний, подключились 100 пользователей.

Сценарий 5. Целостность информации.

Замечание #19. Возможность перехода на финальный слайд.

Сценарий 6. Логическое завершение.

Прошел успешно.

Сценарий 7. Изменение информации.

Замечание #20. Должна быть возможность копировать какой-либо информационный текст с последующим его сохранением.

Сценарий 8. Подсказки.

Замечание #21. Нет возможности прослушивания как-либо аудио-блоков с начала, без обновления страницы.

Замечание #22. Нет всплывающих подсказок по поводу того, что необходимо сделать, чтобы перейти на следующую страницу.

Замечание #23. Помощь не объясняет смысл всех располагающихся на форме кнопок и их предназначение.

Сценарий 9. Единообразие.

Замечание #24. Нет единообразия в аудио-блоках по результат тестов.

Замечание #25. Модуль 3 страница «Тест по графу 3.3.» нет персонажа-проводника, который всегда появлялся раньше.

Замечание #26. Модуль 3 страница «Персептронный нейрон». Информационные блоки куда-то и зачем-то едут. Фокус пользователя сбивается.

Замечание #27. Следует обращаться к пользователю одинаково на Вы – это показывает уважение. В модуле 3 на правильный ответ обращений происходи на вы.

Рисунок 10 – Разные формы обращения

Замечание #28. Страница «Линейно разделимый образ» нажимаем кнопку закрыть и получаем съезжание блока сверху вниз. Кнопка закрыть – это привычная всем пользователям кнопка закрытия окна, а не его передвижения по слайду.

Сценарий 10. Навигация.

Замечание #28. Неявная навигация на слайде «3.2. Задача классификации».

Рисунок 11 – Неявная навигация

Сценарий 11. Пригодность к использованию и понимание.

Для того чтобы наилучшим образом понять пригодность к использованию и понимание, необходимо проводить тестирование на сторонних людях. Ниже представлены некоторые замечание людей, которые увидели данный курс (Модуль 2) впервые.

Замечание #29. На слайде 2.1. «Основные определения» пользователь даже не подумал нажать на ссылку «направленный граф».

Замечание #30. Слайд «Функции нейрона». Пользователю сложно воспринимать аудиоинформацию без одновременного переключения к ее графическому отображению.

Замечание #31. Слайд «Схема искусственного нейрона». Информационные блоки 2,3 лишены аудио прочтения.

Замечания #32. На тестовых страницах смущает фраза: «Выберете все правильные ответы». Необходимо более четкая фраза нпрм. «Выберете ответы для проверки и нажмите ПРОВЕРИТЬ ОТВЕТ». Данный информационный блок должен быть более динамичным.

Замечание #33. Тест 2.1. включает себя вопрос про Функции активации, про которые не было сказано ни слово на предыдущих слайдах.

Замечание #34. Страница 2.3. «Архитектура нейронных сетей». Выбираем «Однослойные прямонаправленные сети». Пользователю предлагается щелкнуть по рисунку архитектуры, но область узлов графа неактивна.

Рисунок 12 – Неактивная область рисунка