7.3. Особливості тестування користувацьких інтерфейсів

Перш ніж планувати і проводити тестування на зручність застосування продукту слід чітко визначити цілі і задачі, які стоять перед ним.

Бут (Booth) виявив 4 фактори, що складають зручність застосування: корисність, ефективність, простота вивчення та відношення користувача. Шекель (Shackel) теж розбиває зручність застосування на 4 схожих категорії: простота вивчення, ефективність, гнучкість та відношення користувача.

Цілі і задачі, які стоять перед розробкою зручності застосування, повинні визначатись для всіх програмних продуктів. Цілі - це забезпечення переваг продукту перед конкуруючими в області простоти вивчення, ефективності, гнучкості і т.д. Цілі напряму пов'язані з чотирма факторами зручності застосування. Цілі самі по собі не підлягають безпосередній оцінці - вони повинні бути розділені на задачі, які представляють собою уточнення цілей, вони більш конкретні і детальні, їх можна оцінити і виміряти. Досягнення однієї цілі може вимагати розв'язку багатьох задач. Задачі повинні бути вибудувані таким чином, щоб містити інформацію по конкретних діях або операціях.

Користувачі хочуть одержати в своє розпорядження продукти передових або новітніх технологій, високої якості, прості у використанні та дешеві в розробці. Виникає питання: скільки коштує зручність застосування?

Кожен розробник і проектувальник повинен сам приймати участь або спостерігати за процесом тестування свого продукта. Однак потрібно намагатись, щоб в нього не втручались проектувальники, які надто добре поінформовані про роботу продукту. Розробники продукту повинні відігравати допоміжну роль і не заміняти собою спеціалістів по моніторингу тестування.

Надійність тесту полягає в тому, що один і той же тест може проводитись знову й знову і демонструватиме однакові результати. Це в корні відрізняється від достовірності тесту. Тест вважається достовірним, якщо точно вимірює те, що повинно бути виміряно. Порівняльне тестування на зручність застосування продуктів може бути мало надійним, але не приймайте його достовірність "по номінальній вартості". Нескладно розробити сценарії і задачі, які гарно висвітлять технологію або функції одного продукту в порівнянні з аналогічними характеристиками іншого. Різні типи вимірювань, використовуваних при тестуванні, можуть кардинально змінити результати.

В останні роки було проведено ряд порівняльних аналізів, спрямованих на визначення переваг графічних КІ (ГКІ) над традиційними текстовими КІ (ТКІ) для виконання стандартних користувацьких задач. Одним з найбільш відомих досліджень є звіт Wharton Report під назвою "The Value of GUIs", який пропонує 7 переваг ГКІ на основі одержаних результатів тестування. Вони полягають в тому, що користувачі ГКІ:

• працюють швидше;

• виконують більше задач;

• мають більш високу продуктивність;

• зазнають меншої розгубленості;

• менше втомлюються;

• мають більше можливостей для самонавчання та дослідження додатків;

• більш здатні до вивчення більшого числа можливостей додатку.

При порівняльному тестуванні операційних систем основну увагу приділяють наступним факторам:

• час виконання задачі в системі;

• показник успішності виконання задачі;

• продуктивність системи;

• ступінь задоволеності користувачів;

• переваги користувачів.

Висновки про порівняльні тести:

• порівняльні тести можуть надати корисну інформацію при дослідженні зручності застосування нових версій програмного продукту;

• слід використовувати задачі загального характеру і області відомих проблем в якості базових задач, щоб провести точні порівняльні вимірювання між версіями продуктів;

• слід застосовувати стандартні вимірювання зручності застосування;

• слід використовувати зовнішніх, незалежних виконавців для планування та проведення тестування на зручність застосування, щоб зменшити суб'єктивність сприйняття.