A5-7 Методика

A5-7.1 Сеансы оценки

Каждый сеанс оценки (определяемый как набор испытательных заданий для данной группы наблюдателей) должен состоять из двух этапов (этапа I и этапа II).

A5-7.1.1 Этап I

Этап I состоит из формального субъективного испытания, проводимого в контролируемой среде (см. пункт A5-6), который позволяет получить достоверные, точные и воспроизводимые результаты. Эксперты индивидуально оценивают показанный материал, используя описанную ниже шкалу оценки. Членам группы не разрешается обсуждать то, что они видят, или управлять демонстрацией. На этом этапе эксперты не должны знать испытуемую схему кодирования и порядок представления материала для испытаний. Во избежание необъективности оценки предназначенный для испытания материал демонстрируется в случайном порядке.

A5-7.1.1.1 Демонстрация материала

Метод демонстрации объединяет элементы метода непрерывной оценки качества с одновременным воздействием двух источников (SDSCE) (Приложение 6 к части 2) и метода двух источников воздействия с непрерывной шкалой качества (DSCQS) (Приложение 2 к части 2). Для ссылок его можно назвать методом одновременного двойного воздействия (SDS).

Как и в случае метода SDSCE, каждое испытание включает в себя демонстрацию на разделенном экране материала двух изображений. В большинстве случаев одним из источников изображения служит эталон (то есть исходное изображение), а другим – испытательное изображение; в других случаях, оба изображения получают из эталонного изображения. Эталоном служит исходный материал, представленный прозрачно (то есть не подвергаемый никакому сжатию, кроме того, которое подразумевается для исходного носителя записи). Испытательный материал должен представлять собой исходный материал, обработанный одной из испытуемых систем. Скорость передачи битов и/или уровень качества должны соответствовать требованиям, указанным в плане испытаний. В отличие от испытаний методом SDSCE, наблюдатели не знают об условиях, соответствующих двум компонентам пары изображений.

Демонстрация на разделенном экране выполняется с использованием традиционного разделенного экрана без зеркалирования или методом "бабочка", когда изображение на правой стороне экрана обращено по горизонтали. Поскольку используются изображения полной ширины, одновременно может отображаться только половина каждого изображения. При каждой демонстрации на каждой стороне экрана отображается одна и та же половина изображения.

Как и при использовании метода DSCQS, пара изображений демонстрируется два раза подряд, один раз для ознакомления и рассматривания, а второй – для проверки впечатления и оценки. Каждая последовательность длится 15–30 с. В помощь оценщикам каждая последовательность может быть помечена в начале фрагмента (см. пример разделенного экрана без зеркалирования на рисунке 3-6).

РИСУНОК 3-6

Пример разделения экрана без зеркалирования

A5-7.1.1.2 Шкала оценки

Критерием приемлемости в применениях LSDI служит неотличимость испытуемого (то есть сжатого) изображения от эталонного. Для оценки испытуемых систем можно использовать несколько широко применяемых методов. Предлагаемый метод – рекомендуемые шкалы сравнения воздействий (см. Приложение 4 к части 2). Конкретным примером шкалы может служить некатегорическая (непрерывная) шкала ТО ЖЕ – ОТЛИЧНОЕ, описанная в пункте A4-4.2 Приложения 4 к части 2.

РИСУНОК 3-7

A5-7.1.1.3 Сеанс оценки

Сеанс, который может включать в себя нескольких демонстраций в зависимости от количества условий испытаний, состоит из испытаний двух типов: пробного и контрольного. В процессе пробного испытания на одной половине экрана демонстрируется эталонное изображение, а на другой – проверяемое. В ходе контрольного испытания на обеих половинах экрана демонстрируется эталонное изображение. Целью контрольного испытания является оценка степени необъективности суждения.

Для каждой испытуемой системы требуются следующие пробные испытания на каждой испытательной последовательности.

ТАБЛИЦА 3-6

Предпочтительно, чтобы в каждом из указанных выше случаев производилось по меньшей мере два повтора. Для каждой испытуемой системы требуются следующие контрольные испытания на каждой испытательной последовательности.

ТАБЛИЦА 3-7

Опять же предпочтительно, чтобы в каждом из указанных выше случаев производилось по меньшей мере два повтора.

Пробный сеанс следует разделить на демонстрации продолжительностью не более одного часа, разделенные 15-минутными перерывами для отдыха. Пробные и контрольные испытания, образуемые в результате комбинации кодеков и испытательных последовательностей, распределяются по демонстрациям в псевдослучайном порядке. Полезно наложить на этот процесс некоторые ограничения, хотя это и усложнит его. Например, если производятся четыре демонстрации, то можно случайным образом устанавливать очередность четырех пробных испытаний для данного кодека и испытательной