"ГОСТ ISO 16820-2015. Межгосударственный стандарт. Органолептический анализ. Методология. Последовательный анализ"
(введен в действие Приказом Росстандарта от 09.06.2015 N 590-ст)

Цели, основные принципы и порядок проведения работ по межгосударственной стандартизации установлены ГОСТ 1.0-92 "Межгосударственная система стандартизации. Основные положения" и ГОСТ 1.2-2009 "Межгосударственная система стандартизации. Стандарты межгосударственные, правила и рекомендации по межгосударственной стандартизации. Правила разработки, принятия, применения, обновления и отмены"

Сведения о стандарте

1 ПОДГОТОВЛЕН Федеральным бюджетным государственным научным учреждением "Всероссийский научно-исследовательский институт технологии консервирования" (ФБГНУ "ВНИИТеК") на основе аутентичного перевода на русский язык англоязычной версии международного стандарта, указанного в пункте 5

2 ВНЕСЕН Федеральным агентством по техническому регулированию и метрологии (Росстандарт)

3 ПРИНЯТ Межгосударственным советом по стандартизации, метрологии и сертификации (протокол от 29 мая 2015 г. N 77-П)

За принятие проголосовали:

4 Приказом Федерального агентства по техническому регулированию и метрологии от 9 июня 2015 г. N 590-ст межгосударственный стандарт ГОСТ ISO 16820-15 введен в действие в качестве национального стандарта Российской Федерации с 1 января 2017 г.

5 Настоящий стандарт идентичен международному стандарту ISO 16820:2004 Sensory analysis - Methodology - Sequential analysis (Сенсорный анализ. Методология. Последовательный анализ).

Международный стандарт разработан подкомитетом ISO ТС 34/SC 12, "Сенсорный анализ" Технического комитета по стандартизации ISO/TC 34 "Пищевые продукты" Международной организации по стандартизации (ISO).

Перевод с английского языка (en).

Официальные экземпляры международного стандарта, на основе которого подготовлен настоящий межгосударственный стандарт, и международного стандарта, на который дана ссылка, имеются в Федеральном информационном фонде технических регламентов и стандартов.

Сведения о соответствии межгосударственных стандартов ссылочным международным стандартам приведены в дополнительном приложении ДА.

Степень соответствия - идентичная (IDT).

Наименование настоящего стандарта изменено относительно наименования международного стандарта в связи с особенностями построения межгосударственной системы стандартизации

6 ВВЕДЕН ВПЕРВЫЕ

Информация об изменениях к настоящему стандарту публикуется в ежегодном информационном указателе "Национальные стандарты", а текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ежемесячном информационном указателе "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет

1. Область применения

Настоящий стандарт описывает процедуру статистического анализа данных органолептических испытаний, осуществляемых с использованием принудительного выбора в различительных тестах, таких как треугольный тест, тесты дуо-трио, 3-AFC и 2-AFC, в соответствии с которой после каждой попытки в различительном тесте может быть принято решение либо прекратить тестирование и заявить о наличии различия между испытуемыми образцами, либо прекратить тестирование и заявить об отсутствии различия между испытуемыми образцами, либо продолжить тестирование.

Данный способ статистической проверки гипотез, известный как последовательный анализ, при принятии решений позволяет ограничиться меньшим числом различительных тестов, чем при способах, в которых число наблюдений фиксировано заранее.

Метод эффективен, когда

a) решают:

- имеет ли место заметное различие между сравниваемыми образцами продукта,

- не проявляется ли различие между образцами при изменении, например, рецептуры продукта, технологии его производства, вида упаковки, условий обращения или хранения;

b) проводят работы по отбору, обучению и аттестации испытателей.

2. Нормативные ссылки

Для применения настоящего стандарта необходим следующий ссылочный документ. Для датированной ссылки применяют только указанное издание ссылочного документа.

ISO 5492:2008, Sensory analysis - Vocabulary (Сенсорный анализ. Словарь)

3. Термины, определения и обозначения

3.1 Термины и определения

В настоящем стандарте применены термины и определения по ISO 5492, а также следующие.

3.1.1 альфа-риск, (alpha-risk, ): Вероятность сделать заключение о наличии заметного различия, в то время как этого различия не существует.

Примечание - В равной мере применимы термины: вероятность ошибки 1-го рода, уровень значимости, частота получения ложно-положительных заключений.

3.1.2 бета-риск, (beta-risk, ): Вероятность сделать заключение об отсутствии заметного различия, в то время как различие существует.

Примечание - В равной мере применимы термины: вероятность ошибки 2-го рода или частота получения ложно-отрицательных заключений.

3.1.3 чувствительность (sensitivity): Обобщенный термин, используемый для того, чтобы суммарно обозначить рабочие характеристики теста.

Примечание - С точки зрения математической статистики чувствительность теста определяется величинами , и p_d.

3.2 Обозначения

p₀ - вероятность получения правильного ответа в случае, когда ощутимое различие между двумя образцами продукта отсутствует;

p_d - доля оценок, когда отмечается ощутимое различие между двумя образцами продукта;

p₁ - вероятность получения правильного ответа в случае, когда ощутимое различие между двумя образцами продукта существует.

4. Принцип

Вид различительных испытаний заранее выбран (метод треугольника, метод дуо-трио и т.п.). Требуемая чувствительность теста определяется выбором значений , и p_d.

Рассчитывают границы областей принятия гипотез - исходя из величин , , p₀ и p₁. После осуществления каждого этапа различительного теста подсчитывают общее число правильных ответов [для группы испытателей (см. раздел 1, a) или для отдельного испытателя (см. раздел 1, b)], которое сравнивают с границами принятия решений, чтобы установить:

- можно ли прекратить испытания и заявить о наличии разницы между образцами продукта, или

- можно ли прекратить испытания и заявить об отсутствии разницы между образцами продукта, или

- следует ли продолжить испытания.

5. Порядок работы

5.1 Строят график, аналогичный приведенному на рисунке A.1, на котором показаны границы областей принятия решений, рассчитанные исходя из величин , , p₀ и p₁. Здесь:

a) величины и выбирают, основываясь на тех рисках получить соответственно ложно-положительные или ложно-отрицательные результаты, на которые готов пойти исследователь. - это вероятность заявить, что различие между образцами имеется, когда истинное значение вероятности правильного ответа равно p₀. - это вероятность ошибочно заявить, что различие между образцами имеется, когда истинное значение вероятности правильного ответа равно p₁ (p₁ > p₀);

b) p₀ - это вероятность правильного ответа, когда ощутимое различие между образцами отсутствует (т.е. это вероятность случайной правильной догадки). Величина p₀ зависит от того, какой различительный тест используют:

- если тест треугольника или тест 3-AFC, то p₀ = 1/3,

- если тест дуо-трио или тест 2-AFC, то p₀ = 1/2.

c) p₁ - это вероятность правильного ответа, когда ощутимое различие между образцами существует. Величина p₁ зависит от p_d:

- в случае теста треугольника или теста 3-AFC

- в случае теста дуо-трио или теста 2-AFC

d) линии, формирующие границы областей принятия решений, определяют по формулам:

где , , p₀ и p₁ определяют так, как описано выше, а n - это число попыток в тесте, т.е. число отдельных этапов испытаний.

Примечание - Расстояние между двумя данными линиями зависит от величины p₁ - p₀.

5.2 После каждого отдельного этапа в серии различительных испытаний на график наносят точку - общее число правильных ответов (по вертикальной оси) относительно числа отдельных испытаний (по горизонтальной оси):

- если общее число правильных ответов попадает в область между нижней и верхней линиями на графике, то испытания продолжают, реализуя следующую попытку;

- если общее число правильных ответов попадает в область над верхней линией на графике, то испытания прекращают и заявляют, что существует ощутимое различие между продуктами (при значимости);

- если общее число правильных ответов попадает в область под нижней линией на графике, то испытания прекращают и заявляют, что не существует ощутимого различия между продуктами [т.е. имеется вероятность, меньшая, чем , что истинная вероятность правильного ответа не меньше, чем p₁].

A.1 Пример 1 - Последовательный анализ серий испытаний по методу треугольника: решается вопрос о принятии или отклонении принятия двух стажеров в группу экспертов

A.1.1 Предыстория

Руководитель работ по органолептическому анализу намерен обосновать решение о принятии или об отклонении двух стажеров из комиссии экспертов, участвовавших в тесте по методу треугольника с использованием обычной пары пищевых продуктов. Каждый из стажеров проводил серию треугольных тестов. Интервалы времени между последовательными тестами были достаточно продолжительными - чтобы исключить эффект сенсорной усталости.

A.1.2 Порядок проведения оценки

Количество тестов, необходимых для того, чтобы принять или отклонить стажера, определяют путем последовательного анализа с использованием графика, показанного на рисунке A.1. Для того, чтобы установить границы принятия решений (т.е. определить две прямые линии на рисунке A.1), нужно присвоить количественные значения каждому из четырех исходных параметров , , p₀ и p₁. В случае треугольного теста p₀ = 1/3 (т.е. вероятность правильной догадки, p_d = 0). Обычно минимальный приемлемый уровень обнаружения устанавливают равным p_d = 50%, и это дает:

Примечание - На 5-м тесте стажер A выходит из области "продолжать испытания" и попадает в область "принять положительное решение". На 8-м тесте стажер B выходит из области "продолжать испытания" и попадает в область "принять решение о забраковании".

Если желательно уменьшить число серий треугольных тестов, необходимых для принятия решения, то можно установить более низкий минимально приемлемый уровень обнаружения, например, считать p_d = 40%; это даст:

Примечание - В данном примере p_d - это не доля людей (в популяции испытателей данной квалификации), которые способны ощутить разницу в образцах продукта, а скорее, доля попыток, в процессе которых данный эксперт действительно ощутил разницу в образцах продукта.

Руководитель испытаний выбирает следующие значения параметров:

- - вероятность выбрать неподходящего стажера;

- - вероятность забраковать подходящего стажера;

- p₀ = 1/3 - максимальная возможность неприемлемости (т.е. p - величина для нулевой гипотезы в треугольном тесте);

- p₁ = 2/3 - минимальная возможность приемлемости (т.е. вероятность обнаружения непарного образца, когда p_d = 0,50).

A.1.3 Анализ и интерпретация результатов

По завершении каждого теста по методу треугольника его результаты наносят на диаграмму, приведенную на рисунке 1, так, как сказано ниже. Наносят результат первого испытания: если он верный, то как точку с координатами (x, y) = (1,1), а если неверный, то как точку с координатами (x, y) = (1, 0). При завершении каждого последующего этапа теста увеличивают значение координаты x на 1, а координаты y - на 1 в случае получения правильного ответа или увеличивают значение координаты x на 1, а координаты y - на 0 в случае получения неправильного ответа. Продолжают испытания до тех пор, пока нанесенная точка не коснется или не пересечет какую-либо из границ областей принятия решений. Делают соответствующее заключение (т.е. принимают решение о приемке или отклонении данного стажера).

Стажер A давал правильные ответы во всех тестах и был принят после проведения пяти тестов. Стажер B в первом тесте дал неверный ответ, во второй и третьей попытках дал правильный ответ, но затем снова дал неверные ответы в каждом последующем тесте и был отклонен после восьмого теста.

A.2 Пример 2 - Последовательный анализ в серии тестов дуо-трио - Флейвор повторно разогретого продукта в пирожках с мясом после их хранения

A.2.1 Предыстория

Заводская дегустационная комиссия определяла флейвор повторно разогретого продукта, проявляющийся в мясных пирожках, разогретых после их хранения в течение 5 дней в охлажденном состоянии. Руководитель проекта хочет установить, каков максимально допустимый срок хранения этих пирожков в охлажденном состоянии.

A.2.2 Порядок проведения работы

Предварительные оценивания показали, что мясные пирожки, хранившиеся 5 дней, приобретают сильный флейвор повторно разогретого продукта, в то время как пирожки, хранившиеся 1 день, этого флейвора не имеют. Руководитель работы решает провести серию тестов по методу дуо-трио с использованием пирожков, хранившихся 1, 3 и 5 дней. Каждый из этих образцов продукта необходимо сравнивать с контрольным образцом - свежеприготовленным продуктом, не подвергавшимся хранению в охлажденном состоянии.

В каждом отдельном тесте предлагают к опробыванию по три образца (один контрольный и два пирожка 1-дневного хранения, один контрольный и два пирожка 3-дневного хранения, один контрольный и два пирожка 5-дневного хранения). Свежепожаренный контрольный образец продукта используют как постоянный эталон во всех трех тестах. По мере того, как каждый из испытателей завершает тест, его результат добавляют к ответам, полученным на предыдущих этапах испытаний, и накопленную сумму правильных ответов наносят на график - как показано на рисунке A.2. Серию тестов продолжают до тех пор, пока не будет получено основание для заявления, что бывший в хранении образец продукта либо подобен контрольному продукту, либо отличается от него.

Примечание - В случае испытаний образцов продукта 1-дневного хранения после 11 тестов заявлено, что различия между испытуемым и контрольным образцами продукта не ощутимы. В случае испытаний образцов продукта 5-дневного хранения после 12 тестов заявлено, что между испытуемым и контрольным образцами различия ощутимы. При испытаниях образцов продукта 3-дневного хранения после 30 тестов результаты подсчета суммы правильных ответов все еще оставались в области "продолжать испытания", поэтому не представляется возможным сделать какое-либо заключение относительно этих образцов, если тестирование не будет продолжено.

Руководитель испытаний выбирает следующие величины для параметров теста:

- - вероятность хорошей оценки (приемки) "дефектного" продукта;

- - вероятность плохой оценки (забраковки) "годного" продукта;

- p₀ = 0,50 - вероятность получения правильного ответа, когда ощутимое различие между образцами не существует (т.е. это - p - величина для нулевой гипотезы в тесте дуо-трио);

- p₁ = 0,70 - вероятность того, что будет найдено, что подвергавшийся хранению образец продукта отличается от контрольного, если p_d = 0,40 (т.е. p₁ = 0,40 + (1 - 0,40)(0,50) = 0,70).

A.2.3 Анализ и интерпретация результатов

Для тех значений величины , , p₀ и p₁, которые были выбраны руководителем испытаний, уравнения для определения пограничных линий для областей принятия решений, указанные в разделе 5, имеют вид: d₀ = -2,59 + 0,60n и d₁ = 2,59 + 0,60n. Эти линии нанесены на график рисунка A.2 вместе с точками, представляющими собой накопленные суммы правильных ответов в каждом последующем тесте, для трех видов хранившихся образцов продукта.

После проведения 11 тестов по методу дуо-трио заявлено, что пробы продукта, хранившегося 1 день, подобны пробам свежеприготовленного продукта. После проведения 12 тестов заявлено, что пробы продукта, хранившегося 5 дней, отличаются от свежеприготовленного контрольного продукта. Что касается продукта, хранившегося 3 дня, то после проведения 30 тестов не представляется возможным сделать заключение либо о подобии проб контрольному образцу, либо о наличии ощутимого различия между испытуемыми и контрольными образцами продукта.