3.6. Если ГХ имеет линейный или полиномиальный вид и значения
1) в случае гауссовских распределений погрешностей измерений
2) в случае отличных от гауссовских распределений погрешностей измерений
3.7. Если ГХ является линейной и погрешности измерений
1) в случае гауссовского распределения погрешностей и планируемого эксперимента - МНК; особенности его применения в этом случае изложены в разд. 8;
2) в случае непланируемого эксперимента - один из конфлюентных методов. Выбор конкретного метода в зависимости от дополнительной информации и расчетные формулы приведены в разд. 7.
3.8. Основные методы построения ГХ, приведенные в настоящей рекомендации, перечислены в табл. 1. Выбор конкретного метода производится согласно табл. 1 в зависимости от наличия априорной информации по п. 3.5.
Примечания
1. Методы с номерами 1 - 5, 7, 9 - 12, 17 являются наиболее простыми и рекомендуются для широкого использования в метрологической практике (в том числе метрологических служб).
2. Методы с номерами 6, 8, 13 - 16, 18 - 20 рекомендуются для использования в научных исследованиях.
Таблица 1
ГРАДУИРОВОЧНЫХ ХАРАКТЕРИСТИК
4.1. При оценивании погрешностей ГХ используются характеристики погрешностей результатов измерений входных и выходных величин. При этом возможны два основных варианта:
заданы границы погрешностей
заданы характеристики составляющих:
В первом случае целесообразно оценивать границы суммарной погрешности ГХ в точке
Во втором случае следует также оценивать характеристики составляющих погрешности ГХ S(X),
4.2. Случайные погрешности измерений входных и выходных величин
Примечание. Возможность коррелированных погрешностей должна быть отмечена в конкретных методиках.
4.3. При построении ГХ в виде таблицы или графика (без сглаживания) оценивают погрешности ГХ в точках
4.3.1. Если заданы границы погрешностей измерений величин
в точке X:
; по диапазону:
;где c(X) = dY(X)/dX;
.Если нет априорных данных о коэффициентах c(X), то можно принять:
![]() 4.3.2. Если заданы характеристики составляющих погрешностей входных и выходных величин, то характеристики погрешностей ГХ в точке X оценивают по формулам:
![]() Доверительные границы случайной погрешности ГХ в точке X оценивают по формуле:
![]() где
; 4.4. При построении ГХ в виде функции принятого вида:
![]() оценивание погрешностей ГХ выполняют на основе линеаризованного разложения согласно формулам, приведенным в Приложении 4.
4.5. Если дополнительно известно, что погрешности исходных данных
ПРИ ТОЧНО ИЗВЕСТНЫХ ЗНАЧЕНИЯХ ВХОДНЫХ ВЕЛИЧИН
И ГАУССОВСКОМ РАСПРЕДЕЛЕНИИ ПОГРЕШНОСТЕЙ
ИЗМЕРЕНИЙ ВЫХОДНЫХ ВЕЛИЧИН
5.1. Для построения линейной зависимости при точно известных значениях входных величин
![]() где
Относительно выполнения измерений выходных величин Y можно выделить три основных случая:
равноточные однократные измерения;
равноточные многократные измерения;
неравноточные измерения с известными или оцениваемыми весами.
В случае равноточных многократных измерений оценки коэффициентов ГХ вычисляют по формулам:
![]() ![]() где
![]()
5.3. Если заданы границы погрешностей измерений
![]() где
.Границу погрешности ГХ в точке X вычисляют по формуле:
, где .Таблица 2
5.4. Если заданы характеристики составляющих погрешностей измерений
S(X) = S·V(X); ![]() где
; .5.5. Если известно, что погрешности измерений
![]() 5.6. Если известно, что систематические погрешности измерений
![]() где
![]() ![]() 5.7. Доверительные границы случайных погрешностей коэффициентов и расчетных значений ГХ вычисляют по формулам:
![]() где
5.7.1. Если используют оценку СКО
![]() то число степеней свободы k = N - m.
5.7.2. При необходимости совместного оценивания случайных погрешностей расчетных значений ГХ в q точках
совместные доверительные границы вычисляют по формулам:![]() где f(q, k) - квантиль распределения Фишера с числом степеней свободы q и k (соответствующим используемой оценке СКО).
5.8. В случае равноточных измерений, однократных или одинаковой кратности
вычисление коэффициентов ГХ и оценивание погрешностей ГХ выполняют аналогично пп. 5.2 - 5.7, используя упрощенные формулы для коэффициентов Таблица 3
Оценки МНК и вспомогательные выражения
для измерений равной кратности и однократных
5.8. В случае неравноточных измерений при вычислении коэффициентов и оценивании погрешностей ГХ используют веса
Примечание. Если полученные веса различаются незначительно или не приводят к значительному снижению погрешностей ГХ, то для упрощения расчетов можно их не вводить, а использовать более простые формулы для случая равноточных измерений. Поэтому после введения весов следует оценить СКО погрешностей ГХ с учетом весов и без их учета. Критерии целесообразности введения весов должны быть установлены в конкретных методиках исходя из требований к точности построения ГХ.
2) известна зависимость дисперсии случайных погрешностей
![]() где h(X) - известная функция, то веса результатов
![]() Примечание. Если известно, что дисперсии относительных погрешностей измерений
![]() 5.11. Если при условии 1) п. 5.10 выполняют многократные наблюдения в точке
принимают вес , где - оценка дисперсии наблюдений в точке 5.12. Если при неравноточных многократных измерениях в точках
![]() 5.13. В случае неравноточных измерений оценки коэффициентов вычисляют по формулам:
![]() ![]() где
, 5.14. Если веса определены согласно пп. 5.10, 5.11, то оценки погрешностей коэффициентов
Таблица 4
Примечание:
![]() ![]() ![]() 5.14.1. Если СКО S в п. 5.10 не задано заранее, то его оценивают по формуле
![]() При этом коэффициенту Стьюдента
5.14.2. Если оценка СКО S в п. 5.10 известна, то число степеней свободы принимают соответствующим этой оценке; если СКО известно точно, то вместо коэффициентов Стьюдента
5.15. Если веса определены с учетом систематических составляющих (согласно п. 5.12), то доверительные границы суммарных погрешностей коэффициентов
![]() ![]() ГРАДУИРОВОЧНЫХ ХАРАКТЕРИСТИК ПРИ ТОЧНО ИЗВЕСТНЫХ ЗНАЧЕНИЯХ
ВХОДНЫХ ВЕЛИЧИН И РАСПРЕДЕЛЕНИЯХ ПОГРЕШНОСТЕЙ ИЗМЕРЕНИЙ
ВЫХОДНЫХ ВЕЛИЧИН, ОТЛИЧНЫХ ОТ ГАУССОВСКИХ
6.1. Если значения входных величин
6.2. При использовании устойчивых методов необходимо получить начальные приближения
МНК-оценки;
устойчивые оценки Вальда или Бартлетта.
6.2.1. Для получения устойчивых оценок Вальда или Бартлетта разбивают все экспериментальные точки на 2 или 3 группы равного объема (в порядке возрастания
![]() 6.3. Устойчивые оценки Хубера находят путем итераций. На q-м шаге выполняют следующие операции
1) вычисляют отклонения данных от расчетной линии:
i = 1, ..., m;2) вычисляют оценку СКО как медиану отклонений:
![]() 3) определяют значения
![]() ![]() 4) вычисляют суммы
![]() ![]() 5) вычисляют приращения оценок
![]() ![]() 6) вычисляют новые значения коэффициентов
![]() 7) итерационный процесс заканчивают либо после выполнения заданного числа шагов q, либо при выполнении правила останова:
![]() где
6.4. Для нахождения усеченных МНК-оценок выполняют следующие операции:
1) задают долю усечения c = 0,05 или 0,1;
2) вычисляют остатки
![]() 3) упорядочивают остатки:
![]() 4) исключают по k = [mc] наименьших и наибольших остатков, где [mc] - целая часть произведения mc;
5) по оставшимся экспериментальным данным вычисляют МНК-оценки коэффициентов
6) погрешности построенной ГХ оценивают согласно общим правилам разд. 5.
ПРИ НАЛИЧИИ ПОГРЕШНОСТЕЙ ИЗМЕРЕНИЙ ВХОДНЫХ ВЕЛИЧИН
7.1. Для построения линейной ГХ в случае, когда погрешности измерений входных и выходных величин имеют примерно одинаковый порядок и гауссовские распределения, а эксперимент является планируемым, рекомендуется использовать МНК и вычислять оценки согласно расчетным формулам разд. 5.
7.2. При оценивании погрешностей ГХ, построенных МНК, следует учитывать погрешности измерений как выходных, так и входных величин. В формулах разд. 5 следует заменить:
границы
и ; дисперсии
.7.3. При неравноточных измерениях веса отдельных результатов определяются с учетом погрешностей как измерений
7.3.1. Если систематические погрешности измерений
![]() где начальное приближение
7.3.2. Если систематические погрешности измерений
принимают вес ![]() 7.3.3. Если систематические составляющие погрешностей изменяются нерегулярным образом в заданных границах
![]() 7.4. Если погрешности измерений входных и выходных величин имеют примерно одинаковый порядок, то в случае непланируемого эксперимента следует использовать методы конфлюентного анализа. При этом необходима дополнительная информация в одном из следующих вариантов:
1) известна одна из дисперсий погрешностей,
(либо оценки указанных параметров, полученные независимо от исходного набора данных);2) имеются результаты многократных наблюдений (
3) известен порядок возрастания исходных значений входных величин:
;4) известно разбиение значений
на группы, независимое от погрешностей измерений.7.5. Если известна одна из дисперсий погрешностей измерений или их отношение, и погрешности имеют гауссовские распределения, то рекомендуется использовать модифицированные МНК-оценки, приведенные в табл. 5. Соответствующие оценки коэффициента a вычисляют по формуле:
![]() 7.5.1. В табл. 5 для оценок указаны смещения B(b) (т.е. систематические сдвиги) и вторые моменты
![]() которые характеризуют как смещение, так и разброс оценок.
Примечания
1. Для сравнения в табл. 5 приведена также обычная МНК-оценка, которая в этом случае имеет существенное смещение.
2. Смещения модифицированных МНК-оценок малы и стремятся к 0 при увеличении числа точек m.
Таблица 5
Примечание:
![]() ![]() 7.6.1. Если известна одна из дисперсий погрешностей, то рекомендуется использовать оценки
7.6.2. Если известно отношение отношение дисперсий r, то рекомендуется использовать обобщенную оценку ортогональной регрессии
7.7. Приближенные доверительные границы погрешностей коэффициента b и расчетных значений ГХ вычисляют по формулам:
![]() ![]() где
.7.8. При наличии многократных наблюдений в точках
, ) и гауссовских распределений погрешностей измерений рекомендуется использовать модифицированные МНК-оценки, получаемые при подстановке в них оценок дисперсий ![]() ![]() 7.9. Если известен порядок возрастания истинных значений входных величин
Примечание. В табл. 6 приведены смещения оценок и их вторые моменты. Смещения дробно-линейных оценок (в отличие от обычной МНК-оценки
Таблица 6
7.9.1. Для дробно-линейных оценок общего вида
где ![]() смещение имеет вид
где ![]() а второй момент
![]() 7.9.2. Приближенные доверительные границы погрешности ГХ в точке X вычисляют по формуле
![]() где
7.10. Если значения
, i = 1, ..., m.7.11. Если имеется разбиение точек на 2 или 3 группы равного объема, то рекомендуется использовать оценки Вальда или Бартлетта, вычисляемые согласно п. 6.2.1, где
ПРИВОДИМЫХ К ЛИНЕЙНЫМ
8.1. Если ГХ имеет вид V(Y) = a + b·U(X), то она приводится к линейной ГХ
путем преобразования переменных: X' = U(X), Y' = V(Y). Тогда построение линейной ГХ выполняется по преобразованному набору данных , , i = 1, ..., m, согласно общим правилам построения линейных ГХ, изложенным в разд. 5 - 7.
8.2. При выборе весов результатов измерений и оценивании погрешностей следует учитывать следует учитывать изменение характеристик погрешностей измерений при преобразовании переменных.
8.2.1. Если для исходных результатов измерений
![]() 8.2.2. Если для исходных результатов измерений
![]() где
.8.3. Если построена линейная ГХ Y' = a + b·X', то при возвращении к исходным переменным X и Y получается ГХ вида
V(Y) = a + b·U(X) или
,где
8.3.1. Если для линейной ГХ в точке X' получены характеристики погрешности: граница погрешности
![]() где
Y = f(X), X' = U(X).8.4. Наиболее распространенные на практике зависимости, приводимые к линейным, а также практические способы выбора соответствующих линеаризующих преобразований представлены в Приложении 1.
ПОЛИНОМИАЛЬНОГО ВИДА
9.1. Если ГХ является линейной комбинацией известных функций:
![]() где
9.2. МНК-оценки коэффициентов ГХ
q = 1, ..., k,где
, .В матричном виде МНК-оценки могут быть представлены как
![]() где
- матрица коэффициентов системы, - вектор оценок, - вектор правых частей системы.9.3. Корреляционная матрица вектора оценок A оценивается по формуле
![]() где S - оценка дисперсии погрешностей измерений
![]() 9.4. Если ГХ является алгебраическим полиномом степени k, то рекомендуется перейти к разложению по ортогональным полиномам Чебышева
![]() где
- полиномы степеней 0, ..., k, ортогональные относительно ![]() 9.4.1. Ортогональные полиномы младших степеней имеют вид:
![]() а далее определяются рекуррентно по формуле
![]() где
![]() 9.5. Коэффициенты
![]() 9.5.1. Если случайные погрешности измерений
![]() где
- коэффициент Стьюдента с m - k - 1 степенями свободы;![]() а оценку СКО S вычисляют по формуле
![]() 9.5.2. Если известно, что систематические погрешности измерений
![]() В этом случае приближенную границу суммарной погрешности ГХ оценивают по формуле
![]() 9.6. При равноточных измерениях в случае планируемого эксперимента рекомендуется выбирать значения
:![]() 9.6.1. Ортогональные полиномы младших степеней имеют вид:
![]() а далее вычисляются по рекуррентной формуле
![]() где
, .9.6.2. Коэффициенты
![]() 9.7. При равноотстоящих значениях
, рекомендуется перейти к нормированной переменной . Тогда ортогональные полиномы младших степеней определяются по формулам: ![]() а последующие определяются по рекуррентной формуле
![]() 9.7.1. Коэффициенты
![]() 9.8. Правильность выбора степени полинома проверяют согласно изложенному в Приложениях 2, 3.
ПРИ ИСПОЛЬЗОВАНИИ ГРАДУИРОВОЧНЫХ ХАРАКТЕРИСТИК
10.1. Построенная по экспериментальным данным ГХ Y = f(X) на практике используется для оценивания значений входной величины по результатам измерений выходных величин
![]() При этом обратная ГХ может быть представлена в аналитическом, графическом или табличном виде.
10.2. Погрешность полученного значения входной величины X определяется как погрешностью измерения выходной величины, так и погрешностью построения ГХ.
10.2.1. Границы погрешности X оценивают по формуле
![]() где f'(X) - производная функции f(X) в точке X.
10.2.2. СКО погрешности X оценивают по формуле
![]() 10.2.3. Границы систематической погрешности вычисляют по формуле
![]() 10.3. При использовании линейной ГХ
значения входной величины находят по формуле![]() 10.3.1. Границы погрешности
![]() Примечание. Границы могут быть детерминированные или доверительные; в последнем случае обычно принимают доверительную вероятность P = 0,95 или 0,99, согласно п. 1.6.
10.3.2. Если линейная ГХ построена МНК по результатам равноточных многократных наблюдений
![]() где
, ,![]() Примечание. Доверительные границы для X не симметричны относительно оценки
10.3.3. При выполнении условий п. 10.3.2 совместные доверительные интервалы для истинных значений
на .Рекомендуемое
ГРАДУИРОВОЧНОЙ ХАРАКТЕРИСТИКИ ЭКСПЕРИМЕНТАЛЬНЫМ ДАННЫМ
1. Проверяется гипотеза, что ГХ выбранного функционального вида Y = f(X), построенная по результатам измерений в точках (
.1.1. Для проверки согласия вычисляют остатки, т.е. отклонения результатов измерений от расчетных значений:
.1.2. Проверяют гипотезу случайности остатков
2. В критерии знаков подсчитывают число
![]() где критическое значение
находят при m < 50 по табл. 1, а при m > 50 вычисляют по формуле![]() Если число
Таблица 1
(при уровне значимости
)
3. В критерии серий используется статистика R, равная общему числу серий в последовательности остатков
![]() 3.1. Критические значения
, m = 10, ..., 40.Таблица 2
Критические значения R(m) для критерия серий
(при уровне значимости
)
3.2. Для m > 40 критические значения находят по формуле
![]() Примечание. Для повышения надежности можно совместно использовать критерии знаков и серий. При этом уровень значимости становится выше
4. Если при точно заданных (или контролируемых) входных величинах
![]() где S - оценка дисперсии погрешностей по остаткам
4.1. Если измерения равноточные, то дисперсионное отношение имеет вид
![]() где k - число оцениваемых параметров,
.4.2. При неравноточных измерениях, когда известна зависимость дисперсии от X:
, дисперсионное отношение имеет вид![]() Вычисленное значение
, то построенную ГХ можно считать согласующейся с экспериментальными данными.Рекомендуемое
ГРАДУИРОВОЧНЫХ ХАРАКТЕРИСТИК К ЛИНЕЙНЫМ
1. Рассматриваются нелинейные ГХ, которые приводятся к линейной функции путем замены переменных:
Y' = a + b·X', X' = U(X), Y' = V(Y).
Наиболее распространенные на практике - степенные, показательные и дробно-линейные ГХ - перечислены в таблице, где приведены соответствующие преобразования переменных.
2. Для выбора между степенными и показательными функциями рекомендуется использовать графические правила.
2.1. По экспериментальным данным (
, . Наносят точки на график и определяют, какие точки лучше аппроксимируются прямой линией.Если точки
2.2. В случае планируемых измерений выбирают две последовательности точек: арифметическую прогрессию
; геометрическую прогрессию , , , i = 1, ..., (m - 1).Если приближенно постоянны отношения
![]() если приближенно постоянны отношения
![]() Правила выбора и линеаризации степенных
и показательных функций
3. Если данные можно графически аппроксимировать гладкой кривой, то используют метод выбора ГХ, основанный на двух "опорных" точках.
3.1. Опорные точки X и X' выбирают расположенными ближе к краям диапазона (как средние значения или медианы нескольких крайних точек).
3.2. Для пары точек X и X' находят три средних значения: арифметическое -
, геометрическое - и гармоническое - . Аналогичные средние значения По сглаженной кривой находят также точки
Рекомендуемое
ГРАДУИРОВОЧНОЙ ХАРАКТЕРИСТИКИ
1. При выборе степени полинома, аппроксимирующего ГХ, целесообразно использовать разложение по ортогональным полиномам Чебышева
значения
значения
.2. По данным (
![]() где
.Примечание. Максимальную степень полинома K выбирают исходя из конкретной задачи, в большинстве случаев рекомендуется K = 5.
3. Вычисляют остаточные суммы квадратов
![]() и оценки дисперсии
![]() 4. Степень полинома повышают до тех пор, пока оценки
1) принимают значение k, при котором оценка
, ;2) принимают значение k, после которого оценка
.Если при всех степенях k < K выбранное условие не достигнуто, то принимают максимальную степень полинома K.
5. Для выбора степени полинома можно использовать также методы перекрестного выбора. При этом все данные разбивают на (k + 2) группы (конкретные способы разбиения могут быть различны и устанавливаются в методиках). Одна из групп является проверочной, а по медианным точкам остальных групп строится полином
Согласие полинома с исходными данными оценивается по его отклонению от медианы проверочной выборки:
![]() Описанную процедуру повторяют многократно, принимая последовательно каждую из групп за проверочную. В результате получают суммарный показатель адекватности полинома
![]() В качестве искомой степени полинома принимают то значение k, для которого показатель d(k) минимален.
Рекомендуемое
ПРЕДСТАВЛЕННЫХ В АНАЛИТИЧЕСКОЙ ФОРМЕ
1. При построении ГХ в виде функции принятого вида
![]() погрешности полученной ГХ оценивают на основе линеаризованного разложения
![]() где коэффициенты
![]() 2. Если заданы
![]() 3. Если заданы характеристики случайных и систематических составляющих погрешностей измерений величин
![]() ![]() 3.1. Доверительные границы случайной погрешности ГХ в точке X оценивают по формуле
![]() где
, 4. Если известно, что погрешности исходных данных изменяются нерегулярным образом в заданных границах
![]() где
.5. Если систематические погрешности исходных данных изменяются нерегулярным образом в заданных границах
![]() где
.6. Если систематические погрешности исходных данных остаются примерно постоянными для всех точек диапазона, то границы систематической погрешности ГХ в точке X оценивают по формуле
![]() 7. Частные случаи приведенных выше общих формул применительно к конкретным функциональным видам ГХ (линейным, полиномиальным и приводимым к линейным) приведены в разд. 5 - 9.
Рекомендуемое
ПРИМЕР ПОСТРОЕНИЯ ЛИНЕЙНОЙ ГРАДУИРОВОЧНОЙ ХАРАКТЕРИСТИКИ
Рассматривается градуировка вольтметра переменного напряжения. На входе устанавливается переменное напряжение
, i = 1, ..., 5; постоянное напряжение на выходе Таблица 1
На приведенных простейших экспериментальных данных иллюстрируется решение основных задач, возникающих при построении ГХ.
1. Построение линейной ГХ общего вида
![]() Поскольку входная величина X в данном случае является контролируемой переменной (на входе устанавливались заранее заданные значения
.Таблица 2
Получены оценки коэффициентов
![]() ![]() В итоге получена ГХ вида Y = b·X, где b = 1,00004.
2. Если заранее известно: что ГХ имеет вид
, то коэффициент ![]() Получено то же значение коэффициента, что и выше.
3. Оценим погрешности полученных коэффициентов и расчетных значений ГХ. Из предварительных исследований известно, что в погрешностях исходных данных преобладают случайные составляющие, которые имеют гауссовские распределения. Тогда доверительные границы погрешностей коэффициентов и расчетных значений ГХ вычисляют по формулам:
![]() ![]() Оценка СКО вычисляется по формуле
![]() Вычисление необходимых сумм квадратов приведено в табл. 3.
Таблица 3
Отклонения экспериментальных данных от расчетных значений
При доверительной вероятности P = 0,95 и m = 5 коэффициент Стьюдента
. В итоге получено ![]() 4. В данном случае номинальной (желательной) ГХ является
Необходимо проверить, что построенная ГХ незначимо отклоняется от номинальной ГХ.
Поскольку построенная ГХ также имеет вид Y = b·X, то необходимо лишь проверить, что коэффициенты
![]() Поскольку в данном случае
![]() гипотеза о согласии построенной и номинальной ГХ принимается.
Справочное
1. Кончаловский В.Ю., Купершмидт Я.А., Сыропятова Р.Я., Харченко Р.Р. Электрические измерительные преобразователи. - М.: Энергия, 1967.
2. Левшина Е.С., Новицкий П.В. Электрические измерения физических величин: Измерительные преобразователи. - Л.: Энергоатомиздат. Ленингр. отд., 1983.
3. Айвазян С.А., Енюков И.С., Мешалкин Л.Д. Прикладная статистика: Исследование зависимостей. - М.: Финансы и статистика, 1985.
4. Долинский Е.Ф. Обработка данных измерений. - М.: Изд. стандартов, 1973.
5. Линник Ю.В. Метод наименьших квадратов и основы теории обработки наблюдений. - М.: Физматгиз, 1962.
6. Семенов Л.А., Сирая Т.Н. Методы построения градуировочных характеристик средств измерений. - М.: Изд. стандартов, 1986.
7. Румшиский Л.З. Математическая обработка результатов эксперимента. - М.: Наука, 1971.
9. Худсон Д. Статистика для физиков. - М.: Мир, 1973.
10. Вучков И., Бояджиева Л., Солаков Е. Прикладной линейный регрессионный анализ. - М.: Финансы и статистика, 1987.
12. Мостеллер Ф., Тьюки Дж. Анализ данных и регрессия. - М.: Финансы и статистика, 1987.
13. Смоляк С.А., Титаренко Б.П. Устойчивые методы оценивания. - М.: Статистика, 1987.
Дополнительная литература:
15. Ермаков С.М., Жиглявский А.А. Математическая теория оптимального эксперимента. - М.: Наука, 1987.
Вернуться в "Каталог нормативных документов"
Источник информации: https://internet-law.ru/documents/prod/rekomendaciya_rekomendacii/10/mi_36918.html
На правах рекламы:
|
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||