При использовании метода парных сравнений эксперт сравнивая попорно между собой n – объектов заполняют специальную таблицу размером nxn. Единица в клетке с индексами i j говорит о том, что эксперт предпочитает объект i объекту j,тогда элемент таблицы j i заполняется нулем aij=1-aij

В том случае, если опрашивается m – экспертов, каждый эксперт заполняет свою таблицу. Наложив друг на друга, эти таблицы и просуммировав содержимое клеток с одинаковыми индексами мы получаем суммарную таблицу, обрабатывая которую можно построить требуемую ранжировку.

объект	объект
	1	2	3	?
1	?	0	0
2	0	?	0
3	0	0	?

Коэффициент согласия экспертов вычисляется по следующей формуле при использовании коэффициента конкордации.

V=4Q/(m(m-1)(n-1)n)

Если все эксперты единодушны, то коэффициент конкордации равен 1.

Q=?aij-m?aij+C?nC?m

Суммирование производится по элементам таблицы опроса лежащем только выше или только ниже главной диагонали. Для оценки значимости коэффициента конкордации поступаем следующим образом:

c?=(4/m-2)[Q-1/2*C?nC?m*m-3/n-2]

Если это так, то находим коэффициент конкордации при m=6 и n=8.

Суммарная таблица

	1	2	?	ранг
1	—	10	10	1,5
2	0	—	0	3
2	3	7	10	1,5
4	4	5	9	2

В нашем случае отрицательное значение ?? говорит о том, что мы должны применить гипотезу о значимости коэффициента конкордации.