Ирина ЭглитЯ посмотрела ваши файлы расчетов сходимости (корреляций)со средними значениями.
И у меня возникли ряд вопросов по поводу ваших расчетов/
Количество отмеченных индикаторов у каждого эксперта разное. Так?
Значит исходная база расчетов у КАЖДОГО ЭКСПЕРТА должна быть разной. У вас это учитывается и если ДА, то КАК?
Вероятнее всего были присвоены нули тем индикаторам, которые не отмечались (упомянались) экспертом. Это так?
Например,
singlewolf имеет самое малое число выделенных индикаторов=25, а
Elhant стоит по числу выделенных на втором месте с конца по числу индикаторов, который он выделил.
Корреляция также считалась с использованием таких "нулевых" значений. За базу бралась всё суммарное количество индикаторов, равное 96?
Без учета какой именно "нуль" используется. "Нуль", который показывает на отсутствие индикатора или тот нужный для расчетов нуль, который показывает несовпадение? Так или не так?
По вашим расчетам средняя корреляция всех экспертов со средним значением равнялась = 0,82. Это высокий показатель, НО...,
если невыделенным индикаторам присвоены нули от какого-нибудь эксперта (то есть индикатор не должен был использоваться вообще), а программа расчета корреляций все-равно сравнивала с другими нулями невыделенных индикаторов, то это ВАШЕ число эксперимента завышено.
По логике, лучше бы учесть эти "мелочи". И изьять из расчета такие нули. Которые в любом случае, но совпадут. И повысят общую корреляцию эксперимента.
Я позволила себе поэкспериментировать и вычеркнула все "нули несовпадений" с теми или иными индикаторами.
Справа я добавила голубую колонку "рабочих признаков" без этих нулей (это число я беру как знаменатель для расчета левой колонки среднего значения). Слева голубую колонку средних совпавших значений.
При вычете "неиспользованных нулей" средняя корреляция вашего проекта упала с 0,82 до 0,69.Корреляция упала в среднем на величину 0,13. Это немало.
Скажите, правильно ли я сделала "гипотетический" расчет?
И если не правильно, то как тогда нужно учитывать неиспользуемые "нулевые" индикаторы?
По моему глубокому убеждению, вам нужно ЗАСТАВИТЬ каждого из экспертов увидеть равное число индикаторов. Скажем, не 96, а только 51. Или и того меньше, например, 33.
- Сумма выделенных индикаторов.png (9.96 КБ) Просмотров: 8887
- Корреляция с нулями.png (19.7 КБ) Просмотров: 8887
- Корреляция без нулей.png (28.41 КБ) Просмотров: 8887