Наверх ↑

Изменение результатов опроса со временем

Решил немного разрядить политические страсти своей технической статьей. Я здесь активно продвигаю идею об измерении достоверности опросов и голосований. Тут первый пост с объяснениями, что такое доверительный интервал, величина надежности и как это вычисляется. Во втором посте я привел результаты всех существенных голосований и опросов, проведенных за некоторый промежуток времени и предложил проголосовать за «свои» пункты (раз и два) в разработке Д2. 


Там мне вполне резонно заметили, что результаты голосований «плавают», поэтому говорить об их достоверности бессмысленно. Я с этим не согласен и провел эксперимент по измерению результатов в течение времени. Эксперимент проводился в открытую на опросе «Структура документа по идеологии », там в комментариях есть отдельная ветка, где я все замеры фиксировал в течение недели. Для чистоты эксперименты надо было о нем не объявлять, но я считаю, что доверие к методике важнее.


Лучше один раз увидеть, чем 10 раз прочитать, поэтому результаты нанес на график. Получилось несколько плотно, но рассмотреть можно.


С ходу сложно разобраться, но я попробую пояснить. Линии с треугольничками обозначают верхнюю границу 68%-ного доверительного интервала, линии с ромбиками — нижнюю границу, линии с квадратиками — сам результат (или математическое ожидание). Т.е. при абсолютной явке результат опроса окажется в указанном диапазоне с вероятностью 68%. Цвет графика сочетается с цветом названия данного пункта. Жирной оранжевой линией показано количество участников.


Меня в этом эксперименте интересовали следующие вопросы:
1. Когда результат опроса «стабилизируется» настолько, что можно оценить проходные/непроходные пункты?

По моему предположению, это должны быть одни сутки. Оно подтвердилось, потому что по истечении суток был получен стабильный результат. А далее только один пункт «Направления деятельности, задачи подробно» вышел за пределы ошибки (вероятность этого была все таки больше 30%). Более того, по моему мнению (это еще надо проверить), если в течение половины дня какой-то пункт набирает больше 70% (или меньше 30%), то этот пункт почти достоверно пройдет (или не пройдет).


2. Когда участники группы перестают отвечать в опросе?

Я предполагал, что это произойдет, когда опрос выйдет за пределы первого листа группы. Так и вышло, за маленьким исключением: после пятого дня (когда опрос «уполз» на второй лист) голосование в опросе прекратилось. Но за то время, пока я готовил эту публикацию, проголосовало еще 3 человека. Предполагаю, что эти трое из вновь прибывших, поскольку за последние дни в группе прибавилось пара десятков человек.


Выводы. Не вижу смысла ставить опросы и голосований сроком больше, чем на неделю.
По истечении суток опрос/голосование в группе набирает достаточную репрезентативность для определения результатов (кроме тех, которые колеблются в диапазоне от 40 до 60%).


Лирическое отступление. Радует то, что для группы «принципы, которых мы собираемся придерживаться» важнее, чем «цели партии».

Данный эксперимент собираюсь повторить в закрытом режиме через неопределенное время. Результат представлю.
 

Рейтинг публикации: +4 / −1

Комментарии (9)

Все комментарии  Сначала новые старые
А мы здесь ради себя. Посему - "Отряд не заметил потери бойца"(с).
не могу не заметить, что для некоторых влиятельных членов группы достижение цели уже вполне официально важнее принципов, идеи облачной демократии предложено оставить на светлое будущее и не заморачиваться здесь такой ерундой, как разработка чего-бы-то-ни-было
Надо еще учитывать попадают ли выходные и праздничные дни в дни голосования.
2 ответа
Конечно, надо. Но все таки неделя - это "полный цикл".
27 июня 2012, 08:39 #
↑ Каблис Григорий , Ну тогда результат Вашего исследования справедлив только для тех случаев, когда длительность кратна недели. Т.е одна неделя, две недели, три и т.д.
Учитывая, что две недели уже за пределами разумного, то к выводу что нужна одна неделя можно прийти не проводя никаких исследований :)
27 июня 2012, 10:54 #
"Там мне вполне резонно заметили, что результаты голосований «плавают», поэтому говорить об их достоверности бессмысленно."(с)

Если вы намекаете на меня,то я такую ахенею не говорил.
Я говорил,что выборка в 60-70 человек не может считаться репрезентативной(т.е. случайной в общем количестве имеющих право проголосвать....где-то больше 300 участников на тот момент),потому что голосуют одни и теже люди.Ну чтоб было понятно на пальцах,если вы хотите узнать кто наберёт больше всего на Урале голосов,то нет смысла ездить только на "уралвагонзавод",т.к. это не значит,что результаты по всему Уралу будут такими же самыми,как среди "уралвагонзавода".
Вот.А в подтверждении этого привёл ситуацию с опросом в группе Федерация,когда после того,как там проголосовало 60 человек было одно распределение голосов,а когда 150 в очень существенной и значимой степени другое.

ПС...Вы зря привязываетесь замерами к шкале времени....вашей формуле наплевать что там со временем происходит...ей важно знать количество проголосовавших на текущий момент,а оно по времени может быть совсем не линейно и не равномерно изменяющимся.
Комментарий удален.
>> "Не вижу смысла ставить опросы и голосований сроком больше, чем на неделю."
Тут есть два момента
1. Не надо сбрасывать со счетов процесс вовлечения малоактивных.
2. Весь объем, на котором Вы исследовали динамику был порядка 20% от всей группы.
2 ответа
Маленький объем - я согласен. Были бы здесь огромные явки, то это бы не понадобилось. Мне кажется, голоса малоактивных распределятся похоже с активными. Вот бы проверить!?
27 июня 2012, 08:42 #
↑ Каблис Григорий , // голоса малоактивных распределятся похоже с активными.
Не согласен. Уже давно заметил, что часто комментарии (более активных) плохо коррелируют с результатами голосований (малоактивных) и даже с +/- под постом (среднеактивных).

Последний "призыв" отчасти объясняет этот феномен - малоактивные приходят по агитации из каких-то блогов (в основном Навального) с уже сложившейся субкультурой; в то время, как сильноактивные - из совершенно разных мест и формируют своё мнение уже здесь.
28 июня 2012, 05:09 #