Методология: как проектираме, събираме и проверяваме данните

Стандарти

Кодексът ICC/ESOMAR

Международният кодекс ICC/ESOMAR за пазарни и социални проучвания и анализ на данни определя основните задължения към респондентите и клиентите: доброволно участие, прозрачност за целта, защита на личните данни, ясно разграничаване на проучването от продажбата и честно представяне на резултатите. Прилагаме тези принципи във всеки проект, независимо от метода и държавата.

ISO 20252

Стандартът ISO 20252 описва изискванията към процеса на проучване — от брифа и дизайна до терена, обработката на данните и отчитането. Използваме го като рамка за вътрешните си процедури и контролни списъци. Използването на стандарта като рамка не означава сертификация; когато проектът изисква сертифициран изпълнител за даден етап, уточняваме това още в предложението.

GDPR

Личните данни на респондентите се събират с информирано съгласие, само в обема, нужен за проучването, и се анонимизират или псевдонимизират преди анализа. Клиентът получава данни, от които не може да бъде идентифициран конкретен човек, освен ако респондентът изрично не е дал съгласие за друго.

Извадка и статистика

Размерът на извадката се изчислява спрямо грешката, която решението може да понесе. При 95% ниво на доверие (z = 1,96), очакван дял 50% и допустима грешка ±5 процентни пункта за голяма популация са нужни около 385 завършени интервюта. Когато популацията е малка — например всички болници или всички общини в страната, — прилагаме корекция за крайна популация и нужната извадка намалява. Изчислението можете да проверите с калкулатора за размер на извадката.

Квотите определят структурата на извадката по признаци, които влияят на отговорите: пол, възраст, регион и размер на населеното място, а при B2B — отрасъл и размер на фирмата. Ако завършените интервюта все пак се отклоняват от структурата на популацията, прилагаме тегла и отчитаме ефекта им върху точността.

При онлайн анкети работим с квотни извадки от онлайн панели. Те не са случайни в строгия смисъл, затова изчислената грешка е ориентировъчна, а не точна мярка за несигурността. В доклада посочваме базата на всяка графика и всяка подгрупа; ако базата е малка, резултатът е отбелязан като ориентировъчен. Разлики между групи коментираме само когато са статистически значими.

Контрол на качеството

Контрол на теренната работа

Преди старта всеки програмиран въпросник се проверява за логиката на прескачанията и за правилното показване на телефон и компютър. Когато въпросите са нови или сложни, провеждаме пилотно проучване с малка група респонденти. При телефонни и лични интервюта част от интервютата се проверяват чрез повторен контакт с респондента, а при онлайн анкетите следим ежедневно изпълнението на квотите и времето за попълване.

Чистене на данните

Чистенето на данните следва писани правила, договорени преди терена:

• Speeders: попълвания, много по-бързи от медианното време, се отстраняват, защото е малко вероятно респондентът да е прочел въпросите.
• Straightlining: еднакъв отговор на всички редове в таблица с твърдения е сигнал за невнимание, особено когато твърденията са с противоположен смисъл.
• Контролни въпроси: инструкция от типа „изберете „по-скоро не“ на този ред“ отсява автоматичните и механичните попълвания.
• Логическа последователност: противоречиви отговори, невъзможни комбинации и безсмислен текст в отворените въпроси.

Отстранените интервюта се заменят с нови, за да се запази размерът на извадката, а в доклада посочваме колко са били и по какви причини.

Качествени методи

При фокус групите и дълбочинните интервюта качеството се решава още при набирането. Участниците попълват скрийнър, който проверява дали отговарят на профила и изключва хора, работещи в маркетинга, рекламата или в конкурентна фирма, както и участници, които наскоро са били в подобна дискусия.

Модераторът работи по наръчник за дискусия, съгласуван с Вас, но не го чете дословно: целта е да разбере защо хората мислят по даден начин, а не да събере кратки отговори. Дискусиите се записват със съгласието на участниците и се транскрибират.

Анализът е тематичен: кодираме транскрипциите, групираме сходните мнения и търсим както повтарящите се модели, така и важните изключения. Качествените резултати не се представят в проценти, защото малкият брой участници не позволява такова обобщение. Когато е нужно да се измери колко разпространено е дадено мнение, качественият етап се следва от анкета.

Отворени данни в сайта

Разделът „Пазарът в числа“ показва отворени данни от три източника: Евростат (онлайн пазаруване, употреба на интернет, потребителско доверие, изкуствен интелект и социални медии във фирмите, ценови нива, бранш на проучванията), Световната банка (население и БВП на човек) и CBS StatLine (потребителско доверие в Нидерландия). Данните се изтеглят чрез публичните интерфейси на източниците и графиките се генерират наново при всяко обновяване.

Под всяка графика стоят името на източника, кодът на таблицата и датата на последното обновяване на серията. Не преизчисляваме и не изглаждаме данните — показваме ги така, както са публикувани, включително когато серията има прекъсвания или години без наблюдение. В текстовете всяко число е придружено от годината и източника си.

Как ползваме изкуствен интелект

Използваме инструменти с изкуствен интелект там, където те ускоряват рутинна работа, без да заместват преценката: първоначално кодиране на отворени отговори, обобщаване на транскрипции, работни преводи на въпросници и проверка на текста на доклада. Всеки такъв резултат се преглежда и коригира от човек, преди да влезе в анализа. Личните данни на респондентите се премахват, преди текстовете да бъдат обработени с такива инструменти.

Не използваме синтетични респонденти — отговори, генерирани от езиков модел — като заместител на реални хора. Те могат да помогнат при формулиране на хипотези или при тест на въпросник, но не измерват какво мисли Вашата целева група. Повече за възможностите и рисковете ще намерите в статията маркетингово проучване с AI.

Често задавани въпроси

Представителни ли са онлайн анкетите?

Онлайн анкетата може да бъде представителна за хората, които използват интернет, ако квотите и теглата отразяват структурата им. За цялото население това зависи от темата и от целевата група: в групи с по-ниска употреба на интернет онлайн методът изпуска част от хората. Тогава съчетаваме онлайн и телефонни интервюта или избираме друг метод, като го отбелязваме в предложението.

Колко участници има една фокус група?

Обичайно между 6 и 8 души — достатъчно, за да има различни гледни точки, и достатъчно малко, за да може всеки да говори. За една тема обикновено се провеждат няколко групи с различен профил, например настоящи и бивши клиенти. Онлайн групите често са по-малки, защото разговорът през екран е по-труден за модериране.

Как проверявате дали респондентите са реални?

Чрез комбинация от мерки: скрийнър въпроси, контролни въпроси в анкетата, проверка на времето за попълване и на отворените отговори, филтри за повтарящи се устройства при онлайн анкети и повторен контакт при телефонни и лични интервюта. Съмнителните попълвания се отстраняват по предварително договорени правила, а броят им се посочва в доклада.

Мога ли да получа суровите данни?

Да. Освен доклада можете да получите анонимизирани данни на ниво респондент във формат, удобен за Вашия екип, например Excel, CSV или SPSS, заедно с описание на променливите и теглата. При качествените методи предаваме обобщени транскрипции или записи само когато участниците са дали изрично съгласие за това.

Каква е грешката в резултатите?

Зависи от размера на извадката и от резултата. За голяма популация при 95% ниво на доверие 385 анкети дават грешка около ±5 процентни пункта за резултат 50%, а 1 068 анкети — около ±3 пункта. Във всеки доклад посочваме базата и грешката, а с калкулатора за статистическа грешка можете да проверите всеки резултат сами.