У чому складність формулювання запитань анкети?

Що варто знати про соціологію та соціальні дослідження?

У фокус-групах і глибинних інтерв'ю учасники дослідження надають розгорнуті відповіді, а отже, малоймовірно, що залишаться непоміченими непорозуміння, коли інтерв'юер питає про одне, а респондент говорить про інше. У неформалізованому інтерв'ю якщо інтерв'юери не отримують потрібної інформації, то мають можливість перефразувати запитання, поставити додаткові, уточнювальні. Однак імпровізація є неприйнятною у формалізованих інтерв'ю, які проводять за допомогою анкет.

На перший погляд здається, що це дає переваги, а не створює проблеми. Адже робота інтерв'юера спрощується: не потрібно уважно вдумуватись у відповіді респондентів і на ходу адаптовувати сценарій розмови до кожного з них. Але дослідницька дійсність складання анкет, виявляється, не лише не "безхмарна", а й настільки "похмура", що існують книги в кілька сотень сторінок про складання запитань анкет[1]. У чому ж складність? Про що може йтися в тих товстих книгах?

• По можливості всі респонденти мають однаково зрозуміти запитання та варіанти відповідей до нього[2].

• Для кожного з респондентів має знайтися той варіант відповіді, який точно відображає його/їі погляди або досвід.

• Якщо можна обрати лише один варіант відповіді, то не має бути кількох варіантів, що точно відображають погляди або досвід респондента. Інакше кажучи, варіанти відповідей мають бути взаємовиключними в тих запитаннях, у яких респондент мусить обрати один варіант відповіді (на відміну від запитань, де допустимий множинний вибір).

• Формулювання ані запитання, ані відповіді не має схиляти респондента до певного вибору, позиціонуючи його як більш привабливий, бажаний.

• Чутливі запитання мають бути сформульовані таким чином, щоб якомога більше людей погодилося щиро відповісти.

• Фахові дослідники мають бути свідомими того, як навіть незначні зміни у формулюваннях запитань можуть вплинути на результат опитування. Відповідно вони вивчають результати експериментальних опитувань, у яких були протестовані різні формулювання того самого запитання, та проводять власні.

Хрестоматійним прикладом останнього стало експериментальне репрезентативне опитування, проведене в США у 1940-х роках[3]. На репрезентативних вибірках було протестовано дві версії запитання.

Версія 1. "На Вашу думку, чи мають бути заборонені в США публічні виступи проти демократії?" 54% респондентів відповіли, що мають бути заборонені.

Версія 2. "На Вашу думку, чи мають бути дозволені в США публічні виступи проти демократії?" 75% респондентів зазначили, що такі виступи не мають бути дозволені.

У відповідях і 54% респондентів, і 75% йшлося про той самий практичний наслідок: у США публічні виступи проти демократії були б нелегальними, але різниця у відповідях становила майже 26%, ніби йшлося про вельми різні практичні наслідки. Оскільки анкети зазвичай містять лише одну версію запитання, необережні, нефахові або зумисно маніпулятивні формулювання можуть

спричинити чимало непорозумінь у суспільстві, якщо тематика опитування є суспільно значущою.

Інший хрестоматійний приклад: чимало експериментальних опитувань засвідчило, що коли поміж варіантів відповідей є "важко сказати", то кількість респондентів, які зазначають, що вагаються, суттєво більша порівняно з тими результатами, у яких "важко сказати" не було серед варіантів і було реєстровано як відповідь лише тоді, коли респондент казав, що йому/їй важко обрати з-поміж запропонованих варіантів[4].

Виклик у формулюванні запитань анкети можна показати на прикладі, дуже близькому до повсякдення громадських організацій. Уявімо, що велику грантодавчу організацію зацікавило, який відсоток організацій-грантерів оприлюднює річні звіти на своїх сайтах. У базі даних є контактна інформація всіх 358 організацій, які були грантерами впродовж останніх трьох років. Щоб не передивлятися понад 300 Інтернет-сторінок, вирішують провести невеличке анонімне Інтернет-опитування, розіславши запрошення до участі на електронні адреси, зазначені в базі. Нашвидкуруч формулюють запитання: "Скажіть, будь ласка, чи оприлюднює Ваша громадська організація річні звіти на своєму сайті?"; створюють сторінку[5], на якій можна анонімно відповісти "так" або "ні", і просять зробити це за відповідним посиланням. Відповіді надходять швидко, й вони здебільшого ствердні: "Так, оприлюднюємо". Здавалося б, усе зрозуміло. Але тут автори опитування замислюються: "Річні звіти громадських організацій бувають описові й фінансові. Під річним звітом можна розуміти або такий, що включає як описову, так і фінансову частини, або такий, що містить будь-яку з них. Може, хтось публікує описовий, але не фінансовий? Або навпаки? Варто було спитати окремо про описовий і фінансовий, а не про звіт загалом..."

Однак брак уточнення типу річного звіту не єдина проблема у формулюванні цього запитання. Людина, яка вміє фахово формулювати запитання для опитувань, звернула б увагу й на інше: різні організації могли по-різному сприйняти часовий аспект запитання. Інакше кажучи, воно сформульоване настільки загально, що неможливо зрозуміти, що саме стоїть за відповідями на нього не лише з огляду на тип звіту, а й у часовому вимірі.

Уявімо, що певна громадська організація час від часу оприлюднює той чи інший вид річного звіту, хоча й не щороку. Керівник ГО цілком закономірно вважає її такою, що публікує щорічний звіт, адже в запитанні не уточнено, чи оприлюднюють звіт щороку. Можливо, вона це робить лише в ті роки, коли діяльність була особливо активною. Тож має повне право щиро відповісти "так" на поставлене запитання.

В іншій організації, навпаки, команда оприлюднила звіт того року, коли було більше часу в керівника, але в наступні кілька років усі були перевантажені, тож звіт так ніхто й не підготував. Третя організація опублікувала звіт за минулий рік, оскільки таку вимогу висунув один із донорів, на розгляд якому подавали один із проектів, але ГО не планує повторювати цю практику в майбутньому, бо вважає, що час треба максимально витрачати на результативну проектну діяльність, а не звітність. Будь-яка з таких організацій могла щиро відповісти "так" на запитання про оприлюднення річних звітів, адже зробила це бодай один раз.

Однак це не означає, що всі, хто відповіли заперечно, не опублікували звіт жодного разу. Адже інші громадські організації могли інтерпретувати запитання, навпаки, більш вузько. Наприклад, ГО оприлюднювала річний звіт 10 років поспіль, але якраз торік не зробила цього (усі були перевантажені, за рік було реалізовано багато проектів, підсумки хотіли підбити, але поки що не знайшли часу цим зайнятися). Експрес-опитування грантодавця змушує пригадати, що звіт так і не оприлюднили, тож представник організації відповідає заперечно: "Ні, не оприлюднюємо", маючи на думці, що тимчасово призупинили цю практику.

Сторінки


В нашій електронній бібліотеці ви можете безкоштовно і без реєстрації прочитати «Що варто знати про соціологію та соціальні дослідження?» автора Богдан О. на телефоні, Android, iPhone, iPads. Зараз ви знаходитесь в розділі „У чому складність формулювання запитань анкети?“ на сторінці 1. Приємного читання.

Зміст

  • Замість передмови: соціологія та соціальні дослідження у відкритому суспільстві

  • Про соціологію та соціальні дослідження

  • Про соціальні та бізнесові проекти

  • Розділ 2. ПЛАНУЄМО ДОСЛІДНИЦЬКИЙ КОМПОНЕНТ ПРОЕКТУ: ПЕРШІ КРОКИ

  • Як переконати грантодавця в доцільності дослідницького компонента?

  • міфів про співпрацю із соціологами. А як же насправді?

  • Як конкретизувати мету дослідження? І навіщо це робити?

  • Розділ 3. ЯК З'ЯСУВАТИ ТЕ, ЩО НАМ ПОТРІБНО ЗНАТИ?

  • Яка дослідницька стратегія нам потрібна – кількісна чи якісна?

  • Що робить методи дослідження якісними або кількісними?

  • Який саме метод обрати?

  • Оцінюєте якість консультацій? Оберіть експеримент!

  • Розділ 4. ВИБІРКА: ТАКА ЗАГАДКОВА Й ТАКА ВАЖЛИВА

  • Репрезентативні та нерепрезентативні вибірки

  • Загальна (генеральна) сукупність – те, без чого неможливо почати формування вибірки

  • Кому й навіщо потрібна нерепрезентативна вибірка?

  • Як визначити розмір (обсяг) нерепрезентативної вибірки?

  • Загадкові похибки й імовірності репрезентативної вибірки

  • Приклад формування репрезентативної вибірки

  • міфів про вибірку й опитування громадської думки. І як воно є насправді?

  • Чому соціологи не готують довідник "типових вибірок" для областей та обласних центрів?

  • Розділ 5. ГЕНДЕРНА РІВНІСТЬ: ЧИМ ВОНА ВАЖЛИВА ДЛЯ МЕНЕ ТА МОГО ПРОЕКТУ?

  • Патріархатні погляди та практики

  • міфи про гендерну рівність і фемінізм

  • Гендерна коректність і гендерна чутливість на противагу сексизму

  • Чому це важливо для мого проекту?

  • Гендерна (не)рівність в Україні: міжнародні експертні оцінки

  • Розділ 6. ЯК ПОСТАВИТИ ЗАПИТАННЯ ТА ВМОВИТИ ДАТИ ЩИРІ ВІДПОВІДІ?

  • Як умовити бути щирими та не боятися запису інтерв'ю на диктофон?

  • Як уникнути типових помилок глибинного інтерв'ювання?

  • Скільки інтерв'ю запланувати?

  • Плануємо фокус-групи: скільки учасників, скільки груп та яка тривалість обговорення?

  • У чому складність формулювання запитань анкети?
  • Як уникнути типових помилок при формулюванні запитань анкети?

  • Приклад 3. Викладачі університетів

  • Як і навіщо досвідчені фахівці тестують анкети?

  • Розділ 7. БУДЬМО КОМПЕТЕНТНИМИ ЗАМОВНИКАМИ ДОСЛІДЖЕНЬ!

  • Із чого складається кошторис дослідження?

  • Де та як знайти фахівців із соціальних досліджень?

  • З ким співпрацювати – дослідницьким центром чи окремим фахівцем?

  • "Ми хотіли б довідатися, який відсоток населення України знає про..." – вам потрібен омнібус!

  • Скільки й чому коштують глибинні інтерв'ю? Що зменшує їхню вартість?

  • Скільки й чому коштують фокус-групи? Що зменшує їхню вартість?

  • Деякі труднощі у співпраці з фаховими дослідниками – як їх вирішити?

  • Розділ 8. ПРЕДСТАВЛЯЄМО ДОСЛІДНИЦЬКИЙ КОМПОНЕНТ У ПРОЕКТНІЙ ЗАЯВЦІ

  • Наскільки докладно представляти дослідницький компонент заявки?

  • типових помилок представлення дослідницького компонента в проектній заявці

  • Пам'ятка про фахове представлення дослідницького компонента в проектній заявці

  • Післямова