Desain penelitian survei adalah rencana untuk studi yang mengumpulkan jawaban terstandar dari sampel orang dan menggunakannya untuk menggambarkan atau menjelaskan populasi yang lebih besar. Desain ini menetapkan lima hal sebelum satu pertanyaan pun ditulis: apa yang akan Anda perkirakan, siapa yang akan Anda tanya, bagaimana Anda memilih mereka, bagaimana Anda menjangkau mereka, dan bagaimana Anda menganalisis jawaban yang masuk1, 4.
Sebagian besar penelitian survei bersifat observasional: mencatat apa yang dilaporkan orang tanpa memberikan intervensi. Penelitian ini dapat menggambarkan populasi atau meneliti hubungan, tetapi hasilnya saja tidak membuktikan sebab-akibat. Eksperimen survei menambahkan penugasan acak untuk menguji perubahan tertentu, seperti rumusan pertanyaan.
Apa itu desain penelitian survei? Definisi, tujuan, dan kapan menggunakannya
Definisi standar penelitian survei: penggunaan kuesioner atau wawancara terstandar untuk mengumpulkan data tentang orang, yaitu apa yang mereka lakukan, pikirkan, ketahui, atau sukai4. Desain adalah serangkaian keputusan yang membuat jawaban-jawaban itu dapat dipakai sebagai bukti. Fowler merumuskannya secara sederhana: tujuannya adalah menghasilkan statistik tentang suatu populasi dengan bertanya kepada sampel, dan desain adalah segala hal yang membuat sampel dan pertanyaannya sesuai dengan tujuan itu3.
Dalam bab metode, rencana yang sama muncul sebagai desain studi survei, desain survei dalam penelitian, atau metodologi desain survei; ketiganya berarti rencana yang dijelaskan di sini. Ada baiknya memisahkan tiga kata. Kuesioner adalah instrumennya. Survei adalah keseluruhan studi di sekitarnya. Metodologi survei adalah kumpulan penelitian tentang cara melakukan survei dengan baik, yang disusun berdasarkan sumber-sumber kesalahan yang harus dikendalikan sebuah desain: cakupan, pengambilan sampel, nonrespons, pengukuran, dan pengolahan1. Desain yang baik menyebutkan setiap risiko itu dan melakukan sesuatu terhadapnya.
Tujuan survei adalah memberi angka pada sesuatu yang hanya bisa diceritakan oleh orang, untuk kelompok yang lebih besar daripada orang yang Anda tanya. Gunakan desain survei bila hal yang Anda butuhkan paling diketahui oleh orang itu sendiri (kepuasan, niat, pendapat, perilaku pribadi), bila Anda memerlukan angka untuk kelompok yang terdefinisi alih-alih cerita dari beberapa orang, dan bila Anda dapat menjangkau sampel yang menyerupai kelompok itu. Jangan gunakan bila jawabannya sudah tercatat di tempat lain (penjualan, log, kehadiran), bila Anda perlu membuktikan sebab, atau bila orang yang akan menjawab bukanlah orang yang perlu Anda gambarkan. Untuk kasus-kasus itu, lihat penelitian korelasional untuk pertanyaan tentang hubungan dan eksperimen untuk pertanyaan sebab-akibat.
Apakah penelitian survei kuantitatif atau kualitatif?
Kuantitatif, hampir dalam setiap kasus. Survei mengubah jawaban menjadi hitungan, persentase, rata-rata, dan korelasi, dan dianalisis dengan statistik. Creswell menggolongkan survei sebagai desain kuantitatif bersama eksperimen9. Survei menjadi metode campuran ketika pertanyaan terbuka dikodekan menjadi tema dan dilaporkan di samping angka, dan menjadi kualitatif hanya ketika seluruh instrumen berisi pertanyaan terbuka yang dianalisis maknanya, yang lebih mirip studi wawancara terstruktur daripada survei.
Pertanyaan ini sering diajukan karena butir Likert tampak seperti pendapat, bukan pengukuran. Namun, butir itu tetap angka. Jika Anda perlu menggambarkan berapa banyak, seberapa besar, atau seberapa sering, Anda menjalankan survei kuantitatif; jika Anda ingin memahami alasannya dengan kata-kata orang itu sendiri, tambahkan dua atau tiga pertanyaan terbuka dan perlakukan pengodeannya sebagai langkah kualitatif yang terpisah.
Jenis desain penelitian survei
Desain survei dinamai berdasarkan tiga sumbu yang terpisah, dan bab metode biasanya memerlukan satu kata dari masing-masing: tujuan (untuk apa angkanya), struktur waktu (kapan dan seberapa sering Anda mengukur), dan mode (bagaimana orang menjawab). "Survei online deskriptif potong lintang" adalah pernyataan desain yang lengkap.
| Jenis desain | Yang dijawabnya | Contoh | Keterbatasan utama |
|---|---|---|---|
| Deskriptif | Berapa banyak, seberapa besar, seberapa sering. Tingkat atau porsi untuk kelompok yang terdefinisi. | Berapa porsi pelanggan yang akan merekomendasikan kami kuartal ini | Tidak menjelaskan alasannya sama sekali |
| Analitis (korelasional) | Apakah dua hal berjalan bersama, dan seberapa kuat. | Apakah karyawan yang menilai atasannya lebih tinggi juga berniat bertahan lebih lama | Hubungan bukanlah sebab |
| Eksploratif | Apa saja isu, kategori, dan kosakatanya, sebelum Anda dapat mengukurnya. | Pertanyaan terbuka kepada sampel kecil sebelum studi lengkap | Tidak dapat digeneralisasi; mengarah ke survei kedua |
| Potong lintang | Potret sesaat: satu pengukuran pada satu titik waktu. | Survei karyawan tahunan | Tidak dapat memisahkan efek usia dari efek periode |
| Potong lintang berulang (tren) | Perubahan pada populasi, dengan sampel baru di setiap gelombang. | Pelacak merek bulanan | Perubahan bisa saja derau pengambilan sampel kecuali gelombangnya disetarakan |
| Longitudinal (panel atau kohort) | Perubahan pada orang yang sama, dan apa yang mendahuluinya. | Karyawan baru yang sama pada hari ke-30, 90, dan 180 | Atrisi, pengondisian, biaya |
| Eksperimen survei | Apakah sebuah rumusan, pesan, atau konsep menyebabkan jawaban yang berbeda. | Separuh melihat harga A, separuh melihat harga B, lalu bandingkan niat beli | Hanya unsur yang dimanipulasi yang bersifat kausal |
| Mode: online, telepon, pos, tatap muka, campuran | Siapa yang dapat Anda jangkau dan bagaimana mereka menjawab. | Email ke web dengan tindak lanjut telepon bagi yang belum merespons | Mode mengubah jawaban; jaga rumusan tetap sama di semua mode |
Potong lintang
- Satu gelombang, satu sampel, satu rentang tanggal: desain penelitian survei potong lintang yang dipakai sebagian besar skripsi dan survei pulse.
- Paling murah dan paling cepat; pilihan bawaan untuk skripsi atau survei pulse.
- Dapat membandingkan kelompok (berdasarkan usia, wilayah, paket) tetapi tidak dapat melacak individu.
- Tuliskan sebagai "survei potong lintang terhadap N [populasi] antara [tanggal]".
Longitudinal
- Dua gelombang atau lebih, dengan orang yang sama setiap kali.
- Menunjukkan siapa yang berubah dan apa yang terjadi lebih dulu; satu-satunya desain survei yang mendekati urutan kejadian.
- Memerlukan pengenal, persetujuan untuk dihubungi kembali, dan rencana untuk 20 sampai 40 persen yang keluar di antara gelombang.
- Jika Anda hanya memerlukan tren populasi, potong lintang berulang lebih sederhana.
Dua catatan penamaan untuk bab metode. "Desain penelitian survei deskriptif" dan "potong lintang" bukan pilihan yang saling bersaing; sebagian besar survei mahasiswa adalah keduanya. Dan survei yang membandingkan kelompok tetap non-eksperimental kecuali Anda yang menempatkan orang ke dalam kelompok-kelompok itu, jadi sebut analitis atau korelasional, bukan kuasi-eksperimental9.
Desain penelitian survei mana yang Anda butuhkan?
Jawab tiga pertanyaan dan pemilih ini akan menyebutkan desainnya, menjelaskannya dalam satu paragraf, dan menuliskan kalimat metode yang bisa Anda tempel dan lengkapi. Alat ini berjalan di browser Anda dan tidak mengirim apa pun ke mana pun.
Survei deskriptif potong lintang online
Satu sampel, diukur sekali, dilaporkan sebagai tingkat dan porsi. Desain ini menjawab berapa banyak dan seberapa besar untuk populasi tempat sampel Anda diambil, dan tidak menjawab apa pun tentang perubahan atau sebab.
Kalimat ini mengikuti kosakata desain dalam Creswell dan Groves dkk.9, 1 Tambahkan metode pengambilan sampel dari langkah 3 dan justifikasi ukuran sampel dari langkah 4, dan paragraf desain Anda selesai.
Metode penelitian survei: cara merancang studi survei dalam 8 langkah
Urutannya penting. Setiap langkah mempersempit langkah berikutnya, dan setiap langkah yang Anda lewati akan kembali sebagai keterbatasan yang harus Anda tuliskan nanti. Jika sebuah langkah punya panduannya sendiri di situs ini, tautannya mengarah ke sana; halaman ini memuat keputusannya, bukan detailnya.
Tuliskan keputusan dan populasinya dalam satu kalimat
"Di antara pelanggan aktif di AS pada kuartal ke-2, perkirakan porsi yang akan merekomendasikan kami, secara keseluruhan dan per paket." Kalimat itu menetapkan populasi target, kerangka sampel yang akan Anda perlukan, unit analisis, dan perkiraan yang Anda janjikan. Jika Anda tidak dapat menuliskannya, Anda belum siap menulis pertanyaan.
Pilih jenis desain
Deskriptif atau analitis; potong lintang, berulang, atau longitudinal; satu mode atau campuran. Gunakan pemilih di atas dan tabel jenis desain. Potret sesaat memerlukan satu gelombang. Tren memerlukan rumusan yang sama persis di setiap gelombang. Pertanyaan "siapa yang berubah" memerlukan orang yang sama, persetujuan untuk dihubungi kembali, dan rencana retensi.
Pilih pendekatan pengambilan sampel dan sebutkan bias yang Anda terima
Pengambilan sampel probabilitas (setiap anggota kerangka punya peluang terpilih yang diketahui dan tidak nol) adalah hal yang membuat margin kesalahan bermakna. Sampel kemudahan, sukarelawan, dan opt-in tidak masalah untuk umpan balik produk dan survei pulse, tetapi klaimnya menyempit menjadi orang-orang yang Anda jangkau. Kesembilan metode dibandingkan dalam pengambilan sampel dalam penelitian. Apa pun pilihan Anda, sebutkan tiga cara utama sampel Anda bisa berbeda dari populasi (cakupan, seleksi diri, nonrespons) dan satu pemeriksaan untuk masing-masing, seperti membandingkan responden awal dengan responden akhir atau komposisi sampel Anda dengan tolok ukur yang diketahui1, 5.
Tetapkan ukuran sampel, lalu hitung mundur ke jumlah undangan
Untuk proporsi pada tingkat kepercayaan 95 persen dan margin 5 poin, sekitar 385 respons lengkap mencukupi untuk populasi besar mana pun; margin 3 poin memerlukan sekitar 1.068. Populasi kecil memerlukan lebih sedikit: 218 untuk populasi 500, 278 untuk 1.000, 370 untuk 10.000. Setiap subkelompok yang ingin Anda bandingkan memerlukan batas minimumnya sendiri, biasanya 100 atau lebih. Lalu: undangan yang dibutuhkan = respons lengkap / (tingkat kelayakan x tingkat respons x tingkat penyelesaian). Untuk 300 respons lengkap dengan 90 persen memenuhi syarat, tingkat respons 25 persen, dan penyelesaian 80 persen, hasilnya 1.667 undangan. Kalkulator ukuran sampel mengerjakan perhitungan dan margin kesalahannya.
Dua angka dari data kami sendiri membantu di sini. Survei dengan tiga pertanyaan atau lebih diselesaikan oleh sekitar 81 persen orang yang sudah mulai mengisi, jadi 0,8 adalah nilai bawaan yang wajar untuk faktor terakhir. Dan sebuah survei mengumpulkan 62,8 persen dari seluruh respons yang akhirnya diterimanya pada hari pertama dan 86 persen dalam seminggu, jadi rencanakan periode lapangan berdasarkan waktu pengiriman, bukan kalender.
Pilih metode survei (mode) dan rencana kontak
Metode survei, atau mode, menentukan siapa yang dapat Anda jangkau, bagaimana mereka menjawab, dan berapa biayanya. Metode survei utama adalah online, telepon, pos, tatap muka, dan mode campuran. Online cepat dan murah serta mendukung percabangan; telepon dan tatap muka menjangkau kelompok tanpa email dan memungkinkan pewawancara memberi klarifikasi, dengan risiko efek pewawancara dan biaya; pos menjangkau kelompok yang jarang memakai internet, tetapi lambat; mode campuran meningkatkan cakupan tetapi menggeser jawaban kecuali rumusan dan tata letaknya tetap sama2. Rencanakan kontak sebagai bagian dari desain: tailored design dari Dillman memakai beberapa kontak yang dijadwalkan (pemberitahuan awal, undangan, pengingat, kontak terakhir), masing-masing ditulis berbeda2. Di SuperSurvey, 73,9 persen dari seluruh respons masuk lewat ponsel, jadi desain online adalah desain untuk ponsel, direncanakan atau tidak.
Susun instrumen agar sesuai dengan analisisnya
Definisikan setiap konstruk dengan kata-kata sederhana, lalu pilih format yang dibutuhkan analisisnya: kategori untuk persentase, skala rating atau persetujuan untuk rata-rata atau top-box, satu gagasan per butir, pertanyaan yang mudah dan relevan di awal, butir sensitif di akhir8, 7. Jika ada instrumen tervalidasi untuk konstruk Anda, gunakan dan kutip instrumen itu. Penulisannya adalah pekerjaan tersendiri: lihat desain kuesioner untuk prosedur tujuh langkah, cara menulis pertanyaan survei untuk rumusan, dan skala Likert versus skala rating untuk memilih di antara keduanya. Dua keputusan struktural layak diambil di sini karena tolok ukur di bawah menghitung harganya: jadikan pertanyaan wajib (biayanya 0,4 poin penyelesaian dan menghasilkan 13 persen lebih banyak jawaban), dan jangan pernah mengakhiri survei dengan alamat email atau kotak teks terbuka.
Pretest, studi pilot, lalu luncurkan
Lakukan pretest dengan beberapa orang dari kelompok target yang berpikir dengan suara keras, untuk menangkap masalah rumusan dan logika; lalu lakukan studi pilot dengan sebagian kecil daftar sungguhan untuk memeriksa waktu penyelesaian, titik berhenti, dan apakah penyaring dan kuota berjalan semestinya3, 5. Buat studi pilot di pembuat survei online gratis agar berjalan dengan logika lompat, pengaturan wajib, dan tata letak ponsel yang sama dengan pengiriman sungguhan. Perbaiki undangan sebelum pengingat: sebutkan tujuannya, waktu yang dibutuhkan, tanggal penutupan, dan hanya janji privasi yang bisa Anda tepati. Anonim berarti Anda tidak mengumpulkan pengenal; rahasia berarti Anda menyimpannya dan membatasi aksesnya. Lihat privasi survei untuk pengaturannya, dan jika topiknya bisa membahayakan seseorang, laporkan hanya angka agregat dengan sel kecil disembunyikan.
Rencanakan analisis dan aturan kualitas sebelum kerja lapangan
Tuliskan aturan pembersihan data lebih dulu (duplikat, waktu penyelesaian yang mustahil dibandingkan median studi pilot, straightlining pada kisi), hasil utama, pemilahan subkelompok beserta ukuran minimumnya, variabel pembobotan jika ada, dan aturan signifikansi yang akan Anda terapkan1. Laporkan tingkat respons menggunakan definisi standar AAPOR agar angkanya berarti sama bagi pembaca di tempat lain6. Lalu laporan memisahkan apa yang Anda temukan dari cara Anda menemukannya: populasi, kerangka, mode, tanggal lapangan, respons lengkap, pembobotan, keterbatasan. Signifikansi statistik dan bias respons membahas dua jebakan penafsiran; analisis data kuantitatif membahas sisanya.
Langkah 7 dan 8 adalah tempat sebagian besar desain survei gagal dalam praktik, bukan di kuesionernya. Pretest butuh satu hari; aturan pembersihan yang dibuat setelah Anda melihat hasilnya mengorbankan kredibilitas Anda.
Apa kata 2,27 juta respons tentang desain survei
Untuk meneliti hubungan pilihan desain dengan penyelesaian, kami menganalisis catatan dari pembuat survei SuperSurvey antara September 2023 dan Agustus 2026: di mana orang berhenti, apa yang mereka lewati, dan berapa lama berbagai jenis pertanyaan dikerjakan. Ini adalah perbandingan observasional; hasilnya dapat menjadi masukan untuk studi pilot tetapi tidak membuktikan bahwa mengubah satu pengaturan akan menghasilkan hasil yang sama di setiap survei.
1. Orang tidak berhenti di tengah
Setiap garis mengikuti 100 orang yang membuka survei dengan panjang tersebut; tinggi garis pada pertanyaan 7 adalah porsi yang masih menjawab sampai titik itu. Survei dirata-ratakan dengan bobot yang sama, sehingga tidak ada satu survei besar yang mendominasi kurvanya.
Pertanyaan pertama memakan enam sampai sepuluh poin. Pertanyaan kedua memakan empat, pertanyaan ketiga dua setengah, dan setelah itu garisnya hampir datar sepanjang survei berjalan. Lalu pertanyaan terakhir memakan delapan sampai sebelas poin lagi dalam satu langkah. Semua pertanyaan di antaranya memakan sekitar satu poin per pertanyaan, baik surveinya berisi lima maupun tiga puluh pertanyaan.
Respons baru tercatat setelah seseorang berinteraksi, sehingga orang yang membuka survei lalu langsung menutupnya tidak masuk dalam penyebut; kehilangan sebenarnya di pintu masuk lebih besar. 6,7 persen orang yang mulai tidak pernah menjawab apa pun. Pendataran setelah pertanyaan ketiga berlaku di setiap kelompok panjang survei.
2. Pertanyaan terakhir dilewati, bukan ditinggalkan
Pertanyaan penutup menentukan seberapa banyak dari seluruh survei yang kembali kepada Anda. Diukur dalam kelompok jumlah pertanyaan yang setara, dibandingkan dengan survei yang diakhiri pilihan ganda:
Mengakhiri survei dengan skala rating mengembalikan 4,7 poin lebih banyak dari survei Anda dibandingkan mengakhirinya dengan pilihan ganda. Mengakhirinya dengan alamat email mengembalikan 15,2 poin lebih sedikit. Itu selisih sembilan belas poin dari satu keputusan yang hanya butuh dua detik untuk diubah.
n = 106 survei yang diakhiri skala rating dan 90 yang diakhiri email, dibandingkan 2.504 yang diakhiri pilihan ganda. Baris email adalah angka paling tipis di bagian ini; anggap besarnya sebagai perkiraan, tetapi arahnya dapat diandalkan.
3. Pertanyaan wajib hampir tidak ada biayanya, dengan satu pengecualian
Saran survei yang paling umum adalah membuat pertanyaan opsional agar orang tidak pergi. Disetarakan dalam kelompok jumlah pertanyaan, survei yang semua pertanyaannya wajib diselesaikan 81,2 persen (899 survei) dibandingkan 80,8 persen untuk survei yang semua pertanyaannya opsional (4.365 survei). Selisih +0,4 poin itu tidak berarti. Mewajibkan jawaban menghasilkan 13 persen lebih banyak jawaban per orang yang mulai mengisi: 88 persen pertanyaan dijawab dibandingkan 78 persen. Namun, 69,5 persen pembuat survei menjadikan semuanya opsional.
4. Harga setiap jenis pertanyaan
Seberapa sering setiap jenis dijawab ketika responden sampai padanya, dan berapa lama median responden mengerjakannya. Angka-angka ini bertumpu pada jutaan pertanyaan yang diajukan, sehingga tidak dipengaruhi oleh audiens yang biasanya menerima jenis tersebut.
| Jenis pertanyaan | Dijawab saat ditampilkan | Median waktu | Jumlah diajukan |
|---|---|---|---|
| Skala rating (1 sampai 10) | 96.2% | 5.0s | 159,545 |
| Net Promoter Score | 95.0% | 4.0s | 3,013 |
| Peringkat | 95.2% | 25.0s | 25,878 |
| Rating bintang | 93.7% | 4.6s | 57,468 |
| Daftar drop-down | 91.7% | 6.3s | 106,256 |
| Kotak centang | 88.9% | 8.1s | 624,893 |
| Pilihan ganda | 86.0% | 4.9s | 2,301,606 |
| Kotak teks pendek | 79.4% | 10.6s | 379,279 |
| Matriks / kisi | 77.4% | 19.9s | 23,579 |
| Kotak teks panjang | 69.7% | 16.2s | 267,430 |
| Alamat email | 62.2% | 8.4s | 21,475 |
Skala rating dijawab oleh 96,2 persen orang yang melihatnya, dalam lima detik. Pertanyaan peringkat dijawab hampir sesering itu tetapi butuh 25 detik, dan survei yang memuatnya selesai 7,2 poin lebih buruk. Teks panjang adalah beban lainnya: 69,7 persen dijawab dan mengurangi 5,8 poin penyelesaian bagi survei yang memuatnya. Inilah dasar empiris di balik saran buku teks untuk memakai butir tertutup bagi pengukuran dan butir terbuka secukupnya.
Hanya 163 survei dengan pertanyaan peringkat yang melewati batas minimum 20 respons, jadi anggap angka 7,2 poin sebagai ukuran kasar. Jenis pertanyaan juga sebagian mewakili siapa penerima surveinya: pertanyaan peringkat banyak dipakai dalam riset pasar yang ditujukan kepada orang yang tidak dikenal, skala rating dalam formulir umpan balik yang ditujukan kepada pelanggan.
5. Panjang survei tidak semahal yang selama ini dikatakan
Batang biru adalah penyelesaian. Garis oranye adalah yang Anda dapatkan: jawaban yang terkumpul per orang yang mulai mengisi.
Beralih dari lima pertanyaan ke dua puluh memakan sekitar 8,4 poin penyelesaian dan menghasilkan data 3,5 kali lipat. Tidak ada panjang yang membuat totalnya berhenti naik. Median survei berisi 5 pertanyaan dan selesai dalam 71 detik; bahkan survei berisi 20 sampai 29 pertanyaan selesai dalam waktu kurang dari 4 menit pada median. Di bawah sepuluh pertanyaan, penyelesaian di ponsel 83,7 persen dibandingkan 83,1 persen di desktop; di atas lima belas pertanyaan, selisihnya melebar menjadi dua sampai lima poin. Panjang survei adalah masalah ponsel sebelum menjadi masalah panjang.
Survei panjang lebih banyak dijalankan oleh organisasi dengan audiens yang terikat, seperti pemberi kerja, universitas, atau sekolah. Survei tiga puluh pertanyaan yang dikirim kepada orang yang tidak dikenal sebaiknya mengharapkan hasil yang lebih buruk dari ini. Yang merupakan sifat survei, bukan audiensnya, adalah bentuknya: biaya tetap sekitar satu poin per pertanyaan di bagian tengah, di setiap kelompok panjang.
6. Respons datang serentak, dan separuh survei tidak pernah mendapat satu pun
Porsi kumulatif respons sebuah survei, dihitung sejak hari respons pertamanya masuk, untuk 4.718 survei dengan minimal 20 respons dan 90 hari penuh di lapangan. Median survei sudah mengumpulkan 75,8 persen dari seluruh respons yang akhirnya diterimanya dalam tiga hari dan 86 persen dalam seminggu; membiarkannya terbuka selama sebulan hanya menambah 9,7 poin. Survei adalah peluncuran, bukan proses yang berjalan pelan. Dan 52,0 persen dari semua survei yang dibuat tidak pernah menerima satu respons pun, sehingga pengirimannya, bukan pembuatannya, adalah bagian tersulit dari desain survei.
Ini menggambarkan cara orang membagikan survei, dalam satu gelombang tautan, bukan hukum alam. Survei yang disematkan di halaman yang ramai terus mengumpulkan respons selama berbulan-bulan. "Tidak pernah menerima respons" mencakup draf dan survei latihan; ini bukan tingkat kegagalan.
Yang tidak membuat perbedaan
Diukur dengan cara yang sama, disetarakan dalam kelompok jumlah pertanyaan: tema kustom dan warna merek, minus 1,1 poin; maju otomatis ke pertanyaan berikutnya, minus 0,6; mengacak urutan pertanyaan, plus 1,2 pada hanya 123 survei; bilah kemajuan, plus 2,7, pengungkit kosmetik terbesar dan tetap lebih kecil daripada setiap pengungkit struktural di atas. Pengungkit yang terlihat menggeser penyelesaian sebesar nol sampai tiga poin. Yang tidak terlihat, yaitu pertanyaan penutup, apa yang diwajibkan, dan jenis pertanyaan yang dipilih, menggesernya sebesar lima sampai empat puluh empat poin.
Cara pengukurannya, dan apa yang tidak diukurnya
Korpus
Setiap survei yang dibuat di SuperSurvey antara 16 September 2023 dan 25 Agustus 2026, dibaca dari catatan produksi, bukan diambil sampelnya: 122.887 survei yang dibuat oleh 58.621 pembuat, dengan 58.938 di antaranya mengumpulkan setidaknya satu respons, total 2.274.520 respons.
Apa yang dihitung sebagai survei sungguhan
Semua angka di atas diukur pada survei dengan minimal tiga pertanyaan dan minimal tiga respons: 25.112 survei dengan 1.180.070 sesi yang dimulai dan 998.864 penyelesaian. Setiap tingkat per survei juga mensyaratkan 20 sesi yang dimulai, sehingga tersisa 6.878 survei. Rekonstruksi per pertanyaan membaca 558.927 catatan respons individual di 15.181 survei. 12,8 persen survei dibuat dengan paket berbayar dan 85 persen oleh orang yang punya akun; membatasi hanya pada pemilik akun tidak mengubah apa pun di halaman ini.
Cara menghitung tingkatnya
Setiap tingkat adalah rata-rata per survei tanpa pembobotan: setiap survei dihitung sekali berapa pun respons yang dikumpulkannya, karena dua survei dalam korpus ini masing-masing mengumpulkan lebih dari 100.000 respons dan rata-rata yang dibobot respons hanya akan menjadi angka kedua pelanggan itu. Perbandingan fitur disesuaikan dengan panjang: dihitung dalam kelompok jumlah pertanyaan (1 sampai 4, 5 sampai 7, 8 sampai 10, 11 sampai 14, 15 sampai 19, 20 sampai 29, 30+) dan dibobot ulang dengan komposisi kelompok di sisi fitur, sehingga perbedaan tidak mungkin merupakan artefak dari satu sisi yang lebih pendek. Titik berhenti direkonstruksi dari setiap catatan respons individual, bukan dari penghitung yang tersimpan. Waktu per pertanyaan berasal dari pencatatan waktu per halaman pada respons; yang dilaporkan adalah median karena rata-rata didominasi oleh orang yang membiarkan tab tetap terbuka.
Yang tidak diukur di sini
- Tingkat respons undangan. Catatan baru ada setelah seseorang membuka survei dan berinteraksi dengannya, sehingga setiap angka titik berhenti di sini bersifat konservatif.
- Kualitas jawaban. Kami bisa melihat bahwa seseorang mengetik 14 kata; kami tidak bisa melihat apakah mereka bersungguh-sungguh.
- Sebab-akibat. Ini bersifat observasional. Jika sebuah hasil mungkin disebabkan oleh audiensnya, bukan desainnya, hal itu ditandai di tempatnya.
- Survei Anda. Ini adalah rata-rata dari puluhan ribu survei yang dikirim kepada orang-orang yang sangat berbeda: patokan awal, bukan prakiraan.
Korpus ditutup 25 Agustus 2026. Angka dihasilkan 2 September 2026.
Kelebihan dan kekurangan penelitian survei
Keunggulan desain survei
- Menjangkau sampel besar dengan murah, terutama secara online, sehingga perkiraannya disertai margin kesalahan yang dapat dipakai.
- Pertanyaan terstandar membuat jawaban dapat dibandingkan antarorang, antarkelompok, dan antargelombang.
- Mengukur hal-hal yang tidak tercatat di log mana pun: sikap, niat, kepuasan, perilaku pribadi.
- Fleksibel: pertanyaan deskriptif, korelasional, dan tren dari satu instrumen.
- Cepat. Sebagian besar respons yang akan Anda dapatkan masuk dalam tiga hari setelah pengiriman.
Di mana desain survei gagal
- Laporan diri. Orang salah mengingat, membulatkan ke atas, dan menjawab agar terlihat baik; rumusan dan urutan menggeser jawaban8.
- Nonrespons. Orang yang menjawab berbeda dari yang tidak menjawab, dan tingkat respons yang rendah tidak membuktikan adanya bias, sama seperti tingkat respons yang tinggi tidak meniadakannya1.
- Cakupan. Daftar Anda bukan populasinya; siapa pun yang tidak ada di dalamnya tidak punya peluang untuk ditanya.
- Sebab-akibat. Survei menunjukkan hubungan; hanya eksperimen survei dengan penugasan acak yang menunjukkan sebab, dan hanya untuk unsur yang Anda manipulasi.
- Kedalaman. Butir tertutup tidak dapat menggali lebih lanjut. Butir terbuka bisa, dengan biaya 30 poin pada tingkat jawaban.
Contoh desain penelitian survei
Tiga contoh desain survei yang ditulis sebagaimana akan muncul di bagian metode, masing-masing dengan keputusan yang didukungnya. Contoh pertama dikerjakan sepenuhnya dalam lembar kerja di bawah.
Churn langganan (praktisi, deskriptif dan analitis, potong lintang)
Keputusan: pendorong churn mana yang diperbaiki lebih dulu pada kuartal berikutnya. Desain: survei potong lintang terhadap pelanggan aktif di AS dan Kanada, email ke web, mengutamakan ponsel, dua pengingat, dengan kuota per tingkat paket dan wilayah agar setiap tingkat mencapai minimal 200 respons lengkap. Ukuran utama: niat memperpanjang langganan (0 sampai 10), kepuasan terhadap fitur dan dukungan (1 sampai 5), alasan ketidakpuasan (kotak centang), satu pertanyaan terbuka tentang perbaikan yang ditempatkan di tengah survei, bukan di akhir. Analisis: top-box per tingkat, pendorong niat memperpanjang langganan melalui korelasi, perbandingan responden awal dan akhir sebagai pemeriksaan bias.
Skripsi sarjana (mahasiswa, deskriptif, potong lintang)
Keputusan: menggambarkan kebiasaan belajar dan hubungannya dengan nilai yang dilaporkan sendiri di antara mahasiswa tahun ketiga di satu universitas. Desain: "Studi ini menggunakan desain survei deskriptif potong lintang. Sampel kemudahan berisi 312 mahasiswa tahun ketiga mengisi kuesioner online antara 3 dan 17 Maret. Karena sampel tidak diambil secara acak dari daftar mahasiswa, hasilnya menggambarkan para responden, bukan seluruh angkatan, dan tidak ada margin kesalahan yang dilaporkan." Kalimat terakhir itulah yang dicari para pembimbing.
Survei pulse karyawan (SDM, tren potong lintang berulang)
Keputusan: apakah program pelatihan manajer mengubah iklim tim. Desain: delapan butir yang sama kepada semua staf setiap kuartal, anonim, sampel baru di setiap gelombang menurut desainnya (siapa pun yang menjawab), dilaporkan per departemen hanya jika minimal lima orang merespons. Rumusan dibekukan setelah gelombang pertama sehingga pergerakan berarti perubahan, bukan perubahan rumusan. Tambahan analitis membandingkan departemen yang manajernya menyelesaikan pelatihan dengan yang tidak, dilaporkan sebagai hubungan karena manajer tidak ditempatkan secara acak.
| Keputusan | Pendorong churn mana yang sebaiknya kami perbaiki lebih dulu pada kuartal berikutnya? |
|---|---|
| Populasi target dan kerangka sampel | Pelanggan aktif dalam 60 hari terakhir, AS dan Kanada; kerangka = daftar email penagihan |
| Jenis desain | Deskriptif dan analitis, potong lintang, diulang setiap kuartal sebagai tren |
| Pengambilan sampel dan kuota | Sensus atas kerangka dengan kuota per tingkat paket dan wilayah; minimal 200 respons lengkap per tingkat |
| Ukuran sampel dan undangan | 600 respons lengkap; dengan 95% memenuhi syarat, respons 25%, dan penyelesaian 80%, berarti sekitar 3.158 undangan |
| Mode dan kontak | Email ke web; undangan, pengingat pada hari ke-3, kontak terakhir pada hari ke-7; ditutup pada hari ke-10 |
| Ukuran | Niat memperpanjang langganan 0 sampai 10; kepuasan terhadap fitur dan dukungan 1 sampai 5; alasan dalam kotak centang; satu pertanyaan terbuka di tengah survei; tingkat paket dan masa berlangganan diambil dari akun, tidak ditanyakan |
| Aturan kualitas | Studi pilot ke 2% daftar; hapus duplikat dan penyelesaian yang kurang dari sepertiga median studi pilot; semua butir wajib kecuali pertanyaan terbuka |
| Pemeriksaan bias | Komposisi sampel dibandingkan basis pelanggan per tingkat paket dan wilayah; responden awal versus akhir; hasil dengan dan tanpa pembobotan |
| Pelaporan | Ringkasan satu halaman ditambah kotak metode: kerangka, tanggal lapangan, respons lengkap, tingkat respons AAPOR, pembobotan, keterbatasan |
Untuk menyusun kuesionernya sendiri, mulailah dari templat survei untuk kasus penggunaan yang paling mirip dan ubah ukurannya sesuai konstruk Anda; instrumen yang disesuaikan lebih baik daripada instrumen pinjaman, tetapi instrumen pinjaman lebih baik daripada halaman kosong.
Pertanyaan yang sering diajukan
Survei termasuk jenis desain penelitian apa?
Survei adalah desain kuantitatif non-eksperimental. Berdasarkan tujuannya, survei digolongkan sebagai deskriptif (tingkat dan porsi) atau korelasional (hubungan antarukuran), dan berdasarkan waktunya sebagai potong lintang atau longitudinal. Survei menjadi eksperimental hanya bila Anda menempatkan responden secara acak ke versi pertanyaan atau stimulus yang berbeda, dan itu pun hanya perbandingan tersebut yang bersifat kausal.
Apa itu desain penelitian survei deskriptif?
Desain yang tujuannya menggambarkan populasi berdasarkan variabel yang diukur: berapa banyak, seberapa besar, seberapa sering, dan bagaimana perbedaannya antarkelompok. Desain ini tidak mengklaim apa pun tentang alasannya. Sebagian besar kuesioner sekali jalan, dan sebagian besar survei mahasiswa, bersifat deskriptif sekaligus potong lintang, dan bab metode sebaiknya menyebutkan kedua istilah itu.
Apa perbedaan desain survei potong lintang dan longitudinal?
Potong lintang mengukur sekali. Longitudinal mengukur orang yang sama dua kali atau lebih, satu-satunya cara untuk melihat siapa yang berubah dan dalam urutan apa. Desain potong lintang berulang (tren) berada di antara keduanya: mengukur lebih dari sekali tetapi dengan sampel baru di setiap gelombang, sehingga melacak populasi, bukan individu. Jika Anda hanya memerlukan trennya, pilih desain itu; desain ini menghindari atrisi dan kebutuhan persetujuan untuk dihubungi kembali.
Berapa banyak responden yang dibutuhkan sebuah survei?
Untuk porsi yang dilaporkan dengan margin 5 poin pada tingkat kepercayaan 95 persen, sekitar 385 respons lengkap untuk populasi besar mana pun, dan lebih sedikit untuk populasi kecil (218 untuk populasi 500). Jika Anda akan membandingkan subkelompok, setiap subkelompok memerlukan batas minimumnya sendiri, biasanya 100 atau lebih. Untuk sampel kemudahan tidak ada margin kesalahan yang perlu dipertahankan, jadi tentukan ukurannya berdasarkan kelompok terkecil yang perlu Anda gambarkan dan nyatakan hal itu. Kalkulator ukuran sampel di situs ini mengerjakan perhitungannya.
Apa itu desain penelitian survei dalam psikologi dan dalam riset pasar?
Desainnya sama, kosakata dan kerangka sampelnya berbeda. Dalam psikologi, survei biasanya mengukur konstruk dengan skala multibutir yang tervalidasi, melaporkan reliabilitas, dan disebut desain korelasional bila menghubungkan konstruk satu sama lain. Dalam riset pasar, survei mengukur kesadaran, preferensi, dan niat terhadap merek atau produk, mengambil sampel dari daftar pelanggan atau panel opt-in, dan melaporkan porsi dan skor top-box, sering kali sebagai pelacak berulang. Keduanya non-eksperimental kecuali ada stimulus yang diacak.
Bagaimana cara menulis bagian desain penelitian survei dalam bab metode?
Empat kalimat, dengan urutan ini: desainnya (tujuan ditambah struktur waktu ditambah mode), populasi dan metode pengambilan sampel, ukuran sampel beserta justifikasinya, dan instrumen beserta sumber atau proses pengembangannya. Lalu tanggal lapangan, tingkat respons menurut definisi yang dinyatakan, dan keterbatasan yang timbul dari metode pengambilan sampel. Pemilih desain di halaman ini menuliskan kalimat pertama; panduan pengambilan sampel dan ukuran sampel menyediakan kalimat kedua dan ketiga.
Apa perbedaan desain survei dan kuesioner?
Kuesioner adalah satu komponen: butir-butir dan opsi jawabannya. Desain survei adalah keseluruhan rencana di sekitarnya: populasi, sampel, mode, waktu, ukuran, analisis, dan pelaporan. Kuesioner yang baik di dalam desain yang buruk tetap menghasilkan angka yang menggambarkan orang yang salah.
Apakah survei memerlukan pemeriksaan perhatian?
Tidak secara bawaan. Untuk tautan terbuka dengan insentif atau panel berbayar, satu pemeriksaan perhatian membantu menandai respons asal-asalan. Untuk daftar internal yang tepercaya, pemeriksaan ini lebih banyak mengganggu orang dan menciptakan pengecualian yang kemudian harus Anda pertanggungjawabkan. Jika Anda memakainya, tuliskan aturannya (apa yang dianggap gagal, berapa kegagalan yang diizinkan) sebelum kerja lapangan, dan laporkan berapa catatan yang dihapus karenanya.
Cara panduan ini disusun, dan apa yang tidak dibahasnya
Kosakata desain dan delapan langkahnya mengikuti literatur metodologi survei, terutama kerangka total survey error dari Groves dan rekan, tailored design method dari Dillman, Survey Research Methods dari Fowler, serta dokumen praktik terbaik dan definisi standar dari AAPOR, yang masing-masing dikutip di tempat penggunaannya. Tidak ada yang diambil dari kerangka kerja vendor. Angka ukuran sampel menggunakan rumus proporsi standar pada tingkat kepercayaan 95 persen dengan koreksi populasi terbatas; halaman kalkulator menunjukkan perhitungannya.
Bagian tolok ukur adalah analisis kami sendiri atas data produksi SuperSurvey, yang dijelaskan lengkap dalam catatan metode di atas. Keterbatasannya dinyatakan di sana: analisis ini tidak dapat melihat tingkat respons undangan atau kualitas jawaban, bersifat observasional, dan merata-ratakan audiens yang sangat berbeda. Jika angka dari pesaing tidak dapat dilacak ke sumber primer, angka itu tidak kami gunakan; khususnya, kami tidak mengulang statistik vendor yang sering dikutip tentang akurasi atau kepercayaan survei.
Halaman ini membahas desainnya. Halaman ini tidak membahas cara memilih responden, berapa banyak yang dipilih, atau cara menulis butirnya; itu tugas-tugas terpisah yang dibahas dalam pengambilan sampel, ukuran sampel, dan desain kuesioner.
Pengungkapan. SuperSurvey membuat perangkat lunak survei, jadi kami punya kepentingan komersial agar orang menjalankan survei. Tidak ada yang dijual atau dikunci di halaman ini, dan tidak ada saran yang bergantung pada penggunaan alat kami. Pemilih desain berjalan di browser Anda dan tidak mengirim apa pun ke mana pun. Tolok ukur ini ada karena hanya kami yang dapat melihat data ini, dan menerbitkannya, termasuk temuan yang bertentangan dengan saran umum, tampak lebih berguna daripada menyimpannya.
Referensi
- Groves, R. M., Fowler, F. J., Couper, M. P., Lepkowski, J. M., Singer, E., & Tourangeau, R. (2009). Survey Methodology (edisi ke-2). Wiley. wiley.com
- Dillman, D. A., Smyth, J. D., & Christian, L. M. (2014). Internet, Phone, Mail, and Mixed-Mode Surveys: The Tailored Design Method (edisi ke-4). Wiley. wiley.com
- Fowler, F. J., Jr. (2014). Survey Research Methods (edisi ke-5). SAGE. methods.sagepub.com
- Ponto, J. (2015). Understanding and evaluating survey research. Journal of the Advanced Practitioner in Oncology, 6(2), 168-171. pmc.ncbi.nlm.nih.gov
- American Association for Public Opinion Research. Best Practices for Survey Research. aapor.org
- American Association for Public Opinion Research (2023). Standard Definitions: Final Dispositions of Case Codes and Outcome Rates for Surveys (edisi ke-10). aapor.org
- Pew Research Center. Writing Survey Questions. pewresearch.org
- Krosnick, J. A., & Presser, S. (2010). Question and questionnaire design. Dalam P. V. Marsden & J. D. Wright (Ed.), Handbook of Survey Research (edisi ke-2). Emerald.
- Creswell, J. W., & Creswell, J. D. (2018). Research Design: Qualitative, Quantitative, and Mixed Methods Approaches (edisi ke-5). SAGE.
- SuperSurvey (2026). The SuperSurvey Response Benchmark: 2.274.520 respons untuk 25.112 survei, 16 September 2023 hingga 25 Agustus 2026. Catatan metode di halaman ini.