09 PENGUKURAN PENGUKURAN 1 w Pengukuran adalah proses

09. PENGUKURAN

PENGUKURAN (1) w Pengukuran adalah proses pemberian angka 2 atau label kepada unit analisis untuk merepresentasikan atribut 2 konsep. Proses ini seharusnya cukup dimengerti orang walau misalnya definisinya tidak dimengerti. Hal ini karena antara lain kita sering kali melakukan pengukuran. w Contoh: – Angka: “IP rotring/korelasi” – Label: “restoran enak”, “restoran enak banget”

PENGUKURAN (2) w Pengukuran sehari-hari vs. pengukuran dalam penelitian sosial intuisi vs. aturan 2 rinci w Metode dan prosedur dalam penelitian harus dirinci dengan gamblang agar: – orang-orang bisa menilai benar-ngawurnya penelitian kita – penelitian bisa diulang orang lain.

PENGUKURAN (3) w Dua langkah awal dalam proses pengukuran: – Konseptualisasi – Operasionalisasi

Proses Pengukuran: Konseptualisasi (1) w Konseptualisasi adalah proses formulasi & penjelasan dari konsep. w Sebuah konsep dapat mengacu pada kategori tunggal (misalnya “pria”) atau pada beberapa kategori (misalnya “gender”: pria, wanita, dll. ). Nilai untuk tiap kategori harus beda. w Banyak konsep yang tidak bisa langsung diamati. Misalnya mau ngukur kebohongan.

Proses Pengukuran: Konseptualisasi (2) w Cek detak jantungnya, tekanan darah, breathing rate, dsb. w Ini kemudian mengarah pada salah satu aspek konseptualisasi analisa konsep yang kompleks menjadi komponen 2/dimensi 2: – membantu membentuk pertanyaan penelitian dan hipotesis yang lebih ‘refined’ – sering menunjukkan perwujudan konkrit dari konsep

Proses Pengukuran: Konseptualisasi (3) w Menentukan manifestasi 2/perwujudan 2 dari konsep ini merupakan langkah selanjutnya setelah konseptualisasi. w From a language of concepts to a language of variables, dari yang abstrak ke yang lebih observable, dari conceptual definitions ke operational definitions.

Proses Pengukuran: Operasionalisasi (1) w Contoh: – “Pokoknya aplikasinya musti bagus”. Konsep “bagus” itu apa? Misalnya komponen 2 nya adalah informasi (complete, accurate, relevant, timely, appropriately displayed/CARTA), response time, processing time, availability, security features, navigability, dsb. – efektif-efisien: input, output, waktu, dsb.

Proses Pengukuran: Operasionalisasi (2) w Terlihat bahwa definisi operasional ini tergantung pada penerjemahan konsep dan penerjemahan ini diusahakan setepat mungkin (cuma) indikator. w Karena kadang 2 ada error 2 dikit atau tidak tepat 100%-nya penerjemahan konsep, seringkali digunakan multiple indicators. w Membantu penerjemahan: relevant theory, good judgement, & creative insights.

Proses Pengukuran: Operasionalisasi (3) w Tips bikin operational definition: – Remember the conceptual definition – Keep an open mind (be creative). – Borrow from others. Good ideas for measures can be found in other studies or modified from other measures. Credit must be given. – Anticipate difficulties. – Remember the units of analysis.

Definisi operasional dalam penelitian sosial (1) w Manipulasi terhadap variabel dan/atau pengukuran terhadap variabel w Pengukuran (pengumpulan data): – Verbal/self reports – Observation – Archival records

Definisi operasional dalam penelitian sosial (2) w Verbal/self reports – Respon terhadap stimulus. Stimulus bisa pertanyaan, bisa gambar, bisa barang, dsb. Respon bisa panjang atau pendek/isian jika tidak diberi pilihan jawaban, atau diberi pilihan jawaban dari dua sampai banyak.

Definisi operasional dalam penelitian sosial (3) – Composite measures: jawaban sekian pertanyaan dijadikan indeks/skala. – Karena kalo pertanyaannya berbeda jawaban beda, wording dalam pertanyaan sangat penting.

Definisi operasional dalam penelitian sosial (4) w Contoh indeks 1: Hulk film score by Danny Elfman Scorereviews. com: **** Cinemusic. net: **** Filmtracks: ** Unweighted score: (4 + 2)/3 = 3. 3 (lebih ke: biasa) – Bobot 1 = 10, bobot 2 = 10, bobot 3 = 1. Weighted score: (40 + 2)/(10 + 1) = 3. 9 (lebih ke: bagus) – –

Definisi operasional dalam penelitian sosial (5) w Contoh indeks 2: IP w Contoh skala: Bagi saya makanan di fasilkom: – – – Sangat enak (5) Enak (4) Biasa (3) Tidak enak (2) Sangat tidak enak (1) w Misalnya hasilnya sekian: 1. ) di atas atau di bawah mean teoretis, 2. ) ada di kelas mana.

Definisi operasional dalam penelitian sosial (6) w Observation – Firsthand observation atau menggunakan kamera, recorder, log, dsb. w Archival records – Statistical records – Public and private documents – Mass communications, dsb.

Level of Measurement (1) w Nominal measurement, Misalnya pria-wanita. Kategori 2 harus exhaustive (ngga ada sisa) dan mutually exclusive (ngga ada irisan). Makin banyak kategori makin refined. w Ordinal measurement, urutan misalnya makanan ngga enak, biasa, enakkk banget w Interval measurement, misalnya suhu w Ratio measurement, misalnya uang

Level of Measurement (2) Information provided Nominal Ordinal Interval Ratio Classification x x Rank order x x x Equal intervals x x Nonarbitrary zero x

Reliabilitas dan Validitas (1) w Bagaimana mengukur kualitas dari definisi operasional yang dipilih? reliability (reliabilitas, keterandalan) & validity (validitas, kesahihan).

Reliabilitas dan Validitas (2) w Reliabilitas stabilitas, konsistensi. – Process & content: Apakah definisi operasional mengukur sesuatu secara konsisten, apapun yang diukur itu? Apakah jika pengukuran dilakukan dalam kondisi yang mirip, hasilnya akan sama? – Apakah komponen respon/item konsisten satu dengan yang lain?

Reliabilitas dan Validitas (3) w Validitas kesesuaian antara definisi operasional dengan konsep yang mau diukur. – Apakah definisi operasional benar 2 merefleksikan konsep? Apakah pengukuran yang dilakukan benar 2 mengukur apa yang mau diukur? w Contoh: power test vs. speed test. w Alat ukur yang tidak reliabel pasti tidak valid. w Alat ukur yang reliabel belum tentu valid.

Reliabilitas dan Validitas (4) w Internal validity: there are no errors internal to the design of the research project. It is used primarily in experimental research to talk about possible errors or alternative explanations of results that arise despite attempts to institute controls. w External validity: a concern with the question of whether the results of a study can be generalized beyond the specific research context in which it was conducted; the ability to generalize findings from a specific setting and small group to a broad range of settings and people.

Reliabilitas dan Validitas (5) w Ecological validity: a concern with the question of whether social scientific findings are applicable to people’s everyday natural social settings. w Statistical validity: the correct statistical procedure is chosen and its assumptions are fully met. Contoh: MK A = 1 (3 orang), MK B = 2 (3 orang), MK C = 3 (1 orang). Rata 2 nya = 3 + 6 + 3 / 6 = 2. Level of measurement ordinal ngga bisa pake rata 2.

Reliabilitas dan Validitas: Sumber 2 Error (1) w Observed value = true value + systematic error + random error w True value adalah variasi yang sebenarnya yang mau diukur. Variasi yang tidak disebabkan karena perbedaan true value dari objek 2/subjek 2 yang diteliti di-label sebagai error. w Contoh: hasil tes untuk melihat penguasaan materi.

Reliabilitas dan Validitas: Sumber 2 Error (2) w Systematic error. Muncul dari faktor 2 yang secara sistematis mempengeruhi proses pengukuran dan/atau konsep yang mau diukur. w Contoh: – Tes 2 IQ berbahasa Inggris untuk orang Amerika kalo dikerjakan oleh orang non-Amerika. – Hasil tes untuk melihat penguasaan materi: pokok bahasan dan tes ngga matched skor rendah.

Reliabilitas dan Validitas: Sumber 2 Error (3) w Penting diperhatikan (!) dalam pengambilan data: – Social facilitation reactive measurement effect. Contoh: motret tanpa film. – Social desirability effect, faking good-bad. Contoh: desa terbelakang yang mendapat bantuan pemerintah. “Apa pendapat Anda mengenai Indonesia? ” – Acquiescence response set tidak mendapat jawaban yang sebenarnya. Efek social conformity? Jenis-jenis pengaruh? Contoh: capek di rapat atau capek menjawab pertanyaan. Aktivitas terganggu oleh telepon.

Reliabilitas dan Validitas: Sumber 2 Error (4) w Systematic errors differ from the true value of a variable by a constant amount, they bias measurements in a particular direction, underestimating or overestimating the true value, which affects their accuracy or validity. Because of their constancy, however, systematic errors do not adversely affect reliability.

Reliabilitas dan Validitas: Sumber 2 Error (5) w Random measurement error. It is the result of temporary, chance factors, such as transitory upswings and downswings in the health and mood of subjects and respondents, temporary variations in the administration or coding of a research measure, or momentary investor fatigue. w Because they are unsystematic, random errors tend to cancel each other out with repeated measurements. Thus, they do not bias the measure in a particular direction.

Reliabilitas dan Validitas: Pengukuran Reliabilitas (1) w Test-retest reliability. Mengukur subjek 2/objek 2 yang sama pada dua kesempatan yang berbeda. Scores dari pengukuran yang pertama dikorelasikan dengan scores pengukuran kedua korelasi yang range-nya 0 (mengindikasikan pengukuran yang sama sekali tidak reliabel dan total random error) sampai 1 (mengindikasikan perfect reliability dengan random error 0). Untuk test-retest reliability, 0. 8 boleh lah sebagai rule of thumb, korelasi di bawah 0. 8 terlalu rendah. w Permasalahan dengan test-retest reliability.

Reliabilitas dan Validitas: Pengukuran Reliabilitas (2) w Split-half and internal consistency reliability/internal reliability. Karena mengukur konsep yang sama, items seharusnya konsisten/selaras/kompak yang berarti reliabilitasnya tinggi item 2 yang homogen, unidimensional. w Items dari skala dibagi dua dan diperlakukan seperti dua pengukuran yang berbeda dst. w Untuk konsep yang multidimensional, setiap dimensi misalnya diukur dengan a set of items yang homogen

Reliabilitas dan Validitas: Pengukuran Reliabilitas (3) w Intercoder/Interrater reliability. Dengan asumsi penilai 2 sudah cukup dilatih menggunakan alat, mustinya hasil penilaian sama. Contoh: nilai pesenam atau peloncat indah, jangan jauh 2 beda nilainya. Aspek yang dinilai tidak sama? w Hukum bilangan besar objektif.

Reliabilitas dan Validitas: Pengukuran Reliabilitas (4) w Cara-cara meningkatkan reliabilitas: – Exploratory studies, preliminary interviews, ujicoba, terhadap subjek 2/objek 2 dengan karakteristik sama dengan target aktual. – Menambah jumlah item. With repeated measurements, random errors will cancel out each other. Smakin besar jumlah sampel (sampai jumlah tertentu) yang representatif dengan populasi yang mau diukur, makin reliabel. – Analisa item satu 2. Item dengan nilai diskriminasi jelek dibuang; skor random atau ngga bisa membedakan subjek dilihat dari hal yang diukur. Corrected item-total correlation. – Cek masalah pengadministrasian pengukuran, instruksi, dsb.

Reliabilitas dan Validitas: Pengukuran Validitas (1) w Mengukur reliabilitas lebih gampang karena pengukuran ini independen terhadap content. “Apakah definisi operasional mengukur sesuatu secara konsisten, apapun yang diukur itu? ” w Validity cannot be assessed directly. If we knew a case’s true value on a variable independent of a given measure then there would be no need for the measure. w Mengukur validitas: – Secara subjektif mengevaluasi apakah definisi operasional benar 2 mengukur apa yang mau diukur – Membandingkan hasil pengukuran dengan hasil pengukuran lain, baik yang berhubungan atau tidak.

Reliabilitas dan Validitas: Pengukuran Validitas (2) w Subjective validation. Dua pengukuran validitas berdasarkan evaluasi subjektif terhadap definisi operasional: – Face validity – Content validity. w Dua 2 nya kurang diterima, tapi dapat membantu mengarahkan. w Face validity: pertimbangan subjektif mengenai validitas (mengukur apa yang hendak diukur) berdasarkan yang tampak.

Reliabilitas dan Validitas: Pengukuran Validitas (3) w Content validity: mengukur apakah semua aspek dari konsep sudah terukur. Contoh: pokok bahasan validitas dan reliabilitas tapi yang banyak ditanya adalah cara menghitung reliabilitas, misalnya ada konsep 2 validitas yang tidak diujikan content validity agak kurang. w To demonstrate content validity, one must be able to identify clearly the components of the total domain and then show that the test items adequately represent these components.

Reliabilitas dan Validitas: Pengukuran Validitas (4) w Criterion-related validation. Mengukur kemampuan suatu pengukuran sebagai indikator dari suatu tingkah laku atau sifat yang spesifik. Hal yang penting adalah keakuratan indikator. Contoh: intensi nyontek. w Pengukuran dapat mengindikasikan posisinya saat ini atau di masa yang akan datang. Contoh: nilai NEM dengan kemungkinan masuk PTN.

Reliabilitas dan Validitas: Pengukuran Validitas (5) w Concurrent validity. Contoh: pengukuran baru ketertarikan pada kuliah. Alat baru dites dengan data variabel absen/bolos. Liat perbedaan antara mahasiswa 2 yang menurut pengukuran sangat tertarik pada kuliah dengan mahasiswa 2 yang menurut pengukuran tidak tertarik pada kuliah, dalam hal bolos. Kalau tidak ada beda, jangan 2 pengukuran baru tersebut gak valid. w Predictive validity. Kalo variabel yang digunakan belum terjadi. Contoh: blum ada data bolos.

Reliabilitas dan Validitas: Pengukuran Validitas (6) w Construct validation. Construct: a concept developed for scientific purposes. w Construct validity, apakah alat sudah mengukur konsep/konstruk yang mau diukur? w Construct validity is based upon an accumulation of research evidence.

Reliabilitas dan Validitas: Pengukuran Validitas (7) w Empat jenis evidence yang biasa digunakan untuk menentukan construct validity: – Correlations with related variables (variabel lain). – Consistency across indicators and different methods of measurement (pengukuran lain). Satu konsep bisa saja diukur dengan berbagai alat (self-reports, observation, archival records). Kalo setiap alat konsisten pengukurannya (sama 2 tinggi, sama 2 sedang, sama 2 rendah skornya), maka valid convergent validity, karena converge on the same underlying concept.

Reliabilitas dan Validitas: Pengukuran Validitas (8) – Correlations with unrelated variables. Korelasi dengan variabel lain musti jangan terlalu tinggi, kalo alat ngga jelas mengukur A atau B, validitasnya rendah; alat harus memperlihatkan bahwa ia mampu membedakan seseorang dalam konsep yang diukur discriminant validity. Contoh: Zick Rubin’s love scale dan liking scale. – Differences among known groups (pengukuran sama, subjek beda). Contoh: Dogmatism scale score pengukuran dari kelompok orang yang dinilai closeminded harusnya beda dengan score pengukuran dari orang yang dinilai tidak close-minded.

Sumber Bahan w Bryman, Alan. (2001). Social Research Methods. New York: Oxford University Press. w Neuman, W. Lawrence. (2003). Social Research Methods: Qualitative and Quantitative Approaches. Fifth Edition. Singapore: Allyn and Bacon. w Singleton Jr. , Royce A. & Bruce C. Straits. (1999). Approaches to Social Research. Third edition. New York: Oxford University Press.