GGGB6013

KESAHAN DAN KEBOLEHPERCAYAAN INSTRUMENT

 Perancangan Soal selidik
1. Menentukan tujuan akhir
2. Adakah perlu membangunkan soal selidik baru?
3. Boleh dilaksanakan? (praktik / berdaya maju / dicapai /
possible..etc)
4. Apa yang anda ingin tanya dan siapa?
5. Pertimbangkan bagaimana data akan dianalisis. Apakah
maklumat yang diperlukan?
6. Pilih mod pentadbiran
 Berasaskan Web?
 Kertas dan pensil?
 Gabungan?
 Perancangan Instrument
1. Menentukan Kaedah Persampelan
2. Kepada siapakah kamu hendak hantar soal selidik? Siapa
yang boleh membekalkan maklumat tersebut?
3. Bolehkah semua orang diukur?
4. SEMUA pelajar semasa? SEMUA alumni?
5. Jika ya, ini adalah banci daripada keseluruhan populasi.
6. Pemilihan sampel mewakili populasi mungkin lebih berkesan
berdasarkan masa dan kos pentadbiran
7. Keputusan bergantung kepada saiz populasi.
 Membina soal selidik
 Pertimbangkan apa objektif setiap soalan yang
hendak dibina.
 Tiga hingga lima soalan setiap objektif adalah
disyorkan
 Berapa banyak soalan?
 Mencari keseimbangan: cukup lama untuk
mendapatkan maklumat yang diperlukan tetapi
cukup pendek supaya responden tidak akan hilang
minat.
 Soal selidik yang terlalu panjang tidak akan selesai
 Matlamat: 25-30 minit
How Many Items per Factor?

 More items->greater reliability

(The more items, the more ‘rounded’ the
measure)
 Law of diminishing returns
 Min=3
 Max=unlimited
 Typically~4 to 10 is reasonable
 Final decision is subjective and depends
on research context
 Kriteria Kualiti Pengukuran
 Bagaimana kita menilai kejayaan yang relatif
(atau kegagalan) dalam mengukur pelbagai
konsep?
 Kebolehpercayaan - ketekalan pengukuran
 Kesahan - keyakinan terhadap langkah-langkah
dan reka bentuk
 Ciri-ciri Pengukuran Yang Baik
 Kesahan
Berkaitan dengan sejauh mana sesuatu ujian mengukur apa
yang sebenarnya kita ingin ukur
 Kebolehpercayaan
Berkaitan dengan ketepatan dan kejituan prosedur pengukuran
 Kebolehgunaan (Practicality)
Berkaitan dengan faktor ekonomi, kemudahan dan
kebolehtafsiran

Kaedah Penyelidikan 1
Kesahan dan Kebolehpercayaan
Item
 Kesahan: sejauh mana langkah-langkah ujian itu significances
/ makna / dapat mengesan untuk mengukur
 Kesahan dalaman: Berkaitan dengan instrumen (soal selidik)
yang berkualiti. Adakah soalan-soalan yang sesuai ditanya
dengan jelas dan logik?
 Kesahan luaran: adakah keputusan itu dpt digeneralisasikan?
 Ralat pengukuran: perbezaan di antara ciri-ciri sampel anda
dan ciri-ciri populasi
 Non-response bias /Bukan maklum balas berat sebelah:
jawapan daripada responden tidak mencerminkan ciri-ciri
orang yang menolak penyertaan.
 Kesahan dan Kebolehpercayaan
Kestabilan Ujian-ujian Semula

Keboleh
percayaan Setara Bentuk Selari

Antara Pengukur

Goodness
Of
Data Konsistensi Belah-dua
Dalaman
Antara Item

Kesahan

Kesahan Kesahan Kesahan

Kandungan Berasaskan- Kriteria Konstruk

Kesahan
Telahan Selari Menumpu Diskriminan
Muka
 Kesahan
 Kesahan Kandungan
Muka (Face)
 Kesahan Berasaskan-Kriteria
Selari (Concurrent)
Telahan (Predictive)
 Kesahan Konstruk
Menumpu (Convergent)
Diskriminan (Discriminant)

Kaedah Penyelidikan Perniagaan

 Kesahan Kandungan

JENIS APA YG DIUKUR KAEDAH

KESAHAN
KANDUNGAN Adakah pengukuran mengukur • Pertimbangan Penilaian Panel
dengan sekupnya konsep yang • Nisbah Kesahan Kandungan
dikaji?

MUKA Adakah pakar mengesahkan

bahawa pengukuran mengukur
apa yang diukur sama dengan
namanya?

Kaedah Penyelidikan Perniagaan

 Kesahan Berasaskan-Kriteria

JENIS APA YG DIUKUR KAEDAH

Berasaskan Adakah pengukuran membantu dalam Korelasi

Kriteria membezakan dan menelah pembolehubah
kriteria?

Selari Adakah pengukuran membantu dalam

membezakan dan menelah pembolehubah
kriteria pada masa kini?

Telahan Adakah pengukuran membantu dalam

membezakan kriteria pada masa hadapan?

Kaedah Penyelidikan Perniagaan

 Pemilihan Kriteria
1. Relevan
 Contohnya pencapaian jualan di ukur melalui jumlah jualan dalam
setahun
2. Bebas dari bias
 Mestilah diubahsuai ikut kawasan, persaingan dan potensi
3. Boleh dipercayai
 Jualan bulanan lwn jualan tahunan
4. Boleh didapati
 Kos
 Berapa susah untuk mendapatkannya

Kaedah Penyelidikan 1
 Kesahan Konstruk
JENIS APA YANG DIUKUR KAEDAH
Konstruk Addakah pengukuran mengukur konsep seperti • Pertimbangan
yang dinyatakan dalam teori atau model? • Korelasi alat ukuran
cadangan dengan
yang sedia ada.
• Teknik menumpu-
diskriminasi
• Analisis Faktor

Menumpu Adakah dua alat pengukuran yang mengukur

konsep yang sama mempunyai korelasi yang
tinggi?
Diskriminasi Adakah alat pengukuran ini mempunyai korelasi
yang rendah dengan sesuatu pembolehubah yang
tiada perkaitan dengannya

Kaedah Penyelidikan 1
 Kebolehpercayaan
 Kestabilan
Ujian-ujian semula (Test-retest)
 Setara (Equivalence)
Bentuk selari (Parallel form)
Antara Pengukur (Inter-Rater)
 Konsistensi dalaman
Belah-dua (Split-half)
Antara Item (Inter item)

Kaedah Penyelidikan 1
 Kebolehpercayaan (Kestabilan)

JENIS APA YANG DIUKUR KAEDAH

Kestabilan Kebolehan sesuatu pengukuran untuk mengekalkan Korelasi
kestabilan mengikut masa walaupun keadaan
penyelidikan dan responden tidak dapat dikawal

Uji-ujian Ujian yang sama diberikan kepada satu kumpulan Test-retest

semula responden dua kali dalam tempoh cth 6 bulan

Kaedah Penyelidikan 1
 Masalah Ujian-ujian semula
1. Beza masa membawa kepada perubahan faktor
situasi
2. Masa yang pendek, membenarkan responden untuk
ingat jawapan sebelumnya
3. Sensitiviti topik, mendorong responden untuk
mengetahui dengan lebih mendalam
4. Pengenalan pembolehubah gangguan, menyebabkan
responden berubah pendirian disebabkan faktor yang
tidak berkaitan dengan penyelidikan

Kaedah Penyelidikan 1
 Kebolehpercayaan (Persamaan)
JENIS APA YANG DIUKUR KAEDAH
Setara (equivalence) Sejauhmanakah bentuk alternative ujian yang Korelasi
sama menghasilkan hasil yang serupa atau
hampir serupa?

Bentuk Selari Item dan skala jawapan adalah sama. Hanya

perkataan dan susunan diubah.

Antara Pengukur Sejauhmanakah persamaan ukuran mengenai

kejadian yang sama oleh dua orang pengukur
yang berlainan?

Kaedah Penyelidikan 1
 Kebolehpercayaan (Konsistensi Dalaman)
JENIS APA YANG DIUKUR KAEDAH
Konsistensi Sejauhmana item dalam alat pengukuran Cronbach Alpha
Dalaman adalah homogenius dan mencerminkan Split half
konstruk yang sama? correlation

Konsistensi Antara Mengukur kosistensi jawapan responden

Item kepada setiap item dalam alat
pengukuran

Belah-dua Alat ukuran dibahagikan kepada dua

bahagian dan korelasi diukur

Kaedah Penyelidikan 1
 Konsistensi Dalaman
 Satu ujian diambil hanya sekali
 Mengukur sejauh mana item dalam satu ujian
adalah konsisten antara satu sama lain dan dengan
keseluruhannya
 Terdiri daripada tiga jenis:
1. Kebolehpercayaan belah dua (split-half
reliability)
2. Kebolehpercayaan Kuder-Richardson20
3. Kebolehpercayaan Cronbach’s alpha
 Kebolehpercayaan Split-Half
 Melibatkan pembahagian satu ujiankepada dua sub ujian
 Setiap ujian mengandungi sebahagian(½)daripada bilangan item yang
asal
 Tujuan membahagikan kepada dua subujian ialah untuk mendapatkan
dua ujian yang selari mungkin
 Kaedah ini sesuai untuk satu ujian yang panjang dan mengambil masa
yang lama atau susah untuk diuji
Prosedur
1. Jalankan keseluruhan ujian terhadap satu kumpulan
2. Bahagikan ujian tersebut kepada duabentuk yang berbeza dengan
memilih item ganjil atau item genap
3. Kirakan setiap skor pelajar bagi kedua-dua bahagian
4. Hitungkan pekali korelasi bagi kedua-dua skor
5. Aplikasikan formula pembetulan Spearman-Brown
6. Menilai keputusan
 SPLIT-HALF RELIABILITY
(Spearman-Brown)
Reliability = 2r
1 r
r = the actual correlation between the two halves
of the instrument (e.g. 0.85);

Reliability = 2 ( 0.85) = 1.70 = 0.919

1 0.85 185
 Kuder-Richardson 20 (KR 20)

 Rumus tersebut dibuat berdasarkan penskoran

secara dikotomi (betul-salah) seperti dalam ujian
objektif pelbagai pilihan.
 Formula KR 21 lebih mudah dihitung dan
mengurangkan masa pengiraan tetapi kurang tepat
berbanding KR 20.
Kuder-Richardson 20 (KR 20)
Kebolehpercayaan Cronbach’s alpha

 Digunakan apabila ujian mempunyai skor yang lebih

daripada dua pilihan
 Menganalisis konsisten dalaman jika nombor digunakan
untuk menunjukkan pilihan respon
 Pekali alpha yang kerap kali digunakan dalam
menganggarkan kebolehpercayaan ketekalan-dalaman
 Kebolehpercayaan Skorer
(Scorer Reliability)

 Mengkaji individu yang mendapat skor untuk ujian yang

dijalankan
 Interjudge- merujuk kepada dua atau lebih individu
yangmendapat skor yang konsisten
 Intrajudge- merujuk kepada individu yang mendapat skor
yang konsisten selepas satu jangka masa
 Penting apabila penskoran berpotensi sebagai subjektif
Penting untuk menentukan kebolehpercayaan seseorang
individu yang menskor ujian terbuka (tidak terhad)(open-
ended tests)
 Kebolehpercayaan penskor penting untuk ditentukan apabila
perlakuan ke atas ujian mempunyai kesan yang serius
terhadap pengambil ujian
 RELIABILITY IN
QUALITATIVE RESEARCH
 Credibility
 Neutrality
 Confirmability
 Dependability
 Consistency
 Applicability
 Trustworthiness
 Transferability
 RELIABILITY AND REPLICATION IN
QUALITATIVE RESEARCH
Repeat:
 The status position of the researcher
 The choice of informants/respondents
 The social situations and conditions
 The analytic constructs used
 The methods of data collection and analysis
Address:
 Stability of observations
 Parallel forms
 Inter-rater reliability
 Respondent validation
 IMPROVING RELIABILITY
 Minimise external sources of variation;
 Standardise conditions under which
measurement occurs;
 Improve researcher consistency;
 Broaden the sample of measurement
questions by:
a) adding similar questions to the
instrument;
b) increasing the number of researchers
(triangulation);
c) increasing the number of occasions in an
observational study.
 Exclude extreme responses (outliers).
 Memperbaiki Kebolehpercayaan

 Minimumkan punca variasi luaran

 Piawaikan keadaan/situasi pengukuran
 Perbaiki konsistensi dengan menggunakan
penyelidik yang berpengalaman dan terlatih
 Tambah item dalam ukuran atau sampel
 Perbaiki konsistensi dalaman dengan mengambilkira
hanya nilai ekstreem sahaja

Kaedah Penyelidikan 1
 Practicality

 Ekonomi
 Kemudahan (Convenience)
 Kebolehtafsiran (Intrepretability)
Fungsi Ujian
Arahan terperinci
Arahan pemarkahan
Piawaian untuk kumpulan rujukan
Bukti mengenai kebolehpercayaan
Panduan menggunakan ujian

Kaedah Penyelidikan 1
 Perkaitan antara Kesahan dengan
Kebolehpercayaan
1. Kesahan akan memastikan ujian yang dibina itu menepati
matlamat atau objektif ujian itu dibina
2. Kebolehpercayaan memastikan ketekalan dalam
pengukuran sesuatu ujian
3. Kebolehpercayaan boleh dikaji terus dari data ujian
tetapi kesahan tidak boleh
4. Ujian yang boleh diterima mestilah sah dan boleh
dipercayai
5. Untuk mengesahkan sesuatu yang digunakan,pengukuran
hendaklah mempunyai kebolehpercayaan
6. Konsep kesahan dan kebolehpercayaan lebih
merujukkepada maklumat yang diperolehi daripada alat
pengukur itu dari menerangkan alat pengukur itu sendiri