KESAHAN (Validity)

&
KEBOLEHPERCAYAAN
(reliability)

PROF. DR. RUHIZAN MOHAMMAD YASIN

DR.SHAHLAN SURAT
DEFINISI KESAHAN (VALIDITY)

 isthe degree to which a test measures

what it is supposed to measure
 Merujuk kepada takat sesuatu alat itu
mengukur apa yang seharusnya diukur
 Contoh: ketinggian : pembaris;

berat : penimbang
 Oleh itu, penimbang tidak mempunyai
kesahan untuk mengukur ketinggian
WHAT IS VALIDITY IN
RESEARCH METHOD ?
In general, VALIDITY is an indication
of how sound your research is. More
specifically, validity applies to both
the design and the methods of
your research. Validity in data
collection means that your findings
truly represent the phenomenon you
are claiming to measure. Valid claims
are solid claims.
WHAT IS VALIDITY IN
EDUCATION?
Validity generally refers to how
accurately a conclusion,
measurement, or concept
corresponds to what is being
tested. In  assessments, Validity is
defined as the extent to which an
assessment accurately measures
what it is intended to measure.
Kesahan (Validity) berkait rapat dengan:

 Kesesuaian (appropriateness)
 Pembetulan (correctness)
 Kebermaknaan (meaningfulness)
 Kegunaan (usefulness)- kepada spesifik
inferens yang dibuat oleh penyelidik
berdasarkan maklumat yang diperolehi
 Dua aspek kesahan
 Kesahan item
Item validity: merujuk kepada sama ada items ujian
relevan dengan pengukuran kandungan bidang
berkenaan.

 Kesahan persampelan
Sampling validity: merujuk kepada sejauh mana
sampel ujian merangkumi jumlah kandungan bidang
diuji.
 Contoh
satu ujian untuk menguji pengetahuan dalam fakta-
fakta biologi menpunyai kesahan item yang baik jika
semua item berkaitan dengan biologi tetapi kesahan
persampelan lemah jika soalan tidak merangkumi
semua kandungan biologi.
 Kesahan Kandungan
 sejauh mana alat itu mengumpul data yang
merangkumi kandungan sesuatu bidang yang
dikaji.
 Sesuatu alat pengukuran dikatakan mempunyai
kesahan kandungan yang tinggi sekiranya alat
tersebut dapat mengukur semua isi serta
kandungan bidang
 Ini hanya dapat ditentukan oleh mereka yang
pakar dalam bidang-bidang berkenaan.
 Satu kaedah lain dalam menentukan
kesahankandungan melibatkan penggunaan
jadualpenentuan ujian (JPU)
Kesahan Serentak
 Pencapaian seseorang dalam satu ujian itu sepadan dengan
pencapaianannya dalam satu ujian lin yang diakui sah
 Ujian dilakukan pada masa yang sama atau dalam jangka
masa yang pendek
 Sesuatu ujian mempunyai kesahan serentak yang tinggi
adalah apabila item-itemujian dapat mengesahkan
pengukuran suatu diri atau menunjukkan ketekalan dalam
pengukuran
 Contoh
 Seseorang pelajar yang mencapai kebolehan yang
cemerlang dalam ujian biologi juga pada masa yang sama
menunjukkan kebolehan menggunakan microskop dengan
baik.
Kesahan Ramalan (Predictive Validity)
 Sejauh mana alat ukuran itu dapat
menghasilkan skor yang mempunyai
hubungan dengan ukuran daripada alat lain
yang diambil kemudian
 ujian untuk menjangkakan sejauh mana
perlakuan seseorang pada masa hadapan.
 Contoh kesahan ramalan yang rendah –
apabila seseorang pelajar yang mencapai
kebolehan yang tinggi dalam ujian biologi
tidak dapat menunjukkan kebolehannya
dalam menjalankan eksperimen pengujian
darah beberapa bulan selepas ujian tersebut
diadakan.
 Kesahan Kriteria
 Merujuk kepada sejauh mana perhubungan antara butir-butir
dalam alat kajian dengan kriteria luaran yang berkecuali.
 Kriteria yang hendak diukur adalah kriteria yang konsisten
sebagaimana ditunjukkan oleh subjek diluar pengukuran.
Contoh
ibu bapa menunjukkan sikap yang positif terhadap
peranan pendidikan vokasional berbanding dengan
pendidikan akademik sebagaimana yang ditunjukkan oleh
alat kajian berkaitan sedangkan mereka masih menghantar
anak-anak mereka untuk mengikuti pelajaran dalam aliran
pendidikan akademik.
Kesahan Konstruk

 Sejauhmana sesuatu alat ukuran itu

dapat mengukur sesuatu konstruk
atau gagasan berasaskan teori
 Contoh– alat yang dibina untuk
mengukurkonstruk ‘ sabar’ sepatutnya
dapat mengukur konstruk itu dengan
baik
KESAHAN MUKA (Face validity)
Faktor-faktor Yang Mempengaruhi Kesahan
a.Arahan kurang jelas
b.Perbendaharaan kata dan struktur ayat sukar difahami
c.Ambiguiti-kekaburan
d.Masa yang diberikan tidak mencukupi
e.Aras kesukaran yang kurang sesuai
f.Item ujian yang dibina kurang baik
g.Item ujian kurang sesuai bagi aras kemahiran yang
dikehendaki
h.Bilangan item yang tidak mencukupi
i.Susunan item kurang tepat
j.Susunan jawapan (ujian objektif)
 ASAS KESAHAN DALAM ASAS KESAHAN DALAM
KAJIAN KUANTITATIF KAJIAN KUALITATIF
Controllability(pengawalan) Natural (semulajadi)
Isolation (pengasingan), control, Thick description
manipulation of Variables
Replicability Uniqueness
Emergence, unpredictability
Predictability (boleh diramal)
Generalizability Uniqueness
Context-freedom Context-boundedness
Fragmentation and atomization Holism
Randomization of samples Purposive sample/no sampling
Neutrality Value-ladenness of observations
Objectivity Confirmability
Observability Observable and non-observable
meanings/ intentions
Inference Description, inference, explanation
‘Etic’ research ‘Emic’ research
Observations Meanings
 Kebolehpercayaan (Reliability)

 Merujuk kepada takat ketekalan alat pengukur itu

mengukur apa yang hendak diukur
 Alat ukur yang mengukur sesuatu gagasan atau
pembolehubah dengan tekal dikatakan mempunyai
kebolehpercayaan yang tinggi
 Sebaliknya, alat ukur yang menghasilkan markah
yang berubah-ubah bagi mengukur gagasan atau
pembolehubah yang sama dikatakan tidak tekal
seterusnya mempunyai kebolehpercayaan yang
rendah
 Kesahan dan Kebolehpercayaan
Kestabilan Ujian-ujian Semula

Keboleh
percayaan Setara Bentuk Selari

Antara Pengukur

Goodness
Of
Data Konsistensi Belah-dua
Dalaman
Antara Item

Kesahan

Kesahan Kesahan Kesahan

Kandungan Berasaskan- Kriteria Konstruk

Kesahan
Telahan Selari Menumpu Diskriminan
Muka
 BASES OF RELIABILITY IN BASES OF RELIABILITY IN
QUANTITATIVE RESEARCH QUALITATIVE RESEARCH
Reliability Dependability
Demonstrability Trustworthiness
Stability and replicability Stability and replicability
Parallel forms Parallel forms
Context-freedom Context-specificity
Objectivity Authenticity and confirmability
Coverage of domain Comprehensiveness of situation
Verification of data and analysis Honesty and candour
Answering research questions Depth of response
Meaningfulness to the research Meaningfulness to respondents
Parsimony Richness
Internal consistency Credibility
Generalizability Transferability
Inter-rater reliability & triangulation Inter-rater reliability and triangulation
Accuracy and precision Accuracy and comprehensiveness
Neutrality Multiple interests represented
Consistency Consistency
Alternative forms (equivalence)
Split-half and inter-item correlation
 Reliability in Quantitative and Qualitative
Research
 Reliability in quantitative research:
consistency (stability), accuracy,
predictability, equivalence, replicability,
concurrence, descriptive and causal
potential.
 Reliability in qualitative research:
accuracy, fairness, dependability,
comprehensiveness, respondent validation,
‘check ability’, empathy, uniqueness,
explanatory and descriptive potential,
confirmability.
Types Of Reliability In Quantitative
Research
 Reliability as stability:
 Consistency over time and samples;
 Reliability as equivalence:
 Equivalent forms of same instrument;
 Inter-rater reliability;
 Reliability
as internal
consistency:
 Split half reliability (e.g. for test items)
 Kebolehpercayaan
 Kestabilan
Ujian-ujian semula (Test-retest)
 Setara (Equivalence)
Bentuk selari (Parallel form)
Antara Pengukur (Inter-Rater)
 Konsistensi dalaman
Belah-dua (Split-half)
Antara Item (Inter item)

Kaedah Penyelidikan 1
 Kebolehpercayaan
(Kestabilan)
JENIS APA YANG DIUKUR KAEDAH
Kestabilan Kebolehan sesuatu pengukuran untuk mengekalkan Korelasi
kestabilan mengikut masa walaupun keadaan
penyelidikan dan responden tidak dapat dikawal

Uji-ujian Ujian yang sama diberikan kepada satu kumpulan

semula responden dua kali dalam tempoh cth 6 bulan

Kaedah Penyelidikan 1
 Uji dan Uji Semula
(test and re-test)
 Darjah di mana skor ke atas ujian yang sama adalah konsisten pada
selang masa tertentu
 Didapati skor yang diperoleh pada ujian yang pertama menghampiri
skor untuk ujian yang diuji sekali lagi
 Semakin sama skor pada ujian yang dijalankan pada selang masa
tertentu, semakin stabil skor ujian tersebut.
Prosedur
1. Menjalankan ujian terhadap kumpulan tertentu
2. Selepas dua minggu, ujian yang sama dijalankan ke atas kumpulan
yang sama
3. Hitungkan pekali korelasi antara skor ujian yang pertama dengan
skor ujian kedua.
4. Menilai keputusan yang diperoleh
 Masalah yang dihadapi :
1. Jika selang masa terlalu singkat untuk ujian yang
sama diulangi, pelajar akan mengingati apa yang
diuji pada kali pertama (kebolehpercayaan palsu
adalah tinggi)
2. Jika selang masa terlalu lama untuk ujian yang
sama diulangi, pelajar akan memperbaiki diri dan
menjadi matang(kebolehpercayaan palsu adalah
rendah)
3. Selang masa yang sesuai digunakan untuk menguji
semula adalah 2-6 minggu
 Masalah Ujian-ujian semula

1. Beza masa membawa kepada perubahan faktor

situasi
2. Masa yang pendek, membenarkan responden untuk
ingat jawapan sebelumnya
3. Sensitiviti topik, mendorong responden untuk
mengetahui dengan lebih mendalam
4. Pengenalan pembolehubah gangguan, menyebabkan
responden berubah pendirian disebabkan faktor yang
tidak berkaitan dengan penyelidikan

Kaedah Penyelidikan 1
 Kebolehpercayaan
(Persamaan)
JENIS APA YANG DIUKUR KAEDAH
Setara (equivalence) Sejauhmanakah bentuk alternative ujian yang Korelasi
sama menghasilkan hasil yang serupa atau
hampir serupa?

Bentuk Selari Item dan skala jawapan adalah sama. Hanya

perkataan dan susunan diubah.

Antara Pengukur Sejauhmanakah persamaan ukuran mengenai

kejadian yang sama oleh dua orang pengukur
yang berlainan?

Kaedah Penyelidikan 1
 Ujian bentuk setara
 Darjah di mana dua bentuk set soalan yang hampir sama
menghasilkan skor yang hampir sama daripada satu
kumpulan yang diuji
 Soalan dibina secara berasingan dan mestilah memenuhi
spesifikasi yang ditetapkan iaitu dari segi bilangan item,
bentuk, arahan, tempoh ujian, format, kandungan,
julat, aras kesukaran tetapi mempunyai soalan-soalan
yang berbeza
 Kedua-dua ujian boleh dijalankan secara bergilir jika
kedua-duanya setara
 Kaedah ini digunakan untuk mengelakkan mengingat
item yang diuji
 Prosedur
 Menjalankan satu bentuk ujian terhadap satu
kumpulan
 Pada sesi yang sama atau jangka masa yang
singkat, jalankan bentuk ujian yang kedua
terhadap kumpulan yang sama
 Hitungkan korelasi skor bagi kedua-dua ujian yang
ditadbirkan
 Menilai keputusan yang diperolehi
 Kesetaraan dan Kestabilan
 Menggabungkan kesetaraaan dan kestabilan
 Jika dua ujian dijalankan pada masa yang
berbeza, menghasilkan keputusan yang sama
seperti yang diukur oleh korelasi
Prosedur
 Jalankan sesuatu ujian terhadap sesuatu kumpulan
 Selepas selang masa tertentu, jalankan ujian
berlainan terhadap kumpulan yang sama
 Hitungkan kedua-dua skor yang diperolehi
 Menilai keputusan yang diperolehi
 Kebolehpercayaan
(Konsistensi Dalaman)
JENIS APA YANG DIUKUR KAEDAH
Konsistensi Sejauhmana item dalam alat pengukuran Cronbach Alpha
Dalaman adalah homogenius dan mencerminkan Split half
konstruk yang sama? correlation

Konsistensi Antara Mengukur kosistensi jawapan responden

Item kepada setiap item dalam alat
pengukuran

Belah-dua Alat ukuran dibahagikan kepada dua

bahagian dan korelasi diukur

Kaedah Penyelidikan 1
 Konsistensi Dalaman
 Satu ujian diambil hanya sekali
 Mengukur sejauh mana item dalam satu ujian
adalah konsisten antara satu sama lain dan dengan
keseluruhannya
 Terdiri daripada tiga jenis:
1. Kebolehpercayaan belah dua (split-half reliability)
2. Kebolehpercayaan Kuder-Richardson20
3. Kebolehpercayaan Cronbach’s alpha
 Kebolehpercayaan Split-Half
 Melibatkan pembahagian satu ujiankepada dua sub ujian
 Setiap ujian mengandungi sebahagian(½)daripada bilangan item
yang asal
 Tujuan membahagikan kepada dua subujian ialah untuk
mendapatkan dua ujian yang selari mungkin
 Kaedah ini sesuai untuk satu ujian yang panjang dan mengambil
masa yang lama atau susah untuk diuji
Prosedur
1. Jalankan keseluruhan ujian terhadap satu kumpulan
2. Bahagikan ujian tersebut kepada duabentuk yang berbeza
dengan memilih item ganjil atau item genap
3. Kirakan setiap skor pelajar bagi kedua-dua bahagian
4. Hitungkan pekali korelasi bagi kedua-dua skor
5. Aplikasikan formula pembetulan Spearman-Brown
6. Menilai keputusan
 SPLIT-HALF RELIABILITY
(Spearman-Brown)
Reliability = 2r
1 r
r = the actual correlation between the two halves
of the instrument (e.g. 0.85);

2 ( 0.85 ) 1.70
Reliability = = = 0.919
1 0.85 185
 Kuder-Richardson 20 (KR 20)
 Rumus tersebut dibuat berdasarkan penskoran
secara dikotomi (betul-salah) seperti dalam ujian
objektif pelbagai pilihan.
 Formula KR 21 lebih mudah dihitung dan
mengurangkan masa pengiraan tetapi kurang tepat
berbanding KR 20.
Kuder-Richardson 20 (KR 20)
 Kebolehpercayaan Cronbach’s
alpha

 Digunakan apabila ujian mempunyai skor yang lebih

daripada dua pilihan
 Menganalisis konsisten dalaman jika nombor digunakan
untuk menunjukkan pilihan respon
 Pekali alpha yang kerap kali digunakan dalam
menganggarkan kebolehpercayaan ketekalan-dalaman
 Kebolehpercayaan Skorer
(Scorer Reliability)
 Mengkaji individu yang mendapat skor untuk ujian yang
dijalankan
 Interjudge- merujuk kepada dua atau lebih individu
yangmendapat skor yang konsisten
 Intrajudge- merujuk kepada individu yang mendapat
skor yang konsisten selepas satu jangka masa
 Penting apabila penskoran berpotensi sebagai subjektif
Penting untuk menentukan kebolehpercayaan seseorang
individu yang menskor ujian terbuka (tidak terhad)
(open-ended tests)
 Kebolehpercayaan penskor penting untuk ditentukan
apabila perlakuan ke atas ujian mempunyai kesan yang
serius terhadap pengambil ujian
 WHAT IS CONCEPT OF VALIDITY AND
RELIABILITY IN QUALITATIVE
RESEARCH?
 The concept of validity and reliability in
qualitative researches involve
data trustworthiness
 Trustworthiness consists of the following
components:
 (a) Credibility;
 (b) transferability;
 (c); dependability; and
 (d) confirmability
 RELIABILITY IN QUALITATIVE
RESEARCH

 Credibility
 Neutrality
 Confirmability
 Dependability
 Consistency
 Applicability
 Trustworthiness
 Transferability
WHAT IS DEPENDABILTY IN
QUALITATIVE RESEARCH?
... Dependability can be
compared to reliability in
quantitative studies. In other
words, dependability is an
evaluation of the quality of the
integrated processes of data
collection, data analysis, and
theory generation.
WHAT IS CREDIBILITY IN
QUAL. RESEARCH?
These terms are used by
Lincoln and Guba, to replace
'reliability' and 'validity', which
are usually linked to
quantitative research. Credibil
ity/trustworthiness: The
credibility is involved in
establishing that the results of
the research are believable.
WHAT IS MEANT BY
TRIANGULATION IN
QUALITATIVE RESEARCH?

Triangulation is a method used

by qualitative researchers to check
and establish validity in their studies
by analysing a research question from
multiple perspectives is to arrive at
consistency across data sources or
approaches, in fact, such
inconsistencies should not be seen as
weakening the evidence, but should
be …an interesting data to ponder..
WHAT DOES CONFIRMABILITY
MEAN?
Definition of confirmability theor
y. : a modification of the
verifiability principle according to
which a requirement or criterion
for the meaningfulness of a
factual statement is its
susceptibility to the possibility of
being either theoretically or
actually supported by reference to
empirical facts.
WHAT IS TRANSFERABILITY?

Transferability refers to the degree

to which the results of qualitative
research can be generalized or
transferred to other contexts or
settings. From a qualitative
perspective transferability is
primarily the responsibility of the one
doing the generalizing.
 HOW TO OBTAIN
TRUSTWORTHINESS
IN QUAL.RESEARCH?
The trustworthiness of a
qualitative study can be increased
by maintaining high credibility and
objectivity. A research definition
of trustworthiness might be:
“Demonstration that the
evidence for the results reported
is sound and when the argument
made based on the results is
strong.”
WHAT IS A MEMBER CHECK?
member check is a technique
used by researchers to help
improve the accuracy,
credibility, validity, and
transferability by getting the
informant’s feedback or
respondent’s validation
 RELIABILITY AND REPLICATION IN
QUALITATIVE RESEARCH
Repeat:
 The status position of the researcher
 The choice of informants/respondents
 The social situations and conditions
 The analytic constructs used
 The methods of data collection and analysis
Address:
 Stability of observations
 Parallel forms
 Inter-rater reliability
 Respondent validation
 Memperbaiki Kebolehpercayaan

 Minimumkan punca variasi luaran

 Piawaikan keadaan/situasi pengukuran
 Perbaiki konsistensi dengan menggunakan
penyelidik yang berpengalaman dan terlatih
 Tambah item dalam ukuran atau sampel
 Perbaiki konsistensi dalaman
 Mengenepikan nilai ekstreem (outliers)

Kaedah Penyelidikan 1
 Practicality
 Ekonomi
 Kemudahan (Convenience)
 Kebolehtafsiran (Intrepretability)
Fungsi Ujian
Arahan terperinci
Arahan pemarkahan
Piawaian untuk kumpulan rujukan
Bukti mengenai kebolehpercayaan
Panduan menggunakan ujian

Kaedah Penyelidikan 1
 Perkaitan antara Kesahan dengan
Kebolehpercayaan

1. Kesahan akan memastikan ujian yang dibina itu menepati

matlamat atau objektif ujian itu dibina
2. Kebolehpercayaan memastikan ketekalan dalam
pengukuran sesuatu ujian
3. Kebolehpercayaan boleh dikaji terus dari data ujian
tetapi kesahan tidak boleh
4. Ujian yang boleh diterima mestilah sah dan boleh
dipercayai
5. Untuk mengesahkan sesuatu yang digunakan,pengukuran
hendaklah mempunyai kebolehpercayaan
6. Konsep kesahan dan kebolehpercayaan lebih
merujukkepada maklumat yang diperolehi daripada alat
pengukur itu dari menerangkan alat pengukur itu sendiri