Konceptet med intern konsistens af testskalaen er relateret til problemet med pålideligheden af måleresultaterne. Vanskeligheden ligger i at afgøre, om svarene på de stillede spørgsmål i testen vil give relevant og fuldstændig information om den kvalitet, der måles. Kun hvis testen er sammensat på en sådan måde, at alle spørgsmål i den er ens, homogene med hinanden i psykologisk indhold, det vil sige, at de ville "spørge" om manifestationerne af samme kvalitet, egenskab, karakteristika ved en person, kan resultaterne opsummeres.
Der er to modsatrettede synspunkter på problemet med validiteten af data opnået fra testen. På den ene side, for at være sikker på, at testen måler, hvad den er skabt til at måle, skal spørgsmålene, der indgår i den, have høj intern konsistens, det vil sige være rettet mod at bestemme den samme kvalitet, egenskab. For at teste for intern konsistens anvendes Cronbach-koefficienten , som evaluerer denne tests korrelation med en test af samme længde fra populationen.
Men på den anden side, af at alle spørgsmålene er stærkt korrelerede med hinanden, følger det, at testen måler en meget snæver parameter, som blot er en del af den kvalitet, der måles. Cattell insisterer på dette synspunkt . Han mener, at spørgsmålene i testen skal have en svag sammenhæng med hinanden, men en høj sammenhæng med det samlede resultat. Men dette er svært at opnå, da hvis skalaelementerne er forbundet med et fælles kriterium, så vil de højst sandsynligt give signifikante korrelationer med hinanden.
Intern konsistens bestemmer pålideligheden af en psykologisk test