Test osobowości jest uważany za wiarygodny, jeśli daje ten sam wynik wielokrotnie i jest ważny, jeśli naprawdę mierzy to, co twierdzi, że mierzy, wyjaśnia Kendra Cherry na stronie About.com. Rzetelny test psychologiczny jest spójny i niezawodny.
Wiarygodność oznacza spójność miary, stwierdza Cherry. Na przykład test zaprojektowany do mierzenia konkretnej cechy, taki jak introwersja, powinien dawać w przybliżeniu takie same wyniki za każdym razem, gdy jest podawany osobnikowi. Trudno jest obliczyć dokładną wiarygodność testu, ale można go oszacować na kilka sposobów.
Aby ocenić wiarygodność testu-retestu, test jest zwykle wykonywany dwa razy w dwóch różnych okresach. Ten rodzaj niezawodności określa spójność testu w czasie i jest często używany do stabilnych cech, takich jak inteligencja. Ogólnie rzecz biorąc, test daje wyższą niezawodność, gdy między testami upłynął zaledwie krótki czas.
Innym rodzajem niezawodności jest niezawodność między raterami, która obejmuje dwóch lub więcej niezależnych sędziów, którzy zdobyli wynik testu. Porównanie wyników określa spójność oszacowań. Inne formy niezawodności to niezawodność form równoległych, którą ocenia się, porównując dwa różne testy, które zostały wykonane przy użyciu tej samej treści, oraz wewnętrzną niezawodność konsystencji, która służy do oceny spójności wyników różnych pozycji w tym samym teście.