Selvom det kan være fristende at foretage hurtige vurderinger om en persons troværdighed baseret på deres udseende, tyder forskning på, at det er yderst upålideligt at gøre det. Forestillingen om, at en persons ansigtstræk eller overordnede udseende nøjagtigt kan indikere deres troværdighed, omtales almindeligvis som "fysiognomi" og mangler videnskabelig støtte. Troværdighed er en kompleks egenskab, der påvirkes af adskillige faktorer såsom personlighed, tidligere adfærd og situationsbestemt kontekst, som ikke kan udledes pålideligt udelukkende ud fra det fysiske udseende. Flere undersøgelser har vist, at folks vurderinger af troværdighed baseret på ansigter ofte er unøjagtige og modtagelige for forskellige skævheder. Derfor kan det føre til fejlagtige konklusioner og uretfærdige fordomme at stole på visuelle signaler alene for at vurdere troværdigheden.