Würde mal vermuten das es einen evolutionären Grund hat.
In der Tierwelt kann direktes Anstarren ein Zeichen von Aggression oder eine Herausforderung sein. Viele Tiere, einschließlich Menschen, interpretieren intensiven Augenkontakt als potenziell bedrohlich.
Demnach würde ich Schlussfolgern das es noch im Instinkt des Menschen steckt sowas bedrohlich zu finden.