Потому что портрет двумерный
Мы привыкли к тому, что человек смотрит на нас, если к нам обращены его зрачки. Но реальный глаз трехмерен, поэтому зрачок можно увидеть и в профиль, и в три четверти.
А изображение на картине плоское. И когда зрачки на портрете направлены прямо на нас, то мы под любым углом будем видеть их изображенными спереди, как у человека, следящего за нами. Но если глаза на портрете скошены, то мы не сможем поймать взгляд с него, поскольку никогда не увидим зрачки изображенными анфас.