Wenn er wirklich so 0 dein Typ ist dann würde ich es direkt lassen aber wenn er nur "nicht ganz dein Geschmack" trifft dann könntest du es durchaus mal probieren ob es auch mehr werden kann weil wie andere auch schon sagten ändert sich ein wenig die Wahrnehmung darüber.
Also in kurz: Wenn du ihn wirklich sehr sympathisch findest und du ihn nicht komplett Hässlich findest würde ich es einfach mal ausprobieren