An deiner Stelle würde ich mich rar machen. Affäre beenden und das ganze abkühlen. Wenn du ihm wirklich so wichtig bist, dann wird er sich spätestens dann bekennen.
So hat er es ja erstmal recht bequem: da ist eine Frau mit der er regelmäßig Spaß hat, entzieht sich den Pflichten einer Beziehung... würde mir auch gut gefallen. Aber irgendwann geht das so nicht weiter. Er möchte vorerst keine Beziehung? Dann stell die Affäre auch ein, da das ja auch eine Art von "Beziehung" ist. Mach es ihm nicht ganz so einfach.
Und jetzt mal unter uns von Mann zu Frau: eine Frau passt immer in das Leben eines Mannes, auch wenn es "drunter und drüber" geht. Zu zweit kann man Dinge anders anpacken und du wärst eigentlich eine Unterstützung für ihn. Männer sagen solche Sätze immer gerne, gerade dann wenn sie es nicht kompliziert haben möchten. Es ist einfach Bullshit. Ich bin mir sicher du wärst die letzte, die für seinen Privatstress (oder was auch immer bei ihm "drunter und drüber" bedeutet) kein Verständnis hätte.
Lass dich nicht hinhalten.