Wie stelle ich es an, an der Maklercourtage vorbeizukommen?

Folgender Sachverhalt: Ich stehe kurz vor einer Hausbesichtigung mit einem Immobilienmakler. Schriftverkehr wurde noch nicht getätigt, lediglich zwei Telefonate zur genaueren Beschreibung des Objekts und der Terminvereinbarung. Im Exposé (immoscout) ist die Courtage angegeben. Jetzt - kurz vor dem Termin - hat der Verkäufer besagtes Haus provisionsfrei eingestellt, woraufhin ich ihn angerufen habe. Er sagt, es gibt keinen Maklervertrag und von ihm aus können wir das Haus "privat" erwerben und wir könnten das bei der Besichtigung klären.

So weit, so gut. Jetzt ist nur meine Befürchtung, dass ich mit dem Besichtigungstermin - insofern er stattfindet - eine Art mündlicher Vertrag zwischen mir und dem Makler zustandekommt. Komme ich da raus? Termin absagen und eine private Besichtigung mit dem Besitzer vereinbaren? Oder kann ich den Termin unbedenklich wahrnehmen und dann ohne Regressansprüche befürchten zu müssen vom Besitzer privat kaufen?