Den Zeitpunkt musst du selber bestimmen, jede Beziehung funktioniert ja nach ganz eigenen Regeln.
Grundsätzlich solltest du Dir aber Gedanken machen, wie er damit umgeht. Eine Ablehnung an sich wäre sicherlich schon schlimm genug, aber wenn er es ablehnt und an Dritte weitergibt kann es richtig unangenehm werden. Vielleicht solltest du mit der Tür nicht gleich ins Haus fallen sondern erst mal vorsichtig vorfühlen, wie er dazu steht.