はっきり言った方がいいですよ。
今はまだ「元カノの力になろうとしてる俺」に酔ってるだけでしょうから、早期に迷惑である事を告げた方がいいです。
でないと時間が経つにつれ、今度は「こいつ(スレ主様)もまだ俺に気がある」「やり直せる」と勘違いが生まれ、余計厄介な事に発展しかねませんので。

嫌なものは嫌と毅然とした態度で対応して下さい。頑張ってくださいね。