Dijiste que no y es que no. La otra persona tiene que respetar eso y no hay nada más que hablar.
Si tú sientes que tonteaste con él, y lo que te hace sentir más él sentir que casi engañaste a tu pareja… Bien por ti por tener esa conciencia que muchas personas no tienen. Pero tendrás que también valorar lo que hiciste bien: tomaste la decisión correcta de dejar la relación y ya está. No había mucho más que hacer. No prolongaste esa situación eternamente, ni disfrutaste de hacer daño al que era tu pareja, ni buscaste repetir esa situación. Le pusiste fin a la relación.
No tiene sentido que te amargues tanto, aunque tonteases estando en pareja. Ya sabes que no estuvo bien, y ya está. Si eso te sirvió para darte cuenta de que no querías a tu pareja y de que no eras feliz, por lo menos sacaste algo positivo. Todos tenemos un pasado, todos actuamos como buenamente podemos. A veces mejor, a veces peor. Fuiste capaz de tomar decisiones nada fáciles cuando se deja de querer a alguien e intentaste actuar lo mejor posible.