Si te echa en cara que te ha comprado el piso cuando no haces algo que él quiere, tú vas y le echas en cara que ha pasado de ti como de la mierda durante 21 años. Verás qué rápido se calla.
Que ponga el piso a tu nombre y cambia la cerradura. Dile que a veces traes parejas a casa y no quieres situaciones incómodas, lo debería de entender.