Si yo fuera tu amiga, me parecería un gesto feo, pero también entendería que es tu casa y que por tanto tu decides quien quieres que vaya. Así que, aunque entiendo que pueda molestarle, creo que no tiene razón en reclamarte de esa manera y que si no quiere ir sin su novio, pues que no vaya.
