Yo diría que depende de la personalidad de tu novio, mi hermana es muy abierta a hacer bromas de ese estilo y peores. Rollo que en su curro la dijeron al poco de entrar que si la molaba uno de ellos y dijo: mira como me he dejado los dedos pensando en él (les tenía destrozados por el trabajo). Y no, te aseguro que jamás ha sido infiel, ni la gustaba ese chico.
Por eso te digo que si tu novio normalmente no hace ese tipo de comentarios pues puede ser, pero si es así de extrovertido en general pues no le des más importancia.
