Entre broma y broma, la verdad asoma.
Si te sientes mal con él es porque lo rechazas de manera inconsciente. Ahora ya solo queda que te des cuenta de la decisión que debes tomar.
Si puedes ve a terapia. Y no hagas caso a los comentarios que te dicen que es fruto de tu inseguridad. Lo que te dice tu novio es de ser gilipollas y querer hacer daño. ¿Que hay peor que decirle a alguien que estás vulnerable y que lo use contra ti?