No voy a entrar a juzgarte porque no es mi movida pero lo que sí te diré es que si sólo te hace casito cuando quiere sexo, chica, blanco y en botella… Ahora, lo de mentirte lo hace por la misma razón por la que tú mientes a tu pareja: miedo a tu reacción, a que se acabe lo que sea que tengáis, vergüenza… Como ya te han dicho varias aquí, ese chico no te debe nada, sólo sois amantes. Ahora, si a ti te molesta que lo haga piensa en por qué es; si es porque te gusta más de lo que quieres reconocer, si es por orgullo o porque consideras que es una traición que tú estés engañando a tu pareja por él y él te esté engañando a ti.
De todos modos, no has hablado de tu novio, así parece que te importa más tu amante que él, así que haz balance, aclárate y toma una decisión porque al final estas cosas acaban estallando.