El hecho de que seas tú mismo quien se frena cuando hay una ocasión sí que puede indicar que haya algo detrás.
Pero dudo mucho que aquí te lo podamos confirmar o decirte cuál es la razón.
Te pasa solo con el sexo? O también te tira para atrás la idea de tener una relación de pareja?