Deberías pensar cual es la razón real por la que sigues hablando con él. Ese tipo de amistad un día se puede ir de las manos y entonces serás lo que dices que no quieres ser, la otra. Y después de que eso pase no hay vuelta atrás.
Respeta de verdad a esa mujer y aléjate porque él ya te ha dicho que tienes sentimientos.