La solucion es facil pero tienes que hacerla tu.
Si tu marido no va a decir nada se lo dices tu. Que nada de ir a tu casa siempre, que solo cuando a ti te vaya bien y que a la piscina le llevas tu porque para eso es tu hijo.
Si tu marido se enfada dos cosas tiene que hacer, enfadarse y desenfadarse. Y si encima se enfada contigo le das un ultimatum. Ahora solo piensa en tu y en tu bebe. Si quieres lo haras.