Hay varias cosas que no entiendo. Primero, no explicas el por qué de la reacción tan mala de tu marido, parece que lleváis mucho tiempo mal pero no das más detalles, así que no puedo ponerme en situación.
Luego dices que hace 5 años q no trabajas y que eso lo llevas muy mal. Pero estando sin trabajo te pusiste a tener no uno sino dos hijos. Y pediste que te los cuidaran los abuelos. No lo entiendo.
Si tan mal estás sin trabajar, que es lo lógico, pues buscas trabajo y, cuando lo encuentras, entonces tienes hijos, para pagar la guardería. Ni tus padres ni tus suegros tienen por qué aceptar que les impongas ser padres de nuevo con tus hijos.
A este respecto, yo tendría claro que es hora de buscar curro en serio y dejar al bebé en la guarde, porque la niña ya va al cole. Eso te daría independencia económica y un círculo de relaciones con tus compañeros de curro.