Mi marido me dijo algo parecido, estando yo ya trabajando, y lo que hice fue pedirme un viernes y un lunes libre (descontadas de mis horas extra), decirle a mi marido que me iba esos 4 días de vacaciones y que él se apañara con los peques, dejándole una lista de lo que había que hacer en casa. Lo único que que le hice fue llevar el viernes por la tarde al nano a taekwondo. Cogí mi Play, mis juegos, ropa y me fui a un hotel. No ha vuelto, casi, a decir nada.
Otro punto: en Alemania te puedes coger 3 años de baja por maternidad, los dos primeros años pagados (en base a tu salario, percibes X el primer año, si coges más, puedes elegir si ese X lo divides entre los meses que has pedido la baja o lo cobras sólo el primer año). Yo cogí año y medio para el nano y año y medio (se alargó a 1 año y 9 meses por el lockdown de la pandemia) para la peque y con ambos fue un alivio el poder dejarlos en la guardería precisamente para poder volver a interactuar con personas adultas.
Él no te puede prohibir nada y sí, has cambiado las reglas porque ha aparecido una necesidad que no sabíais ninguno de los dos. Dile que es cosa de salud mental y si le gusta bien y si no, pues ya tiene dos cosas que hacer, enfadarse y desenfadarse.
Habla con tu jefe, busca una buena guardería y listo.