Como maestra de EI, creo que con 4 años un niño no puede tomar una decisión tan importante por sí mismo, porque claramente como tú dices, él va a escoger siempre quedarse en casa.
Educación Infantil no es una etapa obligatoria, pero claro,si el niño no va a la escuela, tendrá que suplir esas carencias que tiene en cuanto a aprendizaje de conocimientos, exploración del medio, juego, desarrollo de habilidades y competencias, socialización etc. en casa, qué es más difícil y más cuando por ejemplo, tú trabajas a turnos y no puedes estar todo el día con él.
Cariño, tienes un camino difícil, pero de verdad tienes que hacerle entender a tu marido la importancia de que vuestro hijo vaya al colegio. Y también hablar con vuestro peque y hacerle ver que la escuela es un sitio dónde se lo va a pasar muy bien, va a hacer amigos etc.
Si tiene una buena maestra, coméntale esta situación en una reunión privada, seguro que ella te puede ayudar. Y sobre todo mucha paciencia. =)