Creo que deberías tener esa conversación que estás intentando evitar y dejarle claro que fue una decisión conjunta y que el hecho de que él deje sobre ti la carga de sus miedos, además de ser injusto, es bastante desconsiderado con su hijo, porque tu estado mental y emocional son muy importantes durante el embarazo, y estás andando en incertidumbre por no agobiar a un señor adulto. Que vaya a terapia para superar sus inseguridades como dicen más arriba puede ser una buena opción.
Por supuesto que serías capaz, no tengas duda. Pero si se niega a ir a terapia y no empieza desde ya a ser responsable con sus decisiones, estate preparada y busca apoyos y ayuda profesional.