Yo creo que esto es muy sencillo.
Un día que te lo vuelva a repetir, le preguntas abiertamente el motivo de su pregunta, si es desconfianza, dile que eso tiene solución. Os hacéis las pruebas de paternidad y cuando vea que el hijo es suyo, coges tus maletas, a tu hijo y te vas a tomar por culi de esa casa…eso si, déjale la prueba de paternidad de recuerdo.