Partiendo de la premisa que entiendo que la separación de tu hijo tendría que ser muy dolorosa para ti, me parece que eres muy egoísta. Por muy mal padre quue sea es que tú decidiste dar a tu hijo, machista ya sería igual que su familia y poco trabajador seguro que también, aunque lo hiciese. Otra cosa distinta es que tenga un problema con el juego/alcohol o lo que sea…
Si el padre de tu hijo no cumple con sus obligaciones hay recursos para que no le den o le retiren la compartida, pero lo que propones me parece algo muy egoísta, ni la oportunidad de ser buen padre le quieres dar.