Si no quiere a tu hijo no te quiere a ti, tu ya tenías un hijo cuando os conocisteis, si tan mal le aprecia no debería haber continuado contigo, si te quiere debería apoyarte e implicarse, es tu hijo, no te puede pedir que renuncies a él, ni tiene derecho a decir que no se quiere implicar en su crianza pero luego protestar porque no le gusta como lo haces tú.
Personalmente, está siendo profundamente egoísta y ni tú ni tú hijo os lo merecéis.
Un abrazo y mucha fuerza