Como madre entiendo tu preocupación, pues cuando te dicen algo así te sientes culpable por si estás haciendo las cosas mal.
Yo aceptaría ir al especialista, pues puede orientarte o decirte que la pediatra exagera, como también hay casos.
Tranquila, seguro que lo estás haciendo lo mejor posible.