El agua se da con la comida, de momento para que no se deshidrate basta con la leche.
Eso sí, la lactancia (materna o artificial, cual sea) debe ser a demanda. Es lo que recomiendan desde hace años la OMS y todas las sociedades de pediatría. Si tu pediatra te ha dicho otra cosa entonces está muy desactualizado y es para pensarse cambiar de pediatra.