Pues yo la única solución que veo es que si tienes cosas que hacer, cómo puede ser ir al pádel o lo que sea, tu te vayas y dejes a tu marido con sus sobrinos. Dices que no te gusta porque le superan y luego está de morros, pero si te sigues quedando, él no va a hacer nada. Después de un par de veces en que se haya tenido que quedar sin previo aviso con los niños y tú te hayas ido a hacer tus cosas, ya verás como empieza a poner límites a su familia.
Además debes dejarle muy claro que no te niegas a quedarte con sus sobrinos nunca, pero que quieres poder organizar tu vida y que para eso necesitas que la avisen con antelación y que se limiten al tiempo que dicen que os los van a dejar. Lo cual no es una exigencia disparatada.