Pues coincido con el primer comentario, en ese caso concreto, lo normal es que si estés malo para ir a visitar a un familiar también lo estés para ir a los planes de por la tarde, por mucho que uno sea de más tiempo que el otro.
Otra cosa sería que no te apeteciera ir a ver a su tía y en vez de decirle la verdad a tu pareja, le mintieras diciéndole que estabas mala.
Respecto a la relación con su tía, puedes decirle a tu pareja que para poder hablar sobre si podéis o no tal día, la próxima vez que su tía os diga un plan concreto, le digáis que vais a comprobar la agenda y mañana le confirmáis si podéis o no. De esa forma tenéis unas cuantas horas, vosotros dos solos, para decidir si ir o no.