Yolanda, yo no iría. No es tu familia, es la familia de tu pareja. Nada te obliga a tener relación con ellos. Mantén un trato cordial y punto. Relación estrecha, quedadas y almuerzos los puede tener tu pareja, si así lo desea. Tú no tienes por qué. Esas personas no te aportan nada, el hecho de que tengáis relación es absolutamente circunstancial, no sois amigos, no hay conexión real, ni sentimientos, por ninguna de las partes. Y no pasa nada por eso, está bien así.
¿Te invitan a ti personalmente, o hablan con tu novio y se entiende que vais los dos? En el primer caso, simplemente les diría «thanks, ya lo hablo con [novio]» sin más, y no voy. Y en el segundo caso, pues simplemente no voy.
La vida es muy corta como para estar quedando 4 veces al mes con personas que ni te van ni te vienen