Creo que el dato del panorama económico de las partes es importante para una opinión en este tema, además de los términos en los que cada uno se haya independizado de su respectiva casa familiar.
Pero su argumento es totalmente acertado sea cual sea la respuesta a lo anterior, si pasáis tiempo con tu familia, la de él tiene el mismo derecho a ese tiempo (si no hay motivos mayores para evitarlos).
Yo en mi caso, mi familia es muy conflictiva y minimizo el tiempo que no comparta con mi madre y mi abuela, mientras que con mi familia política estoy muy a gusto PERO siento las limitaciones del nivel de confianza.