Si, es abuso. Cada uno responde a estas situaciones de diferente manera. En ningún momento , al no recriminarle , estás dando consentimiento ni dando tu aprobación . Él que se está comportando de manera incorrecta y abusiva es él. Debes denunciarlo porque te aseguro, que lo hace con más gente y , hay que frenarle. Sé que es una situación muy muy compleja Y, que no te lo van a poner fácil pero, te aseguro, que te vas a quedar con una satisfacción enorme.