Yo tengo un padre insufrible y lo que hice fue ir yo al psicólogo -según él, él está divinamente, el problema somos todos los demás- para que me enseñara a ponerle límites y a que me resbalaran las cosas que me decía. Aún así, en mi caso, como no tengo marido ni hijos, con el cabo del tiempo, acabé yéndome a 200 km. para alejarme y poder ser yo quien controlara cuánto tiempo y cuándo me relacionaba con él.
En tu caso, deberás buscar otra manera de poder ser tú quien controlas cuanto y cuando, pero lo de que acudas a un psicólogo te lo recomiendo sin dudas. Ciertas personas pueden llegar a ser muy desgastantes.