Pues yo he estado en las dos posiciones. Con el primer exnovio, al que conocí como un año y pico después de que lo dejase con su novia, la situación era esa. En casa de este chico había fotos de su ex, a veces la cruzábamos por la calle y ellos se paraban a hablar con ella, y mi suegra de aquel entonces fue lo que me explicó: no te preocupes, yo no quiero a Fulanita para que vuelva a ser novia de mi hijo, la quiero como persona y seguimos en contacto. Al principio me molestaba pero entendí que le tenían cariño porque había estado años con ese chico. Ahora conmigo siguen manteniendo el contacto de vez en cuando a pesar de haber dejado a su hijo hace más de 4 años.
Con mi último novio vivo la situación de la ex de tu novio: la familia de mi novio, al igual que yo, me tiene mucho cariño y el contacto está ahí, a pesar de que yo he cortado un poco. Pero ojo, no por ella, la chica por la cual me dejaron, que me importan tres pepinos sus sentimientos, sino por mí, necesitaba de cierta forma pasar página y cerrar el ciclo.
Asique o hablas con tu novio sobre esto para ver que pasa al respecto sobre algo que te molesta y ves si solucionas algo (que lo dudo) o trabajas en tu autoestima. Sería idílico tener una relación en la que fueras la adoración de tus suegros, pero como este no es el caso, bien por las circunstancias en las que se dió tu relación o por otras cosas, tendrás que apechugar y afrontarlo.