Cómo te entiendo!
Yo viví muchos años en un edificio en el que los vecinos tenian muy mala imagen de mi, por culpa de las calumnias que se inventaba el que era mi vecino de al lado, un espécimen amargado y loco, que intentó ligar conmigo durante los primeros meses de mudarme alli.. y como lo rechacé.. me odiaba a muerte.
De hecho al final tuve que denunciarlo por acoso y amenazas, al cabo de los años.
Pero entre otras lindezas decía que me prostituía, que era borracha y drogadicta, que era una guarra que tenía la casa sucia ( cuando él nunca jamás entró en mi casa), también decía que yo maltrataba a mis animales, que no les daba de comer y que a los perros no los sacaba a pasear..etc etc etc.
Entiendo que estés flipando, yo también flipé y lo peor de todo que los vecinos le creían pese a que me veían sacar a los perros a la calle todos los días y todos en el barrio me conocían y me veían llevarme a los perros a todas partes.
A la gente le gusta críticar y ni se molestan en conocer a la persona o usar la lógica, y más si son gente mayor.
En mi caso como mi casera era una familiar.. ella nunca creyó nada de lo que le pudiera decir algún vecino, pero que es posible que algún vecino te tenga rabia por lo que sea.. y sea el/la que haya empezado el rumor.
No sé si será tu caso pero plantale cara a los vecinos para saber quién está diciendo esas barbaridades de ti.