Si no les haces ver que esos comentarios te molestan seguirán haciéndolos.
Yo buscaría una frase con la que me sienta cómoda y eso es lo que les diría a todos cambiando de tema, tipo «últimamente he tenido mucho estrés y me muevo más, por cierto ¿qué tal tu madre?».