La palabra gorda no debería ser un insulto, porque simplemente es un adjetivo como cualquier otro, el problema no es decir esa chica gorda se ha caído, simplemente se utiliza para saber de todas las chicas cuál se ha caído, pero es cierto que se nota enseguida quien utiliza la palabra gorda o gordo como si fuera algo malo, el tono, el contexto y las formas indican cuando se usa de forma peyorativa.
Si tú has notado que lo decía con cierto tono y te ha parecido desagradable es por algo, el problema no es la palabra en sí, sino la sensación de que mira a las personas gordas con cierto desdén.
Yo si ese es el caso no volvería a quedar con él.
Un abrazo