Hola,
pues es una falta de respeto.
Deja de ser una broma cuando a la persona a la que se lo dicen le ofende, porque como escribes sí que lo notaste molesto o que le ha afectado.
Entiendo que él no te dijera que era un problema en el momento porque seguramente quería darles una buena impresión y no crear mal rollo.
Pero para mí personalmente todos los comentarios que hicieron sobraban.