Hombre raro y borde si es en caso de que te la haya rechazado, y no cuadra con lo de hablar contigo y decirte de tomar un café.
Yo en tu lugar estaría también hundida porque me identifico mucho con tu forma de ser, pero mirándolo desde fuera habrá algún motivo para no aceptarte: o no te ha reconocido(habría que ver si ha leído el mensaje o si no lo ha visto porque se le ha ido a solicitudes, muy probable si no sois amigos), o tiene algún motivo para no aceptarte, como por ejemplo tener novia.
Intenta no obsesionarte y observa que pasa cuando os cruzéis. Igualmente mejor pasar de tíos del trabajo que haya que ver constantemente, eso sólo trae problemas y más con una sensibilidad tan alta como la que tienes.