Entiendo que te haya podido sentar mal pero miralo objetivamente, al tio le gusta el silencio (imagino, a mi me encanta) tú hablas mucho, o lo normal. Es licito que eso le produzca rechazo, a cada uno le gusta una cosa.
Pero no te lo tomes en serio! Quiero decir, su gusto personal ni te quita valor, ni te lo da. Habrá otros tios a los que eso les encante y las calladas les pareceremos un coñazo y lo contrario. Pero son gustos personales que no tiene nada que ver contigo.
Es dificil cuadrar con alguien, mucho…Así que disfruta el camino. Y valorate tú.